Parallelle datawarehouse-onderdelen - Analytics Platform System

In dit artikel worden de apparaatsoftware en de niet-apparaatsoftwareonderdelen van Analytics Platform System uitgelegd.

Apparaatsoftware - Queryverwerking en Opslag van gebruikersgegevens

Besturingsknooppunt

MPP-engine
De MPP Engine is de hersenen van het MPP-systeem (Massively Parallel Processing). Dit doet het volgende:

• Hiermee maakt u parallelle queryplannen en coördineert u parallelle uitvoering van query's op de rekenknooppunten.

• Slaat metagegevens en configuratiegegevens voor alle databases op en coördineert deze.

• Hiermee beheert u verificatie en autorisatie van SQL Server PDW-databases.

• Houdt de hardware- en softwarestatus bij.

Dienst voor Gegevensverplaatsing (DMS)

Data Movement Service (DMS) maakt deel uit van de 'geheime saus' van PDW. Dit doet het volgende:

• Draagt gegevens over naar en van de PDW-knooppunten van SQL Server.

• Verwerkt querybewerkingen waarvoor gegevens moeten worden overgebracht tussen de knooppunten.

• Verbetert de queryprestaties door de gegevensoverdrachtsnelheden te optimaliseren.

Beheerconsole

De beheerconsole is een webtoepassing die de status, status en prestatiegegevens van het apparaat weergeeft.

Configuratiebeheerder

Configuration Manager (dwconfig.exe), is het hulpprogramma dat beheerders van het apparaat gebruiken om Analytics Platform System te configureren.

Knooppuntdatabases beheren

SQL Server beheert alle databases op het besturingsknooppunt.

• De Shell-database beheert de metagegevens voor alle gedistribueerde gebruikersdatabases.

• TempDB bevat de metagegevens voor alle tijdelijke tabellen van alle gebruikers op het apparaat.

• Master is de hoofdtabel voor SQL Server op het besturingsknooppunt.

Reken knooppunt

De rekenknooppunten zijn parallelle gegevensverwerkings- en opslageenheden. Ze hebben direct gekoppelde opslag en gebruiken SQL Server om gebruikersgegevens te beheren.

Data Movement Service (DMS)

DmS (Data Movement Service) wordt uitgevoerd op elk rekenknooppunt om het volgende te doen:

• Als onderdeel van het verwerken van parallelle query's, brengt DMS gegevens over naar en van andere computerknooppunten en het besturingsknooppunt.

• DMS, uitgevoerd op elk rekenknooppunt, ontvangt parallel gegevensbelastingen. Gegevens worden parallel geladen vanaf de laadserver naar de rekenknooppunten

• DMS draagt gegevens van elk rekenknooppunt rechtstreeks over naar de back-upserver.

• Met PolyBase draagt DMS gegevens over naar en van een extern Hadoop-cluster of Azure Storage Blob.

Databases voor rekenknooppunten

Elk rekenknooppunt voert een exemplaar van SQL Server uit om query's te verwerken en gebruikersgegevens te beheren.

Apparaatinfrastructuur

De apparaatinfrastructuur biedt het besturingssysteem, de services en de netwerkinfrastructuur voor het apparaat.

Domeincontroller

Active Directory (AD) Domain Services (DS)
Analytics Platform System voert verificatie uit tussen de knooppunten van het Analytics Platform-systeem en beheert de verificatie van aanmeldingen voor WINDOWS-verificatie van SQL Server PDW.

DNS-service
Windows Domain Name Service (DNS) zet domeinnamen om in IP-adressen voor het Analytics Platform System-apparaat.

Windows Deployment Services

Windows Deployment Service (WDS) implementeert het Windows Server-besturingssysteem op het apparaat. Het wordt geïmplementeerd op elke host en virtuele machine op het apparaat.

De DHCP-service maakt IP-adressen, zodat de hosts binnen het apparaatdomein lid kunnen worden van het apparaatnetwerk zonder een vooraf geconfigureerd IP-adres.

Virtuele Machinebeheerder

Analytics Platform System maakt gebruik van virtualisatie om hoge beschikbaarheid te bereiken. Virtual Machine Manager host het System Center om het besturingssysteem op de fysieke hosts te implementeren.

Windows Server Update Services (WSUS) om Windows-updates toe te passen of te verwijderen op alle hosts en virtuele machines.

Windows Server

Alle hosts en virtuele machines op het apparaat voeren het Windows Server-besturingssysteem uit.

Failover-clusterbeheer

Windows Failover Clustering biedt de mogelijkheid om processen op een passieve host opnieuw op te starten in het geval dat een host mislukt.

Opslagruimten

Windows Storage Spaces beheert gebruikersgegevens als een opslaggroep voor een kleine groep rekenknooppunten. Als een rekenknooppunt mislukt, zijn de gegevens nog steeds toegankelijk via een ander rekenknooppunt in de groep.

Hyper-V

Microsoft Hyper-V Server biedt een eenvoudige en betrouwbare virtualisatieoplossing. Analytics Platform System maakt gebruik van virtualisaties om CPU-resources te verdelen en hoge beschikbaarheid te bieden voor de PDW-knooppunten en infrastructuuronderdelen van apparaten.

Niet-relationele gegevens

PolyBase-technologie integreert SQL Server PDW-gegevens met externe Hadoop-gegevens. De Hadoop-gegevens kunnen worden opgeslagen op een van deze Hadoop-gegevensbronnen:

• Hortonworks Hadoop-distributie

• Cloudera-distributie van Hadoop

• HDInsight-gegevens die zijn opgeslagen in Azure Storage Blob

Hulpprogramma's voor queries

Query's worden geschreven met Transact-SQL aangepast aan de MPP-aard van de query's. Alle query's worden verzonden naar het beheerknooppunt, waarmee een parallel queryplan wordt gegenereerd om de query uit te voeren op de rekenknooppunten.

SQL Server Data Tools (SSDT)

SQL Server Data Tools wordt uitgevoerd in Visual Studio en is het aanbevolen GUI-hulpprogramma voor het verzenden van query's naar SQL Server PDW. Het is vergelijkbaar met SQL Server Management Studio door u in staat te stellen door een objectverkenner te navigeren.

Als u Visual Studio nog niet hebt, kunt u de hulpprogramma's downloaden die u gratis nodig hebt.

sqlcmd Command-Line-queryprogramma

sqlcmd is het opdrachtregelprogramma van SQL Server voor het uitvoeren van Transact-SQL-instructies en systeemopdrachten. Het werkt met SQL Server PDW en is het aanbevolen opdrachtregelprogramma voor het uitvoeren van query's op SQL Server PDW. Met sqlcmd kunt u Transact-SQL instructies interactief uitvoeren vanaf de opdrachtregel, als batchbestand of vanuit Windows PowerShell.

Integratieservices

U kunt Integration Services gebruiken om query's uit te voeren op SQL Server PDW.

Gekoppelde server

Met behulp van een gekoppelde SQL Server-serververbinding kunt u SQL Server gebruiken om Transact-SQL instructies te verzenden naar SQL Server PDW.

Business Intelligence Tools

Analysis Services

SQL Server PDW is een geldige gegevensbron voor Analysis Services-databases en Excel PowerPivot-modellen. Met behulp van de OLE DB-provider kunt u een Analysis Services-kubus configureren voor gebruik van multidimensionale online analytische verwerking (MOLAP) of relationele ROLAP-opslag (Online Analytical Processing).

Rapportenbouwer

U kunt SQL Server PDW gebruiken als een SQL Server-gegevensbron voor rapporten die u ontwikkelt voor Reporting Services met behulp van SQL Server Report Builder. U kunt SQL Server PDW ook gebruiken als een SQL Server-bron voor rapportmodellen. Met Behulp van Report Manager of de rapportserver-API kunt u een model genereren op basis van een SQL Server PDW-database.

Power Pivot voor Excel

U kunt verbinding maken met SQL Server PDW met PowerPivot voor Excel, een gratis download waarmee de mogelijkheden voor gegevensanalyse van Excel aanzienlijk worden uitgebreid.

Inlaadhulpprogramma's

Integratieservices

Installeer PDW-specifieke doeladapters (Analytics Platform System) waarmee u SQL Server Integration Services kunt gebruiken om gegevens in Analytics Platform System (PDW) te laden.

dwloader Opdrachtregel Laadprogramma

dwloader is een opdrachtregelhulpmiddel waarmee u gegevens parallel van uw laadserver naar de rekenknooppunten van de SQL Server PDW laadt.

PolyBase voor Hadoop-integratie

Met PolyBase-technologie kunt u niet-relationele gegevens uit een Hadoop-cluster laden in een relationele tabel in SQL Server PDW. De Hadoop-gegevens kunnen zich in een extern Hadoop-cluster of in Azure Blob Storage bevinden.

Back-up en herstel van database

SQL Server PDW maakt gebruik van Transact-SQL back-up- en herstelopdrachten voor back-up en herstel van gebruikersdatabases, parallel, van en naar een back-upserver. SQL Server PDW schrijft de back-up naar een map in een Windows-bestandsshare en herstelt vervolgens ook gegevens uit een Windows-bestandsshare.

Zie Plan voor back-up en laden van hardware en Overzicht van back-up en herstel voor meer informatie

Externe tabelkopie

Met de functie Remote Table Copy kunt u tabellen kopiëren van SQL Server PDW-databases naar externe (niet-apparaat) SMP SQL Server-databases. Dit maakt hub- en spoke-scenario's mogelijk voor SQL Server PDW.

Controle

Analytics Platform System heeft verschillende manieren om de activiteiten van apparaten te bewaken

Beheerconsole

Met de beheerconsole kunt u de huidige status van het apparaat bekijken. Dit wordt uitgevoerd als een webtoepassing op het besturingsknooppunt en is toegankelijk via https.

Zie Het apparaat bewaken met behulp van de beheerconsole (Analytics Platform System) voor meer informatie.

Systeemweergaven

De beheerconsole is gebaseerd op systeemweergavequery's. U kunt de systeemweergaven afzonderlijk opvragen om de specifieke informatie op te halen die u nodig hebt.

Zie Het apparaat bewaken met behulp van systeemweergaven (Analytics Platform System) voor meer informatie

Systeemcentrum Beheerbeheerder

Er zijn SCOM-management packs (System Center Operations Manager) voor SQL Server PDW.

Zie Het apparaat bewaken met System Center Operations Manager (Analytics Platform System) om het apparaat voor SCOM te configureren