Notitie
Voor toegang tot deze pagina is autorisatie vereist. U kunt proberen u aan te melden of de directory te wijzigen.
Voor toegang tot deze pagina is autorisatie vereist. U kunt proberen de mappen te wijzigen.
Microsoft Fabric brengt de analysehulpprogramma's van Microsoft samen in één SaaS-platform. Het biedt sterke mogelijkheden voor werkstroomindeling, gegevensverplaatsing, replicatie en transformatie op schaal. Fabric Data Factory biedt een SaaS-omgeving die voortbouwt op Azure Data Factory (ADF) PaaS door gebruiksvriendelijke verbeteringen en extra functionaliteit, waardoor Fabric Data Factory de perfecte modernisering van uw bestaande oplossingen voor gegevensintegratie biedt.
In deze handleiding ziet u migratiestrategieën, overwegingen en benaderingen waarmee u kunt overstappen van Azure Data Factory naar Fabric Data Factory.
Voordelen van migratie
Migreren van ADF- en Synapse-pijplijnen naar Fabric Data Factory is meer dan een lift-and-shift: het is een mogelijkheid om governance te vereenvoudigen, patronen te standaardiseren en de geavanceerde functies van Fabric Data Factory te gebruiken om uw strategie voor gegevensintegratie te verbeteren.
Fabric biedt veel nieuwe functies, waaronder:
- Geïntegreerde pijplijnactiviteiten zoals e-mail en Teams voor berichtroutering
- Ingebouwde CI/CD (implementatiepijplijnen) zonder externe Git-afhankelijkheden
- Naadloze integratie van werkruimten met OneLake, Warehouse en Lakehouse voor geïntegreerde analyses
- Gestroomlijnde semantische gegevensmodelvernieuwingen die schalen om te voldoen aan zowel selfservice- als enterprise-gegevensbehoeften
- Ingebouwde AI-mogelijkheden met Copilot om u te helpen bij het maken en beheren van pijplijnen
Zie de vergelijkingshandleiding voor Azure Data Factory en Fabric Data Factory voor een gedetailleerde vergelijking.
Kritieke architectuurverschillen
Voordat u migreert van Azure Data Factory naar Fabric Data Factory, moet u rekening houden met deze kritieke architectuurverschillen die meestal het grootste effect hebben op de migratieplanning:
| Categorie | Azure Data Factory | Fabric Data Factory | Gevolgen voor migratie |
|---|---|---|---|
| Aangepaste code | Aangepaste activiteit | Azure Batch-activiteit | De naam van de activiteit verschilt, maar ondersteunt dezelfde functionaliteit. |
| Dataflows | Mappinggegevensstromen (Spark-gebaseerd) | Gegevensstroom Gen2 (Power Query-engine) met snelle kopie en meerdere bestemmingen | Verschillende transformatie-engines en -mogelijkheden. Raadpleeg onze handleiding voor gegevensstromen bij Mapping Data Flows-gebruikers voor meer informatie. |
| Gegevenssets | Afzonderlijke, herbruikbare gegevenssetobjecten | Eigenschappen worden inline gedefinieerd binnen activiteiten | Wanneer u van ADF naar Fabric converteert, bevindt gegevenssetgegevens zich binnen elke activiteit. |
| Dynamische verbindingen | Eigenschappen van gekoppelde services kunnen dynamisch zijn met behulp van parameters | Verbindingspoperties bieden geen ondersteuning voor dynamische eigenschappen, maar pijplijnactiviteiten kunnen dynamische inhoud gebruiken voor verbindingsobjecten | Voor op metagegevens gebaseerde architectuuroplossingen die afhankelijk zijn van geparameteriseerde verbindingen, parametereert u het verbindingsobject in Fabric. |
| globale parameters | Globale parameters | Fabric-variabelebibliotheek | Verschillende implementatiepatronen en gegevenstypen, hoewel we een migratiehandleiding hebben. |
| HDInsight-activiteiten | Vijf afzonderlijke activiteiten (Hive, Pig, MapReduce, Spark, Streaming) | Eén HDInsight-activiteit | U hebt slechts één activiteitstype nodig bij het converteren, maar alle functionaliteit wordt ondersteund. |
| Identiteit | Beheerde identiteit | Fabric Werkruimte Identiteit | Verschillende identiteitsmodellen, met een planning die nodig is om te veranderen. |
| Key Vault | Geavanceerde integratie met alle verificatietypen | Beperkte integratie via Fabric Key Vault-referentie | Vergelijk momenteel ondersteunde Key Vault-bronnen en -verificatie met uw bestaande configuraties. |
| Pijplijnuitvoering | Pijplijnactiviteit uitvoeren | Pijplijnactiviteit aanroepen met het verbindingstype FabricDataPipeline | De naam van de activiteit en de verbindingsvereisten worden gewijzigd bij het converteren. |
| Scheduling | Eén trigger voor veel pijplijnen of veel triggers per pijplijn met gecentraliseerd beheer | Eén planning per pijplijn of veel planningen per pijplijn zonder hergebruik of centrale hub | Fabric vereist momenteel planningsbeheer per pijplijn. |
Migratiepaden
Migratiepaden zijn afhankelijk van uw ADF-assets en hun functiepariteit. De volgende opties zijn beschikbaar:
- Azure Data Factory-items in Fabric voor continuïteit. - Een liveweergave van uw bestaande Azure Data Factory-exemplaar in Fabric, waardoor u geleidelijk kunt migreren en testen. Dit is ook een goede eerste stap voordat u conversiehulpprogramma's gebruikt of een herplatformingsproces uitvoert.
- Gebruik het hulpprogramma voor PowerShell-conversie om pijplijnen met hoge pariteit te migreren. - Automatiseer de migratie van pijplijnen, activiteiten en parameters op schaal. Ideaal voor standaardpatronen zoals Kopiëren, Opzoeken en Opgeslagen procedure.
- Handmatige migratie voor complexe omgevingen : bouw pijplijnen opnieuw op in Fabric om nieuwe functies te gebruiken en de prestaties te optimaliseren. Dit is nodig voor pijplijnen met lage pariteit of aangepaste logica, maar het is ook een mogelijkheid om uw architectuur te moderniseren.
Azure Data Factory-items in uw Fabric-werkruimte
Het toevoegen van een bestaande ADF aan uw Fabric-werkruimte, geeft u onmiddellijk inzicht en controle terwijl u incrementeel migreert. Het is ideaal voor ontdekking, eigendomstoewijzing en parallel testen, omdat teams pijplijnen kunnen zien, ze kunnen organiseren onder Fabric-werkruimten en cutovers per domein kunnen plannen. Gebruik Azure Data Factory-items om te catalogiseren wat er bestaat, prioriteit te geven aan de pijplijnen met het hoogste waarde/laagste risico en om conventies (naamgeving, mappen, opnieuw gebruiken van verbindingen) vast te stellen die uw conversiescripts en partnerhulpprogramma's consistent kunnen volgen.
Koppelen in Fabric wordt bereikt via het Azure Data Factory-itemtype: Breng uw Azure Data Factory naar Fabric.
Het hulpprogramma voor het upgraden van PowerShell gebruiken
Microsoft biedt een ADF-naar-Fabric-migratiehulpprogramma in de Azure PowerShell-module. Wanneer u de module gebruikt, kunt u een grote subset van ADF JSON (pijplijnen, activiteiten, parameters) omzetten in infrastructuureigen definities, zodat u snel kunt beginnen. Verwacht een sterke dekking voor kopieer-/opzoek-/opgeslagen procedurepatronen en controlestroom, met handmatige opvolging voor edge-cases (aangepaste connectors, complexe expressies, bepaalde gegevensstroomconstructies). Behandel de scriptuitvoer als een scaffold: voer deze uit in batches, dwing codestijl/lintcontroles af, koppel vervolgens verbindingen en corrigeer eventuele niet-overeenkomende eigenschappen. Bouw dit in op een herhaalbare CI-uitvoering, zodat u deze kunt herhalen terwijl u leert, in plaats van elke pijplijn met de hand te bewerken.
Zie PowerShell-migratie voor een volledige handleiding. Zie de zelfstudie over PowerShell-migratie voor een gedetailleerde zelfstudie met voorbeelden.
Handmatige migratie
Handmatige migratie is nodig voor complexe pijplijnen met lage pariteit, maar het is ook een kans om uw architectuur te moderniseren en de geïntegreerde functies van Fabric te gebruiken. Dit pad vereist meer planning en ontwikkeling vooraf, maar kan langetermijnvoordelen opleveren in onderhoudbaarheid, prestaties en kosten.
Voer de volgende stappen uit om effectief te migreren:
- Evalueren en inventariseren: Catalogiseer alle ADF-assets, waaronder pijplijnen, datasets, gekoppelde services en integratie-runtimes. Afhankelijkheden en gebruikspatronen identificeren.
- Duplicaten en ongebruikte items identificeren: verwijder ongebruikte of redundante items in ADF om de migratie en uw gegevensintegratieomgeving te stroomlijnen.
- Hiaten identificeren: gebruik het hulpprogramma voor migratiebeoordeling en controleer de pariteit van connectors en de pariteit van activiteiten om hiaten tussen uw ADF-pijplijnen en Fabric-pijplijnen te identificeren, en plan alternatieven.
- Bekijk nieuwe functies: gebruik onze handleiding voor beslissingen over het verplaatsen van gegevens en de handleiding voor beslissingen over gegevensintegratie om te bepalen welke Fabric-hulpprogramma's het beste werken voor uw behoeften.
- Plan: Bekijk de aanbevolen procedures voor migratie voor overwegingen voor elk van uw items en richtlijnen voor het optimaal benutten van de verbeterde mogelijkheden van Fabric.
- Als u globale parameters in ADF gebruikt, moet u ze migreren naar Fabric-variabelenbibliotheken. Zie Globale ADF-parameters converteren naar Fabric-variabelebibliotheken voor gedetailleerde stappen.
- ADF-overgang: Overweeg om een Azure Data Factory-item toe te voegen in Microsoft Fabric als eerste stap in de migratie, waardoor een geleidelijke overgang in één platform mogelijk is.
- Prioriteit: Rangschik uw pijplijnen op basis van bedrijfsimpact, complexiteit en eenvoudigere migratie.
- Automatiseer waar u kunt: Voor alle pijplijnen met lage complexiteit kunt u overwegen om het Hulpprogramma voor het upgraden van PowerShell te gebruiken om een aantal migraties te automatiseren.
-
Overweeg hulpprogramma's: gebruik deze hulpmiddelen om recreatie gemakkelijker te maken:
- Gebruik Fabric-sjablonen als uitgangspunt voor pijplijnen met algemene scenario's voor gegevensintegratie.
- Gebruik parameterisatie om herbruikbare pijplijnen te maken
- Copilot gebruiken in Fabric Data Factory om te helpen bij het maken van pijplijnen
- Implementatiepijplijnen gebruiken voor CI/CD en versiebeheer
-
Handmatige migratie: voor scenario's die niet worden ondersteund door andere migratiemethoden, bouwt u deze opnieuw op in Fabric:
- Verbindingen opnieuw maken: Verbindingen instellen in Fabric om gekoppelde services in ADF te vervangen
- Activiteiten opnieuw maken: uw activiteiten in uw pijplijnen instellen, niet-ondersteunde activiteiten vervangen door alternatieven voor Fabric of het gebruik van de activiteit Pijplijn aanroepen
- Triggers plannen en instellen: Schema's en gebeurtenistriggers opnieuw samenstellen in Fabric zodat deze overeenkomen met uw ADF-schema's
- Grondig testen: gemigreerde pijplijnen valideren op basis van verwachte uitvoer, prestatiebenchmarks en nalevingsvereisten.
Voorbeeldmigratiescenario's
Overstappen van ADF naar Fabric kan verschillende strategieën omvatten, afhankelijk van uw use-case. In deze sectie worden algemene migratiepaden en overwegingen beschreven om u te helpen effectief te plannen.
- Scenario 1: ADF-pijplijnen en gegevensstromen
- Scenario 2: ADF met CDC, SSIS en Airflow
- Scenario 3: PowerShell-migratie
- Scenario 4: ADF-items in een Fabric-werkruimte
Scenario 1: ADF-pijplijnen en gegevensstromen
Moderniseer uw ETL-omgeving door pijplijnen en gegevensstromen naar Fabric te verplaatsen. Plan deze elementen:
- Gekoppelde diensten hercreëren als verbindingen
- Globale parameters opnieuw maken als variabelenbibliotheken
- Gegevensseteigenschappen inline definiëren in pijplijnactiviteiten
- SHIR's (zelf-hostende integration runtimes) vervangen door OPDG's (on-premises gegevensgateways) en VNet-IR's door gegevensgateways voor virtuele netwerken
- Bouw niet-ondersteunde ADF-activiteiten opnieuw met infrastructuuralternatieven of de activiteit Pijplijn aanroepen. Niet-ondersteunde activiteiten zijn onder andere:
- Data Lake Analytics (U-SQL), een afgeschafte Azure-service
- Validatieactiviteit, die opnieuw kan worden opgebouwd met behulp van Get Metadata, pijplijnlussen en If-activiteiten
- Power Query, dat volledig is geïntegreerd in Fabric als gegevensstromen waar M-code opnieuw kan worden gebruikt
- Notebook-, Jar- en Python-activiteiten kunnen worden vervangen door de Databricks-activiteit in Fabric
- Hive-, Pig-, MapReduce-, Spark- en Streaming-activiteiten kunnen worden vervangen door de HDInsight-activiteit in Fabric
Hier ziet u bijvoorbeeld de configuratiepagina van de ADF-gegevensset, met de bestandspad- en compressie-instellingen:
En hier volgt een kopieeractiviteit voor Data Factory in Fabric, waarbij compressie en bestandspad inline zijn in de activiteit:
Scenario 2: ADF met CDC, SSIS en Airflow
Maak CDC opnieuw als taakitems kopiëren . Kopieer voor Airflow uw DAG's naar de Apache Airflow-aanbieding van Fabric. Voer SSIS-pakketten uit met behulp van ADF-pijplijnen en roep ze aan vanuit Fabric.
Scenario 3: PowerShell-migratie
Gebruik de PowerShell-module Microsoft.FabricPipelineUpgrade om uw Azure Data Factory-pijplijnen te migreren naar Fabric. Deze aanpak werkt goed voor het automatiseren van de migratie van pijplijnen, activiteiten en parameters op schaal. De PowerShell-module vertaalt een grote subset van ADF JSON in systeemeigen fabricdefinities, wat een snel uitgangspunt biedt voor migratie.
Zie de zelfstudie over PowerShell-migratie voor gedetailleerde richtlijnen.
Scenario 4: ADF-items in een Fabric-werkruimte
U kunt een volledige ADF-factory toevoegen in een Fabric-werkruimte als een native item. Hiermee kunt u ADF-factory's naast Fabric-artefacten in dezelfde interface beheren. De ADF-gebruikersinterface blijft volledig toegankelijk, zodat u uw ADF-factory-items rechtstreeks vanuit de infrastructuurwerkruimte kunt bewaken, beheren en bewerken. De uitvoering van pijplijnen, activiteiten en integratieruntimes vindt echter nog steeds plaats binnen uw Azure-resources.
Deze functie is handig voor organisaties die overstappen naar Fabric, omdat deze een uniforme weergave biedt van zowel ADF- als Infrastructuurresources, waardoor het beheer en de planning voor migratie wordt vereenvoudigd.
Zie Bring your Azure Data Factory in Fabric voor meer informatie.