Documentation sur l’engineering données dans Microsoft Fabric

À propos de l’engineering données

Vue d’ensemble

• Qu’est-ce que l’engineering données ?
• Qu’est-ce qu’un lakehouse ?

Concept

• Tables Lakehouse et Delta
• Rôles et autorisations de l’espace de travail
• Choisir un magasin de données

Guide pratique

• Optimisation delta et V-Order
• Charger dans les tables

Démarrage de lakehouse

Démarrage

• Créer un lakehouse.
• Naviguer dans l’explorateur lakehouse

Guide pratique

• Obtenir des données dans lakehouse à l’aide du notebook

Didacticiel

• Étape 1 - Créer un espace de travail
• Étape 2 : Créer un lakehouse
• Étape 3 : Ingérer des données dans lakehouse
• Étape 4 : Transformer des données en tables delta
• Étape 5 : Créer un rapport
• Étape 6 : Nettoyer les ressources

Prise en main des notebooks

Démarrage

• Créer et utiliser des blocs-notes

Guide pratique

• Développer et exécuter des blocs-notes
• Explorer les données lakehouse avec un notebook
• Visualiser les notebooks
• Déploiement et contrôle de code source des notebooks
• Créer et exécuter des notebooks T-SQL

Interroger avec l’API pour GraphQL

Vue d’ensemble

• Qu’est-ce que l’API Fabric pour GraphQL ?

Démarrage

• Créer une API pour GraphQL et ajouter des données

Guide pratique

• Gérer des relations
• Se connecter aux applications
• Interroger plusieurs sources de données
• Pipelines de contrôle de code source et de déploiement GraphQL
• Tableau de bord de supervision et journalisation (préversion)

Intégration VS Code

Concept

• Qu’est-ce que l’extension VS Code d’ingénierie des données ?

Guide pratique

• Utiliser des notebooks de VS Code
• Utiliser une image conteneur à partir de VS Code
• Utiliser des définitions de tâche Spark à partir de VS Code
• Explorer lakehouse à partir de VS Code
• Développer un notebook à partir de l’expérience web VS Code

Apache Spark pour l’ingénierie des données

Concept

• Définition de tâche Apache Spark
• Qu’est-ce qu’Apache Spark Advisor ?

Démarrage

• Créer une définition de travail Spark
• Créer une définition de travail Spark avec une API de Fabric
• Intégration de Git à la définition du travail Spark

Guide pratique

• Planifier et exécuter une définition de tâche Spark
• Gérer les bibliothèques Apache Spark
• Comment utiliser Fabric MSSparkUtils

Prise en main de l’environnement

Démarrage

• Environnements Microsoft Fabric

Guide pratique

• Gérer le calcul Spark dans les environnements
• Gérer les bibliothèques dans les environnements
• Environnement d’intégration Git et pipeline de déploiement
• Gérer l’environnement via des API publiques
• Gestion des bibliothèques dans un environnement sécurisé par la protection d’accès sortant

Fabric Livy API

Vue d’ensemble

• Qu’est-ce que l’API Livy ?

Démarrage

• Créer et exécuter des travaux Spark en utilisant l’API Livy
• Envoyer des travaux de session d’API Livy
• Envoyer des travaux par lots d’API Livy

Optimiser avec les vues matérialisées du lac

Vue d’ensemble

• Qu’est-ce que les vues matérialisées du lac ?

Démarrage

• Prise en main des vues matérialisées du lac
• Implémenter l’architecture Medallion avec des vues matérialisées sur le lac
• Gérer les vues matérialisées du lac