documentación de Ingeniería de datos en Microsoft Fabric

Acerca de la ingeniería de datos

Información general

• ¿En qué consiste la ingeniería de datos?
• ¿Qué es un almacén de lago?

Concepto

• Tablas de Lakehouse y Delta
• Planificación de los roles y permisos
• Elección de un almacén de datos

Guía paso a paso

• Optimización delta y orden V
• Cargar en tablas

Introducción a Lakehouse

Comenzar

• Creación de un almacén de lago
• Navegación por el explorador de Lakehouse

Guía paso a paso

• Obtención de datos en Lakehouse mediante notebook

Tutorial

• Paso 1: Creación de un área de trabajo
• Paso 2: Creación de una instancia de LakeHouse
• Paso 3: Ingesta de datos en lakehouse
• Paso 4: Transformación de datos en tablas delta
• Paso 5: Compilación de un informe
• Paso 6: Limpieza de recursos

Introducción a los cuadernos

Comenzar

• Crear y usar cuadernos

Guía paso a paso

• Desarrollo y ejecución de cuadernos
• Exploración de datos de Lakehouse con un cuaderno
• Visualización de cuadernos
• Implementación y control de código fuente del cuaderno
• Creación y ejecución de cuadernos de T-SQL

Consulta con API para GraphQL

Información general

• ¿Qué es la API de Fabric para GraphQL?

Comenzar

• Crear una API para GraphQL y añadir datos

Guía paso a paso

• Administrar relaciones
• Conexión a aplicaciones
• Consultar varios orígenes de datos
• Canalizaciones de implementación y control de código fuente de GraphQL
• Panel de supervisión y registro (versión preliminar)

Integración de VS Code

Concepto

• ¿Qué es la extensión VS Code de ingeniería de datos?

Guía paso a paso

• Uso de cuadernos de VS Code
• Uso de la imagen de contenedor de VS Code
• Uso de definiciones de trabajos de Spark desde VS Code
• Exploración de lakehouse desde VS Code
• Desarrollar cuadernos a partir de la experiencia web de VS Code

Apache Spark para ingeniería de datos

Concepto

• Definición del trabajo Apache Spark
• ¿Qué es el asesor de Apache Spark?

Comenzar

• Creación de una definición de trabajo de Spark
• Creación de una definición de trabajo de Spark con una API de Fabric
• Integración de Git con la definición de trabajo de Spark

Guía paso a paso

• Programar y ejecutar una definición de trabajo de Spark
• Administración de bibliotecas de Apache Spark
• Uso de Fabric MSSparkUtils

Introducción a los entornos

Comenzar

• Entornos de Microsoft Fabric

Guía paso a paso

• Administrar el proceso de Spark en entornos
• Administrar bibliotecas en entornos
• Integración de Git para entornos canalizaciones de implementación
• Administración del entorno a través de API públicas
• Administración de bibliotecas en el entorno protegido por la protección de acceso saliente

Fabric Livy API

Información general

• ¿Qué es la API de Livy?

Comenzar

• Creación y ejecución de trabajos de Spark mediante la API de Livy
• Envío de trabajos de sesión de la API de Livy
• Envío de trabajos por lotes de la API de Livy

Optimización con vistas al lago materializado

Información general

• ¿Qué son las vistas al lago materializadas?

Comenzar

• Introducción a las vistas materializadas del lago
• Implementación de la arquitectura de Medallion con vistas materializadas al lago
• Administración de vistas materializadas del lago