Registro de esquema no Fabric Real-Time Intelligence (versão prévia)

O Registro de Esquema no Fabric Real-Time Intelligence é um repositório centralizado para gerenciar e organizar esquemas de dados. Esse recurso fornece uma estrutura estruturada para definir, validar e evoluir esquemas usados em arquiteturas controladas por eventos, ajudando você a melhorar a qualidade dos dados e manter a consistência em seus fluxos de trabalho em tempo real.

Benefícios de usar o Registro de Esquema

O Registro de Esquema no Fabric Real-Time Intelligence ajuda a melhorar a qualidade dos dados, a consistência e o controle em seus fluxos de trabalho controlados por eventos.

Registrar um esquema significa definir como seus dados devem ser, quais campos devem ter, quais tipos de valores são esperados e como eles são estruturados.

Quando o registro de esquema está habilitado, somente os eventos que correspondem ao esquema registrado têm permissão para se mover pela arquitetura controlada por eventos. Ele ajuda a detectar erros antecipadamente e garante que seus dados estejam limpos, consistentes e prontos para uso.

A validação de esquema é aplicada em todo o fluxo de trabalho de inteligência do Fabric Real-Time:

• Quando os eventos entram pela primeira vez por meio de um fluxo de eventos
• Durante o pré-processamento e a transformação
• Antes que os dados sejam entregues a destinos como Eventhouse, Lakehouse e Data Activator
• Mesmo para fluxos derivados, em que um fluxo se alimenta de outro

O uso de esquemas não só melhora a qualidade dos dados, mas também oferece um melhor controle, impedindo que dados ruins ou inesperados interrompam seus processos downstream.

O Registro de Esquema ajuda você a manter a integridade de dados, habilitar a reutilização entre serviços e estabelecer controles de acesso, tudo fundamental para criar soluções de dados confiáveis e escalonáveis em tempo real no Fabric Real-Time inteligência.

Conceitos principais

Esta seção descreve os principais conceitos do Registro de Esquema.

Conjuntos de esquemas

Com o Registro de Esquema, você pode organizar um ou mais esquemas relacionados em conjuntos de esquemas, habilitando o agrupamento lógico e o controle de acesso centralizado. Você pode gerenciar quem pode exibir, editar ou modificar esquemas no nível do grupo, facilitando a governança do uso do esquema entre equipes ou projetos. Para obter mais informações, consulte Criar e gerenciar conjuntos de esquemas de eventos.

Formatos de esquema

Atualmente, o Registro de Esquema dá suporte ao formato de esquema Avro .

Registro de esquema

Há várias maneiras de registrar esquemas no Fabric Real-Time inteligência:

• Use o construtor de interface do usuário visual para criar o esquema passo a passo.
• Carregue um arquivo que contém sua definição de esquema.
• Colar seu esquema diretamente no Modo de Exibição de Código

Você pode registrar esquemas usando a interface do usuário (interface do usuário) do hub do Fabric Real-Time ou a interface do usuário dos conjuntos de esquemas. Para obter mais informações, consulte Criar e gerenciar esquemas de eventos.

Controle de versão do esquema

O controle de versão tem suporte no Registro de Esquema no Fabric Real-Time Intelligence. No entanto, o sistema não garante uma versão semântica. Além disso, não há nenhuma verificação para ver se um esquema foi realmente alterado. Todas as edições em um esquema existente são tratadas como uma nova versão. Conforme descrito anteriormente, ainda não há verificações de compatibilidade ou suporte nativo para evolução do esquema. Para obter mais informações, consulte Atualizar um esquema.

Conteúdo relacionado

Consulte os seguintes artigos:

Para Real-Time usuários do hub:Criar e gerenciar esquemas de eventos no hub Real-Time

Para os usuários de conjuntos de esquema:

• Criar um conjunto de esquemas
• Criar esquemas em um conjunto de esquemas