Conceitos de IA/BI

A IA/BI do Databricks é um novo tipo de produto de business intelligence projetado para fornecer uma compreensão profunda da semântica de seus dados, permitindo a análise de dados de autoatendimento para todos em sua organização. A IA/BI é criada em um sistema de IA composto que extrai insights do ciclo de vida completo de seus dados na plataforma do Azure Databricks, incluindo pipelines de ETL, linhagem e outras consultas.

Como funciona a IA/BI?

Os sistemas compostos de IA combinam várias tecnologias ou modelos de IA para resolver problemas complexos. Em vez de depender de um único modelo ou algoritmo de IA, um sistema de IA composto integra vários componentes de interação para melhorar o desempenho e a precisão.

Por exemplo, em um sistema que analisa comentários do cliente, o processamento de linguagem natural pode ser usado para entender o sentimento de texto, enquanto os modelos de machine learning podem prever o comportamento do cliente com base nesse sentimento. Aproveitando essas tecnologias complementares de IA, os sistemas compostos de IA podem fornecer resultados mais precisos e perspicazes do que os modelos de IA individuais sozinhos.

As ferramentas tradicionais de BI têm confiado em relatórios e dashboards, muitas vezes exigindo envolvimento extensivo dos profissionais de dados para criar novas visualizações. Embora os assistentes de IA tenham sido integrados às ferramentas de BI para resolver esse problema, eles frequentemente lutam contra complexidades de dados do mundo real, fornecendo demonstrações impressionantes, mas falhando na prática.

O modelo semântico de uma organização geralmente depende do conhecimento mantido por aqueles que trabalham com os dados. A IA/BI do Databricks captura essa compreensão das interações entre o Databricks. Ele aumenta o contexto existente na Plataforma de Inteligência de Dados, aproveitando esse conhecimento para fornecer respostas práticas do mundo real. Ele alimenta duas experiências complementares de produtos:

• Painéis de IA/BI: uma solução de dashboarding de baixo código e de IA que inclui todos os recursos convencionais de BI para responder a um conjunto fixo de perguntas de negócios.
• Genie: uma interface de conversa que aprende continuamente os dados e a semântica subjacentes com base nos comentários humanos. Ele pode responder a um conjunto muito mais amplo de perguntas de negócios com base em seus recursos de raciocínio, ao mesmo tempo em que fornece ativos confiáveis para padrões de consulta especificados pelas equipes de dados.

Painéis de IA/BI

Os painéis continuam sendo um método eficaz para operacionalizar a análise predefinida para uso regular. Os painéis de IA/BI simplificam esse processo com uma experiência de criação de baixo código e de IA que simplifica a configuração de dados e visualização. Esses painéis incluem recursos de BI padrão, como visualizações, filtragem cruzada e instantâneos de PDF periódicos por email. Eles não exigem modelos semânticos, extrações de dados ou serviços de gerenciamento adicionais. Consulte Dashboards.

AI/BI Gênio

Para abordar uma ampla gama de perguntas não abordadas pelos painéis, a IA/BI oferece uma interface de conversa chamada Genie. Ao contrário das ferramentas tradicionais de gráfico fixo, o Genie pode aprender com os dados subjacentes e responder a consultas de usuário com visualizações e sugestões adaptáveis. Ele busca esclarecimentos e fornece soluções alternativas conforme necessário. O Genie foi projetado para melhorar ao longo do tempo por meio de comentários humanos, oferecendo ferramentas para analistas verificarem e refinarem suas saídas. Recursos como instruções, ativos confiáveis, votação de confiança e monitoramento de qualidade permitem que as equipes de dados ajustem o desempenho do Genie e garantam respostas confiáveis.

O Genie usa um sistema de ferramentas, como ativos confiáveis, para aumentar a confiabilidade. Os analistas podem integrar a lógica confiável de fontes como o Catálogo do Unity ao Genie, permitindo que ele responda a perguntas com lógica validada e compartilhe de forma transparente o status confiável das respostas fornecidas.

Veja o que é um espaço Genie de IA/BI para saber mais sobre como os espaços do Genie funcionam.

Integração com a plataforma

A IA/BI do Databricks é criada em cima e fortemente integrada à Plataforma de Inteligência de Dados do Databricks. Os principais recursos de IA/BI incluem:

• Governança e linhagem unificadas: a IA/BI é integrada perfeitamente ao Catálogo do Unity, alinhando-se com sua estrutura de governança e aderindo a quaisquer políticas globais definidas pelos administradores. Por meio da visualização de linhagem do Catálogo do Unity, os produtores de dados ou administradores podem acompanhar o uso de seus ativos de dados dentro da IA/BI. Essa rastreabilidade de volta à ingestão do conjunto de dados incute confiança nos resultados da análise.
• Compartilhamento contínuo, sem novas licenças de usuário: a IA/BI é integrada à plataforma IAM do Databricks, que se integra diretamente a muitos IDPs populares para que você possa compartilhar sua análise com qualquer pessoa em sua organização. A IA/BI do Databricks não tem restrições baseadas em assentos, portanto, você pode adicionar qualquer pessoa de sua organização sem a despesa de adicionar novas licenças.
• Preço/desempenho líder do setor: a IA/BI é fortemente integrada aos sql warehouses e ao mecanismo photon, que contêm otimizações exclusivas para fornecer interações de alto desempenho. Você pode esperar um desempenho ideal em uma ampla gama de volumes de dados, de megabytes a petabytes.
• Nenhuma extração de dados necessária: a IA/BI se integra ao ecossistema de dados existente, eliminando a necessidade de extrair conjuntos de dados para um mecanismo de BI separado. Essa integração melhora a atualização de dados e simplifica a governança de dados, levando a um processo de análise de dados mais simplificado.