Schéma d’informations

S’applique à : Databricks SQL Databricks Runtime 10.4 LTS et versions ultérieures Unity Catalog uniquement

Dans le SYSTEM catalogue, le INFORMATION_SCHEMA est un schéma standard SQL qui fournit des métadonnées sur les objets dans tous les catalogues du metastore. Il ne contient pas de métadonnées sur hive_metastore les objets.

Séparément, chaque catalogue créé dans le catalogue Unity inclut également automatiquement une information_schema description des métadonnées relatives aux objets de ce catalogue uniquement.

Les deux types de schémas d’informations filtrent automatiquement les résultats pour inclure uniquement les objets auxquels vous disposez des privilèges de catalogue Unity. Ce comportement diffère des autres tables système Azure Databricks. Découvrez comment les tables système de schéma d’informations gèrent les autorisations.

L’objectif du schéma d’informations est de fournir une API basée sur des privilèges, basée sur SQL et auto-décrivant l’accès aux métadonnées du catalogue.

Comment les tables système de schéma d’information gèrent les autorisations

system.information_schema diffère d’autres tables système dans lesquelles il implémente le filtrage automatique. Cela signifie que vous voyez uniquement les objets (catalogues, schémas, tables, colonnes, etc.) auxquels vous avez des privilèges d’accès dans le catalogue Unity. Si vos privilèges changent, ce que vous voyez dans le schéma d’informations change en conséquence. Par exemple, lorsque vous interrogez information_schema.tables, seules les lignes des tables que vous avez l’autorisation de voir sont retournées.

Comme toutes les autres tables système, vous avez besoin d’autorisations explicites USE et SELECT pour accéder et interroger le schéma d'information.

Diagramme de relations d’entités du schéma d’informations

Le diagramme de relation d'entité (ER) suivant fournit une vue d'ensemble d'un sous-ensemble de vues de schéma d'informations et de la façon dont elles sont liées les unes aux autres.

Vues des schémas d'information

Remarques

• Le schéma d’informations implémente le filtrage prenant en compte les privilèges. Vous voyez automatiquement uniquement les objets pour lesquels vous avez des autorisations dans Unity Catalog. Découvrez comment les tables système de schéma d’informations gèrent les autorisations.
• Une synchronisation manuelle à l’aide REPAIR TABLE peut être nécessaire pour que certaines modifications de métadonnées de catalogue soient reflétées dans le schéma d’informations. Pour plus d’informations, consultez REPAIR TABLE.
• Tous les identificateurs , à l’exception des noms de colonne et de balise, sont stockés dans le schéma d’informations en minuscules STRING. Pour les performances des requêtes, évitez d’utiliser des fonctions telles que LOWER() ou UPPER() sur la colonne d’identificateur. Au lieu de cela, comparez les identificateurs directement à l’aide de valeurs minuscules.
• Pour empêcher les délais d’expiration des requêtes, appliquez des filtres sélectifs lors de l’interrogation du schéma d’informations (par exemple WHERE table_catalog = 'main' AND table_schema = 'default'). Reportez-vous à la documentation ci-dessus pour obtenir la liste complète des colonnes qui peuvent être utilisées comme filtres pour chaque table de schéma d’informations.
  • Notez que la fonctionnalité pushdown LIMIT n’est pas prise en charge actuellement. Par conséquent, bien qu’elle puisse tronquer les résultats, cela n’améliorera pas les performances.

Exemples

> SELECT table_name, column_name
    FROM information_schema.columns
    WHERE data_type = 'DOUBLE'
      AND table_schema = 'information_schema';

Voici des exemples de workflows qui utilisent des tables de schéma d’informations au niveau du système.

Si vous souhaitez voir toutes les tables qui ont été créées au cours des dernières 24 heures, votre requête peut ressembler à la suivante.

> SELECT table_name, table_owner, created_by, last_altered, last_altered_by, table_catalog
    FROM system.information_schema.tables
    WHERE  datediff(now(), last_altered) < 1;

Si vous souhaitez voir le nombre de tables qui se trouvent dans chaque schéma, considérez l’exemple suivant.

> SELECT table_schema, count(table_name)
    FROM system.information_schema.tables
    WHERE table_schema = 'tpch'
    GROUP BY table_schema
    ORDER BY 2 DESC

Articles connexes

• MONTRER
• DÉCRIRE