Nawiązywanie połączenia z usługą Infoworks

Infoworks DataFoundry to zautomatyzowany system operacji i aranżacji danych przedsiębiorstwa, który działa natywnie w usłudze Azure Databricks i wykorzystuje pełne możliwości usługi Azure Databricks w celu zapewnienia łatwego rozwiązania do dołączania danych — ważnego pierwszego kroku w zakresie operacjonalizacji magazynu data lake. DataFoundry nie tylko automatyzuje pozyskiwanie danych, ale także automatyzuje kluczowe funkcje, które muszą towarzyszyć pozyskiwaniu, aby ustanowić podstawę do analizy. Dołączanie danych za pomocą narzędzia DataFoundry automatyzuje:

• Pozyskiwanie danych: ze wszystkich przedsiębiorstwa i zewnętrznych źródeł danych
• Synchronizacja danych: cdC w celu zachowania synchronizacji danych ze źródłem
• Nadzór nad danymi: katalogowanie, pochodzenie, zarządzanie metadanymi, inspekcja i historia

Poniżej przedstawiono kroki korzystania z rozwiązania Infoworks z usługą Azure Databricks.

Krok 1. Generowanie osobistego tokenu dostępu usługi Databricks

Aplikacja Infoworks uwierzytelnia się w usłudze Azure Databricks przy użyciu osobistego tokenu dostępu usługi Azure Databricks.

Krok 2. Konfigurowanie klastra w celu obsługi potrzeb związanych z integracją

Program Infoworks zapisze dane w ścieżce usługi Azure Data Lake Storage, a klaster integracji usługi Azure Databricks odczytuje dane z tej lokalizacji. W związku z tym klaster integracji wymaga bezpiecznego dostępu do ścieżki usługi Azure Data Lake Storage.

Bezpieczny dostęp do ścieżki usługi Azure Data Lake Storage

Aby zabezpieczyć dostęp do danych w usłudze Azure Data Lake Storage (ADLS), możesz użyć klucza dostępu konta usługi Azure Storage (zalecane) lub jednostki usługi Microsoft Entra ID.

Używanie klucza dostępu do konta usługi Azure Storage

Klucz dostępu konta magazynowego można skonfigurować w klastrze integracji w ramach konfiguracji Spark. Upewnij się, że konto magazynu ma dostęp do kontenera usługi ADLS i systemu plików używanego do przygotowywania danych oraz do kontenera i systemu plików usługi ADLS, do którego chcesz zapisywać tabele Delta Lake. Aby skonfigurować klaster integracji do używania klucza, wykonaj kroki opisane w temacie Nawiązywanie połączenia z usługą Azure Data Lake Storage i usługą Blob Storage.

Użyj jednostki usługi Microsoft Entra ID

Jednostkę usługi można skonfigurować w klastrze integracji usługi Azure Databricks w ramach konfiguracji platformy Spark. Upewnij się, że jednostka usługi ma dostęp do kontenera ADLS używanego do przechowywania danych tymczasowych oraz do kontenera ADLS, w którym chcesz zapisywać tabele Delta. Aby skonfigurować klaster integracji do korzystania z jednostki usługi, wykonaj kroki opisane w temacie Access ADLS with service principal (Uzyskiwanie dostępu do usługi ADLS przy użyciu jednostki usługi).

Określanie konfiguracji klastra

1. Ustaw Tryb klastra na Standard.

2. Ustaw wersję środowiska uruchomieniowego usługi Databricks na wersję środowiska uruchomieniowego usługi Databricks.

3. Włącz zoptymalizowane zapisy i automatyczne kompaktowanie , dodając następujące właściwości do konfiguracji platformy Spark:

   spark.databricks.delta.optimizeWrite.enabled true
   spark.databricks.delta.autoCompact.enabled true
   

4. Skonfiguruj klaster w zależności od potrzeb dotyczących integracji i skalowania.

Aby uzyskać szczegółowe informacje o konfiguracji klastra, zobacz Informacje o konfiguracji obliczeniowej.

Zobacz Uzyskaj szczegóły połączenia dla zasobu obliczeniowego usługi Azure Databricks, aby poznać kroki, jak uzyskać adres URL JDBC i ścieżkę HTTP.

Krok 3. Uzyskiwanie szczegółów połączenia JDBC i ODBC w celu nawiązania połączenia z klastrem

Aby połączyć klaster usługi Azure Databricks z aplikacją Infoworks, potrzebne są następujące właściwości połączenia JDBC/ODBC:

• JDBC URL
• HTTP Path (Ścieżka HTTP)

Krok 4. Uzyskiwanie informacji dla usługi Azure Databricks

Przejdź do witryny Infoworks , aby dowiedzieć się więcej i uzyskać pokaz.

Dodatkowe zasoby

Pomoc