Udostępnij przez

Co to jest zadanie platformy Apache Airflow?

Uwaga

Zadanie w Apache Airflow jest uruchamiane przez Apache Airflow. Obecnie sieci prywatne i Vnet nie są obsługiwane w przypadku zadań Apache Airflow w Fabric. Ta funkcja jest opracowywana i wkrótce zostanie zaktualizowana.

Zadanie Apache Airflow to następna generacja menedżera orkiestracji przepływu pracy Azure Data Factory. Ułatwia tworzenie zadań platformy Apache Airflow i zarządzanie nimi, dzięki czemu można uruchamiać ukierunkowane grafy Acykliczne (DAG) na dużą skalę bez problemów. W ramach Data Factory Microsoft Fabric zapewnia nowoczesny sposób na wprowadzanie, przygotowywanie i przekształcanie danych ze wszystkich rodzajów źródeł danych — takich jak bazy danych, magazyny danych, lakehouse, dane w czasie rzeczywistym i inne.

Kiedy używać zadania Apache Airflow?

Zadania w ramach Apache Airflow oferują zarządzaną usługę, dzięki której można tworzyć i uruchamiać skierowane acykliczne grafy (DAG) oparte na języku Python do orkiestracji procesów, bez obaw o proces konfiguracji. Jeśli lubisz pracować z platformą Apache Airflow lub preferujesz pisanie kodu, ta opcja jest doskonałym rozwiązaniem. Jeśli nie chcesz pisać kodu, potoki oferują prosty sposób obsługi orkiestracji danych bez potrzeby pisania kodu.

Najważniejsze funkcje    

Hostowane zadanie Apache Airflow w usłudze Microsoft Fabric oferuje różne przydatne funkcje, w tym:

Najważniejsze funkcje     Zadanie Apache Airflow w ramach Apache Fabric Menedżer orkiestracji przepływu pracy w usłudze Azure Data Factory
Synchronizacja usługi Git Tak Tak
Włączanie usługi AKV (Azure Key Vault) jako zaplecza Tak Tak
Zainstaluj pakiet prywatny zgodnie z wymaganiami Tak Tak
Dzienniki diagnostyczne i metryki Nie. Tak
Blob Storage Nie. Tak
Adres IP klastra Apache Airflow Tak Tak
Automatyczne skalowanie do zarządzania wzrostami obciążenia produkcyjnego Tak Częściowe
Wysoka dostępność w celu ograniczenia awarii/przestoju Tak Nie.
Operatory z możliwością odroczenia w przypadku wstrzymania bezczynnych operatorów i zwalniania pracowników Tak Nie.
Wstrzymywanie i wznawianie TTL (czas życia) Tak Nie.
Doświadczenie SaaS — 10 sekund, aby rozpocząć pracę — Tworzenie DAG-ów — bezpłatna wersja próbna Fabric Tak Nie.

Dostępność w regionie

  • Australia Wschodnia
  • Australia Południowo-Wschodnia
  • Brazylia Południowa
  • Kanada Środkowa
  • Kanada Wschodnia
  • Indie Środkowe
  • Środkowe stany USA
  • Azja Wschodnia
  • Wschodnie stany USA
  • Wschodnie stany USA 2
  • Francja Środkowa
  • Niemcy Środkowo-Zachodnie
  • Indonezja Środkowa (wkrótce)
  • Izrael Środkowy
  • Włochy Północne
  • Japonia Wschodnia
  • Japonia Zachodnia
  • Korea Środkowa
  • Malezja Zachodnia (wkrótce)
  • Meksyk Środkowy
  • Nowa Zelandia Północna (wkrótce)
  • Północno-środkowe stany USA
  • Europa Północna
  • Norwegia Wschodnia
  • Polska Środkowa
  • Katar Środkowy (wkrótce)
  • Hiszpania Środkowa (wkrótce)
  • Północna Republika Południowej Afryki
  • Południowo-środkowe stany USA
  • Indie Południowe
  • Azja Południowo-Wschodnia
  • Szwecja Środkowa
  • Szwajcaria Północna
  • Szwajcaria Zachodnia
  • Tajwan Północny (wkrótce)
  • Tajwan Północno-zachodni (wkrótce)
  • Północne Zjednoczone Emiraty Arabskie
  • Południowe Zjednoczone Królestwo
  • Zachodnie Zjednoczone Królestwo
  • Europa Zachodnia
  • Zachodnie stany USA
  • Zachodnie stany USA 2
  • Zachodnie stany USA 3

Obsługiwane wersje platformy Apache Airflow

  • 2.10.5

Obsługiwana wersja języka Python

  • 3,12

Uwaga

Zmiana wersji Apache Airflow w istniejącym zadaniu Apache Airflow nie jest obecnie obsługiwana. Jeśli potrzebujesz innej wersji platformy Apache Airflow, utwórz nowe zadanie apache Airflow ze zaktualizowaną wersją.

Powiązana zawartość

  • Last updated on