DLT-release 2022.37

14 - 22 september 2022

Deze functies en verbeteringen zijn uitgebracht met de 2022.37-release van DLT.

Databricks Runtime-versies die door deze release worden gebruikt

Channel:

• CURRENT (standaard): Databricks Runtime 10.3.7
• PREVIEW: Databricks Runtime 11.0.5

Nieuwe functies en verbeteringen in deze release

• De API-aanvraag voor de start-update retourneert nu het request_id veld in de hoofdtekst van het antwoord. De request_id is een stabiele id voor de oorspronkelijke aanvraag die de update start. Als een update opnieuw wordt geprobeerd of opnieuw wordt gestart, neemt de nieuwe update de request_idover.

{
  "update_id": "the ID of the update that was started",
  "request_id": "The ID of the request that started this update"
}

De nieuwe requests API-aanvraag (GET /pipelines/{pipeline_id}/requests/{request_id}) retourneert de status van de pijplijnupdate die is gekoppeld aan request_id. Het antwoord bevat informatie over de meest recente update.

{
  "status": "ACTIVE",
  "latest_update": {}
}

• Uw Python-code kan nu spark.sql bewerkingen buiten dlt.table() of dlt.view() functies aanroepen, zolang de bewerking niet wordt gelezen vanuit een gerealiseerde weergave of streamingtabel.

• Vermeldingen in het gebeurtenislogboek bevatten nu de eigenschap maturity om de stabiliteit van het gebeurtenisschema aan te geven. Mogelijke waarden zijn stable, evolvingen deprecated. Zie Het gebeurtenislogboek van de pijplijn voor meer informatie over het DLT-gebeurtenislogboek.

• Het foutbericht wordt verbeterd wanneer er incompatibele wijzigingen worden aangebracht in brontabellen die door een streamingtabel worden gebruikt.

• U kunt nu een clusterbeleid selecteren in de DLT-gebruikersinterface wanneer u een pijplijn maakt of bewerkt. Vroeger vereiste het instellen van het clusterbeleid voor een pijplijn dat de JSON-instellingen van de pijplijn werden bewerkt.

• Sneller pijplijn opstarten. Deze release bevat verbeteringen die de SETTING_UP_TABLES stap versnellen bij het starten van een pijplijn.

Opgeloste fouten in deze release

• In deze release wordt een fout opgelost waardoor verbeterde automatische schaalaanpassing niet omhoog kan worden geschaald wanneer er geen niet-actieve clusterexemplaren beschikbaar zijn.