Juli 2021

Deze functies en verbeteringen in het Azure Databricks-platform zijn uitgebracht in juli 2021.

MLflow-experimentmachtigingen beheren met de Databricks REST API

29 juli - 2 augustus 2021: versie 3.51

U kunt nu de API voor machtigingen van Databricks REST API's gebruiken om te beheren welke gebruikers MLflow-experimenten kunnen lezen, bewerken of beheren. Zie de API voor machtigingen.

De Azure Databricks-webinterface is gelokaliseerd in het Portugees en Frans (openbare previewversie)

29 juli 2021

U kunt nu Azure Databricks gebruiken in het Frans en Portugees en er zijn meer talen gepland voor de volgende kwartalen. Ga naar Instellingen in het menu rechtsboven in de webgebruikersinterface en klik op het tabblad Voorkeuren om uw taal te wijzigen.

Databricks Runtime 5.5 LTS voor Machine Learning-ondersteuning eindigt, vervangen door uitgebreide ondersteuningsversie

27 juli 2021

Databricks Runtime 5.5 ML LTS-ondersteuning is beëindigd op 27 juli 2021, maar de nieuwe Databricks Runtime 5.5 ML Extended Support (EoS) wordt eind 2021 ondersteund. Databricks Runtime 5.5 ML Extended Support maakt gebruik van Ubuntu 18.04.5 LTS in plaats van de afgeschafte Ubuntu 16.04.6 LTS-distributie die wordt gebruikt in de oorspronkelijke Databricks Runtime 5.5 ML LTS. Ubuntu 16.04.6 LTS-ondersteuning is beëindigd op 1 april 2021. Zie Databricks Runtime 5.5 ML Extended Support (EoS) voor meer informatie over de verschillen tussen Databricks Runtime 5.5 Extended Support en Databricks Runtime 5.5 LTS.

Ondersteuning voor Databricks Light 2.4 eindigt op 5 september, vervangen door uitgebreide ondersteuningsversie

27 juli 2021

Ondersteuning voor de originele Databricks Light 2.4 eindigt op 5 september. 2021, maar de nieuwe Databricks Light 2.4 Extended Support (EoS) wordt ondersteund tot en met 27 juli 2022. Databricks Light 2.4 Extended Support maakt gebruik van Ubuntu 18.04.5 LTS in plaats van de afgeschafte Ubuntu 16.04.6 LTS-distributie die wordt gebruikt in de oorspronkelijke Databricks Light 2.4. Ubuntu 16.04.6 LTS-ondersteuning is beëindigd op 1 april 2021. Databricks raadt u aan uw Light-workloads zo snel mogelijk naar de uitgebreide ondersteuningsversie te migreren.

Nieuwe Azure-regio: Duitsland - west-centraal

27 juli 2021

Azure Databricks is nu beschikbaar in de regio Duitsland - west-centraal.

Informatie over nieuwe functies die beschikbaar zijn in de gebruikersinterface van Databricks Feature Store (openbare preview)

26 juli - 2 augustus 2021: versie 3.51

In de gebruikersinterface van Databricks Feature Store ziet u nu de laatste keer dat gegevens naar een functietabel zijn geschreven. Ook wordt weergegeven of een functietabel wordt bijgewerkt door een geplande taak, en zo ja, het schema en de status van de taak.

Maximaal 10.000 resultaatrijen weergeven

26 juli - 2 augustus 2021: versie 3.51

Eerder werd een maximum van 1000 rijen weergegeven in een notitieblok. Als een tabel nu meer dan 1000 rijen retourneert, kunt u ervoor kiezen om de query opnieuw uit te voeren en maximaal 10.000 rijen weer te geven. Vereist Databricks Runtime 8.4 of hoger. Zie Resultaten downloaden voor meer informatie.

Notebooks bulksgewijs importeren en exporteren in een map als bronbestanden

26 juli - 2 augustus 2021: versie 3.51

U kunt nu de bron voor alle notitieblokken in een werkruimtemap exporteren als een ZIP-archief. U kunt het ZIP-archief importeren in een andere werkruimte of een andere map in dezelfde werkruimte om alle geëxporteerde notitieblokken daar opnieuw te maken. Het bronbestand van een notebook bevindt zich in de standaardtaal van het notitieblok. De bron van een Python-notebook is bijvoorbeeld een Python-bestand.

Notebookbronbestanden bevatten geen notebookopdrachtresultaten en zijn geschikt voor gebruik in een CI/CD-pijplijn. Voorheen kon u de bron voor slechts één notitieblok tegelijk exporteren, vanuit de notebook-editor, of u kunt alle notitieblokken in een map exporteren als HTML-bestanden of als een Databricks-archief (met de extensie .dbc), inclusief de resultaten van notebookopdrachten, tenzij het notebook werd gewist voordat het werd geëxporteerd.

Zie Notitieblokken beheren voor meer informatie over het importeren en exporteren van notitieblokken.

Automatisch aanvullen in SQL-notebooks maakt nu gebruik van all-caps voor SQL-trefwoorden

26 juli - 2 augustus 2021: versie 3.51

Wanneer u TAB een SQL-trefwoord automatisch in een notebook wilt aanvullen, wordt het automatisch aangevulde resultaat nu in hoofdletters geplaatst. Bijvoorbeeld, SELECT wordt weergegeven in plaats van select. Dit heeft geen invloed op de query omdat SQL-trefwoorden niet hoofdlettergevoelig zijn.

Widgets die opnieuw geordend en van grootte veranderd kunnen worden in notitieblokken

26 juli - 2 augustus 2021: versie 3.51

U kunt nu de volgorde en grootten van Databricks-widgets in een notitieblok wijzigen door te klikken op het in de widgetsbalk van het notitieblok. Zie Widgetinstellingen configureren.

Bruikbaarheidsoplossingen voor Azure Databricks-gebruikersinterface

26 juli - 2 augustus 2021: versie 3.51

In deze release wordt een probleem opgelost waardoor het gebruik van de ESC sleutel niet mogelijk is om bepaalde dialoogvensters in de Gebruikersinterface van Azure Databricks te sluiten, waaronder:

• Het dialoogvenster JSON weergeven in de gebruikersinterface van taken.
• Het dialoogvenster Planning bewerken in de gebruikersinterface van taken.
• Het dialoogvenster Configuraties voor eenmalige afmelding in de gebruikersinterface van de beheerder.
• Het Notitieblok maken dialoogvenster.

Snel pijplijninstellingen definiëren wanneer u een nieuwe DLT-pijplijn maakt

26 juli - 2 augustus 2021: versie 3.51

Wanneer u een nieuwe pijplijn maakt, kunt u nu instellingen rechtstreeks definiëren in het dialoogvenster Pijplijn maken in de DLT-gebruikersinterface.

De Databricks Runtime 8.4 en 8.4 ML zijn nu algemeen beschikbaar; 8.4 Photon is in openbare preview.

20 juli 2021

Databricks Runtime 8.4 en 8.4 ML zijn nu algemeen beschikbaar. 8.4 Photon bevindt zich in openbare preview.

Zie de volledige releaseopmerkingen bij Databricks Runtime 8.4 (EoS) en Databricks Runtime 8.4 voor ML (EoS) voor meer informatie.

Spark SQL gebruiken met de DLT Python-API

12-19 juli 2021: versie 3.50

U kunt nu de volgende functies gebruiken met de DLT Python-API:

• De spark.table functie voor het uitvoeren van batchleesbewerkingen op gegevenssets die zijn gedefinieerd in een pijplijn.
• De spark.sql functie voor het gebruik van een SQL-query om een gegevensset te definiëren. SQL-query's kunnen gebruikmaken van DLT-specifieke functies, waaronder verwijzingen naar interne gegevenssets met behulp van het LIVE trefwoord en incrementele leesbewerkingen met behulp van het STREAM trefwoord.

Zie de naslaginformatie over de Python-taal voor meer informatie.

Verbeterde gegevensverwerking en -analyse met Azure Databricks-taken (openbare preview)

12-19 juli 2021: versie 3.50

Databricks kondigt een update aan voor Azure Databricks-taken waarmee u een taak met meerdere taken kunt organiseren en uitvoeren. U kunt dit gebruiken om een gerichte acyclische grafiek (DAG) van taakafhankelijkheden te definiëren, zodat u eenvoudiger betrouwbare gegevens en machine learning-werkstromen kunt bouwen en bewaken. Deze functie is beschikbaar als openbare preview en is standaard uitgeschakeld.

Zie Lakeflow-taken voor meer informatie.

Lagere kosten voor DLT-standaardclusters (openbare preview)

12-19 juli 2021: versie 3.50

Om de kosten te beheren, zijn de volgende wijzigingen aangebracht in DLT-standaardclusters:

• Wijzig het standaardexemplarentype in Standard_F8s.
• Schakel automatisch schalen standaard in met minimale werkrollen die gelijk zijn aan 1 en het maximum aantal werkrollen gelijk aan 5.

Pijplijnen sorteren op naam in de DLT-gebruikersinterface (openbare preview)

12-19 juli 2021: versie 3.50

U kunt nu klikken op de naam kolomkop in de DLT-gebruikersinterface om pijplijnen te sorteren op naam in oplopende volgorde (A -> Z) of aflopende volgorde (Z -> A).

Wijzigingen in de pagina Compute

12-19 juli 2021: versie 3.50

De koppelingen Libraries, Job Run, Spark UI en Logs van de Compute-pagina zijn verwijderd. Als u informatie over bibliotheken wilt bekijken of als u de Spark-gebruikersinterface en logboeken wilt weergeven, gebruikt u de bijbehorende tabbladen op de detailpagina van het cluster. Als u informatie over een taakuitvoering wilt zien, klikt u op Ga naar taakuitvoering op die pagina.

Ondersteuning voor Databricks Runtime 5.5 LTS eindigt, vervangen door Uitgebreide ondersteuning van Databricks Runtime 5.5 tot eind 2021

9 juli 2021

Ondersteuning voor Databricks Runtime 5.5 LTS en Databricks Runtime 5.5 LTS voor Machine Learning eindigt op 10 juli. Zie de ondersteuningslevenscycli van Databricks.

Uitgebreide ondersteuning voor Databricks Runtime 5.5 wordt eind 2021 ondersteund. Uitgebreide ondersteuning voor Databricks Runtime 5.5 maakt gebruik van Ubuntu 18.04.5 LTS in plaats van de afgeschafte Ubuntu 16.04.6 LTS-distributie die wordt gebruikt in de oorspronkelijke Databricks Runtime 5.5 LTS. Ubuntu 16.04.6 LTS-ondersteuning is beëindigd op 1 april 2021. Zie Databricks Runtime 5.5 Extended Support (EoS) voor meer informatie over de verschillen tussen Databricks Runtime 5.5 Extended Support en Databricks Runtime 5.5 LTS.

Repos API (publieke preview)

6 juli 2021

U kunt nu programmatisch een Azure Databricks-opslagplaats bijwerken naar de nieuwste versie van een specifieke Git-vertakking of naar een tag met behulp van de nieuwe opslagplaats-API. Zie Repos API voor meer informatie.

Databricks Runtime 8.4 (bèta)

1 juli 2021

Databricks Runtime 8.4 en Databricks Runtime 8.4 ML zijn nu beschikbaar als bètaversies.

Zie de volledige releaseopmerkingen bij Databricks Runtime 8.4 (EoS) en Databricks Runtime 8.4 voor ML (EoS) voor meer informatie.