Versão 2023.11 do DLT

20 a 24 de março de 2023

Esses recursos e melhorias foram lançados com a versão 2023.11 do DLT.

Versões do Databricks Runtime usadas por esta versão

Channel:

• ATUAL (padrão): Databricks Runtime 11.3.6
• VERSÃO PRÉVIA: Databricks Runtime 12.1.2

Novos recursos e melhorias nesta versão

• Agora você pode obter o status em tempo real para suas atualizações de pipeline com notificações por email. Você pode configurar um ou mais endereços de email para receber notificações quando:

  • As atualizações do pipeline são concluídas com sucesso, falham com um erro repetível ou falham com um erro não repetível.
  • Um único fluxo de dados falha.

  Para configurar emails de notificação, clique em Notificações nas configurações de pipeline ao criar ou editar um pipeline. Confira Adicionar notificações por email nos eventos do pipeline.

• Esta versão inclui alterações para aprimorar a experiência do usuário ao exibir a lista de pipelines na interface do usuário do DLT. As alterações incluem um aumento no número de pipelines exibidos em cada página. Por padrão, 20 pipelines são exibidos em cada página. O padrão anterior era exibir 10 pipelines em cada página.

• Com essa versão, você verá avisos de descontinuação no log de eventos do DLT se uma das definições do conjunto de dados do Python incluir acentos graves em volta do nome do conjunto de dados, por exemplo, definindo uma tabela como dlt.table(name="`table.name`").

Correções de bug nesta versão

• Esta versão corrige um bug que causa um erro ao usar o spark.sql("SHOW CATALOGS") comando. SHOW CATALOGS agora é um comando com suporte.