DLT versão 2023.30

31 de julho - 4 de agosto de 2023

Esses recursos e melhorias foram lançados com a versão 2023.30 do DLT.

Versões do Databricks Runtime usadas por esta versão

Channel:

• Atual (padrão): Databricks Runtime 11.3.16
• PRÉVIA: Databricks Runtime 12.2.9

Novos recursos e melhorias nesta versão

• Mudança significativa: os clusters da maintenance de pipeline agora herdam as definições de configuração de cluster que definiste com o rótulo de cluster default. Anteriormente, as configurações necessárias para os clusters updates e maintenance precisavam ser configuradas manualmente para ambos os clusters nas configurações de pipeline. Como as configurações agora são herdadas automaticamente pelo cluster maintenance, essa alteração melhora a confiabilidade do processamento de manutenção. Use o rótulo updates para configurações que não devem ser aplicadas a maintenance clusters. Consulte Configurar computação clássica para pipelines.

• Esta versão inclui melhorias de desempenho que reduzem o tempo de configuração de tabelas quando a DLT executa uma atualização. Essas melhorias de desempenho reduzem o tempo total de execução de atualizações de pipeline.

• Um novo painel de de detalhes do conjunto de dados com guias fornece uma interface de usuário mais limpa ao exibir detalhes sobre um conjunto de dados em seu pipeline e facilita a localização de informações específicas sobre seus conjuntos de dados.