Observação
O acesso a essa página exige autorização. Você pode tentar entrar ou alterar diretórios.
O acesso a essa página exige autorização. Você pode tentar alterar os diretórios.
A seguir, descreve as melhorias e atualizações no DATAbricks SQL de janeiro a dezembro de 2023.
21 de dezembro de 2023
- O tipo de visualização do Contador Lakeview mostra cores ao comparar
BigIntvalores nos campos de Valor e Destino principais. - As dicas de ferramenta que aparecem ao alternar a visibilidade da coluna em tabelas em Lakeview foram aprimoradas. Eles se comportam conforme o esperado e não persistem.
- Agora, os usuários podem usar o Assistente do Databricks para criar visualizações no Lakeview. Consulte Criar visualizações com o Assistente do Databricks.
- Para novos gráficos, os gráficos do tipo mapa de calor respeitam a configuração inversa.
- Corrigido um problema de desempenho de renderização para notebooks com um grande número de visualizações.
14 de dezembro de 2023
- Corrigido um bug em que os painéis do Lakeview não apareciam na página de listagem do Lakeview sem precisar fazer uma atualização manual da página.
- Use a chave de escape para cancelar a criação de um widget Lakeview ao colocá-la na tela.
- Agora, o Explorador de Catálogos exibe índices de Pesquisa Vetorial na interface do usuário como parte da prévia pública da Pesquisa Vetorial de IA do Mosaico.
7 de dezembro de 2023
Atualizações da interface do usuário
- Os painéis do Lakeview podem ser adicionados aos favoritos para acesso rápido.
- Há suporte para copiar e colar atalhos de teclado durante a elaboração de um painel do Lakeview. Além disso, a chave de exclusão remove widgets selecionados.
- Títulos e descrições avançados do widget lakeview para impedir o recorte de texto durante a carga.
- Problema de formatação de visualização corrigido em que valores inteiros grandes foram exibidos erroneamente como floats.
- Correção de um problema com painéis SQL do Databricks em que exibições expandidas do gráfico às vezes mostravam gráficos em branco.
- Gráficos de barras com campos quantitativos em eixos X e Y renderizam rótulos de dados mais legíveis.
- Correção de um problema no Editor de SQL para que as tabelas com a palavra
streamno título não entrem mais em conflito com a palavra-chave reservada. Essas tabelas agora aparecem conforme o esperado no navegador do esquema e não são destacadas como erro. - A página de histórico de consultas agora dá suporte a redimensionamento de coluna e seleções de coluna.
- A página de histórico de consultas dá suporte a duas novas colunas: origem da consulta e o tipo de origem de consulta.
- As opções de BI, como o Tableau e o Power BI, são mais fáceis de encontrar no Gerenciador de Catálogos em páginas qualificadas.
30 de novembro de 2023
Atualizações da interface do usuário
Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.
- Os gráficos de pizza no Lakeview agora podem ter atribuições de cores personalizadas.
- As transformações de visualização no Lakeview agora são mantidas ao alternar entre tipos de campo compatíveis.
- Adicionadas configurações de título para canais de ângulo do gráfico de setor Lakeview.
- A lista suspensa do conjunto de dados Lakeview agora é pesquisável para facilitar a navegação.
- O Lakeview dá suporte à exibição numérica completa para valores inferiores a 10.000, eliminando abreviações.
- Adicionada a capacidade de codificar por cores os campos de data categórica em Lakeview.
- Agora, os usuários do Lakeview podem realçar legendas de gráfico com o cursor para copiar e colar os valores.
- Os gráficos de pizza no Lakeview agora apresentam uma opção de alternância de rótulo.
- Padronizado uma cor azul padrão em todas as visualizações do Lakeview.
- Ícones de coluna Lakeview em transformações agora correspondem de forma consistente ao método de transformação usado.
- Os controles do painel de edição do Lakeview agora se ajustam automaticamente para melhorar a legibilidade.
- Lançou um editor de cores aprimorado para visualizações do Lakeview.
- O controle das condições de fonte de tabela no Lakeview agora é reorganizado para melhorar a legibilidade.
- Compatibilidade aprimorada do modo escuro para rótulos em novos gráficos.
- Os novos gráficos agora priorizam consistentemente a exibição de rótulo dentro das barras.
- Correção de um bug em que algumas ações de menu com o botão direito do mouse não estavam funcionando no Editor do SQL.
16 de novembro de 2023
Atualizações da interface do usuário
Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.
- Consultas ,alertas e dashboards do Databricks SQL têm um novo agendador e uma interface de agendamento.
- Os widgets Lakeview agora são mais fáceis de redimensionar devido a uma área de ativação de redimensionamento maior.
- Os administradores do workspace agora podem alterar o proprietário de um painel do Lakeview. No modo de edição de um painel do Lakeview:
- Clique em Compartilhar
- Clique no
- Clique em Atribuir novo proprietário
- Os usuários podem ativar ou desativar rótulos no Lakeview.
Visualizações:
- Os novos rótulos de gráfico agora têm uma forte preferência por estar dentro de uma barra, sempre que possível.
- Novos rótulos de gráfico agora aparecem corretamente em barras empilhadas que sejam suficientemente largas para mostrar o rótulo inteiro.
- As cores do rótulo dentro dos gráficos de barras agora são mais consistentes.
9 de novembro de 2023
Alterações em 2023.50:
Destaques:
- Agora você pode usar a invocação de parâmetro nomeado no SQL e no Python UDF.
Atualizações da linguagem SQL: As seguintes funções internas foram adicionadas:
-
from_xml: analisa um XMLSTRINGem umSTRUCT. -
schema_of_xml: deriva um esquema de um XMLSTRING. -
session_user: retorna o usuário conectado. -
try_reflect: retornaNULLem vez da exceção se um método Java falhar.
As seguintes funções internas foram aprimoradas:
-
invocação de função. Argumentos de tabela para funções dão suporte a particionamento e ordenação: agora você pode usar
PARTITION BYeORDER BYcláusulas para controlar como os argumentos de tabela são passados para uma função. -
mode: suporte para um parâmetro opcional forçando um resultado determinístico. -
to_char: novo suporte paraDATE,TIMESTAMPeBINARY. -
to_varchar: novo suporte paraDATE,TIMESTAMPeBINARY. -
array_insert()é baseado em 1 para índices negativos: aarray_insertfunção é baseada em 1 para índices positivos e negativos. Agora ela insere um novo elemento no final das matrizes de entrada para o índice -1.
Atualizações da interface do usuário
Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.
Visualizações:
- Dicas de ferramentas para novos gráficos mostram apenas itens focalizados para gráficos de alta cardinalidade.
- Novos gráficos alinham automaticamente os gráficos de eixo duplo em zero.
- Os gráficos mudaram a orientação do rótulo e a direção do ângulo do texto do eixo de -90 para 90 graus.
- Os gráficos agora usam a largura do rótulo para decidir a rotação.
Painéis do Lakeview:
- Correção: As linhas de tabela nos dashboards Lakeview não adicionam mais preenchimento vertical quando são retornadas apenas algumas linhas.
- A clonagem de um novo widget de painel do Lakeview tenta primeiro posicionar o clone à direita do original, desde que haja espaço suficiente na superfície de trabalho. Se o espaço insuficiente estiver disponível, o clone será colocado abaixo do original.
- Agora você pode reatribuir o proprietário de um painel do Lakeview por meio do diálogo de compartilhamento.
Editor do SQL: O preenchimento automático agora é menos agressivo e é descartado automaticamente no final das instruções
2 de novembro de 2023
Aprimoramentos:
Veja a seguir as melhorias na linhagem do painel do Lakeview:
- Foram adicionados ícones distintos para tabelas, exibições e exibições materializadas.
- Adicionado suporte para rolagem vertical no caso de muitas fontes de dados upstream.
- Mensagem de erro aprimorada quando o visualizador não tem permissões no objeto upstream.
- Mensagens esclarecidas sobre tabelas de dados de exemplo e dados do HMS.
- Etiquetas de chave-valor adicionadas às fontes de dados de origem.
Correção:
- Correção de um problema em novos gráficos que impedia a renderização após renomear uma série com valores booleanos.
26 de outubro de 2023
Alterações no Databricks SQL versão 2023.45
Destaques:
- A E/S preditiva para atualizações agora está geralmente disponível. Veja o que é Entrada/Saída preditiva?
- Os vetores de exclusão agora estão disponíveis em geral. Veja o que são vetores de exclusão?
Otimizações de consulta:
- Foi removida a junção externa se todas elas forem funções de agregação distintas. SPARK-42583
- Otimizado a ordem dos predicados de filtragem. SPARK-40045
Atualizações da função SQL:
- Adicionado suporte para resolução de alias de coluna lateral implícita em
Aggregate. SPARK-41631 - Suporte para alias de coluna lateral implícita em consultas com o Window. SPARK-42217
- Suporte para Datasketches
HLLSketch. Consultehll_sketch_agga função de agregação. - Adicionada a função
try_aes_decrypt(). Confira atry_aes_decryptfunção. - Suporte para o modo CBC para
aes_encrypt()eaes_decrypt(). Confira aaes_decryptfunção. - Adicione aliases de função de 3 args DATE_ADD e DATE_DIFF.
- Adicionado suporte para aes_encrypt IVs e AAD. SPARK-43290
- Implementar funções de bitmap. SPARK-44154
- Adicionado o alias
to_varcharparato_char. Confira ato_varcharfunção. - Suporte adicionado
array_compact. Confira aarray_compactfunção. - Suporte para udf
luhn_check. Confira aluhn_checkfunção. - Adicionado suporte de análise de argumentos nomeados para funções embutidas. SPARK-44059
- Suporte para a regra do analisador de argumentos para
TABLETableValuedFunction. SPARK-44200 -
array_insertagora falha com o índice 0. SPARK-43011 - Valores adicionados
NULLparaINSERTcom listas especificadas pelo usuário de menos colunas do que a tabela de destino. SPARK-42521 -
DECODEa função retorna resultados incorretos quando passada NULL. SPARK-41668
Atualizações da interface do usuário
Aprimoramentos:
- O editor de SQL do Lakeview agora dá suporte a atalhos de teclado para executar consultas.
- Os filtros em Lakeview agora listam seleções de intervalo de datas relativas rápidas para os últimos 7, 14, 28, 30, 60 e 90 dias.
- Períodos em nomes de campo de dados não resultam mais em gráficos em branco.
- O navegador de esquema herdado agora funciona com o Catálogo do Unity.
- Implementação de melhorias de performance para carregar apenas a aba ativa no Editor de SQL, reduzindo o tempo de carregamento inicial em até 20%.
- Os comentários de tabela gerados por IA no Gerenciador de Catálogos agora estão disponíveis em geral.
Correções:
- Barras em gráficos de barras temporais agora estão centralizadas sobre a marca de data.
- Os modelos de rótulo de dados com expressões de agregação agora usam os formatadores numéricos adequados.
- O zoom em novos gráficos agora funciona com uma escala configurada para categórica usando dados temporais.
Novo artigo:
- Lançou um novo artigo mostrando todas as visualizações do Lakeview, incluindo capturas de tela e anotações mostrando como recriar cada uma das visualizações em cada captura de tela. Consulte os tipos de visualização do painel de IA/BI.
19 de outubro de 2023
Aprimoramentos:
- A funcionalidade de arrastar e soltar no navegador de esquemas agora está disponível.
- O modal Selecionar Tabela nos painéis do Lakeview facilita a seleção de todas as tabelas em um catálogo ou esquema e agora usa previsões de pesquisa de preenchimento automático conforme você digita.
Correções:
- As instruções de dica de ferramenta para seleção de legenda especificam que usuários de Mac devem usar
cmde usuários de Windows devem usarctrl.
- Visibilidade aprimorada de mensagens truncadas nos painéis do Lakeview quando os dados renderizados excedem os limites.
- Gráficos com dados truncados exibem cores consistentes, como visto no editor.
12 de outubro de 2023
Aprimoramentos:
- Os valores de filtro de texto que contêm caracteres especiais agora são filtrados corretamente nos painéis do Lakeview.
- Novos gráficos suportam rótulos de dados
@@nameem gráficos de dispersão. - Formatos de porcentagem personalizados se aplicam às dicas de ferramentas de gráficos agrupados em novos gráficos.
- A interface do usuário da extensão de associação do workspace é GA.
Correções:
- Renderização de rótulo aprimorada em novos gráficos para impedir que os rótulos sejam despejados fora dos limites do gráfico.
- Aumentou o contraste das linhas de marcação e de grade em novos gráficos para melhorar a visibilidade.
- Os espaçamentos dos rótulos dos eixos foram ajustados para melhorar a legibilidade nos novos gráficos.
5 de outubro de 2023
Aprimoramentos:
- Dicas de ferramentas precisas foram adicionadas para ações de modo de publicação e linhagem de data nos painéis do Lakeview.
- A formatação condicional e os modelos de link nas visualizações de tabela do Lakeview agora dão suporte a colunas ocultas.
- Posicionamento de rótulo otimizado para gráficos temporais de barra larga para melhorar a clareza em novos gráficos.
- A visualização de contador no Lakeview mantém suas transformações mesmo depois que outros campos são removidos, garantindo consistência.
- Ao passar o mouse sobre uma série em um gráfico, agora as séries ao redor são escurecidas na dica de ferramenta para melhorar a legibilidade em novos gráficos.
- Novos gráficos usando valores percentuais agora exibem dicas de ferramenta com valores absolutos.
- Adicionado suporte de preenchimento automático para a criação de volumes.
- Fechar uma guia que não está ativa agora não mais alterna guias.
- A execução selecionada indica claramente ao realçar o texto.
Correções:
- Redação de mensagem de erro aprimorada em Tabelas Dinâmicas quando os dados são truncados.
- Corrigido um erro de renderização em Tabelas Dinâmicas onde as cores não eram mostradas quando se usavam tipos de dados BigInt.
- Ao baixar PNGs em novos gráficos com vários itens de legenda, foi removido o símbolo de cor para entradas de legenda excedentes.
- As linhas em novos gráficos manterão uma espessura consistente mesmo no limite de exibição mais alto.
- No Lakeview, se nenhum conjunto de dados existir, o seletor de conjunto de dados na Tela estará vazio.
- Os Pipelines Declarativos do Lakeflow Spark são detectados corretamente pelo Analisador de SQL e não aparecem como tabelas inválidas no Navegador de Esquemas.
- As dicas de ferramenta foram adicionadas à barra lateral.
28 de setembro de 2023
Aprimoramentos:
- Os painéis publicados do Lakeview agora têm um botão de atualização.
- Mensagens de erro aprimoradas para usuários que não têm acesso a um painel do Lakeview.
- A configuração de filtro nos painéis do Lakeview agora lista campos válidos na parte superior da lista de seleção.
- Baixar um gráfico como um arquivo PNG de um painel do Lakeview agora preserva o título e a descrição.
- O aprimoramento do histórico de tabelas delta no Gerenciador de Catálogos inclui a adição de filtros para o intervalo de datas, o usuário e o tipo de operação, bem como colunas classificáveis e links embutidos para Trabalhos e Notebooks associados.
- Suporte ao modo escuro adicionado entre legendas, dicas de ferramentas e visualização de tabela.
Correção:
- As seleções de filtro não são mais desmarcadas ao atualizar um painel do Lakeview.
21 de setembro de 2023
Aprimoramentos:
- O desempenho de renderização da Tabela Dinâmica foi aprimorado.
- Novo padrão DuBois para exibições tabulares de linhagem na interface do usuário.
14 de setembro de 2023
Aperfeiçoamento:
- Os nomes de arquivo agora são preservados ao baixar PNGs em novas visualizações de gráfico. Consulte Visualizações nos notebooks do Databricks e no editor de SQL.
7 de setembro de 2023
Databricks SQL versão 2023.40 disponível
Cronograma de Implementação
- Versão prévia para 2023.40: entre 5 de setembro de 2023 e 11 de setembro de 2023
- Distribuição atual para 2023.40: Entre 18 de setembro, 2023 e 25 de setembro, 2023
Alterações em 2023.40:
- As tags agora estão disponíveis com o Catálogo do Unity.
- O Databricks Runtime retornará um erro se um arquivo for modificado entre o planejamento de consulta e a invocação.
- Suporte ao driver ODBC/JDBC do Azure Databricks.
- Habilitar a rotulagem de colunas de série temporal.
- Novas funções SQL de bitmap.
- Funções de criptografia aprimoradas.
- Suporte para Unity Catalog em
REFRESH FOREIGN. -
INSERT BY NAMEagora é suportado. - Compartilhe visões materializadas com o Delta Sharing.
Atualizações da interface do usuário
Aprimoramentos:
- Novos gráficos agora estão disponíveis, apresentando desempenho de renderização mais rápido, cores bonitas e interatividade aprimorada. Consulte Visualizações nos notebooks do Databricks e no editor de SQL.
- Na visão gráfica do Perfil de Consulta, agora você pode visualizar o tipo de join em qualquer nó que contenha um join no plano de execução.
- O Data Explorer foi renomeado para Catalog Explorer para reconhecer o fato de que você pode usá-lo para trabalhar com todos os objetos seguros no Catálogo do Unity, não apenas com objetos de dados. Consulte O que é o Explorador de Catálogos?.
- A API de Execução da Instrução SQL do Databricks agora está disponível com o Databricks SQL versão 2023.35 e superior. A API permite enviar instruções SQL para execução em um databricks SQL Warehouse, verificar o status e buscar resultados ou cancelar uma execução de instrução SQL em execução. Consulte a API de Execução de Declaração.
31 de agosto de 2023
Novo recurso:
- A marcação para o Catálogo do Unity está em Visualização Pública. Você pode usar tags para simplificar a pesquisa e a descoberta de seus ativos de dados. Consulte Aplicar marcas a objetos protegíveis do Catálogo do Unity.
24 de agosto de 2023
Aperfeiçoamento:
- O preenchimento automático para de sugerir recomendações depois de pressionar a barra de espaços.
- O Navegador de Esquemas não vê mais os Pipelines Declarativos
livedo Lakeflow Spark como tabelas quebradas.
16 de agosto de 2023
Aperfeiçoamento:
- A lista suspensa do Catálogo no editor SQL agora fecha quando você muda de aba. Anteriormente, quando você trocava de aba, a lista suspensa permaneceria aberta.
10 de agosto de 2023
Aperfeiçoamento:
- O preenchimento automático agora suporta a nova sintaxe para definir tags do Catálogo do Unity. Para obter informações sobre comandos, consulte a referência de linguagem SQL.
3 de agosto de 2023
Aprimoramentos:
- O Editor de Mônaco subjacente agora usa a versão 37.1.
- Suporte para preenchimento automático de comandos Delta
SHOW ARCHIVED FILES FOR.
27 de julho de 2023
Aprimoramentos:
- O editor do SQL agora é compatível com caracteres de nova linha do Windows, garantindo que a formatação de consulta funcione conforme o esperado em todos os casos.
- Você pode abrir a navegação do perfil de consultas a partir dos resultados do notebook. Para consultas, execute sua consulta com o SQL Warehouse.
20 de julho de 2023
Databricks SQL versão 2023.35 disponível
Cronograma de Implementação
- Versão prévia para 2023.35: Entre 18 de julho de 2023 e 24 de julho de 2023
- Distribuição atual para 2023.35: Entre 31 de julho de 2023 e 8 de agosto de 2023
Alterações em 2023.35:
- Confiabilidade aprimorada para
VACUUMcom o uso de clone raso no Unity Catalog. - Suporte para UDFs do Python no SQL.
- O Delta Lake UniForm para Apache Iceberg está em versão prévia pública.
- O liquid clustering do Delta Lake está em Prévia Pública.
- Suporte de arquivamento para Delta Lake.
- IDENTIFIER suporte para cláusulas.
- Suporte ao Catálogo do Unity para UDFs (Python e Pandas User-Defined Functions).
Aperfeiçoamento:
- A popularidade da tabela no Catalog Explorer está disponível para todos os usuários do Unity Catalog.
13 de julho de 2023
Aperfeiçoamento:
- Os usuários do Catálogo do Unity agora podem exibir informações adicionais de tabela no Gerenciador de Catálogos, como tabelas ingressadas com frequência, usuários frequentes de uma determinada tabela e notebooks e dashboards usados com frequência.
22 de junho de 2023
Visualização pública:
- O Databricks SQL agora dá suporte a grandes modelos de linguagem (LLMs) hospedados em endpoints de serviço de modelo. Chame
ai_query()para acessar sua LLM. Essa função só está disponível na Visualização Pública no Databricks SQL Pro e Serverless. Para participar da Visualização Pública, envie o formulário de registro de Visualização Pública do AI Functions.
15 de junho de 2023
Novo recurso:
- Tarefas SQL em Jobs agora estão geralmente disponíveis. Você pode orquestrar Consultas, Painéis e Alertas na página Trabalhos. Consulte Tarefa SQL para trabalhos.
- Um novo navegador de esquema agora está em Prévia Pública, com uma experiência de usuário atualizada, uma guia Para Você e filtros aprimorados. O navegador de esquema está disponível no Databricks SQL, no Catalog Explorer ou nos notebooks. Consulte Procurar dados.
8 de junho de 2023
DBSQL versão 2023.30 disponível
Alterações em 2023.30
- Novas funções internas do SQL, como
array_prepend(array, elem),try_aes_decrypt(expr, key [, mode [, padding]])esql_keywords(). - Agora você pode usar o clone superficial para criar novas tabelas gerenciadas do Catálogo do Unity a partir de tabelas gerenciadas existentes do Catálogo do Unity. Veja Clone superficial para as tabelas do Catálogo do Unity.
- Agora você pode usar
CLONEeCONVERT TO DELTAcom tabelas Iceberg que têm partições definidas em colunas truncadas dos tiposint,longestring. Não há suporte para as colunas truncadas do tipodecimal. -
START VERSIONestá preterido paraALTER SHARE.
Atualizações da interface do usuário
Correção:
- A visualização de contador agora dá suporte à formatação ao usar Big Integers.
01 de junho de 2023
Aprimoramentos:
- Os dados binários agora serão renderizados como uma cadeia de caracteres hexadecimal ao usar o formato Arrow.
- Na API de Declaração SQL, o formato CSV agora é suportado para a
EXTERNAL_LINKSdistribuição. Isso permite que os clientes extraam até 100 GiB de dados no formato CSV com URLs pré-assinadas, enquanto oINLINElimite para JSON é de 16 MiB.
- O SQL Pro do Azure Databricks está disponível em todas as regiões da China. O SQL Pro agora é o warehouse padrão na interface do usuário. O padrão da API ainda é Clássico.
29 de maio de 2023
Novo recurso:
- Agora você pode usar a interface de usuário para adicionar dados e carregar informações de um caminho de armazenamento de objetos na nuvem, definido como uma localização externa no Catálogo Unity. Para obter mais informações, consulte Carregar dados usando um local externo do Catálogo do Unity.
25 de maio de 2023
Aprimoramentos:
- Agora você pode alternar o painel de resultados de preenchimento automático.
- Desabilite a tecla enter para que ela não aceite mais sugestões de preenchimento automático. Em Configurações do Usuário do DBSQL, clique em Configurações do Editor e, em seguida, nas configurações do Novo Editor. Desativar a configuração "Enter aceita sugestões de preenchimento automático".
Correções:
- Os cabeçalhos de tabela classificados agora têm cores.
- As linhas do gráfico agora são renderizadas corretamente.
18 de maio de 2023
Aperfeiçoamento:
- Na API de Instrução SQL, a configuração
EXTERNAL_LINKSagora suporta o formatoJSON_ARRAY. Você pode extrair até 100 GiB de dados no formato JSON com URLs pré-assinadas. OINLINElimite para JSON é de 16 MiB.
11 de maio de 2023
Novo recurso:
- Agora, o Navegador de Esquemas está disponível no Gerenciador de Catálogos.
Aprimoramentos:
- O painel de detalhes da tabela que aparece ao passar o mouse agora é menos sensível.
- A chave de escape agora fecha o painel de preenchimento automático.
- As definições de visualização agora têm realce de sintaxe na guia de detalhes do Explorador de Catálogos.
Correções:
- Tabelas dinâmicas agora renderizam corretamente em dispositivos Windows.
- As sugestões de conclusão agora seguem corretamente o caso da primeira palavra-chave.
4 de maio de 2023
Databricks SQL Versão 2023.26 Disponível
Cronograma de Implementação
- Prévia de lançamento para 2023.26: entre 19 de abril de 2023 e 25 de abril de 2023
- Distribuição atual para 2023.26: entre 3 de maio de 2023 e 10 de maio de 2023
Alterações em 2023.26
- O Photon retornará um erro se um arquivo for modificado entre o planejamento e a execução da consulta.
- Novos recursos e suporte estendido para recursos de E/S Preditiva. Consulte Databricks Runtime 13.0 (EoS).
- Use o conector do Azure Databricks para se conectar a outro workspace do Azure Databricks.
-
CREATE TABLE LIKEfuncionalidade para tabelas Delta. - Novos campos de coluna de metadados que denotam o início e o comprimento do bloco de arquivos.
- Novas funções geoespaciais H3. Confira Funções geoespaciais H3
- Novas funções internas do SQL. Consulte Databricks Runtime 13.0 (EoS).
Atualizações da interface do usuário
Aprimoramentos:
- Os administradores podem alterar os proprietários do warehouse usando a interface do usuário ou a API. Confira Gerenciar um SQL warehouse.
- O Explorador de Catálogos agora exibe principais serviços de conta nas listas de usuários para ativos no Catálogo do Unity. Por exemplo, as entidades de serviço de conta ficam visíveis ao editar privilégios ou alterar proprietários no Gerenciador de Catálogos.
- Os rótulos de gráfico personalizado dão suporte à capacidade de referenciar qualquer coluna dentro do conjunto de dados.
- Os filtros de painel agora carregam nomes de coluna, mesmo ao usar consultas que não têm informações de catálogo ou esquema.
27 de abril de 2023
Aprimoramentos:
- O editor do SQL agora conta com o editor de Mônaco para uma experiência de edição mais confiável.
- A página de lista de Histórico do SQL (Consultas) agora inclui o Sistema de Design Dubois.
20 de abril de 2023
Aprimoramentos:
- Apresenta novas tabelas dinâmicas que permitem agregar mais de 64 mil resultados.
- As tabelas e visualizações SQL do Databricks agora oferecem suporte a BigInt, decimais de 38 bits e caracteres não UTF-8. Para números, a configuração padrão agora é a precisão de dígito definida pelo usuário.
- O preenchimento automático agora sugere junções que foram frequentemente utilizadas no passado para tabelas do Unity Catalog, baseadas em dados de linhagem do Unity Catalog nas versões 12.0 e superiores do Databricks Runtime.
Novo recurso:
- Retornar texto gerado por um LLM (modelo de linguagem grande) selecionado, considerando o prompt com ai_generate_text. Essa função só está disponível como versão prévia pública no Databricks SQL Pro e no Serverless. Para participar da visualização pública, preencha e envie o formulário de registro de Visualização Pública do AI Functions.
13 de abril de 2023
Novo recurso:
- O
TIMESTAMP_NTZtipo representa valores que compõem os campos ano, mês, dia, hora, minuto e segundo. Todas as operações são executadas independentemente do fuso horário. ConsulteTIMESTAMP_NTZtipo.
Aprimoramentos:
- Agora, os usuários podem enviar resultados formatados em alertas usando a
QUERY_RESULT_TABLEmarca em uma mensagem de alertas personalizada. - Agora os usuários podem visualizar o tamanho dos dados do arquivo para tabelas do Unity Catalog no Explorador de Catálogos.
6 de abril de 2023
Databricks SQL Versão 2023.20 Disponível
Cronograma de Implementação
- Lançamento prévio para 2023.20: de 15 a 23 de março de 2023
- Distribuição atual para 2023.20: entre 27 de março de 2023 e 3 de abril de 2023
Alterações em 2023.20
- A evolução do esquema delta lake dá suporte à especificação de colunas de origem em instruções de mesclagem.
- Remova todos os elementos NULL de uma matriz usando array_compact.
- Para acrescentar elementos a uma matriz, use array_append.
- Para anonimizar valores de cadeia de caracteres confidenciais, use a função máscara.
- As condições de erro comuns agora retornam SQLSTATE.
- Invoque funções geradoras de valor de tabela na cláusula regular
FROMde uma consulta. - Use as funções
from_protobufeto_protobufpara trocar dados entre tipos binários e struct. Confira Ler e gravar buffers de protocolo. - Consistência aprimorada para o comportamento de confirmação Delta para transações vazias relacionadas a comandos
update,deleteemerge. - Alteração de comportamento
- O recurso de alias de coluna lateral introduz alterações de comportamento durante a resolução de nomes. Veja as alterações de comportamento.
Atualizações da interface do usuário
Aprimoramentos:
- O Gerenciador de Catálogos agora dá suporte à exclusão do metastore do Hive.
- A mensagem para o estado inicial do editor de visualização foi alterada de colunas necessárias ausentes para Sem Dados.
3 de abril de 2023
Novo recurso:
- A página Criar ou modificar a tabela da página de upload de arquivo agora dá suporte a uploads de arquivo JSON. Para obter mais informações, consulte Criar ou modificar uma tabela usando o upload de arquivo.
30 de março de 2023
Aprimoramentos:
- Na página de monitoramento do warehouse, agora você pode exibir o histórico de consultas para o intervalo de tempo selecionado, juntamente com seus gráficos de dimensionamento. Você também pode exibir consultas em execução e enfileiradas, sessões SQL ativas, o status do warehouse e a contagem de clusters atual. Confira Monitorar um SQL warehouse.
- O agrupamento de mapas agora está desativado por padrão em mapas com marcadores.
- Dicas de ferramentas para truncamento de visualização e limites de renderização foram adicionadas.
Correções:
- Os gráficos agora respeitam a ordem original quando a classificação é desabilitada para os valores do eixo e o gráfico tem o grupo por coluna.
23 de março de 2023
Aprimoramentos:
- As visualizações agora dão suporte à agregação de tempo por semana.
-
Totalagora calcula todos os dados além das 100 por 100 células até 64k resultados nas tabelas dinâmicas dos notebooks. - Agora os usuários podem formatar valores de célula na nova tabela dinâmica de cadernos.
- A linhagem de arquivo, consulta e repositório de recursos está disponível.
16 de março de 2023
Aperfeiçoamento:
- Suporte para a sintaxe
GROUP BY ALL.
9 de março de 2023
Novo recurso:
- A API de Execução da Instrução SQL do Databricks agora está disponível na Versão Prévia Pública. A Execução de Instruções fornece pontos de extremidade que estão executando instruções SQL em um armazém SQL Databricks. Ele também pode verificar o status, buscar resultados e cancelar uma instrução SQL em execução.
Aperfeiçoamento:
- O console de administração do SQL foi combinado com as configurações gerais de administrador para criar uma experiência unificada para usuários administradores. Todas as configurações de administrador do SQL agora são acessadas no console de administração.
- Os destinos de alerta agora são chamados de destinos de notificação.
Correções:
- As tabelas não exibem mais duas barras de rolagem.
- Os títulos de widget em branco não são mais substituídos nos dashboards.
02 de março de 2023
Correção:
- Agora você pode usar URLs relativas em tabelas para acessar dashboards.
23 de fevereiro de 2023
Aperfeiçoamento:
-
TINYINTagora é suportado nas tabelas de resultados dos notebooks.
Correção:
- Correção de um bug em que rolar no modal de criação de filtro de painel causava um erro.
16 de fevereiro de 2023
Aprimoramentos:
- Os rótulos de dados em gráficos agora mostram mais caracteres para evitar o truncamento das descrições.
- O preenchimento automático agora reconhece
range()e as funções UDFcreatedo Python. - O preenchimento automático agora evita iniciar trechos de código em decimais e em comentários de código.
Correções:
- Agora os usuários podem ampliar os mapas.
- Em blocos de anotações, as cores agora são atribuídas corretamente aos gráficos.
2 de fevereiro de 2023
Aprimoramentos:
- Suporte para
DESCRIBE DETAILSo editor. - Aprimorada a velocidade de carregamento do visualizador de esquemas.
- Agora você pode exibir uma lista de possíveis colunas no painel lateral de um
SELECT *.
26 de janeiro de 2023
Aperfeiçoamento:
- As mensagens de erro da consulta agora incluem links para o tópico de documentação relacionado que descreve o erro.
19 de janeiro de 2023
Aprimoramentos:
- Agora você pode encontrar um painel What's New que realça os principais aprimoramentos. Você pode abrir e fechar este painel clicando no ícone de presente.
- Os administradores agora podem alterar a propriedade dos sql warehouses.
- Agora você pode filtrar várias visualizações em um painel clicando em Adicionar>Filtro e selecionando a consulta e as colunas para filtragem.
12 de janeiro de 2023
Aprimoramentos:
- Os títulos do widget de visualização nos painéis agora são formatados como nome de visualização – nome da consulta por padrão.
- Foram adicionadas funções geoespaciais H3 à referência do painel integrado.
- Referências em linha para sintaxe SQL como
CREATE TABLEeOVERforam adicionadas.
Correções:
- Opções de ordenação e inversão agora estão disponíveis quando a escala do eixo X é definida como automática.
- Mapas de calor e tabelas dinâmicas agora são adaptáveis a determinados casos especiais.
- As marcas de escala do eixo Y categóricas agora são classificadas por padrão.
- Os rascunhos de consulta não são mais perdidos depois de fazer uma atualização do navegador.