Conectar-se à computação sem servidor

Esta página explica como usar e habilitar a computação sem servidor no Azure Databricks.

O que é computação sem servidor?

A computação sem servidor é um serviço gerenciado pelo Azure Databricks que permite que você se conecte rapidamente aos recursos de computação sob demanda.

Ao optar por usar a computação sem servidor, você pode executar cargas de trabalho sem provisionar recursos de computação em sua conta de nuvem. Em vez disso, o Databricks aloca e gerencia automaticamente os recursos de computação necessários. Isso acelera os tempos de inicialização e dimensionamento, minimiza o tempo ocioso e reduz a necessidade de gerenciar recursos de computação.

Muitos recursos no Azure Databricks são executados na computação sem servidor. Use as seguintes páginas para aprender a usar a computação sem servidor em diferentes recursos:

• Notebooks sem servidor
• Trabalhos sem servidor
• Armazéns SQL sem servidor
• Pipelines Declarativos do Spark Serverless Lakeflow
• Treinamento do modelo de IA do Mosaico – previsão

• Computação de GPU sem servidor (Beta)
• Solucionar problemas na computação de GPU sem servidor

Requisitos de computação sem servidor

Para acessar a computação sem servidor, seu workspace deve atender aos seguintes requisitos:

• Deve ter o Catálogo do Unity habilitado.
• Deve estar em uma região com suporte para computação sem servidor. Consulte Recursos com disponibilidade regional limitada.

• Não deve ter PCI-DSS habilitado no perfil de segurança de conformidade. Consulte PCI DSS v4.0.

Limitações da computação sem servidor

Para obter uma lista de limitações, consulte limitações de computação sem servidor.

Perguntas frequentes

• Como as versões são distribuídas?
• Como determinar qual versão sem servidor estou executando?
• Como fazer para estimar os custos sem servidor?
• Como fazer para analisar o uso de DBU para uma carga de trabalho específica?
• Há um atraso entre a execução de um trabalho ou consulta e o aparecimento dos encargos na tabela do sistema de uso faturável?
• Não habilitei a computação sem servidor para trabalhos e notebooks, por que vejo registros de cobrança para trabalhos sem servidor?
• A computação sem servidor dá suporte a repositórios privados?
• Como instalar bibliotecas para minhas tarefas de trabalho?
• Posso me conectar a fontes de dados personalizadas?
• Como funciona a rede do plano de computação sem servidor?
• Posso configurar a computação sem servidor para trabalhos com Pacotes de Ativos do Databricks?
• Como executar minha carga de trabalho sem servidor do meu computador de desenvolvimento local ou do meu aplicativo de dados?

Como as versões são distribuídas?

A computação sem servidor é um produto sem versão , o que significa que o Databricks atualiza automaticamente o runtime de computação sem servidor para dar suporte a aprimoramentos e atualizações para a plataforma. Todos os usuários recebem as mesmas atualizações, distribuídas por um curto período de tempo.

Como fazer para determinar qual versão sem servidor estou executando?

As cargas de trabalho sem servidor sempre são executadas na versão de runtime mais recente. Confira as Notas sobre a versão da versão mais recente.

Como fazer para estimar os custos da versão sem servidor?

O Databricks recomenda executar e fazer benchmark de uma carga de trabalho representativa ou específica e, em seguida, analisar a tabela do sistema de cobrança. Consulte a tabela de referência do sistema de uso faturável.

Como fazer para analisar o uso de DBU para uma carga de trabalho específica?

Para ver o custo de uma carga de trabalho específica, consulte a tabela do sistema system.billing.usage. Consulte Monitorar o custo da computação sem servidor para consultas de exemplo e baixar nosso painel de observabilidade de custos.

Há um atraso entre quando você executa um trabalho ou consulta e quando os encargos aparecem na tabela do sistema de uso faturável?

Sim, pode haver um atraso de até 24 horas entre quando você executa uma carga de trabalho e seu uso sendo refletido na tabela do sistema de uso faturável.

Não habilitei a computação sem servidor para trabalhos e notebooks, por que vejo registros de cobrança para trabalhos sem servidor?

O monitoramento de qualidade de dados e a otimização preditiva também são cobrados na SKU de trabalhos sem servidor.

A computação sem servidor não precisa ser habilitada para usar esses dois recursos.

A computação sem servidor dá suporte a repositórios privados?

Repositórios podem ser privados ou exigir autenticação. Por motivos de segurança, uma URL pré-assinada é necessária ao acessar repositórios autenticados.

Como fazer para instalar bibliotecas para minhas tarefas de trabalho?

O Databricks recomenda o uso de ambientes para instalar e gerenciar bibliotecas para seus trabalhos. Consulte Configurar o ambiente para tarefas de trabalho.

Posso me conectar a fontes de dados personalizadas?

Não, só há suporte para fontes que usam a Federação do Lakehouse. Consulte fontes de dados com suporte.

Como funciona a rede do plano de computação sem servidor?

Recursos de computação sem servidor são executados no plano de computação sem servidor, que é gerenciado pelo Azure Databricks. Para obter mais detalhes sobre a rede e a arquitetura, consulte Networking do plano de computação sem servidor.

Posso configurar a computação sem servidor para trabalhos com o Databricks Asset Bundles?

Sim, é possível usar os Databricks Asset Bundles para configurar trabalhos que usam computação sem servidor. Consulte o Trabalho que usa a computação sem servidor.

Como executar minha carga de trabalho sem servidor do meu computador de desenvolvimento local ou do meu aplicativo de dados?

O Databricks Connect permite que você se conecte ao Databricks do computador local e execute cargas de trabalho sem servidor. Confira O que é o Databricks Connect?.