Nota
O acesso a esta página requer autorização. Podes tentar iniciar sessão ou mudar de diretório.
O acesso a esta página requer autorização. Podes tentar mudar de diretório.
Este artigo fornece informações sobre como medir o impacto do Databricks Assistant em termos de adoção, engajamento e ganhos de produtividade relatados.
Requerimentos
Para medir o impacto do Databricks Assistant, você precisa de uma pesquisa interna para obter feedback subjetivo sobre o Assistente de sua equipe.
Dados vs. métricas
Você obtém dados brutos das tabelas do sistema e de uma pesquisa. Para entender o impacto do Assistente, você deve analisar e relatar dados como métricas. As métricas são valores calculados que você usa para medir aspetos ou atividades específicos relacionados ao impacto do Assistente. Este artigo também se refere a métricas como medidas.
Dicas para medir o impacto do Assistente
Para entender como sua organização está usando o Databricks Assistant, comece medindo sua adoção e envolvimento com o Databricks Assistant. Estes dados podem ser calculados a partir de tabelas do sistema.
Para visualizar a atividade da tabela do sistema para o Databricks Assistant, baixe o ficheiro do painel de eventos do Assistente no GitHub.
Depois de baixar o arquivo JSON, importe o painel para seu espaço de trabalho. Para obter instruções sobre como importar painéis, consulte Importar um arquivo de painel.
Métricas de impacto do assistente
A tabela a seguir contém medidas recomendadas de impacto do Assistente, tanto das tabelas do sistema quanto dos comentários dos usuários.
O levantamento da sua organização também o ajuda a compreender a eficácia do seu envolvimento com o Assistente. Consulte Perguntas recomendadas da pesquisa.
| Medida | Definição | Etapa | Fonte de dados |
|---|---|---|---|
| Principais utilizadores em geral | Usuários em um determinado período que interagem com mais frequência com o Assistente | Adoção | Calcule os dados do sistema Databricks Assistant da tabela com base em |
| Dados de submissões: por espaço de trabalho e total | Número de solicitações enviadas ao Assistente por espaço de trabalho e por conta | Adoção | Calcule os dados do sistema Databricks Assistant da tabela com base em |
| Usuários ativos por dia e mês | Utilizadores únicos que receberam e aceitaram mais de uma sugestão ou participaram em mais de um chat num determinado dia. | Envolvimento | Calcule os dados do sistema Databricks Assistant da tabela com base em |
| Usuários ativos por espaço de trabalho | Usuários exclusivos em um determinado espaço de trabalho que interagem com o Assistente | Envolvimento | Calcule os dados do sistema Databricks Assistant da tabela com base em |
| Principais funções usando o Databricks Assistant | Número de pessoas de cada função identificadas na sua organização que usam o Assistente | Envolvimento | Inquérito à sua organização |
| Principais tarefas para o Assistente | Tarefas mais comuns com as quais o Assistente ajuda | Envolvimento | Inquérito à sua organização |
| Com que frequência utiliza o Assistente | Frequência autorreferida de utilização do Assistente por utilizador | Envolvimento | Inquérito à sua organização |
| Principais áreas de utilização do Assistente | Áreas de uso autorrelatadas: editor SQL, cadernos ou ambos | Envolvimento | Inquérito à sua organização |
| Satisfação do usuário com a ajuda do Assistente | Satisfação autorreferida com as respostas do Assistente numa escala de 1 a 5 | Satisfação do utilizador | Inquérito à sua organização |
| Ganhos de produtividade do utilizador | Aumento auto-relatado na produtividade obtida usando o Assistente em uma escala de 1-5 | Satisfação do utilizador | Inquérito à sua organização |
| Quantidade de tempo que os usuários economizam usando o Assistente | Porcentagem autorrelatada de tempo economizado usando o Assistente para concluir tarefas | Satisfação do utilizador | Inquérito à sua organização |
Perguntas recomendadas da pesquisa
As tabelas do sistema não capturam todas as informações sobre como sua organização usa o Assistente do Databricks. Use as perguntas da pesquisa, como as abaixo, para entender como sua organização usa o Assistente.
- Qual é o seu papel? Listar funções na sua organização
- Com que frequência utiliza o Assistente?
- Por hora
- Diariamente
- Semanalmente
- Mensalmente
- Onde você usa o AI Assistant?
- Editor de SQL
- Notebooks
- Ambos
- Quais são os seus principais casos de uso para o Assistente?
- Correção de erros / solução de problemas
- Ajuda para escrever código
- Refatoração de código
- Escrevendo consultas SQL
- Redação de testes unitários
- Consultar documentação
- Quão satisfeito está com as respostas do Assistente? Escala de 1-5, Não satisfeito a Extremamente satisfeito
- Desde que usa o Assistente de IA, você diria que é mais produtivo? Escala de 1-5, muito menos produtivo a muito mais produtivo
- Quanto tempo você acredita que economiza em uma tarefa média usando o Assistente?
- 0-10%
- 10-30%
- 30-50%
- 50-70%
- Mais de 70%