Medir a utilização e o impacto
Nesta página
Se não consegue medir, não consegue gerir
Já implementou o ChatGPT Enterprise, formou os seus embaixadores e lançou o seu programa de adoção. Agora, precisa de provar que funciona. As métricas desempenham duas funções distintas que as pessoas confundem frequentemente: orientam as operações diárias e justificam decisões orçamentais. Reveja o primeiro conjunto semanalmente para fazer correções; reveja o segundo trimestralmente para construir o seu caso. Um sistema de medição desenhado apenas para a segunda função produz números lisonjeiros, mas inúteis.
O que a Consola de Administração já fornece
Nos planos Enterprise e Edu, a secção «Utilização» da Consola de Administração fornece métricas de adoção. Proprietários, administradores e leitores de estatísticas podem aceder a estes dados. Pode avaliar a saúde do seu espaço de trabalho com três valores-chave que abrangem o ChatGPT, o Codex e o Work: lugares atribuídos (excluindo convites pendentes), lugares ativados (utilizadores que enviaram pelo menos uma mensagem) e utilizadores ativos semanais (aqueles que enviaram pelo menos uma mensagem durante a última semana completa).
As vistas de panorama rastreiam utilizadores ativos únicos, volume de mensagens e utilização de GPTs, projetos e competências ao longo do tempo. No caso das competências, os dados são classificados por número de invocações. Se o seu diretório sincronizar via SCIM, pode desagregar todos estes dados por grupo. Utilize grupos que correspondam a equipas reais e as perceções tornar-se-ão imediatas. A secção «Insights» adiciona comparações e inquéritos aos utilizadores, enquanto uma exportação por utilizador alimenta as suas próprias ferramentas.
Defina os seus próprios objetivos em vez de adotar benchmarks genéricos. Uma taxa de ativação que estagna após o primeiro mês indica problemas com as suas contas ou comunicação, e não com a ferramenta em si. Uma lacuna persistente entre lugares ativados e utilizadores ativos semanais sinaliza que a utilização não está a consolidar-se.
O que nenhuma consola mede
As métricas de impacto exigem inquéritos ou medições suplementares, razão pela qual as equipas as negligenciam frequentemente. Calcule o tempo poupado por tarefa através de autorrelatos ou comparações antes e depois em processos documentados. Avalie a qualidade percecionada com uma única pergunta: Os entregáveis produzidos com o ChatGPT são julgados como melhores, equivalentes ou piores? Rastrear casos de uso adotados permanentemente por departamento vale mais do que uma lista teórica. Finalmente, a reutilização de assistentes partilhados determina o seu valor: um assistente usado uma vez não produziu nada; um usado diariamente é um ativo.
Para a satisfação, faça a pergunta padrão interna de NPS: «Numa escala de 0 a 10, qual a probabilidade de recomendar o ChatGPT a um colega?» e realize um inquérito trimestral de cinco perguntas que abranja satisfação, bloqueios e sugestões. Os embaixadores fornecem feedback qualitativo contínuo; este input chega antes dos números e explica o que os dados apenas confirmam.
Construa o seu painel e cadência
Transforme estes dados num painel mensal utilizando o Notion, o Google Sheets ou a sua ferramenta de BI. Organize-o em cinco blocos: uma vista global mostrando lugares ativados, utilizadores ativos semanais e uma tendência de três meses; uma vista a nível de grupo com codificação de cores e limiares que você define; os dez principais casos de uso com tempo poupado estimado; a pontuação NPS com comentários literais; e uma estimativa de tempo poupado monetizado versus custos de licença.
Ajuste a cadência ao seu público. Semanalmente, números brutos são suficientes para a gestão operacional entre embaixadores e o CIO. Mensalmente, o painel completo alimenta o comité de pilotagem. Trimestralmente, uma revisão estratégica com ROI e recomendações vai para o comité executivo. Servir o mesmo documento a todos os três é a melhor forma de não envolver nenhum deles.
Calcule o tempo poupado com honestidade
Esta é a métrica que a gestão mais exige e a mais difícil de estabelecer. O autorrelato pergunta aos utilizadores ativos quanto tempo estimam poupar por semana: simples, mas subjetivo. A análise antes e depois mede o tempo de execução para três a cinco processos-chave pré e pós-adoção: rigoroso, mas limitado a alguns casos. A aproximação aplica um tempo médio poupado por conversa — digamos, dez minutos — multiplicado pelo volume: rudimentar, mas escalável. A abordagem honesta combina os três: o autorrelato mostra a tendência, o antes e depois valida-a em exemplos concretos e a aproximação fornece a ordem de grandeza.
Sinais que exigem ação
Quatro sinais exigem ação, com limiares que você define com base no seu contexto. Uma baixa taxa de ativação dois meses após o lançamento mostra que a sua comunicação e formação falharam, não que os colaboradores sejam resistentes. Utilizadores ativos semanais muito abaixo dos lugares ativados indicam que as pessoas experimentam a ferramenta mas não regressam: encontre o bloqueio, muitas vezes um caso de uso mal escolhido. Um grupo inteiro sem atividade sugere um gestor não convencido ou um embaixador inativo; resolva isto com uma conversa, não com um lembrete automatizado. Uma queda no NPS exige um inquérito qualitativo antes que a insatisfação se propague. Cada sinal deve desencadear uma ação corretiva no prazo de duas semanas.
A sua vez
Construa o seu painel. Escolha cinco métricas: três da Consola de Administração e duas de inquéritos. Defina um limiar de alerta e um responsável para cada uma e, em seguida, agende a sua primeira revisão mensal com os seus embaixadores.
Fontes oficiais: Workspace analytics for ChatGPT Enterprise and Edu · Managing members, workspace roles, and seats in ChatGPT Enterprise and Edu · SCIM provisioning and management (Centro de Ajuda da OpenAI)
Pontos-chave
- A Consola de Administração Enterprise e Edu rastreia lugares atribuídos, lugares ativados e utilizadores ativos semanais, desagregáveis por grupo SCIM.
- Mostra também a utilização de GPTs, projetos e competências; uma exportação por utilizador alimenta as suas próprias ferramentas.
- Tempo poupado, qualidade percecionada e NPS exigem inquéritos: nenhuma consola os mede.
- Combine autorrelatos, análise antes e depois e aproximação para calcular o tempo poupado com honestidade.
- Defina os seus próprios limiares de alerta e reaja no prazo de duas semanas.