O que é o relatório Devin Activity?
O relatório Devin Activity mostra uso de sessões, atividade de pull requests, saúde das sessões e distribuição do trabalho da organização Devin conectada. Abra-o em DevEx > Devin Activity.
Use-o para entender a adoção e os tipos de trabalho delegados ao Devin. Contagens de atividade, isoladamente, não comprovam produtividade ou qualidade de código.
Antes de começar
Conecte o Devin em Settings > Integrations e aguarde a sincronização inicial. Se nenhuma organização estiver conectada ou a sincronização ainda estiver em andamento, o relatório direcionará você para a configuração da integração.
Os dados disponíveis e os nomes dos players dependem das sessões sincronizadas e do mapeamento de identidades. Sessões sem player associado podem contribuir para os totais gerais sem aparecer na tabela de Players.
Filtros e gráficos
Use Date e Players para selecionar o período e os atores a analisar. A visibilidade também segue suas permissões no workspace. Usuários com permissão para visualizar Settings podem abrir Edit Integration pelo relatório.
O filtro de data utiliza a data de criação das sessões. As métricas de PR descrevem os registros associados a essas sessões, incluindo seu estado sincronizado; não são contagens filtradas pela data de criação ou merge dos PRs.
Selecione um card de Overview ou PR Flow para atualizar o gráfico relacionado. Use os controles disponíveis para alterar a visualização ou o agrupamento temporal.
Overview
- Active Users: identidades distintas de usuários ou service users associadas às sessões do período. Pode incluir atores não humanos.
- Sessions: quantidade de sessões registradas.
- PRs by Devin: registros de PR associados às sessões selecionadas.
- PRs Merged: registros de PR associados cujo estado sincronizado é merged.
- Messages per Session: total de mensagens de usuários e do Devin dividido pela quantidade de sessões.
- Devin Messages: mensagens registradas como enviadas pelo Devin, excluindo as mensagens de usuários.
Selecionar Sessions mostra a distribuição de sessões por origem: Webapp, Slack, Linear, API, Automation e Other.
PR Flow
- PRs Authorized by Devin: a mesma contagem de PRs associados utilizada em PRs by Devin, em Overview.
- Authorized PRs Merged: a mesma contagem de PRs com merge utilizada em PRs Merged, em Overview.
- Sessions That Shipped a PR: percentual das sessões selecionadas com pelo menos um PR associado, independentemente do estado.
Os rótulos “Authorized” não representam uma etapa separada de aprovação. Uma sessão que gerou um PR não necessariamente produziu um PR com merge. Uma sessão pode ter mais de um registro de PR.
Session Health
- Session Size: distribuição dos tamanhos registrados entre sessões com um valor de tamanho.
- Session Outcome: distribuição de todas as sessões selecionadas entre Finished, Waiting for user, Suspended by inactivity, Out of quota/credits, Error e Other.
- Devin Mode: distribuição dos modos registrados entre sessões com um valor de modo.
Os resultados são derivados do status e do detalhe de status sincronizados. Finished não significa necessariamente que houve merge de um PR. Valores ausentes de tamanho ou modo são excluídos das respectivas distribuições.
Work Mix
- Categories: distribuição entre sessões com uma categoria registrada.
- Languages: percentual de todas as sessões selecionadas associado a cada linguagem.
- Tools & Frameworks: percentual de todas as sessões selecionadas associado a cada ferramenta ou framework.
- Playbooks & Automations: percentuais de sessões com playbook, automação ou sessão pai (sessões filhas).
Linguagens, ferramentas e atributos de automação podem se sobrepor em uma sessão; por isso, os percentuais não precisam somar 100%. Classificações ausentes também podem deixar sessões sem representação em uma distribuição.
Use View all, quando disponível, para abrir a distribuição completa.
Tabela de Players
A tabela mostra atores com players associados e sessões registradas:
- Active Days: datas distintas em que suas sessões foram criadas.
- Sessions: quantidade de sessões.
- PRs Shipped: quantidade de registros de PR associados, não apenas PRs com merge.
- Merge Rate: registros de PR com merge divididos por todos os registros de PR associados.
- Avg Msgs/Session: média de mensagens de usuários e do Devin por sessão.
- Top Category e Top Language: categoria e linguagem registradas com maior frequência.
Use Search Players, os cabeçalhos ordenáveis e Category: All para explorar a tabela. O seletor de categoria filtra a tabela, não as outras seções do relatório.
Linhas destacadas com API identificam atores não humanos mapeados, como service users e automações. Sua atividade permanece incluída nos totais do relatório. Atores sem player associado não aparecem na tabela; seus totais podem, portanto, diferir de Overview.
Como interpretar o relatório
Compare volume de sessões, resultados e atividade de PRs em conjunto. Mais mensagens podem representar uma interação mais longa, não uma entrega melhor, e um PR registrado não comprova que o trabalho foi aceito ou chegou à produção.
Analise Devin Activity junto com métricas de entrega e qualidade, considerando as datas de criação das sessões, os estados dos PRs e a cobertura do mapeamento de identidades.