Partilhar via

Relatório de amostra de tendência de execução de teste manual

  • Artigo

Serviços de DevOps do Azure | Azure DevOps Server 2022 | Azure DevOps Server 2020

Este artigo mostra como obter o estado de execução de um ou mais Planos de Teste no Power BI. O relatório gerado é semelhante à imagem a seguir e ao gráfico de tendência de resultados do relatório de progresso.

Captura de ecrã do relatório de tendências de área empilhada de Execução do Plano de Teste do Power BI.

O relatório exibe um gráfico de tendência que resume o número e os estados de resultado dos Planos de Teste executados durante um período de tempo especificado.

  • Aprovado: Número de casos de teste aprovados.
  • Reprovado: Número de casos de teste com falha.
  • NotApplicable: Número de casos de teste
  • Bloqueado: Número de casos de teste bloqueados de execução.
  • NotExecuted: Número de casos de teste definidos, mas não executados.

Perguntas a que o relatório responde

Este relatório ajuda você a acompanhar o progresso da equipe em relação aos testes planejados de seu produto ou serviço, respondendo às seguintes perguntas:

  • Quantos testes estão concluídos?
  • Qual é o status atual dos testes aprovados, reprovados ou bloqueados?
  • Quantos testes estão passando e o que a tendência indica sobre a qualidade do software?
  • Quantos testes estão a falhar?
  • Quantos testes estão bloqueados e o que indica a tendência?

Um relatório de tendência de execução de teste saudável mostra um progresso constante nos planos de teste em execução e aprovação. Idealmente, o relatório mostra um número relativamente estável de casos de teste para um determinado plano. À medida que o ciclo de desenvolvimento progride, o número de casos de teste aprovados deve aumentar, e o número de casos de teste em outros estados deve diminuir.

Importante

A integração do Power BI e o acesso ao feed OData do Serviço de Análise estão geralmente disponíveis para os Serviços de DevOps do Azure e o Azure DevOps Server 2020 e versões posteriores. As consultas de exemplo fornecidas neste artigo são válidas apenas no Azure DevOps Server 2020 e versões posteriores e dependem da versão v3.0-preview ou posterior. Nós encorajamos você a usar essas consultas e nos fornecer feedback.

Pré-requisitos

  • Acesso: Ser membro de um projeto com pelo menos acesso Básico .
  • Permissões: por predefinição, os membros do projeto têm permissão para consultar o Analytics e criar vistas.
  • Para obter mais informações sobre outros pré-requisitos relacionados com a ativação de serviços e funcionalidades e atividades gerais de monitorização de dados, consulte Permissões e pré-requisitos para aceder ao Analytics.

Nota

Este artigo pressupõe que você leia Visão geral de relatórios de exemplo usando consultas OData e tenha uma compreensão básica do Power BI.

Para que o relatório gere dados úteis, a equipe deve realizar as seguintes atividades para gerenciar planos de teste:

  • Defina planos de teste, conjuntos de testes e casos de teste. Especifique o seu estado. Para que um conjunto de testes seja executado, ele deve estar no estado Em andamento. Para que um caso de teste seja executado, ele deve estar no estado Pronto. Para obter detalhes, consulte Criar planos de teste e conjuntos de testes e Criar casos de teste manuais.

  • Execute testes manuais e verifique os resultados. Marque os resultados de cada etapa de validação no caso de teste como aprovados ou reprovados. Para obter detalhes, consulte Executar testes manuais.

    Nota

    Os testadores devem marcar uma etapa de teste com um status se for uma etapa de teste de validação. O resultado geral de um teste reflete o status de todas as etapas de teste que foram marcadas. Portanto, o teste terá um status de reprovado se qualquer etapa de teste for marcada como reprovada ou não marcada.

Consultas de amostra

Você pode usar as seguintes consultas do conjunto de entidades para criar relatórios de tendência de execução de plano de TestPointHistorySnapshot teste diferentes, mas semelhantes.

Nota

Para determinar as propriedades disponíveis para fins de filtro ou relatório, consulte Referência de metadados para Análise de Planos de Teste. Você pode filtrar suas consultas ou retornar propriedades usando qualquer um dos Property valores em um EntityType ou NavigationPropertyBinding Path valores disponíveis com um EntitySet. Cada EntitySet um corresponde a um EntityTypearquivo . Para obter mais informações sobre o tipo de dados de cada valor, revise os metadados fornecidos para o .EntityType

Copie e cole a seguinte consulta do Power BI diretamente na janela Obter Consulta em Branco de Dados>. Para obter mais informações, consulte Visão geral de relatórios de exemplo usando consultas OData.

let 
    Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v3.0-preview/TestPointHistorySnapshot?" 
        &"$apply=filter((TestSuite/TestPlanTitle eq '{testPlanTitle}') and (DateSK ge {startDate} and DateSK le {endDate}))" 
        &"/groupby(" 
            &"(DateSK)," 
            &"aggregate(" 
                &"$count as TotalCount," 
                &"cast(ResultOutcome  eq 'Passed', Edm.Int32) with sum as Passed," 
                &"cast(ResultOutcome  eq 'Failed', Edm.Int32) with sum as Failed," 
                &"cast(ResultOutcome eq 'Blocked', Edm.Int32) with sum as Blocked," 
                &"cast(ResultOutcome eq 'NotApplicable', Edm.Int32) with sum as NotApplicable," 
                &"cast(ResultOutcome eq 'None', Edm.Int32) with sum as NotExecuted," 
                &"cast(ResultOutcome ne 'None', Edm.Int32) with sum as Executed 
            ) 
        )", null, [Implementation="2.0"]) 
in 
    Source

Cadeias de caracteres de substituição e detalhamento de consulta

Substitua as seguintes cadeias de caracteres por seus valores. Não inclua parênteses com a {} sua substituição. Por exemplo, se o nome da sua organização for "Fabrikam", substitua {organization} por Fabrikam, não {Fabrikam}.

  • {organization} - Nome da sua organização
  • {project} - O nome do seu projeto de equipe, ou omitir "/{project}" completamente, para uma consulta entre projetos
  • {testPlanTitle} - Título do seu plano de teste. Exemplo: Fabrikam test plan.
  • {startDate} e {endDate} - Intervalo de datas de interesse. Pode introduzir as datas no formato AAAAMMDD. Por exemplo, 20220815 para 15 de agosto de 2022.

Detalhamento da consulta

A tabela a seguir descreve cada parte da consulta.

Parte da consulta

Descrição

filter((TestSuite/TestPlanTitle eq '{testPlanTitle}'))

Retornar dados apenas para o plano de teste selecionado. Você pode adicionar vários planos com uma cláusula como filter((TestSuite/TestPlanTitle eq '{testPlanTitle1}' ou TestSuite/TestPlanTitle eq '{testPlanTitle2}')). Você também pode aplicar quaisquer outros filtros relacionados a conjuntos de testes e configurações de teste aqui.

and (DateSK ge {startDate} and DateSK le {endDate})

Intervalo de datas de interesse. Você pode inserir as datas no YYYYMMDD formato.

/groupby((DateSK)

Agrupe os dados em compartimentos da mesma data. Ele produz um conjunto de valores por dia em determinado intervalo de datas.

/aggregate($count as TotalCount,

Agregar dados nos pontos de teste filtrados com a contagem como TotalCount.

cast(LastResultOutcome eq 'Passed', Edm.Int32) with sum as Passed,

Ao agregar, os pontos de teste type-cast com o resultado de execução mais recente "Passado" para 1 e resumem-nos como Passed métrica.

(Opcional) Renomear consulta

Você pode renomear o rótulo de consulta padrão, Query1, para algo mais significativo. Basta inserir um novo nome no painel Configurações de consulta.

Captura de ecrã das opções do menu de consulta do Power BI, consulta de mudança de nome.

Alterar o tipo de dados da coluna

No Editor do Power Query, selecione a TotalCount coluna e todas as outras colunas e, em seguida, selecione Tipo de Dados no menu Transformar e escolha Número Inteiro. Para obter mais informações sobre como alterar o tipo de dados, consulte Transformar dados do Analytics para gerar relatórios do Power BI, Transformar um tipo de dados de coluna.

(Opcional) Renomear campos de coluna

Você pode renomear campos de coluna. Por exemplo, você pode renomear a coluna NotApplicable para Not Applicable, ou TotalCount para Total Count. Para saber como, consulte Renomear campos de coluna.

Feche a consulta e aplique as alterações

Depois de concluir todas as suas transformações de dados, escolha Fechar & Aplicar no menu Início para salvar a consulta e retornar à guia Relatório no Power BI.

Captura de ecrã da opção Fechar e Aplicar do Power Query Editor.

Criar o relatório de gráfico de área empilhada

  1. No Power BI, em Visualizações, escolha o relatório de gráfico de área empilhada. Captura de tela das seleções de campos de visualização para o relatório de execução de tendências de execução do plano de teste.

  2. Arraste e solte DateSK no eixo X.

  3. Arraste e solte Passed, Failed, Blocked, NotApplicable e NotExecuted no eixo Y.

Seu relatório deve ser semelhante à imagem a seguir.

Captura de ecrã do relatório de tendência de área empilhada de Execução do Plano de Teste de Exemplo do Power BI.