Relatório de amostra de visualização agregada de conjuntos de testes manuais
Serviços de DevOps do Azure | Azure DevOps Server 2022 | Azure DevOps Server 2020
Você pode relatar o estado de execução de um ou mais Test Suites. O relatório criado usando as informações deste artigo é semelhante à imagem a seguir.
Como mostrado na imagem a seguir, os conjuntos de testes podem ser organizados dentro de uma organização hierárquica. Como mostrado, existem três suítes de teste com os mesmos nomes sob duas suítes de teste rotuladas Austrália e Ásia. Este artigo descreve como agregar dados para um nível específico do conjunto de testes.
Importante
A integração do Power BI e o acesso ao feed OData do Serviço de Análise estão geralmente disponíveis para os Serviços de DevOps do Azure e o Azure DevOps Server 2020 e versões posteriores. As consultas de exemplo fornecidas neste artigo são válidas apenas no Azure DevOps Server 2020 e versões posteriores e dependem da versão v3.0-preview ou posterior. Nós encorajamos você a usar essas consultas e nos fornecer feedback.
Pré-requisitos
- Acesso: Ser membro de um projeto com pelo menos acesso Básico .
- Permissões: por predefinição, os membros do projeto têm permissão para consultar o Analytics e criar vistas.
- Para obter mais informações sobre outros pré-requisitos relacionados com a ativação de serviços e funcionalidades e atividades gerais de monitorização de dados, consulte Permissões e pré-requisitos para aceder ao Analytics.
Nota
Este artigo pressupõe que você leia Visão geral de relatórios de exemplo usando consultas OData e tenha uma compreensão básica do Power BI.
Para que o relatório gere dados úteis, a equipe deve realizar as seguintes atividades para gerenciar planos de teste:
Defina planos de teste, conjuntos de testes e casos de teste. Especifique o seu estado. Para que um conjunto de testes seja executado, ele deve estar no estado Em andamento. Para que um caso de teste seja executado, ele deve estar no estado Pronto. Para obter detalhes, consulte Criar planos de teste e conjuntos de testes e Criar casos de teste manuais.
Execute testes manuais e verifique os resultados. Marque os resultados de cada etapa de validação no caso de teste como aprovados ou reprovados. Para obter detalhes, consulte Executar testes manuais.
Nota
Os testadores devem marcar uma etapa de teste com um status se for uma etapa de teste de validação. O resultado geral de um teste reflete o status de todas as etapas de teste que foram marcadas. Portanto, o teste terá um status de reprovado se qualquer etapa de teste for marcada como reprovada ou não marcada.
Consultas de amostra
Você pode usar as seguintes consultas do conjunto de entidades para criar relatórios agregados do conjunto de TestPoints
testes.
Nota
Para determinar as propriedades disponíveis para fins de filtro ou relatório, consulte Referência de metadados para Análise de Planos de Teste. Você pode filtrar suas consultas ou retornar propriedades usando qualquer um dos Property
valores em um EntityType
ou NavigationPropertyBinding Path
valores disponíveis com um EntitySet
. Cada EntitySet
um corresponde a um EntityType
arquivo . Para obter mais informações sobre o tipo de dados de cada valor, revise os metadados fornecidos para o .EntityType
Copie e cole a seguinte consulta do Power BI diretamente na janela Obter Consulta em Branco de Dados>. Para obter mais informações, consulte Visão geral de relatórios de exemplo usando consultas OData.
let
Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v3.0-preview/TestPoints?"
&"$apply=filter((TestSuite/TestPlanTitle eq '{testPlanTitle}' and TestSuite/IdLevel3 ne null))"
&"/groupby("
&"(TestSuite/TitleLevel3),"
&"aggregate("
&"$count as TotalCount,"
&"cast(LastResultOutcome eq 'Passed', Edm.Int32) with sum as PassedCount,"
&"cast(LastResultOutcome eq 'Failed', Edm.Int32) with sum as FailedCount,"
&"cast(LastResultOutcome eq 'None', Edm.Int32) with sum as NotRunCount,"
&"cast(LastResultOutcome ne 'None', Edm.Int32) with sum as RunCount"
&")"
&")"
&"/compute("
&"RunCount mul 100 div TotalCount as RunPercentage,"
&"NotRunCount mul 100 div TotalCount as NotRunPercentage,"
&"iif(TotalCount gt NotRunCount, PassedCount mul 100 div RunCount,0) as PassedPercentage,"
&"iif(TotalCount gt NotRunCount, FailedCount mul 100 div RunCount,0) as FailedPercentage"
&")"
&"&$orderby=RunPercentage desc", null, [Implementation="2.0"])
in
Source
Cadeias de caracteres de substituição e detalhamento de consulta
Substitua as seguintes cadeias de caracteres por seus valores. Não inclua parênteses com a {} sua substituição. Por exemplo, se o nome da sua organização for "Fabrikam", substitua {organization}
por Fabrikam
, não {Fabrikam}
.
{organization}
- Nome da sua organização{project}
- O nome do seu projeto de equipe, ou omitir "/{project}" completamente, para uma consulta entre projetos{testPlanTitle}
- Título do plano de teste cujos dados você deseja retornar.
Detalhamento da consulta
A tabela a seguir descreve cada parte da consulta.
Parte da consulta
Descrição
filter((TestSuite/TestPlanTitle eq '{testPlanTitle}' and TestSuite/IdLevel3 ne null))
Retornar dados apenas para o plano de teste selecionado. Também retorne os dados para suítes de teste de nível 3 em diante. Você pode adicionar vários planos com uma cláusula como filter((TestSuite/TestPlanTitle eq '{testPlanTitle1}' or TestSuite/TestPlanTitle eq '{testPlanTitle2}' and TestSuite/IdLevel3 ne null))
. Você também pode aplicar quaisquer outros filtros relacionados a suítes de teste, configurações de teste aqui.
/groupby((TestSuite/TitleLevel3),
As suítes de teste para agrupar. Se você estiver interessado em obter um relatório para todos os conjuntos de testes distintos situados no nível 3 da hierarquia do conjunto de testes, você pode especificar esta parte de consulta. Você pode alterar o número de nível de 1 a 14. Se você deseja separar suítes de teste com o mesmo nome, você pode usar /groupby((TestSuite/TitleLevel3, TestSuite/IdLevel3),
para garantir que, mesmo se você tiver duas suítes de teste com o mesmo nome, elas serão mostradas como duas entradas diferentes, pois teriam duas IDs diferentes.
/aggregate($count as TotalCount,
Agregar dados nos pontos de teste filtrados com a contagem como TotalCount
.
cast(LastResultOutcome eq 'Passed', Edm.Int32) with sum as Passed,
Ao agregar, os pontos de teste type-cast com o resultado de execução mais recente 'Passado' para 1 e resumem-nos como métrica 'Passed
'.
/compute(Executed mul 100 div TotalCount as ExecPct
Forneça uma métrica computada ExecPct igual a (Pontos de teste executados / Contagem total * 100).
(Opcional) Renomear consulta
Você pode renomear o rótulo de consulta padrão, Query1, para algo mais significativo. Basta inserir um novo nome no painel Configurações de consulta.
Expandir colunas no Power Query Editor
Antes de criar o relatório, você precisa expandir a TestSuite
coluna para nivelar os registros em campos específicos. Para saber como, consulte Transformar dados do Google Analytics para gerar relatórios do Power BI.
No Power BI, execute as etapas a seguir.
Quando terminar, você pode optar por renomear colunas.
Expandir
TestSuite
Escolha o botão expandir.
Selecione os campos a serem nivelados.
A tabela agora contém o campo de entidade de
TestSuite.IdLevel3
eTestSuite.TitleLevel3
.
Clique com o botão direito do mouse em um cabeçalho de coluna e selecione Renomear...
Alterar o tipo de dados da coluna
No Editor do Power Query, selecione todas as colunas que contêm números, como TotalCount, RunCount e Passed, selecione Tipo de Dados no menu Transformar e escolha Número Inteiro. Para obter mais informações sobre como alterar o tipo de dados, consulte Transformar dados do Analytics para gerar relatórios do Power BI, Transformar um tipo de dados de coluna.
(Opcional) Renomear campos de coluna
Você pode renomear campos de coluna. Por exemplo, você pode renomear a coluna NotApplicable
para Not Applicable
, ou TotalCount
para Total Count
. Para saber como, consulte Renomear campos de coluna.
Feche a consulta e aplique as alterações
Depois de concluir todas as suas transformações de dados, escolha Fechar & Aplicar no menu Início para salvar a consulta e retornar à guia Relatório no Power BI.
Criar o relatório Tabela
- Em Visualizações, escolha Tabela.
- Arraste e solte
TestSuite.TitleLevel3
,NotRunCount
,RunCount
,PassedCount
, emTotalCount
Colunas. - Selecione Soma como agregação para Contagem.
Seu relatório deve ser semelhante à imagem a seguir.