Visão geral dos Relatórios

Artigo
10/07/2024

Este artigo detalha as métricas que aparecem em cada aplicativo do painel.

Para ver as etapas sobre como configurar os relatórios do painel e começar a ver as métricas de desempenho, consulte nosso Guia de Início Rápido: configurar os Relatórios do Power BI.

Painel Sinais

O Painel Sinais é um Relatório do Power BI usado para entender e avaliar o volume e a qualidade dos dados de entrada (ou seja, os sinais), pois os dados são fundamentais para criar recomendações relevantes.

A partir de um exame mais detalhado dos dados de entrada, é possível entender melhor se eles precisam ser corrigidos ou modificados antes de tentar novamente a modelagem e comparar os resultados.

![NOTE:]

Neste painel, os sinais pertencem a dados de interações. Para simplificar, este documento pode se referir a sinais de interação como compras.

Terminologia

Dentro do painel, alguns dos dados são agrupados por cesta ou por usuário.

Veja uma explicação sobre a diferença entre os dois:

Terminologia	Descrição
Por Cesta	Uma Cesta representa um agrupamento de produtos e é comumente identificado como "carrinho", "sessão" ou "interação" do comprador. No esquema de interação, Por Cesta == By InteractionGroupingId.
Por Usuário	O agrupamento por usuário mostra em média quantos itens um usuário possui e quantos usuários interagiram com um determinado item. No esquema de interação, By User == By UserId.

Para obter mais informações, consulte a documentação da entidade dos dados de interação..

Termos-chave

Há também alguns termos-chave importantes para entender o painel. Esses termos são explicados na tabela abaixo. Uma interação pode ter várias origens, como compras, visualizações ou seleção.

Terminologia	Descrição
Informativo	Um ponto de dados que fornece informações úteis para modelagem.
Cesta	As cestas representam o carrinho de compra, a sessão ou a interação. Ela representa um grupo de itens.
Item semente	Um item com que um usuário interage ou que ele seleciona.
Candidato	Um item que foi recomendado a um usuário.
Quantidade de itens recomendados	Total de itens recomendados comprados.
Sobrepor	Número de vezes que o item recomendado foi comprado junto com o item semente
Probabilidade de o item recomendado ser comprado, considerando o item semente	Probabilidade de compra do item recomendado, considerando que o item semente já foi comprado
Probabilidade de o item semente ser comprado, considerando o item recomendado	Probabilidade de compra do item semente, considerando que o item recomendado já foi comprado
Sinais	Interações com o cliente. Uma única linha no arquivo de interações.
Dados de Exemplo	Os dados usados para a modelagem dos itens.

Guias

O painel de sinais possui sete guias: Visão geral, Análise Colaborativa, Usuários, Cestas, Itens, Itens Populares e Análise de Associações Diretas. Cada uma dessas guias será explicada na tabela abaixo.

Nome da Guia	Descrição	Elemento visual
Visão geral	A guia de visão geral mostra quantos usuários, itens, cestas e linhas estão nos dados. Os dados são codificados por cores para mostrar como os sinais são formativos. Idealmente, os valores são verdes, indicando que os dados são adequados para o Recomendações Inteligentes. Caso contrário, os valores na cor laranja indicam que os dados estão no limite, e a cor vermelha significa que não há dados suficientes para essa estatística. Quando o painel apresenta mais dados em laranja e vermelho, é recomendável avaliar a vantagem de trazer os dados para produção e verificar se eles estão corretos.
Análise Colaborativa	A guia Análise Colaborativa mostra itens com base em itens agrupados por cesta ou por usuário. Os itens agrupados por cesta constituem o carrinho atual do comprador. Nesta seção, é possível entender o nível informativo das suas cestas, ou seja, se elas são úteis para a modelagem. Há também informações sobre a quantidade de itens na cesta, que é o tamanho do carrinho do comprador, o número médio de cestas por item e o nível informativo dos itens. Os itens agrupados por usuários mostram o nível informativo dos usuários, dos itens e quantos itens um usuário possui.
Usuários	A guia de usuários mostra o número de usuários e o número de usuários novos e recorrentes ao longo do tempo. Além disso, o relatório mostra o número médio de cestas e itens que um usuário possui.
Cestas	A guia de cestas mostra o número de cestas ao longo do tempo e, em média, quantos itens cada uma contém.
Itens	A guia de itens mostra informações sobre todos os itens do catálogo. Você pode ver como o número de itens mudou ao longo do tempo, além de informações sobre quantos usuários interagiram com um item.
Itens populares	A guia de itens populares destaca quais itens tiveram mais interação e o número de cestas ao longo do tempo. Para uma experiência significativa, tenha um catálogo mínimo com títulos na sua entrada para as RI.
Análise de Associações Diretas	Todas as guias anteriores mostram dados agregados sobre os sinais. Na guia Análise de Associações Diretas, os dados são baseados em um item semente específico ou em um item que um usuário pode selecionar. Essas informações são úteis para os modelos da Próxima Melhor Ação, pois você descobre quais itens são mais associados juntos. Saiba como usar esta ferramenta na seção abaixo.

Como usar a Ferramenta de Análise de Associações Diretas

Para ver itens relacionados a um produto específico, selecione um item semente na lista à esquerda. Em seguida, os seguintes dados serão preenchidos no relatório:

Número de vezes que o item recomendado foi comprado
Número de vezes que o item recomendado foi comprado junto com o item semente
Probabilidade de o item recomendado ter sido comprado, considerando que o item semente já foi comprado
Probabilidade de o item semente ter sido comprado, considerando que o item recomendado já foi comprado

Direct Associations Analysis Tab Para uma experiência significativa, tenha um catálogo mínimo com títulos na sua entrada para IR.

Painel do Recomendações Inteligentes

Visão geral

O Painel do Recomendações Inteligentes fornece estatísticas que ajudam a avaliar o desempenho do modelo, determinando se os itens relevantes estão aparecendo no topo da lista.

Guias

Nome da Guia	Descrição	Image
Resumo do Conjunto de Dados de Interações	Na guia Resumo do Conjunto de Dados de Interações, há informações sobre os usuários, itens e contagem de linhas dos dados. No Painel das RI, "Usuários" são, na verdade, "Cestas" representadas pelo InteractionGroupingId. Esse modelo usa o ItemModel com o InteractionGroupingId e, portanto, não usa o UserId. A contagem de usuários mostra quantos deles estão nos dados completos e de exemplo, onde os dados de exemplo são aqueles usados na modelagem do item. A contagem de itens indica quantos itens estão no conjunto de dados completo e de exemplo. Por fim, a contagem de linhas mostra o número de linhas, que representa o número de sinais contidos nos conjuntos de dados completos e de exemplo.
Cobertura de PAL	A guia Cobertura de PAL avalia o modelo de "As pessoas também gostaram" para mostrar a quantidade de dados de interações que podem ser recomendados pelo serviço. Uma porcentagem maior indica que mais itens sementes podem ser recomendado em As pessoas também gostaram.
Estatísticas de Sugestões	Na guia Estatísticas de Sugestões, há dados que ajudam a avaliar o desempenho do modelo Sugestões. Há estatísticas como recall de sugestões, sugestões estimadas 1 – MPR, MRR de sugestões e proporção de destinos no topo da lista, que são descritas mais abaixo na seção de métricas principais. Para o modelo Sugestões, o serviço escolhe amostras de usuários e, para cada um deles, deixa um dos itens comprados e o rotula como destino. O serviço então modela o usuário como se ele não tivesse comprado aquele item, chama as Sugestões para o usuário e verifica se o item que foi desconsiderado foi recomendado. A classificação desse item na lista de recomendações do usuário é usada no cálculo das métricas.
Estatísticas de PAL	A guia Estatísticas de PAL é usada para avaliar o modelo As pessoas também gostaram. Essa guia inclui todas as métricas da guia Estatísticas de Sugestões, que são descritas na seção abaixo. O serviço mostra apenas as compras de pares de itens, chama o modelo PAL em um deles e verifica se o segundo foi recomendado.

Principais Métricas

Nas guias mencionadas acima, você encontra algumas métricas importantes. Essas métricas são explicadas com mais detalhes na tabela abaixo.

Métrica	Definição	Elemento visual
Cobertura de PAL	A porcentagem da interação indica que o serviço pode fornecer recomendações para o modelo As pessoas também gostaram. Uma porcentagem maior indica que mais itens sementes podem ser recomendado em As pessoas também gostaram.
Recall entre os K itens principais	A fração de itens relevantes que apareceram nos K itens principais da lista. Um número maior indica que uma porcentagem mais alta estava nos K itens principais da lista. Os resultados por usuário são binários. O 0 indica que o item não está entre os K itens principais analisados, e 1 indica que ele está. O recall é calculado com todos os usuários do serviço da amostra. Por exemplo, se a amostra do serviço tiver 1.000 usuários e, para 500 deles, o item de destino aparecer nos 10 principais resultados, o Recall em 10 será de 0,5.
1 - MPR	MPR mostra o percentil médio em que o item aparece na lista. Por exemplo, 1 - MPR de 80% significa que, em média, a recomendação de destino ficou entre os 20% dos principais resultados. O painel é mostrado em 1 - MPR, ou seja, quanto mais alto melhor. No cálculo, há um limite de 1.000 itens, portanto, o resultado precisa estar entre os 1.000 itens principais.
MRR (Classificação Recíproca Média)	A recíproca das classificações dos itens relevantes na lista. Uma classificação recíproca maior significa que os itens mais relevantes aparecem no topo da lista.
Proporção de destinos na parte superior da lista	A fração de itens relevantes que apareceram entre os principais 1.000 itens da lista. Uma proporção maior significa que os itens mais relevantes estão aparecendo para o usuário na parte superior da lista.