Observação
O acesso a essa página exige autorização. Você pode tentar entrar ou alterar diretórios.
O acesso a essa página exige autorização. Você pode tentar alterar os diretórios.
[Este artigo faz parte da documentação de pré-lançamento e está sujeito a alterações.]
Use conjuntos de teste para avaliar e aprimorar como seu agente lida com cenários de resposta no mundo real. Este artigo explica como modificar o nome e as configurações de um conjunto de teste, gerenciar o perfil de usuário e as conexões usadas para autenticação, editar ou excluir casos de teste individuais e remover conjuntos ou resultados inteiros de teste. Essas etapas ajudam a garantir que as avaliações reflitam os contextos certos dos usuários e mantenham acesso seguro a fontes de conhecimento e ferramentas.
Você tem a opção de três métodos de teste, também conhecidos como classificadores, para avaliar as respostas do agente: qualidade, similaridade e correspondência de texto. Para obter mais informações sobre os diferentes métodos de teste, consulte Métodos de teste.
Editar os detalhes de um conjunto de teste
Você pode alterar os detalhes de um conjunto de teste, como qual conta ela usa para autenticação e os métodos de teste utilizados.
- Acesse a página de Avaliação do seu agente.
Selecione o conjunto de testes.
No conjunto de testes, selecione o caso de teste que você deseja editar.
Opcionalmente, mude o nome do conjunto de teste.
Adicione ou modifique os métodos de teste. Cada método de teste mede valores diferentes e requer configurações distintas. Para aprender como configurar cada método de teste, veja Escolher métodos de teste.
Método de teste Medidas Pontuação Configurações Qualidade geral Quão boa é a resposta do caso de teste com base em qualidades específicas Pontuado em uma escala de 0 a 100% None Comparar significado Quão bem o significado da resposta do caso de teste corresponde à resposta esperada Pontuado em uma escala de 0 a 100% Pontuação de aprovação, resposta esperada Uso de ferramentas Se o caso de teste utilizou os recursos esperados Aprovado/reprovado Capacidades esperadas Correspondência de palavras-chave Se o caso de teste usou todas ou algumas das palavras-chave ou frases esperadas Aprovado/reprovado Palavras-chave ou frases esperadas Similaridade de texto Quão bem o texto da resposta do caso de teste corresponde à resposta esperada Pontuado em uma escala de 0 a 100% Pontuação de aprovação, resposta esperada Correspondência exata Se a resposta do caso de teste corresponde exatamente à resposta esperada Aprovado/reprovado Resposta esperada Personalizado Rotula respostas com base nos critérios que você descreve Aprovado/reprovado Descrição do teste e descrições de rótulo Selecione Gerenciar perfil para adicionar uma conta, ou selecione o perfil atual para gerenciar conexões ou escolha um perfil diferente. Testes automatizados utilizam a autenticação da conta de teste selecionada. Se seu agente possui fontes de conhecimento ou ferramentas que exigem autenticação específica, você pode selecionar a conta apropriada para seus testes.
Observação
Quando Copilot Studio gera casos de teste ou executa uma avaliação, ele usa as credenciais de autenticação de uma conta conectada para acessar as fontes de conhecimento e as ferramentas do agente. Os casos de teste ou resultados gerados podem incluir informações sensíveis que a conta conectada pode acessar, e todos os criadores com acesso aos resultados dos testes podem visualizar estas informações.
Gerenciar perfis de usuário e conexões
Você pode rodar conjuntos de teste usando a autenticação da conta de um usuário. Esse método de autenticação permite que seu agente acesse as fontes de conhecimento e ferramentas necessárias para cumprir seus objetivos.
Você também pode usar perfis para simular experiências específicas de usuários. Por exemplo, o perfil de usuário de um diretor pode acessar fontes de conhecimento diferentes do perfil de usuário de um estagiário, e o agente retorna resultados diferentes.
Os resultados dos testes mostram qual perfil de usuário foi utilizado.
Observação
Quando Copilot Studio gera casos de teste ou executa uma avaliação, ele usa as credenciais de autenticação de uma conta conectada para acessar as fontes de conhecimento e as ferramentas do agente. Os casos de teste ou resultados gerados podem incluir informações sensíveis que a conta conectada pode acessar, e todos os criadores com acesso aos resultados dos testes podem visualizar estas informações.
As avaliações de agentes que utilizam a autenticação de usuários requerem acesso através do conector Microsoft Copilot Studio. Se seu administrador desligar essa conexão, você não pode rodar testes usando a ferramenta de avaliação. Para obter mais informações, consulte Copilot Studio conectores e grupos de dados.
Para adicionar ou alterar um perfil de usuário em um conjunto de teste:
- Abra um conjunto de testes e selecione Gerenciar perfil.
- Selecione o menu Usuário dropdown, depois:
- Selecione a conta de usuário que deseja usar, ou
- Selecione Adicionar uma conta e faça login na conta.
- Para conexões com aviso, selecione a conexão. Mude a conexão existente para uma conexão funcionando, selecione Reconectar para tentar restabelecer a conexão existente, ou selecione Criar nova conexão para tentar uma nova conexão.
Para novas conexões, insira os detalhes solicitados e selecione Conectar.
- Quando todas as conexões estiverem funcionando, selecione Salvar.
Exclua um conjunto de teste ou resultado de teste
Você pode deletar um caso de teste ou conjunto de testes que não precisa mais.
- Acesse a página de Avaliação do seu agente.
- Na seção de conjuntos de teste , exclua um conjunto de teste fazendo um dos seguintes passos:
- Selecione os três pontos (...) no cartão do conjunto de teste e depois selecione Excluir.
- Selecione o conjunto de teste para abri-lo, depois selecione os três pontos (...) no painel Configurar conjunto de teste e então selecione Excluir.
- Na seção Resultados Recentes , exclua um resultado de teste seguindo um dos seguintes passos:
- Passe o mouse sobre o resultado do teste que você quer deletar, selecione os três pontos (...) e depois selecione Excluir teste.
- Selecione o resultado do teste para abri-lo, depois selecione os três pontos (...) no painel de resumo de Avaliação e, em seguida, selecione Excluir.