Visão Geral
Dados gerais sobre a saúde e desempenho do NLU
Last updated
Dados gerais sobre a saúde e desempenho do NLU
Last updated
Nesta área, você pode ver o resumo de tudo que acontece no NLU, além de cadastrar as intenções, frases de treinamento e entidades, fazer publicações e mais.
A primeira tela é a Visão Geral. Nela, é possível visualizar um overview do NLU selecionado, com dados gerais sobre sua saúde e desempenho.
Do lado esquerdo, há um menu para informações e gerenciamento da inteligência do chatbot. Já do lado direito, você encontra dados sobre o desempenho geral do NLU.
A seguir, veja cada opção da Gestão de NLU.
O primeiro passo é escolher qual NLU você deseja ver na visão geral. Para isso, basta seguir como o exemplo do gif abaixo:
Ao lado do NLU selecionado, é possível ver seu status de treinamento. Ele pode ser:
Pronto: todos os ajustes feitos foram incorporados e estão em produção.
Em treinamento: Ocorre sempre que há uma publicação do NLU e permanece enquanto o algoritmo é atualizado com os novos dados.
Caso deseje ver detalhadamente todas as atividades realizadas no NLU, clique em Registros de atividades no canto inferior da tela de Visão Geral. Veja o exemplo:
Nesta tela, é possível visualizar e filtrar como preferir os detalhes das atividades feitas no NLU, como:
Usuário: selecione o autor que deseja;
Item: decida os itens relacionados às intenções, entidades ou base de conhecimento;
Período: escolha a data da publicação do NLU;
Visualizar apenas as alterações não publicadas;
Filtrar por edição, exclusão, criação ou publicação.
Ao lado direito da visão geral, você verá dados sobre a performance do NLU.
O score indica a saúde geral do NLU e a cobertura quantifica o nível das mensagens respondidas que o cognitivo recebeu e atingiu.
A estrutura atual exibe como o NLU está sistematizado até o momento da alteração mais recente, indicada logo abaixo do título e sinalizada em vermelho na imagem abaixo. Nessa parte, você encontra quantas intenções, entidades e bases de conhecimento estão cadastradas e publicadas.
Aqui, é possível visualizar como as frases de treinamento cadastradas no NLU estão distribuídas. Esse é o gráfico de balanceamento, que mostra o total de frases treinadas por intenção e a média geral do cognitivo.
Para manter a performance satisfatória, é importante que o cognitivo esteja balanceado, ou seja, que as intents não tenham números de frases de treinamento muito diferentes entre si e que estejam próximas à média geral. Esse gráfico facilita a visualização e possíveis ajustes necessários.
Caso deseje visualizar mais, basta clicar em “Expandir”, logo abaixo do gráfico.
Os dados da avaliação exibem a quantidade de mensagens recebidas em comparação com a quantidade de avaliações feitas. Você pode ver em três opções:
Todas as mensagens;
Apenas avaliações manuais: feita por agente humano, em geral, a pessoa curadora de IA. Elas são essenciais para o treinamento supervisionado do bot.
Apenas avaliações automáticas: São realizadas pelo próprio Zenvia NLU. Para que ela aconteça, é preciso que o agente humano acione essa função durante a avaliação. Sempre que 5 avaliações manuais idênticas são feitas, nossa plataforma oferece a opção de automatizar essa ação. Na tela de automações é possível ver e desabilitar as avaliações automáticas existentes.
Veja a demonstração no gif:
Indica como está a saúde do NLU a partir das confusões e instabilidades. Uma mensagem aparecerá em cada uma das duas, oferecendo um resumo:
Selecione a opção “+ Criar novo NLU” e, em seguida, preencha os campos solicitados:
Nome;
Descrição;
Confiança;
Squad vinculada.
Em seguida, clique em "Salvar novo NLU".
Após salvar, você será redirecionado para a tela de Configuração do NLU. Prossiga para a próxima seção dessa documentação para saber mais sobre ela.
Como o número de NLU's criados e não utilizados é grande e isso aumenta o processamento dos dados analíticos, aqueles que não tiveram nenhuma movimentação (mensagem recebida, avaliação, alteração) em mais de 60 dias serão desativados. Ainda assim, será possível reativá-los ou apagá-los permanentemente.
Na Visão Geral do NLU desativado, também há a possibilidade de seguir com a exportação dos dados de configuração (intenção, entidade e base de conhecimento).
Ao acessar um NLU desativado, aparecerá uma mensagem no topo da página com as duas opções: