Visão Geral

Dados gerais sobre a saúde e desempenho do NLU

Nesta área, você pode ver o resumo de tudo que acontece no NLU, além de cadastrar as intenções, frases de treinamento e entidades, fazer publicações e mais.

A primeira tela é a Visão Geral. Nela, é possível visualizar um overview do NLU selecionado, com dados gerais sobre sua saúde e desempenho.

Do lado esquerdo, há um menu para informações e gerenciamento da inteligência do chatbot. Já do lado direito, você encontra dados sobre o desempenho geral do NLU.

A seguir, veja cada opção da Gestão de NLU.

Gestão de NLU

Escolhendo o NLU

O primeiro passo é escolher qual NLU você deseja ver na visão geral. Para isso, basta seguir como o exemplo do gif abaixo:

Status de treinamento

Ao lado do NLU selecionado, é possível ver seu status de treinamento. Ele pode ser:

  • Pronto: todos os ajustes feitos foram incorporados e estão em produção.

  • Em treinamento: Ocorre sempre que há uma publicação do NLU e permanece enquanto o algoritmo é atualizado com os novos dados.

Registros de atividades

Caso deseje ver detalhadamente todas as atividades realizadas no NLU, clique em Registros de atividades no canto inferior da tela de Visão Geral. Veja o exemplo:

Nesta tela, é possível visualizar e filtrar como preferir os detalhes das atividades feitas no NLU, como:

  • Usuário: selecione o autor que deseja;

  • Item: decida os itens relacionados às intenções, entidades ou base de conhecimento;

  • Período: escolha a data da publicação do NLU;

  • Visualizar apenas as alterações não publicadas;

  • Filtrar por edição, exclusão, criação ou publicação.

Desempenho geral do NLU

Ao lado direito da visão geral, você verá dados sobre a performance do NLU.

O score indica a saúde geral do NLU e a cobertura quantifica o nível das mensagens respondidas que o cognitivo recebeu e atingiu.

A estrutura atual exibe como o NLU está sistematizado até o momento da alteração mais recente, indicada logo abaixo do título e sinalizada em vermelho na imagem abaixo. Nessa parte, você encontra quantas intenções, entidades e bases de conhecimento estão cadastradas e publicadas.

Aqui, é possível visualizar como as frases de treinamento cadastradas no NLU estão distribuídas. Esse é o gráfico de balanceamento, que mostra o total de frases treinadas por intenção e a média geral do cognitivo.

Para manter a performance satisfatória, é importante que o cognitivo esteja balanceado, ou seja, que as intents não tenham números de frases de treinamento muito diferentes entre si e que estejam próximas à média geral. Esse gráfico facilita a visualização e possíveis ajustes necessários.

Caso deseje visualizar mais, basta clicar em “Expandir”, logo abaixo do gráfico.

Os dados da avaliação exibem a quantidade de mensagens recebidas em comparação com a quantidade de avaliações feitas. Você pode ver em três opções:

  • Todas as mensagens;

  • Apenas avaliações manuais: feita por agente humano, em geral, a pessoa curadora de IA. Elas são essenciais para o treinamento supervisionado do bot.

  • Apenas avaliações automáticas: São realizadas pelo próprio Zenvia NLU. Para que ela aconteça, é preciso que o agente humano acione essa função durante a avaliação. Sempre que 5 avaliações manuais idênticas são feitas, nossa plataforma oferece a opção de automatizar essa ação. Na tela de automações é possível ver e desabilitar as avaliações automáticas existentes.

Veja a demonstração no gif:

Indica como está a saúde do NLU a partir das confusões e instabilidades. Uma mensagem aparecerá em cada uma das duas, oferecendo um resumo:

Criar novo NLU

Selecione a opção “+ Criar novo NLU” e, em seguida, preencha os campos solicitados:

  • Nome;

  • Descrição;

  • Confiança;

  • Squad vinculada.

Em seguida, clique em "Salvar novo NLU".

Após salvar, você será redirecionado para a tela de Configuração do NLU. Prossiga para a próxima seção dessa documentação para saber mais sobre ela.

Gestão automática de NLU

Como o número de NLU's criados e não utilizados é grande e isso aumenta o processamento dos dados analíticos, aqueles que não tiveram nenhuma movimentação (mensagem recebida, avaliação, alteração) em mais de 60 dias serão desativados. Ainda assim, será possível reativá-los ou apagá-los permanentemente.

Na Visão Geral do NLU desativado, também há a possibilidade de seguir com a exportação dos dados de configuração (intenção, entidade e base de conhecimento).

Ao acessar um NLU desativado, aparecerá uma mensagem no topo da página com as duas opções:

Reativar NLU

Apagar NLU

Last updated