# Análise e ajustes

Na área de análise e ajustes a pessoa curadora pode verificar o comportamento do cognitivo com base nos dados da avaliação de mensagens que alimentam os modelos matemáticos da matriz de confusão e da instabilidade. Além disso, é possível acompanhar a evolução entre publicações e realizar simulações, explicadas mais adiante.

### Como acessar

Acessando o pilar do Train, localizado na barra lateral esquerda da plataforma Zenvia NLU, clique em **“Análise e Ajustes”.**  Em seguida, você estará na tela inicial.

<figure><img src="https://776911411-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-MBjaNm5lB1Yqgih1JCA%2Fuploads%2FzHN8IY24gUNXqHlT0XVx%2FAn%C3%A1liseAjustes01.gif?alt=media&#x26;token=f3260a9a-03a8-4905-9cfc-4de9ac38535a" alt=""><figcaption></figcaption></figure>

A estrutura é dividida em quatro partes:

1. **Confusão;**
2. **Instabilidade;**
3. **Evolução;**
4. **Simulação.**

A seguir, conheça cada uma delas.

#### **Confusão**

O ambiente de “Confusão” auxilia na análise do comportamento do motor cognitivo, permitindo identificar as confusões nas intenções que geram **confusões no cognitivo** e precisam de ajustes a partir dos dados processados na avaliação das mensagens.

Na tela, é possível ver a relação de todas as intenções e seus parâmetros:

* **Score;**
* **Número de mensagens recebidas na intenção;**
* **Porcentagem de mensagens avaliadas;**
* **Número de confusões;**
* **Precisão;**
* **Sensibilidade.**&#x20;

Você pode também usar o campo de busca **“Buscar intenção”** e ordenar a visualização para ajudar na organização e apresentação dos dados de acordo com sua necessidade.&#x20;

Você pode ordenar por:

* **Score;**
* **Confusão;**
* **Avaliadas;**
* **Mensagens.**&#x20;

Veja o exemplo no gif:

<figure><img src="https://776911411-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-MBjaNm5lB1Yqgih1JCA%2Fuploads%2Fj9lnDIYWxbWXXTGsL3iJ%2FAn%C3%A1liseAjustes02.gif?alt=media&#x26;token=cc92e812-d448-4f26-8fe5-3faafe1aa527" alt=""><figcaption></figcaption></figure>

#### Instabilidade

O ambiente de “Instabilidade” auxilia na **análise do comportamento do motor cognitivo** permitindo identificar as mensagens que foram aprovadas em cada intenção pela pessoa avaliadora, exibindo uma lista indicando os seguintes status:

1. **Indefinido:** significa que os dados são insuficientes para realizar o cálculo de instabilidade de forma confiável;
2. **Ok:** significa que as frases de treinamento da intenção estão com a estrutura próxima à das mensagens enviadas pelos usuários e aprovadas em cada intenção pela pessoa avaliadora;
3. **Instável:** significa que as frases de treinamento da intenção estão com a estrutura distante à das mensagens enviadas pelos usuários e aprovadas em cada intenção pela pessoa avaliadora, classificadas pelo motor cognitivo com a confiança média e/ou baixa.

{% hint style="info" %}
O status é definido como **"Ok"** ou "**Instável"** quando há pelo menos 11 avaliações de mensagens aprovadas em cada intenção.&#x20;

Caso haja menos de 11 avaliações no mesmo cenário o status fica como **"Indefinido".**
{% endhint %}

<figure><img src="https://776911411-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-MBjaNm5lB1Yqgih1JCA%2Fuploads%2F8aLhxckCTOzL9Ag01k1l%2FAn%C3%A1liseAjustes03.gif?alt=media&#x26;token=5f7401bd-9dd1-4581-88e6-537044e54385" alt=""><figcaption></figcaption></figure>

#### Evolução

O ambiente de “Evolução” é onde você vai acompanhar o desempenho geral do cognitivo entre os períodos de publicação.

Na tela inicial, há dois gráficos disponíveis para visualização. São eles:

* **Linha do tempo:**&#x20;

Mostra dados correspondentes aos **períodos de publicação**, como **score** (gráfico à esquerda) e **nível de cobertura** (gráfico à direita).

Abaixo dos gráficos, há o **total de mensagens recebidas no cognitivo** e quantas destas foram avaliadas dentro do período.&#x20;

Além disso, clicando em “**Detalhamento da curadoria**”, é possível visualizar a distribuição das avaliações de mensagens entre as intenções que foram classificadas como *irrelevant* e as demais.

<figure><img src="https://776911411-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-MBjaNm5lB1Yqgih1JCA%2Fuploads%2FvQ28hlPBIcixXCPXSyVJ%2FAn%C3%A1liseAjustes04.gif?alt=media&#x26;token=0d2326ce-f610-41e8-a388-1976cecf632c" alt=""><figcaption></figcaption></figure>

* **Gráficos de evolução entre as publicações divididos em três:**

1. Score;
2. Cobertura;
3. Volume de mensagens.

**Esses gráficos exibem os mesmos dados da "Linha do tempo".**

![](https://776911411-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-MBjaNm5lB1Yqgih1JCA%2Fuploads%2FK3c66SjZavapgnWQ6x5x%2FgraficoEvolucao.gif?alt=media\&token=686cf956-d1d6-4348-a926-38d4258d2df7)

#### **Simulação**

No ambiente de "Simulação" é possível reproduzir os impactos dos ajustes realizados antes de gerar um novo período de publicação. Nessa etapa, você pode:

* Realizar nova simulação;
* Limpar simulações;

Se optar por realizar uma nova simulação, automaticamente você verá as opções:

* Iniciar simulação;
* Ver simulações anteriores.&#x20;

<figure><img src="https://776911411-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-MBjaNm5lB1Yqgih1JCA%2Fuploads%2FVjTtYAspRGOCSHiQsPkL%2FAn%C3%A1liseAjustes05.gif?alt=media&#x26;token=05e1bb8b-93b8-4b56-aeb1-30ab1b8c7734" alt=""><figcaption></figcaption></figure>
