Monitoramento de sistemas de classificação de linguagem
É possível realizar consultas das expressões escritas em linguagem humana aos sistemas de classificação de linguagem natural que estejam configurados em alguma conexão de um BOT. O resultado dessas consultas pode ter dois possíveis desdobramentos:
1.A intenção e entidade(s) resultantes da classificação feita pelo sistema externo;
2.A indicaç ão de que a expressão não foi compreendida pelo sistema externo e que o mesmo precisa, portanto, ser treinado.
Para realizar este tipo de consulta, a opção selecionada deve ser "Consulta a sistema externo de classificação de linguagem", conforme demonstrado na imagem abaixo:
Em seguida, deve-se selecionar um BOT e a respectiva interação configurada para acesso a um sistema de classificação de linguagem, para o qual se deseja aprimorar o treinamento.
Com o BOT e a interação selecionados, basta escrever a expressão que se deseja analisar e pressionar a tecla "ENTER", ou clicar no botão da "lupa".
A expressão em linguagem natural é repassada ao sistema de classificação que poderá retornar uma intenção e uma ou mais entidades, ou então indicar que não conseguiu classificar a expressão. Isso é útil para determinar-se se o sistema externo de classificação está treinado para lidar com a respectiva expressão.
Como resultado desse tipo de consulta, portanto, dois tipos de ações podem ser tomadas:
✓ Caso o sistema externo não consiga classificar a expressão, então é necessário acessar o mesmo para treiná-lo na expressão, configurando a intenção e entidade(s) esperadas.
✓ Caso o sistema externo classifique a expressão, pode-se verificar se existe no Intelichat um conteúdo na base de conhecimento com a intenção e entidade(s) retornadas. Caso não exista, o conteúdo precisa ser criado na base de conhecimento.
A imagem a seguir apresenta um exemplo de uma pesquisa que retornou uma classificação com a intenção "o que não muda" (A) e a entidade "fgts" (B), além do percentual de confiança do sistema de classificação (C).
Pode-se observar ainda que é exibida uma resposta que foi localizada na base de conhecimento com esta intenção e entidade (D).
O percentual de confiança é um indicador da probabilidade de assertividade da classificação realizada pelo sistema externo. Em caso de percentuais baixos, é recomendável que a expressão seja treinada no sistema, pois isso pode ser um indicativo de classificação inadequada.
Não existe uma regra que determine qual é o valor mínimo, depende de cada caso.
Através do botão "ADICIONAR RESPOSTA" é possível criar um novo conteúdo na base de conhecimento, o que será feito com a intenção e entidade(s) resultantes da classificação. Isso é muito útil nas situações em que o sistema externo classificou a expressão, mas não existe ainda o conteúdo correspondente na base. Caso nenhuma resposta seja localizada com a intenção e entidade(s) retornadas, portanto, é o momento ideal para que o conteúdo adequado seja criado através deste botão.
Caso a expressão não seja classificada pelo sistema externo, a tela apresentada terá o aspecto da imagem a seguir, onde pode-se observar que não foram retornadas intenção, entidades e percentual de confiança.
Neste caso será necessário entrar no sistema externo e realizar o treinamento do mesmo com a expressão.
Para facilitar a operacionalização, existe um botão ao final do campo onde se digita a expressão que pode ser clicado para copiar a expressão para a área de transferência – destacado na imagem anterior. Este botão equivale a selecionar toda a expressão e pressionar CTRL+C, facilitando assim a inserção da mesma no sistema externo pela operação de "colar" (CTRL+V).