Pipeline de Análise Manual

Pipeline de Análise Manual

Coleta dos dados

Para pegar os dados de conversa, você deve acessar o rocketchat como o usuário da Taís e ver as conversas do livechat. Isto pode ser feito nos ambientes:

• Beta
• Produção

Cheque o menu lateral para pegar os links. As credênciais dos serviços devem ser consultadas com o Time.

Análise por conversa

Para cada conversa que você escolher para analisar. Você deve analisar os seguintes pontos:

Pergunta com retorno coerente (perguntas que foram respondidas corretamente);

Esta não precisa ser registrada, pois é o comportamento esperado.

Pergunta sem retorno coerente (perguntas que foram respondidas com conteúdo de outra intent);

Esta deve ser registrada em Intents classificados errados. Neste caso para saber o Intent esperado, você pode consultar a equipe ou os arquivos de intent.

Perguntas realizadas que a Taís não sabe responder (perguntas que ainda não estão na base de conteúdo da Taís);

Estas devem ser resistradas em Novos tópicos para inserir no futuro

Observação de problemas no fluxo (situações em que o usuário não seguiu o fluxo de conversa da Taís);

Estas devem ser colocadas em Sugestões de Fluxo

Erros Ortográficos encontrados;

Estes devem ser reportados em issues deste repositório.

Sinônimos (as perguntas que o usuário fez que já existem, mas expressam uma forma gramatical diferente).

Estas devem ser registradas em Sinônimos de tópicos existentes

Fluxos de Erro

Ao anotar os resultados, é interessante saber se:

1. Usuário começou com cumprimento;
2. Respondeu aos questionamentos da Taís? Ou só ignorou o que a Taís falou;
3. Perguntas realizadas sem interação, ou seja, sem estar no fluxo;

Caso caia em algum desses casos a Taís pode apresentar erros esperados, pois o usuário não seguiu o fluxo.