Avaliação do Módulo de Identificação da Polaridade Geral dos Comentários do TripAdvisor®

Abstract

Este artigo apresenta o processo de avaliação do módulo de identificação da polaridade geral dos comentários de um site de turismo no contexto nacional. O processo realizado foi dividido em quatro etapas. A primeira foi a de análise manual de 70 comentários. A segunda etapa foi a criação de uma matriz de confusão para comparação do resultado encontrado na análise manual e do sistema. A terceira etapa foi realizado a aplicação das métricas “Precision” e “Recall” para a avaliação de desempenho no que concerne à verificação da polaridade do comentário . Por fim, foi feita a análise de correlação entre o resultado obtido pelo sistema e o valor da avaliação do usuário via escala Likert. Para isso, o processo teve como entrada os dados das avaliações do TripAdvisor que estão contidos na base de dados da versão 2 da ferramenta SentimentALL.