Publicación: Aplicación de modelos basados en Transformers a la validación de respuestas
Cargando...
Fecha
2022-10-01
Autores
Editor/a
Director/a
Tutor/a
Coordinador/a
Prologuista
Revisor/a
Ilustrador/a
Derechos de acceso
Atribución-NoComercial-SinDerivadas 4.0 Internacional
info:eu-repo/semantics/openAccess
info:eu-repo/semantics/openAccess
Título de la revista
ISSN de la revista
Título del volumen
Editor
Universidad Nacional de Educación a Distancia (España). Escuela Técnica Superior de Ingeniería Informática. Departamento de Lenguajes y Sistemas Informáticos
Resumen
En la Validación de Respuestas se valora la corrección de las soluciones generadas por un sistema de Búsqueda de Respuestas. Se trata de decidir si las respuestas a una pregunta son apropiadas de acuerdo con los contenidos de un texto determinado. Apenas hay evidencia de que esta funcionalidad esté siendo implementada a partir de modelos de Aprendizaje Profundo y, aún menos, por medio de redes neuronales que incorporen mecanismos atencionales, como en los modelos Transformer. Las técnicas de Aprendizaje Profundo y, en particular, los modelos Transformer, han adquirido gran relevancia en prácticamente todas las áreas del Procesamiento del Lenguaje Natural debido a sus cualidades y rendimiento. En este trabajo proponemos el uso de modelos Transformer en la implementación de subsistemas que utilicen la Implicación Textual para realizar tareas de Validación de Repuestas. Los modelos implementados se evalúan sobre los conjuntos de datos de prueba desarrollados durante los ejercicios del Answer Validation Exercise (AVE). Los resultados obtenidos en las evaluaciones indican que estos modelos pueden ofrecer rendimientos superiores a los de las técnicas probadas durante los AVE por lo que deben ser considerados métodos adecuados para llevar a cabo labores de Validación de Respuestas.
Answer Validation systems assess the accuracy of Question Answering responses by deciding whether the answers to a question are appropriate according to the content of a given text. There is hardly any evidence that this functionality is being implemented from Deep Learning models and, even less, through neural networks that incorporate attentional mechanisms, as in Transformer models. Deep Learning techniques and in particular, Transformer models, have acquired great relevance in basically all areas of Natural Language Processing due to their features and performance. In this thesis we propose the use of Transformer models in the implementation of subsystems using Textual Entailment to perform Answer Validation tasks. The implemented models are evaluated on test datasets developed during the three Answer Validation Exercise (AVE) editions. The results obtained in the evaluations indicate that these models can provide superior performance than those tested during the AVEs and therefore should be considered as suitable methods for performing Answer Validation tasks.
Answer Validation systems assess the accuracy of Question Answering responses by deciding whether the answers to a question are appropriate according to the content of a given text. There is hardly any evidence that this functionality is being implemented from Deep Learning models and, even less, through neural networks that incorporate attentional mechanisms, as in Transformer models. Deep Learning techniques and in particular, Transformer models, have acquired great relevance in basically all areas of Natural Language Processing due to their features and performance. In this thesis we propose the use of Transformer models in the implementation of subsystems using Textual Entailment to perform Answer Validation tasks. The implemented models are evaluated on test datasets developed during the three Answer Validation Exercise (AVE) editions. The results obtained in the evaluations indicate that these models can provide superior performance than those tested during the AVEs and therefore should be considered as suitable methods for performing Answer Validation tasks.
Descripción
Categorías UNESCO
Palabras clave
Citación
Centro
Facultades y escuelas::E.T.S. de Ingeniería Informática
Departamento
Lenguajes y Sistemas Informáticos