IBEREVAL OMMining Opinions from the new textual genres

  1. Balahur Dobrescu, Alexandra
  2. Boldrini, Ester
  3. Montoyo Guijarro, Andrés
  4. Martínez Barco, Patricio
Revista:
Procesamiento del lenguaje natural

ISSN: 1135-5948

Año de publicación: 2010

Número: 45

Páginas: 267-272

Tipo: Artículo

Otras publicaciones en: Procesamiento del lenguaje natural

Resumen

Con el grande aumento de la información subjetiva en la Web, hay una importante necesidad de desarrollar sistemas de Question Answering que sean eficientes y capaces de discriminar entre datos objetivos y subjetivos. Los participantes tendrán una colección de preguntas de opinión (Español e Inglés) en las cuales se deberán encontrar las respuestas. El Gold Standard será anotado previamente con el esquema de anotación EmotiBlog por 3 anotadores. El corpus EmotiBlog y la colección de preguntas presentados en (Balahur et al. 2009) se pondrá a disposición para el entrenamiento del sistema. Los participantes deberán devolver un listado de respuestas para cada una de las preguntas, (en el mismo idioma que la pregunta o en otro), un resumen de las respuestas –de las x% de las respuestas más importantes, de una manera no redundante, el Gold Standard para los resúmenes será extraído automáticamente de las anotaciones manuales teniendo en consideración el parámetro de “intensidad” de la opinión expresada.

Referencias bibliográficas

  • Balahur, A. and Montoyo, A. 2008. An incremental multilingual approach to forming a culture dependent emotion triggers lexical database. In Proceedings of the Conference of Terminology and Knowledge Engineering (TKE 2008).
  • Balahur, A, Steinberg, R., Rethinking Sentiment Analysis in the News:from Theory to Practice and back. In Proceedings of WOMSA 2008, Seville, Spain.
  • Balahur, A., Boldrini, E., Montoyo, A., Martínez- Barco, P. 2009. Opinion and Generic Question Answering systems: a performance analysis. In Proceedings of ACL, 2009, Singapore.
  • Balahur, A., Boldrini, E., Montoyo, A., Martínez- Barco, P. 2009. Opinion Question Answering: Towards a Unified Approach. To appear in proceedings of the ECAI conference.a
  • Balahur, A., Boldrini, E., Montoyo, A., Martínez- Barco, P. 2010. A Unified Proposal for Factoid and Opinionated Question Answering. To appear in proceedings of the COLING conference.b
  • Balahur A., Steinberger, R., Kabadjov, M., Zavarella, V., van der Goot, E., Halkia, M., Pouliquen, B., Belyaeva, J. 2010. Sentiment Analysis in the News. In Proceedings of the 7th International Conference on Language Resources and Evaluation (LREC'2010) Valletta, Malta.
  • Boldrini, E., Balahur, A. Martínez-Barco, P. and Montoyo A. 2009. EmotiBlog: An Annotation Scheme for EmotionDetection and Analysis in Non-Traditional Textual Genres. In Proceedings of the 5th Conference on Data Mining. Las Vegas, Nevada, USA.
  • Cardie. C. Wiebe. J. Wilson. T. Litman. D. 2003. Combining Low-Level and Summary Representations of Opinions for Multi- Perspective Question Answering. AAAI Spring Symposium on New Directions in Question Answering.
  • Kim, S.-M. and E.H. Hovy. 2005. Identifying Opinion Holders for Question Answering in Opinion Texts. Proceedings of the Workshop on Question Answering in Restricted Domain at the Conference of the American Association of Artificial Intelligence (AAAI-05). Pittsburgh, PA.
  • Pang, B. and Lee, L. (2008). Opinion mining and sentiment analysis.
  • Shen. D. Leidner. J. Merkel. A. Klakow. D. 2007. The Alyssa system at TREC QA 2007: Do we need Blog06? In Proceedings of The Sixteenth Text Retrieval Conference (TREC 2007), Gaithersburg, MD, USA.
  • Wiebe, J., Wilson, T., and C. Cardie. 2005. Annotating expressions of opinions and emotions in language. Language Resources and Evaluation, vol. 39, issue 2-3, pp. 165-210.
  • Yu. H. Hatzivassiloglou. V. 2003. Towards Answering Opinion Questions: Separating Facts from Opinions. In Proceedings of EMNLP-03. Wenjie, L., Ouyang, Y., Hu, Y., Wei, F. PolyU at TAC 2008. In Proceedings of Human LanguageTechnologiesConference/Conference on Empirical methods in Natural Language Processing (HLT/EMNLP), Vancouver, BC, Canada.
  • Li, F., Zheng, Z.,Yang T., Bu, F., Ge, R., Zhu, X., Zhang, X., and Huang, M. THU QUANTA at TAC 2008. QA and RTE track. In Proceedings of Human Language Technologies Conference/Conference on Empirical methods in Natural Language Processing (HLT/EMNLP), Vancouver, BC, Canada.