Dada una cierta cantidad de documentos (tales como World Wide Web), el sistema debería ser capaz de recuperar respuestas a preguntas planteadas en lenguaje natural.
Los primeros sistemas de question-answering se desarrollaron en torno a 1960 y básicamente eran interfaces de lenguaje natural para sistemas expertos centradas en dominios específicos.
Posteriormente, se aplica un filtro que se encarga de seleccionar pequeños trozos de texto que contengan cadenas del mismo tipo al esperado.
Por ejemplo, si la pregunta es ¿Quién es el rey de España?, este filtro buscara textos que contengan nombres.
Finalmente, esas respuestas se ordenan basándose en diferentes criterios.
Sin embargo, en los casos en los que la reformulación de la pregunta no es suficiente, se debe realizar un análisis semántico y contextual.
Era un sistema muy rudimentario para responder preguntas, pero generó una serie de charrterbots que participaron el en premio anual Loebner prize.
Esta competición encaminó la búsqueda y desarrollo del question-answering en dominio abierto.
Los mejores sistemas del año 2004 lograron un 77% de las preguntas correctas.