La historia de la IA

Frecuencia inversa de documento

Etapa 2 · Nace la IA (1943–1979) › IA simbólica

Linaje
Datos y aprendizaje
Tipo
Publicación

Quién

Universidad de Cambridge

Qué ocurrió

Karen Spärck Jones, de la Universidad de Cambridge, publica en el Journal of Documentation «A Statistical Interpretation of Term Specificity and Its Application in Retrieval».

Qué aportó

Propone dar a cada palabra un peso que crece cuanto más rara es en la colección de documentos, la frecuencia inversa de documento (IDF). Combinada con la frecuencia de la palabra en cada texto, es la base de los buscadores durante décadas.

Desarrollo

Un sistema de búsqueda de documentos compara las palabras de la consulta con las de cada texto. Si todas las palabras cuentan igual, las muy frecuentes, que aparecen en casi todos los documentos, dominan el resultado aunque no distingan unos textos de otros.

Spärck Jones propuso una solución estadística. Una palabra que aparece en pocos documentos es más específica y dice más sobre ellos que una que aparece en todos. Su peso debe crecer cuanto menor sea la proporción de documentos que la contienen. Combinado con la frecuencia de la palabra dentro de cada documento, ese peso da la puntuación que se conoce como TF-IDF, con la que se ordenan los documentos según su relevancia para la consulta.

Spärck Jones se había formado en la Cambridge Language Research Unit, el grupo de lingüística computacional que dirigía Margaret Masterman, y trabajó toda su carrera en el procesamiento del lenguaje y la recuperación de información. Defendía además la presencia de las mujeres en la informática con una frase que se cita a menudo: la informática es demasiado importante para dejarla en manos de los hombres.

La ponderación TF-IDF fue durante décadas la base de los motores de búsqueda y de muchos sistemas de clasificación de textos, y la idea de que la rareza de una palabra mide su información sigue presente en el procesamiento del lenguaje.

Bibliografía

Cómo citar

«Frecuencia inversa de documento». En La historia de la IA, revisión del 13 de noviembre de 2026. https://thehistoryofai.com/es/hito/sparck-jones-idf

Última revisión de esta ficha: 13 de noviembre de 2026.

Abrir en la cronología interactiva