Frecuencia inversa de documento
Etapa 2 · Nace la IA (1943–1979) › IA simbólica
- Linaje
- Datos y aprendizaje
- Tipo
- Publicación
Quién
Universidad de Cambridge
Qué ocurrió
Karen Spärck Jones, de la Universidad de Cambridge, publica en el Journal of Documentation «A Statistical Interpretation of Term Specificity and Its Application in Retrieval».
Qué aportó
Propone dar a cada palabra un peso que crece cuanto más rara es en la colección de documentos, la frecuencia inversa de documento (IDF). Combinada con la frecuencia de la palabra en cada texto, es la base de los buscadores durante décadas.
Desarrollo
Un sistema de búsqueda de documentos compara las palabras de la consulta con las de cada texto. Si todas las palabras cuentan igual, las muy frecuentes, que aparecen en casi todos los documentos, dominan el resultado aunque no distingan unos textos de otros.
Spärck Jones propuso una solución estadística. Una palabra que aparece en pocos documentos es más específica y dice más sobre ellos que una que aparece en todos. Su peso debe crecer cuanto menor sea la proporción de documentos que la contienen. Combinado con la frecuencia de la palabra dentro de cada documento, ese peso da la puntuación que se conoce como TF-IDF, con la que se ordenan los documentos según su relevancia para la consulta.
Spärck Jones se había formado en la Cambridge Language Research Unit, el grupo de lingüística computacional que dirigía Margaret Masterman, y trabajó toda su carrera en el procesamiento del lenguaje y la recuperación de información. Defendía además la presencia de las mujeres en la informática con una frase que se cita a menudo: la informática es demasiado importante para dejarla en manos de los hombres.
La ponderación TF-IDF fue durante décadas la base de los motores de búsqueda y de muchos sistemas de clasificación de textos, y la idea de que la rareza de una palabra mide su información sigue presente en el procesamiento del lenguaje.
Bibliografía
Fuente original
Cómo citar
«Frecuencia inversa de documento». En La historia de la IA, revisión del 13 de noviembre de 2026. https://thehistoryofai.com/es/hito/sparck-jones-idf
Última revisión de esta ficha: 13 de noviembre de 2026.