Na época, vasculhar documentos significava ler títulos, checar índices ou torcer para lembrar as palavras-chave corretas. Era um trabalho lento, manual. Karen estava trabalhando com cartões perfurados e computadores antigos, e percebeu algo simples, mas poderoso: palavras comuns como "the", "and" ou "of" aparecem em todo lugar e não ajudam a encontrar nada específico. Uma palavra rara, por outro lado, é muito mais útil.
Ela criou uma fórmula matemática que ponderava a importância de uma palavra em um documento específico contra a frequência dela em toda a coleção. Ela chamou isso de termo frequência-inverso do documento — TF-IDF. Isso permitia que uma máquina descobrisse a relevância sem realmente entender o significado das palavras.
Era um artigo discreto em um periódico acadêmico de nicho. A maioria das pessoas que trabalhava com computação na época achava que o processamento de linguagem era problema de bibliotecário, não ciência séria. Os computadores mainframe eram caros e usados principalmente para cálculos militares, bancos e dados censitários. Karen teve que esperar os engenheiros e físicos terminarem o trabalho antes de poder rodar seus experimentos tarde da noite no grande computador Titan da universidade. Ela introduziu pilhas de cartões perfurados, lidou com leitores travados e conferiu tudo à mão.
Ela não tinha um laboratório chamativo nem grandes recursos. Ela só continuou trabalhando.
Décadas depois, quando a internet explodiu com bilhões de páginas, os mecanismos de busca chegaram a um muro. Os diretórios iniciais dependiam de humanos categorizando tudo manualmente. Não conseguia escalar. Engenheiros, vasculhando pesquisas antigas, encontraram o artigo da Karen de 1972. Eles pegaram a matemática dela, ampliaram e a incorporaram ao núcleo de como a busca moderna funciona.
Google, Bing, bancos de dados acadêmicos, até a função de busca no seu e-mail — todos usam alguma versão do que ela criou. Você digita uma pergunta. O sistema filtra milhões de documentos em uma fração de segundo e te dá o que você precisa. Essa lógica filtrante remonta diretamente a ela.
Karen ficou em Cambridge. Ela ensinou, orientou outras mulheres na área da computação e continuou impulsionando a área até se aposentar em 2002. Ela faleceu em 2007. Ela nunca ficou rica. Ela nunca se tornou um nome conhecido em todos os lares. As grandes empresas de tecnologia que construíram impérios no search raramente a mencionavam.
Mas toda vez que você digita algo na barra de busca e realmente recebe uma resposta útil, está usando o pensamento da Karen Spärck Jones.
Ela não construiu a internet. Ela só ensinou as máquinas a ouvir melhor.
Ela criou uma fórmula matemática que ponderava a importância de uma palavra em um documento específico contra a frequência dela em toda a coleção. Ela chamou isso de termo frequência-inverso do documento — TF-IDF. Isso permitia que uma máquina descobrisse a relevância sem realmente entender o significado das palavras.
Era um artigo discreto em um periódico acadêmico de nicho. A maioria das pessoas que trabalhava com computação na época achava que o processamento de linguagem era problema de bibliotecário, não ciência séria. Os computadores mainframe eram caros e usados principalmente para cálculos militares, bancos e dados censitários. Karen teve que esperar os engenheiros e físicos terminarem o trabalho antes de poder rodar seus experimentos tarde da noite no grande computador Titan da universidade. Ela introduziu pilhas de cartões perfurados, lidou com leitores travados e conferiu tudo à mão.
Ela não tinha um laboratório chamativo nem grandes recursos. Ela só continuou trabalhando.
Décadas depois, quando a internet explodiu com bilhões de páginas, os mecanismos de busca chegaram a um muro. Os diretórios iniciais dependiam de humanos categorizando tudo manualmente. Não conseguia escalar. Engenheiros, vasculhando pesquisas antigas, encontraram o artigo da Karen de 1972. Eles pegaram a matemática dela, ampliaram e a incorporaram ao núcleo de como a busca moderna funciona.
Google, Bing, bancos de dados acadêmicos, até a função de busca no seu e-mail — todos usam alguma versão do que ela criou. Você digita uma pergunta. O sistema filtra milhões de documentos em uma fração de segundo e te dá o que você precisa. Essa lógica filtrante remonta diretamente a ela.
Karen ficou em Cambridge. Ela ensinou, orientou outras mulheres na área da computação e continuou impulsionando a área até se aposentar em 2002. Ela faleceu em 2007. Ela nunca ficou rica. Ela nunca se tornou um nome conhecido em todos os lares. As grandes empresas de tecnologia que construíram impérios no search raramente a mencionavam.
Mas toda vez que você digita algo na barra de busca e realmente recebe uma resposta útil, está usando o pensamento da Karen Spärck Jones.
Ela não construiu a internet. Ela só ensinou as máquinas a ouvir melhor.
Nenhum comentário:
Postar um comentário