O Open Web Index é um projeto da União Europeia que visa incentivar o desenvolvimento de mecanismos de busca independentes, sem a necessidade de recorrer ao Google ou Bing.
A União Europeia está determinada a diminuir a dependência dos países do bloco em relação a grandes buscadores como Google e Bing. Para isso, lançou o Open Web Index (OWI) — uma iniciativa estratégica voltada à criação de mecanismos de busca independentes, apoiados por uma ampla base de dados digital.
Diferente de um concorrente direto do Google, o OWI funciona como uma infraestrutura aberta de indexação da web, semelhante a uma grande biblioteca digital. Seu propósito é fornecer suporte a buscadores menores que não dispõem de recursos para rastrear e indexar a web em grande escala.
A proposta ganha relevância ao considerar que motores de busca alternativos, como o DuckDuckGo, já existem, mas frequentemente dependem de APIs de terceiros — como o próprio Bing — para entregar resultados. O OWI surge como uma nova fonte de dados robusta e acessível, permitindo que essas plataformas se tornem mais independentes e confiáveis.
Além de fomentar a diversidade de buscadores, o projeto também pretende oferecer aos usuários europeus opções de pesquisa menos centradas em publicidade online e algoritmos de IA generativa com resultados imprecisos.
Lançamento e escopo do Open Web Index
Os primeiros testes públicos do Open Web Index estão agendados para o dia 6 de junho de 2025, com acesso inicial a quase 1 petabyte de dados. A base inclui mais de 6,29 bilhões de links em 185 idiomas. A estrutura será ampliada gradualmente para 5 petabytes, podendo chegar ao dobro desse volume futuramente.
Esse gigantesco acervo poderá ser utilizado não apenas por buscadores alternativos, mas também para o treinamento de modelos de linguagem de larga escala (LLMs). Universidades, startups, instituições de pesquisa e até desenvolvedores independentes terão acesso ao conteúdo para fins experimentais e acadêmicos.
A iniciativa é liderada pela OpenWebSearch.eu, organização fundada em 2022 com a missão de estimular o desenvolvimento de soluções de busca abertas e livres da hegemonia de gigantes como Google, Microsoft, Baidu e Yandex.
(Engenhariae)