Google está catalogando “web invisível”

O Google estaria investindo na catalogação de páginas que não são interligadas por links comuns, mas sim por formulários que devem ser preenchidos por usuários – esse sistema seria a chamada “web invisível”.

De acordo com o site The Register, os programadores Jayant Madhavan e Alon Halevy afirmam que a empresa tem explorado formulários HTML↳HTML45 conteúdosA importância do HTML e CSS para quem trabalha com UI Design e Design SystemProduto & UX · dez 2024Como hostear seu site HTML gratuitamente com GitHub PagesDev (Back & Front) · jun 2025SQL Server – Como criar um versionamento de código das suas Stored Procedures em HTML e com comentários da alteraçãoData · nov 2020Ver tudo em Dev (Back & Front) → para tentar descobrir novas páginas e endereços que não poderiam ser alcançados de outras formas. Segundo eles, quando se vêem diante de um elemento Form em um site de alta qualidade, realizam um pequeno número de requisições utilizando o formulário. Isso quer dizer que os “Googlebots” (robôs que procuram atualizações e indexam o conteúdo dos sites) estão inserindo dados em formulários como se fossem pessoas e, então, disponibilizam a página encontrada no mecanismo de busca. Caso cheguem à conclusão de que a página resultante da requisição da empresa é válida e possui conteúdo ainda não indexado, os programadores podem incluí-la como procederiam com qualquer outra página.

O Google não pretende desrespeitar os sites e sempre respeita exceções explicitadas em arquivos robots.txt, que indicam páginas ou pastas que não devem figurar entre as catalogadas.

A novidade foi desenvolvida, possivelmente, graças à tecnologia da Transformic, uma companhia adquirida pelo Google em 2005.