Diretórios tentaram organizar a internet antes dos mecanismos de busca. Com a chegada do Google e outros buscadores, eles passaram a vasculhar a web, construir índices dos sites e avaliar a relevância das páginas para fornecer as respostas mais relevantes às pesquisas dos usuários.