O que são?
São sites feitos para ajudar pessoas a encontrarem as informações que procuram, eles fazem as buscas pelas informações em outros sites, são ferramentas complexas da internet. São eles o web crawling, Index, e o Searching.
Web crawling:
É um programa de computador que realiza uma busca na internet de forma sistemática buscando sempre conteúdos cada vez mais recentes com informações relevante a sua função, ou seja, ele faz uma captura dos textos das paginas e cadastra seus links.
- São responsáveis pela indexação dos sites
- Muitos sites incluindo os motores de busca usam o crawller para manter uma base de dados atualizada.
Indexing:
A indexação é a forma mais eficiente de organizar e encontrar um arquivo numa base de dados, pois descreve e identifica um documento de acordo com seu assunto. Para cada item, associam-se vários tags (palavras representativas) ou particularidades que permitam ao arquivo de ser identificado entre um grande número de itens.
Atualmente o termo indexação pode ser entendido sob diferentes aspectos e níveis, o que acarreta a oferta de diversos serviços. De modo a se proceder a correta inserção dos sites nestes serviços, é necessária uma compreensão de suas especificidades.
Searching:
Com ele pode-se descobrir informações locadas na web para isso basta ter palavras-chave que o próprio utilizador sugere diminuindo o tempo de busca de informações. Ou seja, faz a busca em um determinado motor de busca, melhora a Classificação orgânica do Seu site nos motores de Buscas, Também visa à publicidade do site.
A estrutura dos primeiros motores de busca era hierárquica as paginas eram divididas por diretórios o Google e a mais recente geração de motores de busca ele utiliza o SEO (busca por palavras-chave)