Araña web

Una araña web (o araña de la web[3]

Las arañas web comienzan visitando una lista de URLs, identifica los hiperenlaces en dichas páginas y los añade a la lista de URLs a visitar de manera recurrente de acuerdo a determinado conjunto de reglas. La operación normal es que se le da al programa un grupo de direcciones iniciales, la araña descarga estas direcciones, analiza las páginas y busca enlaces a páginas nuevas. Luego descarga estas páginas nuevas, analiza sus enlaces, y así sucesivamente.

Entre las tareas más comunes de las arañas de la web tenemos:

  • Crear el índice de una máquina de búsqueda.
  • Analizar los enlaces de un sitio para buscar links rotos.
  • Recolectar información de un cierto tipo, como precios de productos para recopilar un catálogo.

Nomenclatura

Un rastreador web también se puede llamar una araña web , una hormiga , un indexador automática , o (en el  FOAF contexto de software) un scutter Web.

Other Languages
Afrikaans: Webkruiper
العربية: زاحف الشبكة
azərbaycanca: Veb Crawler
Boarisch: Webcrawler
català: Aranya web
Cymraeg: Ymgripiwr gwe
Deutsch: Webcrawler
English: Web crawler
euskara: Web crawler
فارسی: خزنده وب
עברית: זחלן רשת
magyar: Keresőrobot
italiano: Crawler
日本語: クローラ
한국어: 웹 크롤러
олык марий: Кычалше робот
Nedersaksies: Webkroeper
Nederlands: Spider
norsk nynorsk: Søkerobot
norsk bokmål: Søkerobot
português: Rastreador web
Simple English: Web crawler
српски / srpski: Veb-indekser
தமிழ்: வலை ஊர்தி
Türkçe: Arama robotu
українська: Пошуковий робот
中文: 網路蜘蛛