¿Que es una araña web o 'web spider'?

Una araña web (o araña de la web) es un programa que inspecciona las páginas del World Wide Web de forma metódica y automatizada. Uno de los usos más frecuentes que se les da consiste en crear una copia de todas las páginas web visitadas para su procesado posterior por un motor de búsqueda que indexa las páginas proporcionando un sistema de búsquedas rápido. Las arañas web suelen ser bots (el tipo más usado de éstos).

Las arañas web comienzan visitando una lista de URLs, identifica los hiperenlaces en dichas páginas y los añade a la lista de URLs a visitar de manera recurrente de acuerdo a determinado conjunto de reglas. La operación normal es que se le da al programa un grupo de direcciones iniciales, la araña descarga estas direcciones, analiza las páginas y busca enlaces a páginas nuevas. Luego descarga estas páginas nuevas, analiza sus enlaces, y así sucesivamente.

Entre las tareas más comunes de las arañas de la web tenemos:

  • Crear el índice de una máquina de búsqueda.
  • Analizar los enlaces de un sitio para buscar links rotos.
  • Recolectar información de un cierto tipo, como precios de productos para recopilar un catálogo.

Los buscadores más populares de internet hacen uso de esta herramienta para indexar las páginas a sus servidores.

VOLVER

  • 4 Пользователи нашли это полезным
Помог ли вам данный ответ?

Связанные статьи

Creación de campaña de publicidad en Adwords de Google

Si se invierte en una web, es para hacer que potenciales clientes lleguen a ella. Si no, lo más...

¿Dónde debo anunciar mi web?

Cuanta mayor difusión de de su web, mejor. Tenga en cuenta que, por ejemplo, un anuncio en un...

¿Qué es un dominio de Internet?

El dominio es sin duda lo más necesario y principal a la hora de montar cualquier servicio o...

¿Puedo anunciarme en Internet de forma que mis anuncios sólo aparezcan localmente?

SI. Aunque actualmente la única red que nos permite esto es Adwords de Google. Esta red le...

¿Qué es una Red Social en Internet?

El concepto red social en el ámbito de internet: son páginas que permiten a las personas conectar...

Powered by WHMCompleteSolution