Es una aplicación que automáticamente explora páginas webs. Los robots o spiders, son utilizados por los motores de búsqueda para automáticamente agregar a su índice sitios webs. Se llaman así ya que "van trazando su telaraña" a través de la red.
Su funcionamiento consiste en ir siguiendo los links, por lo que podría empezar en cualquier sitio, y tarde o temprano, llegaría a cualquier web que tenga un enlace entrante. Los buscadores más importantes, Como google, utilizan más de una araña al mismo tiempo.