Webcrawler se traduce como «rastreador a través de Internet». Los rastreadores web son programas informáticos que buscan de forma independiente en Internet y analizan páginas web.
Los rastreadores web son bots : programas informáticos que realizan de forma automática e independiente ciertas tareas. El término figurado «rastreador web» proviene de la forma en que funcionan estos bots. Ellos «rastrean» de enlace en enlace a través de Internet. Así es como pasan de una web a otra. Los motores de búsqueda utilizan rastreadores web para analizar sitios web y añadirlos a su directorio. Cada motor de búsqueda utiliza sus propios rastreadores web. Tu sitio web empresarial es visitado por Googlebot, Bingbot y otros buscadores de motores de búsqueda.
Los rastreadores web pueden utilizarse para recopilar y analizar automáticamente datos de sitios web. Por lo tanto, también se utilizan, por ejemplo, en sitios web de comparación de precios para encontrar los precios más bajos de ciertos productos.
Pero los rastreadores web también se utilizan con fines turbios o ilegales. Por ejemplo, para recopilar automáticamente direcciones de correo electrónico, a las que luego se envía spam .
Te encuentras indirectamente cada vez que usas un buscador. Los resultados de búsqueda son los resultados del trabajo de los rastreadores web. La información inusual de direcciones de correo electrónico en sitios web como «info(at)unternehmen(dot)com» también está justificada por los rastreadores web. Este formato está diseñado para hacer que la dirección de correo electrónico sea ilegible para rastreadores web poco fiables. Sin embargo, las direcciones de correo electrónico proporcionadas de esta manera ya no son libres de barreras y ya no pueden ser utilizadas por personas con visión gravemente deteriorada. Además, muchos rastreadores web dudosos están ahora programados para reconocer estas grafías alternativas.
Protege las direcciones de correo electrónico accesibles en la web de tu empresa de rastreadores web dudosos. Hay varias formas de hacerlo. Dos ejemplos:
