AwarioSmartBot y AwarioRssBot Crawlers

Información general sobre los rastreadores Awario.

Un bot, también conocido como robot web, araña web o rastreador web, es una aplicación de software diseñada para realizar automáticamente tareas sencillas y repetitivas de una forma más eficaz, estructurada y concisa que la que podría hacer cualquier ser humano. El uso más común de los bots es la araña web o web crawling.

AwarioSmartBot y AwarioRssBot son rastreadores web legítimos enviados por Awario para descubrir y recopilar datos web nuevos y actualizados (que además son utilizados por vendedores de Internet de todo el mundo).

Los crawlers AwarioSmartBot y AwarioRssBot se identifican por tener user-agents de la siguiente forma:

AwarioRssBot/1.0 (+https://awario.com/bots.html; bots@awario.com)
AwarioSmartBot/1.0 (+https://awario.com/bots.html; bots@awario.com)

Los crawlers AwarioSmartBot y AwarioRssBot pueden ser identificados por el user-agent anterior. Por favor, no intente identificar los bots a través de IP ya que no utilizamos ningún bloque de IP consecutivo.

Nos preocupamos por el rendimiento de su sitio web y nunca lo perjudicaremos.

AwarioSmartBot y AwarioRssBot son rastreadores muy amigables con los sitios. Los hemos hecho lo más "suaves" posible a la hora de rastrear sitios: sólo hacen 1 petición cada 3 segundos, o incluso con menos frecuencia, si se especifica otro retardo de rastreo en su archivo robots.txt. Los robots respetan las reglas que especifique en su archivo robots.txt.

Si surge algún problema, puede deberse a peculiaridades de su sitio en particular, o a un error en otro sitio que enlace con usted. Por lo tanto, nos gustaría pedirle - si usted notó cualquier problema con los bots Awario, por favor repórtelo a bots@awario.com. Rápidamente haremos ajustes únicos para su sitio en particular, para que el rastreo nunca afecte al rendimiento de su sitio.

¿Por qué rastrean mi sitio?

AwarioSmartBot y AwarioRssBot recopilan datos de la Web que son utilizados por la aplicación Awario para permitir a los vendedores de Internet encontrar quién está mencionando su marca en línea.

Si los rastreadores AwarioSmartBot/AwarioRssBot han visitado tu página, significa que su contenido nunca ha sido recogido y analizado o ha necesitado ser actualizado. Por esta razón, no verá solicitudes recurrentes de los rastreadores AwarioSmartBot/AwarioRssBot a la misma página.

Bloqueo con robots.txt

AwarioSmartBot y AwarioRssBot lo son:

  1. Recoger sólo información de acceso público a la que pueda acceder cualquier visitante cualquiera. En caso de que crea que los rastreadores recopilan alguna información sensible, elimínela del acceso público.
  2. No pueden sobrecargar su sitio y causarle ningún daño - Los bots Awario están diseñados para ser muy educados y sólo pueden realizar 1 ataque cada 3 segundos como máximo. Además, puedes ralentizar fácilmente a los bots mediante indicaciones en el archivo robots.txt.

Sin embargo, aunque los robots Awario son inofensivos, es posible que quiera evitar que rastreen su sitio. La forma más fácil y rápida de hacerlo es utilizar "robots.txt". Este archivo de texto contiene instrucciones sobre cómo un bot debe procesar los datos de su sitio.
Con un archivo robots.txt puede bloquear los rastreadores Awario de su sitio o ralentizarlos como se muestra en los siguientes ejemplos:

Bloquee partes específicas de su sitio:

User-agent: AwarioRssBot
Usuario-agente: AwarioSmartBot
No permitir: /privado/

Bloquear todo el sitio:

User-agent: AwarioRssBot
Usuario-agente: AwarioSmartBot
No permitir: /

Ralentiza las orugas:

User-agent: AwarioRssBot
Usuario-agente: AwarioSmartBot
Retraso de rastreo: 10

Más información sobre los robots

Para más información sobre bots, consulte http://www.robotstxt.org/.

Obtener apoyo

Si todavía tiene alguna pregunta sobre AwarioSmartBot o AwarioRssBot, póngase en contacto con nosotros en bots@awario.com y le responderemos lo antes posible.