¿Por qué Slurp inspecciona mi página?

¿Eres un webmaster que busca más información sobre el agente de usuario "Slurp"? Nosotros lo haremos por ti.

¿Qué es Slurp?

Slurp es el robot de Yahoo Search encargado de rastrear e indexar información de páginas web. A pesar de que algunos resultados de Yahoo Search están */*impulsados por nuestros socios, los sitios deberían permitir el acceso a Yahoo para que aparezca en los resultados de Yahoo Mobile Search. Además, Slurp realiza las acciones siguientes:

  • Recopila contenido de sitios de socios para incluirlo en sitios como Yahoo Noticias, Yahoo Finanzas y Yahoo Deportes.
  • Accede a páginas de sitios de la web para confirmar su precisión y mejorar el contenido personalizado de Yahoo para los usuarios.

¿Cómo se identifica Slurp?

El agente de usuario "Slurp" identifica el acceso de Slurp a sitios web. El valor completo del agente de usuario que verás en los registros de acceso es:

Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)

Cómo evitar que Slurp lea páginas en tu sitio

Slurp cumple con la Norma de exclusión de robots. Si quieres evitar que Slurp lea alguna parte de tu sitio, crea un archivo robots.txt en el directorio raíz (carpeta de inicio) de tu sitio web y añade una regla para el agente de usuario: "Slurp".

Ejemplo de código en un archivo robots.txt:

Agente de usuario: Slurp
no permitido: /cgi-bin/

Nota: Slurp responderá a la primera entrada del archivo robots.txt con un agente de usuario que contenga "Slurp". Si no existe esta entrada, responderá a la primera entrada con un agente de usuario de "*".

Más información sobre las metatags y los robots.txt

Administra el modo en que aparece tu sitio web en Yahoo Search. Consulta nuestra guía sobre cómo utilizar metatags y robots.txt con Slurp..

Preguntas frecuentes

¿Ralentizará Slurp la velocidad de mi sitio web?

Slurp ha sido diseñado para solicitar información razonable que no sobrecargue los sitios web. No obstante, si te preocupa el rendimiento del sitio, puedes restringir las páginas que rastrea Slurp rechazando el rastreo de ciertos subdirectorios o ralentizando la velocidad de rastreo de Slurp mediante un crawl-delay. Obtén más información sobre cómo utilizar las directivas de rechazo y crawl-delay de los robots.txt con Slurp..

Obtén asistencia

Los webmasters pueden ponerse en contacto con el equipo de asistencia técnica de Yahoo directamente enviándonos un correo electrónico a: crawl-support@yahooinc.com.