Robot d'indexation

• Pourquoi mon site est exploré ?
• Comment éviter l'exploration de mon site ?
• Comment limiter le nombre de requêtes d'exploration sur votre site ?
• Comment éviter l’indexation de seulement certaines pages ?
• Je constate des requêtes répétées, que se passe-t-il ?
• Pourquoi je ne trouve pas mon site dans votre index ?
• Comment votre robot trouve-t-il mon site ?
• Votre robot suit-il les liens dynamiques ?