Il vostro crawler segue link dinamici?
Yahoo! Slurp indicizza URL complessi come quelli generati dai moduli online, sistemi di generazione dei contenuti e software per la generazione delle pagine dinamiche.
Cerchiamo di indicizzare i siti senza che il webmaster debba fare nulla di particolare. Ci sono invece tanti modi in cui il webmaster inavvertitamente inserisce qualcosa che non permette l'indicizzazione ai motori di ricerca.
Le nostre linee guida offrono una serie di esempi di quello che viene considerato spam da Yahoo!.