Wie kann ich verhindern, dass bestimmte Seiten indexiert werden?
Yahoo! Slurp beachtet das noindex Meta-Tag. Wenn Sie
<META NAME="robots" CONTENT="noindex">
in Ihr Web-Dokument einfügen, wird Yahoo! Slurp auf das Dokument zwar zugreifen, es aber nicht indexieren. Die URL eines für den Yahoo! Slurp ausgeschlossenen Dokuments kann aber unter Umständen dennoch über die Yahoo! Suche gefunden werden, wenn diese über andere öffentlich zugängliche Web-Dokumente verlinkt ist.