Schritt 1 Wähle eine Option aus: Erlaubt allen Spidern, Deine Webseiten zu indizieren. Verbietet allen Spidern, Deine Webseiten zu indizieren. Verbietet allen Spidern, Verzeichnisse oder Dateien zu indizieren. Verbietet bestimmten Spidern, Verzeichnisse oder Dateien zu indizieren.