rvdforst

Für Webauftritte ist es zuzeiten sinvoll die Indexierung von bestimmte Dateien und Verzeichnisse zu vermeiden. Beispielweise, wenn es sich um Dateien handelt, die nicht relevante Inhalte haben. Um das zu ermöglichen, muß man eine Textdatei mit dem Namen “robots.txt” erstellen und diese im Stammverzeichnis der Webauftrittedomain hinzufügen, so daß die Robots (googlebot, msnbot, etc.) sie finden.
Für Webauftritte auf Basis WordPress der robots.txt Inhalt wird dynamisch erzeugt.
Das RRZE-Robots-Txt Plugin ermöglich die Bearbeitung des robots.txt Inhalts um weitere Direktiven hinzuzufügen.
Multisite kompatibel.

RRZE-Robots-Txt

Ermöglich die Bearbeitung des robots.txt Inhalts um weitere Direktiven hinzuzufügen. Multisite kompatibel.

Processby

The plugin allows you to create and edit the robots.txt file on your site.
<h4>Features</h4>
<ul>
<li>Works with multisite network on Subdomains;</li>
<li>An example of the correct file for WordPress;</li>
<li>Works out of the box;</li>
<li>Totally Free.</li>
</ul>

Robots.txt Editor

Lightweight and perfect for multisite installations.

But in documentation need to say where the option/editor is installed (Settings > Read options).

RRZE-Robots-Txt vs Robots.txt Editor