Robots.txt und Suchmaschinenoptimierung.
Suchmaschinenoptimierung ist ein weites Feld. Einiges wird hier sicherlich übertrieben und Manches wiederum wird übersehen. Einer der Kandidaten, die im Rahmen der Suchmaschinenoptimierung gerne übersehen werden, ist die Robots-Anweisung. Worum geht es dabei…?