19.08.2011 18:05 Alter: 8 yrs
Kategorie: Extensions
Kategorie: Extensions
dev/null robots.txt
für Multidomains.
Meine Extension dev/null robots.txt ist online. Damit können "on the fly" pro Domain unterschiedliche robots.txt Dateien generiert werden. Weiters können einzelne Konfigurationen für unterschiedliche Crawler zentral im Backend konfiguriert werden.
Kommentar hinzufügen