Hallo, Gast! (Registrieren)

Letzte Ankündigung: MyBB 1.8.38 veröffentlicht (30.04.24)


Benutzer, die gerade dieses Thema anschauen: 1 Gast/Gäste
Seiten mithilfe einer "robots.txt"-Datei blockieren oder entfernen
#1
Eine "robots.txt"-Datei schränkt den Zugriff auf Ihre Website für Suchmaschinenrobots ein, die das Web crawlen. Robots sind automatisierte Systeme, die vor dem Zugriff auf die Seiten einer Website prüfen, ob der Zugriff auf bestimmte Seiten möglicherweise durch die Datei "robots.txt" gesperrt ist.

Meine Frage, gibt es ein Plugin was die Erstellung einer .txt ersetzt oder anderweitige Möglichkeiten?

Wenn ich meine Site in google eingebe, stehen ca. 10 Domains untereinander, kontakt, impressum usw. Will nur einen Eintrag und zwar beziehend auf die Hauptseite gelistet haben.

Gruß
#2
Ein Plugin ist mir nicht bekannt. Ist aber auch nicht nötig. Eine robots.txt ist schnell angelegt. Siehe auch hier.
#3
Beim Google SEO Plugin ist eine Beispiel robots.txt Datei dabei die du an deine Bedürfnisse anpassen kannst.

Zitat:Will nur einen Eintrag und zwar beziehend auf die Hauptseite gelistet haben.

Normalerweise willst du so viel Inhalt wie möglich (alle Threads usw.) in Google haben, da du sonst schlichtweg nicht gefunden wirst. Du solltest also nur vorsichtig blockieren. Impressum, Kontakt ist OK wenn du das nicht bei Google haben willst, nur wenn du alle Inhalte blockierst schadest du dir selbst.


Möglicherweise verwandte Themen…
Thema Verfasser Antworten Ansichten Letzter Beitrag
  robots.txt und google schauan 3 2.307 02.07.2014, 17:16
Letzter Beitrag: StefanT
  Muss robots.txt von Google gelesen werden können? Koelner 30 9.489 22.06.2014, 18:39
Letzter Beitrag: Koelner
  Malware-Banner blockieren fernhafen 3 1.612 09.06.2014, 00:14
Letzter Beitrag: MrBrechreiz
  Beitrags-Icon im Forum deaktivieren oder entfernen? BattlieldAD 2 1.365 25.05.2014, 09:41
Letzter Beitrag: Jockl
Wink robot.txt susi 4 2.316 19.03.2014, 19:58
Letzter Beitrag: susi