15.12.2008, 14:48
Hallo,
ich habe Heute ein komisches Verhalten von Googlebot und Yahoo bemerkt:
Ich habe ein Forum auf meinem Board wo nur ausgewählte Mitglieder Zugriff drauf haben: Ein Link dazu kann man als Gast oder als einfaches Mitglied nicht sehen, trotzdem steht bei wer ist online dass googlebot und yahoo! das Thema lesen!!!
Ausserdem habe ich in der robots.txt den Zugriff auf dem Kalender gesperrt trotzdem greift google oft darauf!
kennt jemand von euch das Problem?
L.G
Nachtrag: Auch dieser Crawler hat Zugriff: crawl-9.cuill.com
Ich habe das Thema unter 1.2 gestellt Sorry soll aber für die Version 1.4.4 sein, die ich auch benutze!!!-Bitte verschieben-
ich habe Heute ein komisches Verhalten von Googlebot und Yahoo bemerkt:
Ich habe ein Forum auf meinem Board wo nur ausgewählte Mitglieder Zugriff drauf haben: Ein Link dazu kann man als Gast oder als einfaches Mitglied nicht sehen, trotzdem steht bei wer ist online dass googlebot und yahoo! das Thema lesen!!!
Ausserdem habe ich in der robots.txt den Zugriff auf dem Kalender gesperrt trotzdem greift google oft darauf!
kennt jemand von euch das Problem?
L.G
Nachtrag: Auch dieser Crawler hat Zugriff: crawl-9.cuill.com
Ich habe das Thema unter 1.2 gestellt Sorry soll aber für die Version 1.4.4 sein, die ich auch benutze!!!-Bitte verschieben-