Seite 12 von 13

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 00:02
von Flori
Danke!

Super Übersicht.

Gruss Flo

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 11:09
von Flori
Na rund 215 Gäste von 80legs.com/webcrawler.html
hat das Forum schonmal überstanden.
Muss man nur mal schauen wie man die in dieser Anzahl fernhält. :-/

Gruß Flo

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 11:23
von Flori
So den hab ich in der .htaccess ausgesperrt mit

Code: Alles auswählen

<IfModule mod_rewrite.c>
        RewriteEngine On

        RewriteCond %{HTTP_USER_AGENT} 80legs [NC]
        RewriteRule ^/* http://www.80legs.com/webcrawler.html [L]

        RewriteCond %{HTTP_USER_AGENT} 008 [NC]
        RewriteRule ^/* http://www.80legs.com/webcrawler.html [L]
</IfModule>
Hat jemand einwände?

Gruß Flo

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 11:49
von Kanaldeckel

Code: Alles auswählen

<script type="text/javascript" src="./mchat/jquery_core_mini.js"></script>
bringt sicher nicht gewaltig viel, aber diese Datei könnte man sich eventuell auch von extern holen.

Kanaldeckel

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 12:11
von Flori
Ja, aber das ist nicht wirklich problematisch, denk ich!

Gruß Flo

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 12:57
von gmu
Hallo Flori,

Die robots.txt hast Du, aber da ist alles erlaubt und alle 60 Sekunden sind Seitenaufrufe erlaubt:

http://vespaforum.de/robots.txt:

Code: Alles auswählen

User-agent: *
Crawl-delay: 60
Weitere Infos:
http://de.wikipedia.org/wiki/Robots_Exclusion_Standard

Ggf. noch META TAG ROBOTS einbauen?
Infos hier ab Anweisungen für Webcrawler:
http://de.wikipedia.org/wiki/Meta-Element


Die bösen Crawler kannst Du aber eh nur über Sperren davon abhalten - so wie Du es ja jetzt getan hast.

gmu

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 16:43
von Schubidubidu †
Wikipedia hat geschrieben:Das Protokoll ist rein hinweisend und ist auf die Mitarbeit des Webcrawlers angewiesen. Man spricht hier auch von „freundlichen“ Webcrawlern
jetzt bleibt nur zu hoffen, dass da draußen nur "freundliche" Webcrawler sind. Wenn die ähnlich "freundlich" sind wie manch "Freundlicher" ... naja.. :?

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 17:20
von gmu
Wer lesen kann ist klar im Vorteil:
gmu hat geschrieben: Die bösen Crawler kannst Du aber eh nur über Sperren davon abhalten - so wie Du es ja jetzt getan hast.

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 17:28
von Flori
Naja, die muss man Stück für Stück greifen.
Also der 80legs.com gibt selbst auf seiner Startseite eine Info, wie man Ihn bannen kann.
Allerdings stehen in anderen Foren zum Thema Beiträge, dass dieser Bot nur über die .htaccess wirksam ausgesperrt werden kann.

Gruß Flo

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 17:34
von Schubidubidu †
gmu hat geschrieben:Wer lesen kann ist klar im Vorteil:
Vollkommen unangebracht, dieser Versuch eines erneuten Seitenhiebs... :roll:
Vermutlich steckt eine tiefere, nicht aufgelöste VESPAnnung dahinter.
Mein Tipp: Rechtzeitig behandeln lassen, bevor es chronisch wird :!:

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 17:39
von gmu
Gähn.

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 17:48
von Flori
:roll:

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 20:52
von Schubidubidu †
gmu hat geschrieben:Gähn.
Vollkommen unangebracht, dieser Versuch eines erneuten Seitenhiebs... :roll:
Vermutlich steckt eine tiefere, nicht aufgelöste VESPAnnung dahinter.
Mein Tipp: Rechtzeitig behandeln lassen, bevor es chronisch wird :!:

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 22:12
von gmu
Bild

Viel Spaß noch.

gmu

Re: Forum stabil erreichbar?

Verfasst: Do 29. Nov 2012, 22:19
von Schubidubidu †
gmu hat geschrieben:Bild
Viel Spaß noch.
gmu
Gähn.