Serverbelastung durch facebook crawler

Begonnen von admin, Juli 12, 2024, 13:09:54

« vorheriges - nächstes »

0 Mitglieder und 8 Gäste betrachten dieses Thema.

admin

In letzter Zeit häufen sich die Fälle, bei denen der Facebook Crawler Probleme macht.
Die Probleme entstehen durch sehr viele Zugriffe in kurzer Zeit auf den Shopserver.
Z.B. in einer Sekunde mehr als 100 Zugriffe und das geht dann über Tage und Wochen.
Dadurch entstehen dann unzählige Warenkorbdateien im cart-Ordner und  das logfile wächst unnantürlich schnell.
Außerdem ist der Shop für normale Kunden dann nur noch sehr langsam zu bedienen.

Eine Zeile im Logfile sieht dann z.B. so aus:
show1230,825713546659856,,173.252.70.112,1720693575,facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php),6550122,,0,

Unter Projekt | Optionen | Logfiles  sollten Sie noch ,,facebook" eintragen, um die Belastung durch Facebook zu vermeiden.