Ständiger Abruf von Bildern... access_log Datei

Chigolo

Hallo zusammen,

ich habe ein sehr komisches Problem. Mein hoster hat mich darauf aufmerksam gemacht dass in meiner access_log Datei scheinhbar massenhaft an Abrufen auftauche, hierbei kommen oftmals die selben Dateien (Bilder) vor.

Hier mal ein Auszug davon:

Code

66.249.78.76 - - [05/May/2016:02:05:17 +0200] "GET /robots.txt  HTTP/1.1" 200 465 "-" "Mozilla/5.0 (compatible; Googlebot/2.1;  +http://www.google.com/bot.html)"
188.138.26.243 - - [05/May/2016:02:05:28 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_106827960_XS.jpg HTTP/1.0" 200 45092  "-" "-"
188.138.26.243 - - [05/May/2016:02:05:28 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_92178466_XS.jpg HTTP/1.0" 200 43248  "-" "-"
188.138.26.243 - - [05/May/2016:02:05:28 +0200] "GET  /wp-content/uploads/2016/03/Fotolia_96028024_XS.jpg HTTP/1.0" 200 37134  "-" "-"
188.138.26.243 - - [05/May/2016:02:05:28 +0200] "GET  /wp-content/uploads/2016/03/K640_ds15_Aesparel_Gruppenfoto52117_worked.jpg  HTTP/1.0" 200 33882 "-" "-"
188.138.26.243 - - [05/May/2016:02:05:28 +0200] "GET  /wp-content/uploads/2016/02/Fotolia_101036022_XS.jpg HTTP/1.0" 200 49825  "-" "-"
207.46.13.192 - - [05/May/2016:02:05:26 +0200] "GET  /vm-search/manufacturer/inkospor/by,product_price/dirDesc/results,1198-1197.html  HTTP/1.1" 200 20057 "-" "Mozilla/5.0 (compatible; bingbot/2.0;  +http://www.bing.com/bingbot.htm)"
188.138.26.243 - - [05/May/2016:02:05:32 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_106827960_XS.jpg HTTP/1.0" 200 45092  "-" "-"
188.138.26.243 - - [05/May/2016:02:05:32 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_92178466_XS.jpg HTTP/1.0" 200 43248  "-" "-"
188.138.26.243 - - [05/May/2016:02:05:32 +0200] "GET  /wp-content/uploads/2016/03/Fotolia_96028024_XS.jpg HTTP/1.0" 200 37134  "-" "-"
188.138.26.243 - - [05/May/2016:02:05:32 +0200] "GET  /wp-content/uploads/2016/03/K640_ds15_Aesparel_Gruppenfoto52117_worked.jpg  HTTP/1.0" 200 33882 "-" "-"
188.138.26.243 - - [05/May/2016:02:05:32 +0200] "GET  /wp-content/uploads/2016/02/Fotolia_101036022_XS.jpg HTTP/1.0" 200 49825  "-" "-"
207.46.13.182 - - [05/May/2016:02:05:30 +0200] "GET  /kraft.html?categorylayout=0&limitstart=0&virtuemart_manufacturer_id=49&orderby=product_price  HTTP/1.1" 200 18153 "-" "Mozilla/5.0 (compatible; bingbot/2.0;  +http://www.bing.com/bingbot.htm)"
188.138.26.243 - - [05/May/2016:02:05:37 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_106827960_XS.jpg HTTP/1.0" 200 45092  "-" "-"
188.138.26.243 - - [05/May/2016:02:05:37 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_92178466_XS.jpg HTTP/1.0" 200 43248  "-" "-"
188.138.26.243 - - [05/May/2016:02:05:37 +0200] "GET  /wp-content/uploads/2016/03/Fotolia_96028024_XS.jpg HTTP/1.0" 200 37134  "-" "-"
188.138.26.243 - - [05/May/2016:02:05:37 +0200] "GET  /wp-content/uploads/2016/03/K640_ds15_Aesparel_Gruppenfoto52117_worked.jpg  HTTP/1.0" 200 33882 "-" "-"
188.138.26.243 - - [05/May/2016:02:05:37 +0200] "GET  /wp-content/uploads/2016/02/Fotolia_101036022_XS.jpg HTTP/1.0" 200 49825  "-" "-"
157.55.39.140 - - [05/May/2016:02:05:35 +0200] "GET  /hersteller/by,product_price/dirDesc/results,820-819.html HTTP/1.1" 200  23380 "-" "Mozilla/5.0 (compatible; bingbot/2.0;  +http://www.bing.com/bingbot.htm)"
207.46.13.17 - - [05/May/2016:02:05:53 +0200] "GET  /wp-content/uploads/2015/11/Fotolia_75639624_XS-174x100.jpg HTTP/1.1"  200 6100 "-" "Mozilla/5.0 (compatible; bingbot/2.0;  +http://www.bing.com/bingbot.htm)"
66.249.78.182 - - [05/May/2016:02:06:08 +0200] "GET /robots.txt  HTTP/1.1" 301 208 "-" "Mozilla/5.0 (compatible; Googlebot/2.1;  +http://www.google.com/bot.html)"
66.249.78.157 - - [05/May/2016:02:06:08 +0200] "GET /robots_https.txt  HTTP/1.1" 200 46 "-" "Mozilla/5.0 (compatible; Googlebot/2.1;  +http://www.google.com/bot.html)"
188.138.26.243 - - [05/May/2016:02:06:19 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_106827960_XS.jpg HTTP/1.0" 200 45092  "-" "-"
188.138.26.243 - - [05/May/2016:02:06:19 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_92178466_XS.jpg HTTP/1.0" 200 43248  "-" "-"
188.138.26.243 - - [05/May/2016:02:06:19 +0200] "GET  /wp-content/uploads/2016/03/Fotolia_96028024_XS.jpg HTTP/1.0" 200 37134  "-" "-"
188.138.26.243 - - [05/May/2016:02:06:19 +0200] "GET  /wp-content/uploads/2016/03/K640_ds15_Aesparel_Gruppenfoto52117_worked.jpg  HTTP/1.0" 200 33882 "-" "-"
188.138.26.243 - - [05/May/2016:02:06:20 +0200] "GET  /wp-content/uploads/2016/02/Fotolia_101036022_XS.jpg HTTP/1.0" 200 49825  "-" "-"
164.132.161.15 - - [05/May/2016:02:06:18 +0200] "GET  /sportnahrung/proteine-eiweiss/manufacturer/powerbar/results,211-210.html  HTTP/1.1" 200 19865 "-" "Mozilla/5.0 
(compatible; AhrefsBot/5.1;  +http://ahrefs.com/robot/)"
188.138.26.243 - - [05/May/2016:02:07:19 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_106827960_XS.jpg HTTP/1.0" 200 45092  "-" "-"
188.138.26.243 - - [05/May/2016:02:07:19 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_92178466_XS.jpg HTTP/1.0" 200 43248  "-" "-"
188.138.26.243 - - [05/May/2016:02:07:19 +0200] "GET  /wp-content/uploads/2016/03/Fotolia_96028024_XS.jpg HTTP/1.0" 200 37134  "-" "-"
188.138.26.243 - - [05/May/2016:02:07:19 +0200] "GET  /wp-content/uploads/2016/03/K640_ds15_Aesparel_Gruppenfoto52117_worked.jpg  HTTP/1.0" 200 33882 "-" "-"
188.138.26.243 - - [05/May/2016:02:07:19 +0200] "GET  /wp-content/uploads/2016/02/Fotolia_101036022_XS.jpg HTTP/1.0" 200 49825  "-" "-"
207.46.13.192 - - [05/May/2016:02:07:17 +0200] "GET  /vm-search/manufacturer/keimling/dirDesc/results,1135-1134.html  HTTP/1.1" 200 19270 "-" "Mozilla/5.0 (compatible; bingbot/2.0;  +http://www.bing.com/bingbot.htm)"
188.138.26.243 - - [05/May/2016:02:07:30 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_106827960_XS.jpg HTTP/1.0" 200 45092  "-" "-"
188.138.26.243 - - [05/May/2016:02:07:30 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_92178466_XS.jpg HTTP/1.0" 200 43248  "-" "-"
188.138.26.243 - - [05/May/2016:02:07:30 +0200] "GET  /wp-content/uploads/2016/03/Fotolia_96028024_XS.jpg HTTP/1.0" 200 37134  "-" "-"
188.138.26.243 - - [05/May/2016:02:07:30 +0200] "GET  /wp-content/uploads/2016/03/K640_ds15_Aesparel_Gruppenfoto52117_worked.jpg  HTTP/1.0" 200 33882 "-" "-"
188.138.26.243 - - [05/May/2016:02:07:30 +0200] "GET  /wp-content/uploads/2016/02/Fotolia_101036022_XS.jpg HTTP/1.0" 200 49825  "-" "-"
85.25.210.234 - - [05/May/2016:02:07:35 +0200] "GET /robots.txt  HTTP/1.1" 200 465 "-" "Mozilla/5.0 (compatible; seoscanners.net/1;  +spider@seoscanners.net)"
85.25.210.234 - - [05/May/2016:02:07:36 +0200] "GET  /images/stories/virtuemart/product/resized/multipower-green-kick_100x100.jpg  HTTP/1.1" 200 2277 "-" "Mozilla/5.0 (compatible; seoscanners.net/1;  +spider@seoscanners.net)"
188.138.26.243 - - [05/May/2016:02:08:14 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_106827960_XS.jpg HTTP/1.0" 200 45092  "-" "-"
188.138.26.243 - - [05/May/2016:02:08:14 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_92178466_XS.jpg HTTP/1.0" 200 43248  "-" "-"
188.138.26.243 - - [05/May/2016:02:08:14 +0200] "GET  /wp-content/uploads/2016/03/Fotolia_96028024_XS.jpg HTTP/1.0" 200 37134  "-" "-"
188.138.26.243 - - [05/May/2016:02:08:14 +0200] "GET  /wp-content/uploads/2016/03/K640_ds15_Aesparel_Gruppenfoto52117_worked.jpg  HTTP/1.0" 200 33882 "-" "-"
188.138.26.243 - - [05/May/2016:02:08:14 +0200] "GET  /wp-content/uploads/2016/02/Fotolia_101036022_XS.jpg HTTP/1.0" 200 49825  "-" "-"
40.77.167.53 - - [05/May/2016:02:08:12 +0200] "GET  /buecher/das-fettbuch,-184-seiten-detail.html HTTP/1.1" 200 17962 "-"  "Mozilla/5.0 (compatible; bingbot/2.0;  +http://www.bing.com/bingbot.htm)"
188.138.26.243 - - [05/May/2016:02:08:16 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_106827960_XS.jpg HTTP/1.0" 200 45092  "-" "-"
188.138.26.243 - - [05/May/2016:02:08:16 +0200] "GET  /wp-content/uploads/2016/04/Fotolia_92178466_XS.jpg HTTP/1.0" 200 43248  "-" "-"
188.138.26.243 - - [05/May/2016:02:08:16 +0200] "GET  /wp-content/uploads/2016/03/Fotolia_96028024_XS.jpg HTTP/1.0" 200 37134  "-" "-"
188.138.26.243 - - [05/May/2016:02:08:16 +0200] "GET  /wp-content/uploads/2016/03/K640_ds15_Aesparel_Gruppenfoto52117_worked.jpg  HTTP/1.0" 200 33882 "-" "-"
188.138.26.243 - - [05/May/2016:02:08:16 +0200] "GET  /wp-content/uploads/2016/02/Fotolia_101036022_XS.jpg HTTP/1.0" 200 49825  "-" "-"
207.46.13.182 - - [05/May/2016:02:08:14 +0200] "GET  /muskelaufbau.html?categorylayout=0&start=630&virtuemart_manufacturer_id=41  HTTP/1.1" 200 19567 "-" "Mozilla/5.0

Alles anzeigen

Ist ein Plugin dafür verantwortlich? Hat jemand ein ähnliches Problem? Was mich wundert sind vor allem die Gleichheit der Dateien die abgerufen werden. Ich nutze Wordpress 4.5.1.

Danke im Voraus, LG

Werbepost

Hallo!

Wenn du gerade an deiner Website arbeitest oder dein aktuelles Hosting überdenkst: Wir betreiben mit NetzLiving eine Hosting-Plattform, die speziell auf Performance, Sicherheit und einfache Verwaltung ausgelegt ist.

✔️ Schnelle Ladezeiten (optimiert für WordPress & Co.)
✔️ Deutsche Server & DSGVO-konform
✔️ Persönlicher Support (kein 0815-Ticket-System)

Mehr erfahren

Monika

wenn ich zu deiner Site surf,
erzeuge ich einen EIntrag in dieser Log Datei

kommt der googlebot vorbei dann der auch

und so macht es jedeR Bot oder Surfer

d.h. solche Einträge kann WP gar nicht steuern,auch kein Plugin erzeugen

und es hat sie jeder, der eine Website hat

d.h ein Plugin erzeugt dies sicher nicht,
WP auch nicht, weil es sich nicht selbst besucht ;-)

ich lese da was vom Bingbot, von einem SEOScanner

nutzt du selbst sowas wie ein SEO Tool?

schließt du gefrässige Spider oder Bots via robots.txt aus?
hast du was gegen Hotlinking von Bildern unternommen?

und massenhafte Einträge in die Access Logs => normalerweise freut man sich darüber, außer es ist hotlinking und sind bots, die einem totfressen ;-)

Hille

ich verstehe ehrlich gesagt auch nicht so recht das Problem deines Hosters

chrismuller82

Füge in Deine .htaccess-Datei folgende Zeilen ein:

RewriteEngine On
RewriteBase /
RewriteCond %{HTTP_USER_AGENT} (seoscanners.net) [NC]
RewriteRule .* - [F]

Das wird für seoscanners.net jeweils die Antwort "Forbidden" liefern. Dann hört das Dauer-Downloaden bald auf. Vor allem sinkt die CPU-Last des Servers sofort, weil er keine Daten mehr lesen und liefern muss.

Putzlowitsch

Zitat von chrismuller82

...
Das wird für seoscanners.net jeweils die Antwort "Forbidden" liefern. Dann hört das Dauer-Downloaden bald auf. Vor allem sinkt die CPU-Last des Servers sofort, weil er keine Daten mehr lesen und liefern muss.

Da steht gerade mal Eintrag von SEOScanner im Beispiel, das wird wohl kaum das Problem sein.

Die meisten Zugriffe kommen "anonym" von der eigenen IP-Adresse des Servers (188.138.26.243), könnte also doch etwas im Wordpress (ein Plugin) sein. Ist aber schwer zu sagen, was genau und warum.

Gruß
Ingo

Tubedesigner

Zitat von Chigolo

(…) ich habe ein sehr komisches Problem. Mein hoster hat mich darauf aufmerksam gemacht dass in meiner access_log Datei scheinhbar massenhaft an Abrufen auftauche, hierbei kommen oftmals die selben Dateien (Bilder) vor.
(…)

Also, habe mal kurz die hauptsächlich vorkommenden IDs der Bilder gecheckt und die stammen ja von einer sehr großen bekannten Microstock-Agentur und zeigen inhaltlich überwiegend eher spärlich bekleidete muskulöse Männer und auch durchtrainierte Frauen, teils interaktiv.

Die Bilder tangieren zwar inhaltlich allenfalls den Softerotikbereich, werden aber u.a. auch von einschlägigen Erotikportalen als Symbolfotos eingesetzt (suche z.B. mal nach dem Bild der in den Männerslip beißenden Frau, suche dabei auch ruhig mal über den Tellerrand von google.de hinaus). Wenn nun Leute, die diese Websites besuchen, nach der Quelle oder weiteren dieser Bilder suchen, werden nicht so wenige dies in der (Google)Bildersuche auf jene Art unternehmen, dass sie einfach die betreffenden Bilder von dem einem Browserfenster/Tab, in das mit dem Suchfeld der (Google)Bildersuche bzw. ihrer persönlichen Lieblingssuchmaschine schieben.

Als Ergebnis werden dabei ziemlich weit vorne Deine (mutmaßlichen) Websites angezeigt, werden diese nun besucht, erhalten auch die Bilder Traffic, darüber hinaus dürften sie möglicherweise zusätzlich noch direkt in einschlägigen Foren gepostet, verlinkt oder gar eingebunden sein, aber danach habe ich nicht weiter gesucht, aber darüber geben Dir i.d.R. richtig interpretiert Deine Serverlogs aufschlussreiche Auskunft.

Sollte der Traffic zum Problem werden, suche Dir demnächst einfach weniger verbreitete Bilder aus und unterbinde ggf. Hot- und Deep-Linking (was aber u.U. Deinem SEO schaden kann) oder drehe den Spieß einfach um und nutze den zusätzlichen Traffic für Deine eigenen Zwecke, denn zumindest mal jene, die sich gerne halbnackte muskulöse Kerle anschauen, kaufen zu einen nicht so geringen Teil ebenso gerne mal Supplemente u.ä. zum Muskelaufbau…

Monika

ich vermutete ja:Hotlinking oder

was mir noch einfällt:
hast du den Spieß umgdreht und nutzt du ein Plugin mit dem du Bilder suchen kannst im Backend?

Chigolo

Danke für all die Infos, ich gebe das mal so weiter.

Monika Ich nutze kein Plugin für Bildersuche.
Tubedesigner Es war keine Absicht, die Bilder stammen von Fotolia, generell ist es ja "positiv" was SEo angeht, allerdings für den Hoster natürlich, wie Chrismuller82 schon schriev, CPU technisch ein Nachteil. Ich werde den Tipp von chrismuller82 einmal testen. Danke auf jeden Fall für die schnelle und große Rückmeldung auf meine Frage.

Chigolo

Info:

RewriteEngine On
RewriteBase /
RewriteCond %{HTTP_USER_AGENT} (seoscanners.net) [NC]
RewriteRule .* - [F]

Brachte keinen Erfolg. Die Aussage von Putzlowisch ist korrekt. Wir haben auch nun festgestellt dass ausschließlich die Bilder der Startseite immer wieder abgerufen werden. Kann man dies irgendwo deaktivieren?

Putzlowitsch

Ein normales Verhalten von Wordpress ist das nicht. Es kann eigentlich nur durch ein Plugin oder das Theme verursacht werden.

Vielleicht ein Plugin, das jedes mal on-the-fly ein Thumbnail von Bildern erzeugt, oder etwas Ähnliches.
Oder durch einen anderen Prozess außerhalb von Wordpress, der auch auf dem Server läuft.

Schwer zu sagen, so von außen.

Gruß
Ingo

chrismuller82

ja, stimmt, dass seoscanners dort nur einmal genannt wird. Der .htaccess-Code schadet aber nicht. Besser drin lassen.

Die Aufrufe kommen aber auch nicht von einem Plugin, dann würde sich die Website ja extern selbst ansurfen. Geht einfach nicht.

Wenn extern viele Abrufe von der gleichen IP kommen, sollte man entweder mit der Software-Firewall des Betriebssystems (meistens iptables) oder mit /etc/hosts.allow die IP-Adresse blockieren.

Chigolo

Der Fehler ist gefunden. Der Blog (bzw. die neuesten Artikel) wurde als Modul in eine Joomla Seite integriert, daher entstand das Chaos. Weshalb es passiert ist kann ich leider nicht sagen, denn bei einer weiteren Joomlaseite auf der die neuesten Blogbeiträge als Modul angezeigt werden funktioniert alles einwandfrei.

Das besagte Modul wurde auf jeden Fall entfernt und das Logfile spuckt nun saubere Codes aus :-) Danke für Eure Tipps und Ideen!

Willkommen! Melden Sie sich an oder registrieren Sie sich.

Ständiger Abruf von Bildern... access_log Datei

Jetzt mitmachen!