Neu Doofinder wird von Bot voll gemüllt

flori

Aktives Mitglied
17. Januar 2017
66
6
Hallo

Wir arbeiten mit Doofinder bei dem wir pro Suchanfrage zahlen. Das läuft über das Webstollen Plugin.
In den letzten paar Tagen ist die Anzahl der Suchen auf das >10 fache gestiegen. In kürzerster Zeit wurde unser Kontingent aufgebraucht.

Doofinder hat mir daraufhin das Logfile gegeben und gesagt ich muss die IP sperren. Keine gute Idee, da das unsere eigne IP war.

In unserem Access Log habe ich dann gesehen dass der Bing Bot die Suche über unseren Server direkt an Doofinder auslöst und so unser Kontingente verbraucht.

Kennt das Problem jemand? Muss ich das über die Robots sperren?

danke
 

Schmalfred

Gut bekanntes Mitglied
12. Oktober 2007
233
6
Hallo

Wir arbeiten mit Doofinder bei dem wir pro Suchanfrage zahlen. Das läuft über das Webstollen Plugin.
In den letzten paar Tagen ist die Anzahl der Suchen auf das >10 fache gestiegen. In kürzerster Zeit wurde unser Kontingent aufgebraucht.

Doofinder hat mir daraufhin das Logfile gegeben und gesagt ich muss die IP sperren. Keine gute Idee, da das unsere eigne IP war.

In unserem Access Log habe ich dann gesehen dass der Bing Bot die Suche über unseren Server direkt an Doofinder auslöst und so unser Kontingente verbraucht.

Kennt das Problem jemand? Muss ich das über die Robots sperren?

danke
Servus, das hatten wir Ende April auch.. eigentlich müsste Doofinder eine IP Sperre für ungewöhnliche Abfragen haben, über die robots.txt kann man m.w.n. keine "Such"-Formular/Eingabefelder sperren. Bei doofinder selbst kann man IP's (Bereiche) sperren. https://www.doofinder.com/support/general/search-engine-security

Der Bing Bot hat laut einer aktuellen Liste folgende IP Bereiche.. die einfach mal in den Settings bei Doofinder eintragen.. ohne Gewähr.. wir testen das auch nur gerade nach dem Schema.

157.55.39.0/24
207.46.13.0/24
40.77.167.0/24
13.66.139.0/24
13.66.144.0/24
52.167.144.0/24
13.67.10.16/28
13.69.66.240/28
13.71.172.224/28
139.217.52.0/28
191.233.204.224/28
20.36.108.32/28
20.43.120.16/28
40.79.131.208/28
40.79.186.176/28
52.231.148.0/28
51.8.235.176/28
51.105.67.0/28
 

flori

Aktives Mitglied
17. Januar 2017
66
6
Hallo


Funktioniert so leider nicht!

Wie geschrieben, müsste ich meine eigene Shop IP sperren! Doofinder sieht nicht die IPs der Bots.

Das funktioniert folgend:
Der Bot verwendet nicht die Suche über das Suchfeld, sondern durchsucht die URLs
Wir haben im Doofinder Plugin eingestellt, dass auch bei der nativen Suche die Doofinder Daten geladen werden sollen. (Würde aus meiner Sicht ja Sinn machen das die Suchergebnisse gleich sind.

In dem Fall steht aber unsere eigene Shop IP im Doofinder Log, und ich müsste diese Sperren. Dann funktioniert aber unsere Suche nicht mehr!

Workaround bis jetzt:
Unsere IP lassen wir gesperrt.
Native Suche verwendet nicht das Doofinder Ergebnis

So haben wir unterschiedliche Ergebnisse in der Suche aber die Bots verbrauchen nicht unsere Kontingente.

Ales sehr wenig zufriedenstellend!

sg Florian
www.kite-team.de
 

forumjtlolshopag

Sehr aktives Mitglied
6. Juni 2018
518
122
Also wir nutzen Doofinder auch, haben aber die Native Suche nicht aktiviert und das Layer via Javascript so gestaltet, das es wie eine "normale" Suche funktioniert. Fanden das so besser. Das Layer geht bei uns 100% in die Breite und lässt nur etwas raum oben für das Logo etc. Damit fahren wir aktuell ganz gut.
 

csaeum

Sehr aktives Mitglied
23. Juli 2011
1.264
131
Küps
Frag doch mal beim Doofinder support nach die sind schnell und gut.

PS: Falsches Unterforum das müsste eigentlich in den JTL- Shop Bereich!
 
Ähnliche Themen
Titel Forum Antworten Datum
Neu FBA Lager wird nicht erstellt eBay-Anbindung - Fehler und Bugs 0
Neu Artikelkurzbeschreibung wird in der Rechnung nicht gedruckt User helfen Usern - Fragen zu JTL-Wawi 2
Gelöst Packtisch 1.6.38.1 - Ansicht Auftrag Verpacken wird nicht mehr automatisch aktualisiert [WAWI-59097] JTL-WMS / JTL-Packtisch+ - Fehler und Bugs 1
Neu Rechnungskorrektur Zusatzposition für Rücksendekosten wird nicht übernommen JTL-Wawi - Fehler und Bugs 1
Neu Artikelname wird nicht angezeigt JTL-Wawi - Fehler und Bugs 0
Neu Workflow - Vaterartikel wird nicht ausgeführt JTL-Wawi - Fehler und Bugs 3
Neu Bei Teilrechnung wird die falsche Rechnung verschickt JTL-Wawi - Fehler und Bugs 0
Neu Fehler bei Cronjob: includes/defines.php wird nicht gefunden Betrieb / Pflege von JTL-Shop 1
Neu Konfigurationskomponenten Mindestmenge wird nicht in Auftrag übernommen User helfen Usern - Fragen zu JTL-Wawi 1
Neu Amazon Prime durch Verkäufer DHL wird nicht ermittelt JTL-ShippingLabels - Fehler und Bugs 0
Neu Smarty Problematik? JavaScript mit langen String-Variablen wird zerstört ausgegeben JTL-Shop - Fehler und Bugs 3
HILFE PICKLISTE WIRD GEDRUCKT BEIM AUSLIEFERN JTL-Wawi 1.6 1
Neu Kundenhistorie wird nicht korrekt angezeigt JTL-Wawi - Fehler und Bugs 2
Gelöst EAN-Code wird nicht ausgedruckt JTL-WMS / JTL-Packtisch+ - Fehler und Bugs 3
Neu Falsche Kundengruppe bei Sofortauftrag wenn Kundennummer eingetippt wird - JTL 1.6 JTL-Wawi - Fehler und Bugs 7
Neu Produktart wird nicht übernommen JTL-Wawi - Fehler und Bugs 0
Gelöst Zeitverzögerter Workflow wird nicht ausgeführt JTL-Workflows - Fehler und Bugs 4
Gelöst WMS Mobile 1.6 Artikelnummern wird abgeschnitten?! JTL-WMS / JTL-Packtisch+ - Fehler und Bugs 4
Neu Beim Hochladen wird die Steuerklasse auf 0 gesetzt! Gambio-Connector 5
Neu Bestellstatus wird nicht korrekt an den Shop übertragen WooCommerce-Connector 0
Neu Fehler: Zugriff auf "Bild 7 Pfad/URL" (Spalte [10]) fehlgeschlagen. Dies ist kein gültiges Bild. Bild wird nicht importiert. JTL-Ameise - Ideen, Lob und Kritik 4
Auslieferungsliste / Kaufdatum wird nicht angezeigt, sondern wann der Worker den Auftrag eingeholt hat JTL-Wawi 1.6 1
Neu Zusätzliche Bearbeitungszeit wird nicht importiert JTL-Ameise - Fehler und Bugs 1
Ankerposition wird zu weit unten angezeigt - Korrektur mit Css??? Einrichtung JTL-Shop5 0
Neu Wawi 1.6 / Kommunikation aus Wawi wird beim Lieferanten (in JTL wawi) nicht abgelegt JTL-Wawi - Fehler und Bugs 2
Neu Newsletter wird alle 1-3h verschickt - Shop 5.1.2 JTL-Shop - Fehler und Bugs 7
Neu Einkaufspreise nach dem Update 1.632 wird nicht gespeichert und vererbt! JTL-Wawi 1.6 3
Neu Unser Steuerberaternetzwerk wird 1 Jahr alt! News, Events und Umfragen 1
Beantwortet Listenansicht wird nicht gespreichert JTL-Wawi 1.6 3
Neu Amazon Pay Button wird nicht angezeigt Plugins für JTL-Shop 4
Neu Sendungsnummer wird nicht an Ebay übertragen JTL-ShippingLabels - Ideen, Lob und Kritik 0
Neu Shop 5 Kundenkonto Emailänderung wird gespeichert aber nicht angezeigt JTL-Shop - Fehler und Bugs 1
Neu AUfträge in Markplatz ersichtlich, aber unter Verkauf kann man die nicht sehen und es wird dadurch natürlich nicht gedruckt User helfen Usern - Fragen zu JTL-Wawi 0
Neu 1.6.38.1 - T&T Sendungsstatus Spalte storniert/deregistriert wird nicht befüllt JTL-Wawi - Fehler und Bugs 0
Neu JTL Shop 5.1.2 - Email über "Frage zum Artikel" wird nicht versendet Allgemeine Fragen zu JTL-Shop 1
Neu MwSt. wird bei steuerfreier Ausfuhrlieferung nicht von Versandkosten abgezogen Arbeitsabläufe in JTL-Wawi 5
Neu Wie wird Skonto in der WAWI verbucht? Arbeitsabläufe in JTL-Wawi 4
Neu Komponenten-Namen nur auf deutsch im Auftrag, englischer Name wird nicht angezeigt JTL-Wawi - Fehler und Bugs 1
Neu Tracking-ID wird nicht an JTL-Shop übergeben JTL-ShippingLabels - Fehler und Bugs 0
Neu Couponcode wird in Mail nicht angezeigt JTL-Shop - Fehler und Bugs 0
Neu Welcher Baustein wird wo verwendet? Druck-/ E-Mail-/ Exportvorlagen in JTL-Wawi 1
Neu Angebot Artikelnummer eingeben und Artikel wird nicht gefunden Arbeitsabläufe in JTL-Wawi 5
Beantwortet Shopware 6/JTL 1.5.48.2 - Neu im Sortiment seit () wird nicht zu Shopware übertragen Shopware-Connector 2
BLog: Einzelbeitrag wird sehr eigenartig dargestellt, das Megamenu fehlt Einrichtung JTL-Shop5 0
Neu SQLite3 wird nicht gefunden, obwohl installiert Shopware-Connector 7
Neu Österreichische Post - Adresszusatz wird nicht übermittelt JTL-ShippingLabels - Ideen, Lob und Kritik 2
Offen WAWI 1.6.36.0 Warenpost Label wird oft auf falschem Drucker ausgegeben JTL-ShippingLabels - Fehler und Bugs 4
Neu Wareneingang - Denkfehler? - Artikel wird Stückweise beim Hersteller bestellt - Soll Paarweise eingebucht werden? Arbeitsabläufe in JTL-Wawi 9
Neu Vaterartikel Bild anzeigen lassen wenn Variationskombination ausgesucht wird User helfen Usern - Fragen zu JTL-Wawi 3
Neu Font wird in jedem Browser anders dargestellt Templates für JTL-Shop 2

Ähnliche Themen