Neu Google Shopping abgelehnt - Crawler ausgesperrt robots.txt

[Buztar]

Hallo,

leider sind seit ein paar Tagen unsere Artikel von jetzt auf gleich nicht mehr bei Google Shopping auffindbar.
Im Merchant Center sind die Artikel gesperrt mit diesem Hinweis:
Die Desktop-Seite kann aufgrund der Datei robots.txt nicht gecrawlt werden
Eigentlich haben wir in letzter Zeit nichts angefasst, daher kann ich mir das nicht erklären.
Der Inhalt der robots.txt ist eigentlich der Standardinhalt:

User-agent: *
Disallow: /navi.php
Disallow: /druckansicht.php
Disallow: /suche.php
Disallow: /bestellabschluss.php
Disallow: /bestellvorgang.php
Disallow: /jtl.php
Disallow: /pass.php
Disallow: /registrieren.php
Disallow: /warenkorb.php
Disallow: /admin
Disallow: /admin/*
Disallow: /dbeS/*
Sitemap: https://kistenbaron.de/sitemap_index.xml

In den Webmaster Tools kann ich nichts auffälliges erkennen.
Kann uns bitte jemand auf die Sprünge helfen bzw weiterhelfen?
kistenbaron . de falls dies helfen sollte.

Danke und mit freundlichen Grüßen

 

[Buztar]

Das Problem konnte auf "doofe" URLs eingekreist werden.

 

[waldemar.p]

Hallo,

die robots.txt sieht nach Standard aus.

Was meinen Sie mir "doofe"-URLs?

Am besten überprüfen Sie eine der betroffenen URLs wie diese an Google übermittelt werden. Auch ob diese ebenfalls aufrufbar sind.

Bitte auch sicher stellen dass die Export Datei regelmäßig neu generiert wird, am besten über den Aufgabenplaner + Cronjob.