Google Merchant Center durch robots.txt gesperrt

conway_interactive

Aktives Mitglied
11. Dezember 2010
102
0
Mein Freund der Google sagt mir im Merchant Center das er die Produkte nicht crawlen kann, weil diese durch die robots.txt gesperrt sind. Witzigerweise crawlt Google anschienend nicht die SEO-Links sondern alles index.php?=a123456 Links. Woran könnte das liegen? Kann ich dir robots.txt dahingehend ändern dass das Google Merchant Center crawlen kann?