Vermutlich hast du Filter- oder Pagination-Links via Query Parameter auf deiner Seite. Das erhöht die Anzahl der URL-Kandidaten exponentiell.
Wenn du weißt, dass du jegliche URL mit Query Parameter nicht unbedingt im Suchindex brauchst (auch nicht bei anderen Suchmaschinen), kannst du folgendes zu den robots.txt Einstellungen im Startpunkt der Website hinzufügen:
Code:
user-agent: *
disallow: /*?*
Das wird dann die Anzahl der URLs dramatisch reduzieren.
Stelle außerdem sicher, dass du den Canonical Tag im Startpunkt der Website aktiviert hast.
Lesezeichen