אני מפתחת חנות ווקומרס וחברת האחסון פנתה אלי שגוגל נכנס ללופ ומעמיס באינדוקס בפילטרים של ווקומרס שגורם לעומס על השרת עם מאות אלפי בקשות של כ מיני פילטרים בקטגוריות מוצרים בשילובים שונים בצורה אינסופית למעלה מחודש ללא הפסקה של גוגל בוט,
כיצד אני יכולה למנוע מגוגל בוט לאנדקס את הפילטרים משום שגם מתקבל בקונסול מאות אלפי תכנים משוכפלים.
ב-sitemap הוגשו רק 462 מוצרים, 10 דפים ו-52 קטגוריות,
אבל בכיסוי בכלי מנהלי אתרים זה מציג 54900 דפים, שמתוכם 318,536 עותק משוכפל ו- 155,558 מפנה לכתובת אחרת מה הסיבה?
