◀ חדש! הצטרפו לקבוצה הסגורה שלנו בפייסבוק ושאלו את המומחים להצטרפות >>
קולות
0
1.6k צפיות

חסמתי כתובת ברובוט אך עדיין היא נסרקת

על ידי <סגן משנה> 2.0k צפיות
האתר נסרק שלשום, הכתובת מכפילה את עמוד הבית לכן חסמתי אותה בקובץ רובוט והיא עדיין נסרקת, להלן:
http://www.tomatis.co.il/?source=googleAds
http://www.tomatis.co.il/robots.txt

1 Answer

קולות
0
על ידי <רב אלוף> 178k צפיות
לפי אתה יודע שהכתובת נסרקת? הבוט יבקר גם בטפים שחסומים בקובץ ה ROBOTS ויכול אפילו להציג אותם ללא התיאור או התוכן, כדי למנוע את הופעת הכתובת יש להשתמש או בתגית NOINDEX (רק על הבעייתית לא על כל דף הבית) או להטמיע קנוניקל

4,356 שאלות

7,386 תשובות

9,949 תגובות

2,128 משתמשים

שאלות קשורות

1 תשובה
קולות
0
שאלה נשאלה על ידי 17/06/18 על ידי wmgary <סגן משנה> 2.0k צפיות
1 תשובה
קולות
0
שאלה נשאלה על ידי 19/12/19 על ידי guy waldman <סגן משנה> 1.0k צפיות
1 תשובה
קולות
0
שאלה נשאלה על ידי 13/06/18 על ידי wmgary <סגן משנה> 2.0k צפיות
1 תשובה
קולות
+2
שאלה נשאלה על ידי 20/04/11 על ידי odinn 230 צפיות
...