יש לי אתר שסיימו לבנות לי לפני כחודשיים. כשעושים בגוגל site:domain, מתקבלות התוצאות הבאות:
- במודעה הראשונה, שמציגה את דף הבית, מתקבלת במקום הדסקריפשן הודעה כזאת "תיאור של תוצאה זו אינו זמין בגלל ה-robots.txt של אתר זה"
- כל שאר המודעות שמתקבלות הן הדומיין + אקסטנשנים מוזרים, וכולן מובילות לדף הבית.
- שאר דפי האתר לא נסרקו למעשה. אני לא מוצא אותם בגוגל.
עברתי על סימוני ה-noindex במערכת הניהול של האתר. מאחר שלא ראיתי שם בעיה, חשבתי שאולי יש בעיה בשרת האכסון. לא יודע, אולי שם משהו חוסם את הרובוטים של גוגל. בדקתי עם המאכסן, והוא אמר שאין שום דבר שם ושצריך לבדוק בקבצים דרך ה-ftp. זה כבר גדול עליי...
האם זה הגיוני מה שאמרו לי מהאכסון? האם זוהי תקלה, או איזשהי הגדרה שגויה (באתר או באכסון). בקיצור, מה אני יכול לעשות עם זה?