Question

שלום לכולם,
רציתי לשאול לגבי קובץ robots.txt:
לקוח שלי בנה אתר חדש על אותו דומיין, עשינו הפניות 301 מכל הקישורים הישנים לחדשים.
ב-search.google.com רואים את כל העמודים החדשים כמו שצריך בלי שגיאות בכלל, אבל רואים גם עמודים שאינם כלולים (שהם כל העמודים הישנים).
האם אני צריך להוסיף את הקישורים הישנים לקובץ robots.txt בצורת Disallow?
תודה רבה,
גיא

Answer 1

היי גיא,
חשוב מאוד שלא להוסיף את הלינקים הישנים ל ROBOTS.TXT, פעולה כזאת יכול לפגוע ביעילות ההפניה מבחינת העברת כוח וסיגנלים לדפים החדשים.

כדי שאוכל לענות על השאלה אני צריך לנסות להבין למה הכוונה:
אם הכוונה שאתה רואה אותם בקונסולה של גוגל באזור "דפים שאינם כלולים" זה תקין לגמרי זה בדיוק איפה שגוגל מציג דפים שמבצעים הפניה (התנהגות טבעית ותקינה שלא דורשת שום מעשה)
אם הכוונה שאתה רואה אותם בתוצאות החיפוש יש לבדוק בדיוק באילו ביטויים ואולי להמתין מעט שגוגל יסרוק אותם (או לבצע אבחון כתובת)

Comments

תודה רבה מנשה.
הכוונה שלי היתה שאכן אני רואה אותם רק בקונסולה של גוגל.
בעקרון הכל עובד מצוין.
אז אם אתה אומר שזה תקין שזה מופיע שם - אני רגוע.
תודה רבה ושבוע מצוין.