Question

שלום

בגוגל וובמאסטר יש רשימה של דפים שהגישה אליהם אינה אפשרית. כאשר אני לאוחץ על הכתובת שלהם לא מופיע דף אלא הודעת שגיאה. איני יודע כיצד גוגל הגיע אליהם ואיני יודע כיצד להגיע אליהם בעצמי. כיצד מתקנים ?
חשוב לתקן ?

תודה

Answer 1

קודם כל, עליך להבין מה הסיבה לכך שאין גישה לדפים האלה. שים לב, למשל, בין הודעה 403 שאומרת בדרך-כלל הגבלת גישה באמצעות מערכת ההרשאות של ה-CMS לבין הודעות ממשפחת 5xx שלרוב קשורות לתקלת שרת או DB. אם מדובר בדף שלא אמורה להיות אליו גישה לגולשים, חסום אותו ב-robots.txt.

Comments

לרוב מדובר בשגיאה מסוג 500. מה זה אומר ?

---

קרא את זה
http://pcsupport.about.com/od/findbyerrormessage/a/500servererror.htm

בגדול, אם לא נטען דף אלא רק מתקבלת הודעת שגיאה, אז סביר להניח שמדובר בדף או תיקייה שלא צריכים להיות מאונדקסים ועדיף למנוע זחילה אליהם באמצעות robots.txt. אם הדף נטען עם הודעת השגיאה בתוכו, זו לרוב שגיאה בקוד שפונה בצורה לא תקינה ל-DB.

Answer 2

בנוסף לתשובה של shooky אני יוסיף שבכדי לראות מאיפה גוגל הגיע לדף ששם אתה יכול לסרוק את האתר שלך אם תוכנה שמדמה מנוע חיפוש ולראות איזה דפים מקשרים לדפים הללו-כמו xenu לדוגמא

וחשוב לדאוג לכמה שפחות שגיאות בכלי מנהל האתרים, מניסיון אישי לשגיאות האלו יש השפעה מאוד מהירה על התנועה האורגנית שאתה מקבל מגוגל.

Comments

תודה.

עשיתי סריקה של xenu ומתברר שמספר השגיאות שהוא מציג הוא פי 20 מהשגיאות שגוגל מציג. זה שכיח ?

עבור חלק מהשגיאות הגעתי לדף ולא מצאתי שגיאה. מדובר בעיקר בכתבות של בתמונות. בדקתי והכל בסדר איתן. להתעלם ?
אציין כי השם של התמונות בעברית, אך הן להם בעיה עם הדפדפנים.

---

זה שכיח כי גוגל לא מגיע לכל הדפים ויש גם חסימות שנקבעות בקבצי ה robots שאליהם גוגל לא מגיע.
404 של תמונות אתה יכול להתעלם מהם בינתיים מה לגבי ה 500 אותם ראית בXenu?

---

תודה.

ה 500 זה דפים שהמידע בהן אינו רלוונטי, עדיין לא מצאתי לזה פתרון.
אני מניח שכדאי לתקן קודם את מה שגוגל זיהה, ורק לאחר מיכן להתעסק במה שהוא לא זיהה. בכל אופן תיקון של מה שגוגל לא זיהה לא ישנה את מיקומי האתר. הלא כך ?

---

לא, אבל בטווח הארוך לדפים האלו גוגל יכול להגיע, בינתיים אל תיגע בהם, תבדוק את הדפים שמקשרים לשגיאות ה500 באתר שזה בעצם מה שרצית לבדוק בהתחלה