Search Console הוא הכלי החינמי של גוגל שמראה לך איך גוגל רואה את האתר שלך: אילו עמודים נכנסו לאינדקס, אילו לא ולמה, ועל אילו חיפושים האתר מופיע. כשמשהו לא מסתדר, ההסבר כמעט תמיד כתוב שם. צריך רק לדעת איפה לחפש ובאיזה סדר.
כדאי לעבוד מהבסיס כלפי מעלה. קודם מוודאים שהנכס מאומת ושאתה מסתכל על הגרסה הנכונה של האתר, אחר כך בודקים שהאתר לא חוסם את גוגל בעצמו, ורק אז נכנסים לדוח ההוספה לאינדקס ולסיבות הספציפיות. בכל שלב למטה הסברתי איך מבינים שזו הבעיה ואיך מתקנים אותה.
שלב 1: האימות ב-Search Console נכשל או נעלם
לפני שרואים נתונים, צריך להוכיח לגוגל שהאתר שלך. יש שני סוגי נכסים. Domain property מכסה את כל הדומיין, כולל תתי דומיינים, עם ובלי www, ב-http וב-https. URL-prefix property מכסה רק כתובות שמתחילות בקידומת המדויקת שהזנת, כולל הפרוטוקול.
אם הנכס הציג נתונים ופתאום ביקש אימות מחדש, כנראה שקוד האימות נעלם מהאתר. לפי גוגל, האימות תקף רק כל עוד הכלי מצליח למצוא את קוד האימות במקום שבו הוא הוצב, והחלפת תבנית, תוסף SEO או ספק DNS יכולה למחוק אותו בלי שתשים לב.
הדרך לאמת מחדש תלויה בסוג הנכס. נכס מסוג Domain מאמתים דרך רשומת DNS אצל רשם הדומיין או ספק ה-DNS. נכס מסוג URL-prefix אפשר לאמת בכמה דרכים: העלאת קובץ HTML, תגית HTML בדף הבית, קוד המעקב של Google Analytics, Google Tag Manager, או רשומת DNS. עדיף לבחור שיטה שלא תלויה בתבנית, כדי שהחלפה עתידית של עיצוב לא תפיל את האימות. ועוד דבר: לפי גוגל, אם כל הבעלים המאומתים מאבדים גישה, כל המשתמשים בנכס מאבדים גישה. לכן כדאי שיהיה יותר מבעלים מאומת אחד.
שלב 2: אין נתונים, או שהם נראים חלקיים
לפי גוגל, לאתר חדש או לאתר שנוסף עכשיו ל-Search Console יכול לקחת עד שבוע עד שנוצרים נתונים. אם עבר זמן והדוח Performance עדיין ריק, גוגל מציין שתי סיבות אפשריות: האתר עוד לא נראה בחיפוש, או שהנכס הוגדר על כתובת שגויה, למשל http במקום https בנכס מסוג URL-prefix.
את הכתובת רואים בבורר הנכסים בפינה העליונה, וכדאי לבדוק בדיוק מה רשום שם. נכס על http://example.com לא יציג את התנועה של https://www.example.com.
אם הכתובת לא נכונה, מוסיפים נכס מסוג Domain, שמאחד את כל הגרסאות, או נכס URL-prefix על הכתובת שהאתר באמת נטען בה.
ואם הנכס נכון והאתר מופיע בחיפוש, אבל בדוח Performance עדיין כמעט אין כלום, ייתכן שפשוט עוד אין מספיק אנשים שלוחצים על האתר בתוצאות. גוגל מציין את זה במפורש כהסבר אפשרי לדוח ריק, וזו כבר שאלה של תוכן ודירוג ולא של הגדרות.
שלב 3: האתר חוסם את גוגל בלי שידעת
זו הבדיקה הראשונה כשעמודים לא נכנסים לאינדקס, כי היא פשוטה והנזק שלה גדול.
- ההגדרה בוורדפרס: תחת Settings > Reading יש תיבה בשם Discourage search engines from indexing this site, והיא צריכה להיות לא מסומנת. לפי התיעוד של וורדפרס, כשהיא מסומנת מתווספת לכל עמוד תגית
noindex,nofollow. אם האתר נבנה בסביבת פיתוח והועבר לאוויר, זה הדבר הראשון לבדוק. - תגית noindex: בעזרה של גוגל הסיבה הזו מופיעה בשם URL marked 'noindex'. אם העמוד חשוב לך, צריך למצוא בתוסף ה-SEO את ההגדרה שמסמנת אותו כ-noindex ולבטל אותה.
- robots.txt: הסיבה URL blocked by robots.txt אומרת שהקובץ אוסר על Googlebot לסרוק את הכתובת. אפשר לפתוח את
/robots.txtבדפדפן ולחפש שורתDisallowשתופסת את הנתיב. וחשוב לדעת שלפי גוגל, חסימה ב-robots.txt לא מבטיחה שהעמוד לא ייכנס לאינדקס בדרך אחרת. כדי להוציא עמוד מגוגל משתמשים ב-noindex.
שלב 4: דוח כיסוי Search Console והסיבות שלו
הדוח שרבים עדיין קוראים לו דוח כיסוי נקרא היום Page indexing. הוא מחלק את העמודים לעמודים שנכנסו לאינדקס ולעמודים שלא, ולכל עמוד שלא נכנס הוא נותן סיבה. אלה הסיבות שתפגוש הכי הרבה, עם ההסבר של גוגל ומה עושים בכל אחת:
| הסיבה בדוח | מה זה אומר ומה עושים |
|---|---|
| Page with redirect | כתובת שמפנה לכתובת אחרת, ולכן היא עצמה לא תיכנס לאינדקס. בדרך כלל זה תקין, למשל גרסת http שמפנה ל-https, רק צריך לוודא שהיעד עצמו באינדקס. |
| Alternate page with proper canonical tag | העמוד מסומן כחלופה לעמוד אחר ומצביע נכון על העמוד הקנוני. לא צריך לעשות כלום. |
| Duplicate without user-selected canonical | העמוד הוא כפילות של עמוד אחר, ולא הגדרת canonical, אז גוגל בחר בעצמו את העמוד השני. אם הבחירה לא מתאימה לך, אפשר להגדיר canonical ברור. פעם ראיתי ככה עמוד אחד שהופיע בגוגל בשלוש כתובות, כי עוגנים של אלמנטור (קישורים לאזור מסוים בתוך העמוד) נכנסו לאינדקס כעמודים נפרדים. |
| Not found (404) | העמוד החזיר שגיאת 404. אם הוא עבר לכתובת אחרת, גוגל ממליץ להפנות אליה בהפניית 301. נתקלתי בזה פעם עם עמודי מבצע שנמחקו, בזמן שמיילים ישנים עוד שלחו אליהם גולשים, ומאז כל מבצע שנגמר מקבל הפניה. |
| Soft 404 | העמוד מציג לגולש הודעה בסגנון "לא נמצא", אבל לא מחזיר קוד 404. הפתרון הוא לתת לו תוכן אמיתי, או להחזיר קוד 404 אמיתי. על הבדיקות המלאות לזיהוי הסיבה כתבתי בנפרד במדריך soft 404 search console. |
| Server error (5xx) | השרת החזיר שגיאה מסדרת 500 כשגוגל ביקש את העמוד. זה סימן לבדוק את האחסון, תוסף שקורס או עומס. |
| Crawled - currently not indexed | גוגל סרק את העמוד ולא הכניס אותו לאינדקס. לפי גוגל הוא אולי ייכנס בעתיד, ואין צורך לשלוח אותו שוב לסריקה. |
| Discovered - currently not indexed | גוגל מצא את העמוד אבל עוד לא סרק אותו, לרוב כי העריך שסריקה עכשיו תעמיס על האתר ודחה אותה. |
בשתי הסיבות האחרונות אין כפתור שפותר את הבעיה. על מה בודקים במקרה כזה הרחבתי במאמר למה האתר שלי לא מופיע בגוגל. ולא כל עמוד צריך להיות באינדקס. אם עמוד הוא כפילות שהגדרת במכוון, זה שהוא מופיע ברשימה לא אומר שיש תקלה.
שלב 5: בדיקת כתובת בודדת עם URL Inspection
כשעמוד ספציפי מטריד אותך, מדביקים את הכתובת המלאה שלו בשורת החיפוש שבראש הממשק. הכלי URL Inspection מראה אם הכתובת באינדקס, איזה עמוד גוגל בחר כקנוני, ואם יש חסימה.
הכפתור Test live URL בודק את הגרסה הנוכחית של העמוד, כלומר אחרי התיקון שעשית. אם הבדיקה החיה תקינה, אפשר ללחוץ Request Indexing. לפי גוגל יש מגבלה יומית למספר הבקשות, ובקשה חוזרת על אותה כתובת לא תזרז את הסריקה. גם אחרי הבקשה, גוגל לא מבטיח שהעמוד יופיע באינדקס. הוא מציין שהאינדוקס לוקח בדרך כלל בערך יום, אבל יכול לקחת הרבה יותר. כשיש הרבה עמודים, גוגל ממליץ להגיש מפת אתר במקום לבקש אינדוקס לכל עמוד בנפרד.
שלב 6: אחרי התיקון, Validate Fix
כשתיקנת בעיה שחוזרת בהרבה עמודים, נכנסים לסיבה בדוח Page indexing ולוחצים Validate Fix, וגוגל בודק מחדש את הכתובות שנפגעו. לפי גוגל, הבדיקה לוקחת בדרך כלל עד כשבועיים, ובמקרים מסוימים הרבה יותר. במהלך התהליך הסטטוס יכול להיות Looking good, ובסופו Passed או Failed.
שלב 7: Manual actions ו-Security issues
אם התנועה צנחה פתאום, יש שני דוחות שקל לשכוח ושווה להיכנס אליהם.
הראשון הוא Manual actions. פעולה ידנית היא מצב שבו בודק אנושי בגוגל קבע שעמודים באתר לא עומדים במדיניות הספאם של גוגל, ולפי גוגל, במצב כזה חלק מהאתר או כולו לא יוצג בתוצאות. אחת הסיבות הנפוצות לפעולה כזו על קישורים היא שימוש ברשת אתרים PBN. כדי לצאת מזה מתקנים את מה שמפורט בדוח ואז לוחצים Request Review.
השני הוא Security issues. הדוח הזה מתריע על שלושה סוגי בעיות: Hacked content, Malware and unwanted software ו-Social engineering. אם מופיעה בו בעיה, האתר כנראה נפרץ.
מתי לא לנסות לבד
יש מצבים שבהם ניסוי וטעייה יכולים רק להחמיר: הדוח Security issues מראה שהאתר נפרץ, יש פעולה ידנית, חוזרות שגיאות Server error (5xx), או שאחרי כל התיקונים עמודים חשובים נשארים ב-Crawled - currently not indexed. בכל אחד מהם כדאי לעצור. ואם העמודים כבר באינדקס ואתה רוצה שיביאו יותר כניסות, המאמר איך להביא תנועה אורגנית הוא ההמשך הטבעי.
ההסבר הרשמי של גוגל על כל סיבה בדוח ההוספה לאינדקס נמצא בדף העזרה של הדוח. ואם ניסית לבד ולא הצלחת, דבר איתי ואני אטפל בזה.