Noindex בגוגל: מה זה, מתי להשתמש ואיך זה משפיע על הקידום

מה זה בעצם noindex ולמה גוגל צריכה את זה

כשגוגל סורקת אתר, היא לא מחליטה לבד אילו דפים להציג בתוצאות החיפוש. בעלי האתר יכולים לתת לה הוראות מפורשות, ואחת החזקות שבהן היא תגית ה-noindex. מדובר בשורת קוד פשוטה שמוסיפים לחלק ה- של הדף, שנראית כך:

כשגוגל קוראת את ההוראה הזו, היא מבינה שהדף קיים, היא יכולה לסרוק אותו, אבל היא לא תוסיף אותו לאינדקס ולא תציג אותו בשום תוצאת חיפוש. הדף ממשיך להיות נגיש לכל מי שיש לו את הקישור הישיר, אבל מבחינת גוגל הוא כאילו לא קיים.

חשוב להבחין בין שתי שיטות שנראות דומות אבל עובדות אחרת לגמרי. חסימה ב-robots.txt מונעת מגוגל לסרוק את הדף בכלל. Noindex מאפשרת סריקה אבל חוסמת אינדוקס. ההבדל הזה קריטי: אם חסמתם דף ב-robots.txt ויש בו תגית noindex, גוגל לא תוכל לקרוא את ה-noindex ועלולה בכל זאת לאנדקס את הדף אם מצאה קישורים חיצוניים שמפנים אליו. לכן לדפים שרוצים להוציא מהאינדקס, noindex לבד הוא הפתרון הנכון.

מעבר לתגית המטא, אפשר גם להעביר את ההוראה דרך כותרת HTTP בשם X-Robots-Tag. זה שימושי במיוחד לקבצים שאין להם קוד HTML, כמו PDF או תמונות.

למה בכלל להוציא דפים מהאינדקס

גוגל מקצה לכל אתר "תקציב סריקה" (Crawl Budget), כלומר מספר מוגבל של דפים שהיא מוכנה לסרוק ולאנדקס בפרק זמן נתון. אתר עם 500 דפים שרק 200 מהם מכילים תוכן בעל ערך אמיתי, מבזבז 300 סריקות על דפים שלא תורמים לקידום ואף עלולים לפגוע בו.

גוגל מעריכה את איכות האתר גם לפי הממוצע של כל הדפים שלו. דפים חלשים, ריקים, או כפולים מורידים את הציון הכולל. זה לא תיאוריה, זה דפוס שאנחנו רואים שוב ושוב: אתרים שהוציאו מהאינדקס עשרות דפי תגיות ריקים ראו שיפור בדירוג הדפים החשובים תוך 6-8 שבועות.

הסיבות הנפוצות להשתמש ב-noindex:

• דפי תגיות ותגיות ארכיון בבלוג שמכילים רק רשימת כותרות ללא תוכן ייחודי
• דפי תוצאות חיפוש פנימיות שנוצרים דינמית עם פרמטרים ב-URL
• דפי תודה אחרי הגשת טופס או רכישה, שאין שום סיבה שיופיעו בגוגל
• דפי כניסה, ניהול, ואזורי משתמשים פרטיים
• גרסאות מודפסות של דפים שיוצרות תוכן כפול

כל אחד מהמקרים האלה מייצג דף שנוכחותו באינדקס לא מועילה לאף אחד, לא לגולש ולא לאתר.

הטעות הנפוצה ביותר עם noindex באתרי וורדפרס

בכל חודש אנחנו נתקלים באתרים שמגיעים אלינו עם בעיה שנראית מסתורית: האתר בנוי, הוא נראה טוב, יש בו תוכן, אבל גוגל פשוט לא מציגה אותו. הסיבה ב-90% מהמקרים האלה היא הגדרה אחת קטנה בוורדפרס.

בוורדפרס, תחת הגדרות > קריאה, יש אפשרות שנקראת "בקש ממנועי חיפוש לא לאנדקס את האתר הזה". ההגדרה הזו מיועדת לשלב הפיתוח, כשלא רוצים שגוגל תאנדקס אתר שעדיין לא מוכן. הבעיה היא שמפתחים רבים שוכחים לכבות אותה לפני ההשקה, ובעלי האתר לא יודעים שהיא קיימת.

התוצאה: אתר שמושקע בו כסף ועבודה, שיושב עם noindex על כל הדפים שלו, ולא מקבל שום תנועה אורגנית. הבדיקה הפשוטה היא להיכנס לקוד המקור של דף הבית ולחפש את המחרוזת "noindex". אם היא מופיעה שם ולא שמתם אותה בכוונה, זו בעיה שצריך לתקן מיד.

תוספי SEO כמו Yoast ו-RankMath מוסיפים שכבת שליטה נוספת, ולפעמים ההגדרות שלהם מתנגשות עם הגדרות וורדפרס. כדאי לבדוק את שניהם.

מתי noindex משפר את הקידום

שימוש אסטרטגי ב-noindex הוא חלק מקידום אתרים טכני מקצועי. הרעיון הוא לרכז את תשומת הלב של גוגל על הדפים שבאמת חשובים לעסק, ולנקות את האינדקס מ"רעש".

דוגמה מעשית: חנות אונליין עם 3,000 מוצרים שמשתמשת בפילטרים של צבע, גודל, ומחיר יכולה לייצר עשרות אלפי URL ייחודיים שמכילים בעצם את אותו תוכן עם פרמטרים שונים. כל URL כזה נכנס לאינדקס, מתחרה עם הדפים האמיתיים, ומבלבל את גוגל לגבי איזה דף לדרג. הוספת noindex לדפי הפילטר פותרת את הבעיה.

תרחיש נוסף שאנחנו רואים הרבה: בלוגים עם מאות דפי תגיות. כל פוסט מסומן ב-5-10 תגיות, כל תגית יוצרת דף נפרד, ורוב דפי התגיות מכילים 2-3 פוסטים בלבד. זה תוכן דל שמוריד את הציון הכולל של האתר. סימון כל דפי התגיות עם noindex הוא אחד הצעדים הפשוטים ביותר לשיפור מהיר.

מתי noindex יפגע בקידום

הכלל הפשוט: noindex על דף שגוגל צריכה לדרג הוא נזק ישיר. הנזק לא תמיד מיידי, לפעמים לוקח שבועות עד שגוגל מסירה את הדף מהאינדקס, אבל כשזה קורה הנפילה בתנועה יכולה להיות חדה.

הדפים שאסור לסמן עם noindex:

• דף הבית
• דפי שירות ומוצר שרוצים לדרג
• פוסטים בבלוג שמייצרים תנועה אורגנית
• דפי קטגוריה ראשיים בחנות
• דפי נחיתה שמקבלים תנועה אורגנית

טעות שכיחה נוספת: שימוש ב-noindex כפתרון לתוכן כפול. אם יש לכם שני דפים עם תוכן זהה, noindex על אחד מהם פותר את הבעיה הטכנית אבל מבזבז דף שיכול היה לתרום לאתר. הפתרון הנכון במקרה כזה הוא redirect 301 שמפנה את הדף הכפול לדף המקורי, ובכך גם פותר את הכפילות וגם מעביר את ערך הקישורים.

אם אתם לא בטוחים לגבי דף ספציפי, השאלה שכדאי לשאול היא: "האם גולש שמחפש בגוגל ירצה להגיע לדף הזה?" אם התשובה היא לא, noindex הוא כנראה הבחירה הנכונה.

איך מיישמים noindex בפועל

יש כמה דרכים לסמן דף עם noindex, ובחירת הדרך הנכונה תלויה בפלטפורמה ובהיקף השינוי.

תגית מטא בקוד HTML: הדרך הישירה ביותר. מוסיפים את השורה בתוך ה- של הדף. ה-"follow" אומר לגוגל שהיא יכולה לעקוב אחרי הקישורים בדף גם אם היא לא מאנדקסת אותו.

דרך תוסף SEO בוורדפרס: ב-Yoast, בכל עמוד יש לשונית "Advanced" שמאפשרת לקבוע noindex לדף ספציפי. ב-RankMath ההגדרה נמצאת תחת "Advanced" בעורך הדף. שתי הדרכים עובדות, ולא צריך לגעת בקוד.

הגדרות גלובליות לסוג תוכן: ב-Yoast ניתן להגדיר שכל דפי התגיות, למשל, יקבלו noindex אוטומטית. זה חוסך עבודה ידנית כשיש מאות דפים מאותו סוג.

כותרת HTTP: לקבצים שאין להם HTML, כמו PDF, מוסיפים את הכותרת X-Robots-Tag: noindex בהגדרות השרת. זה דורש גישה לקובץ .htaccess או להגדרות השרת.

אחרי יישום noindex, כדאי לאמת ב-Google Search Console שהדפים אכן הוסרו מהאינדקס. הכלי "בדיקת URL" מאפשר לראות בדיוק איך גוגל רואה כל דף.

Google Search Console: איך לעקוב אחרי noindex

Google Search Console הוא הכלי שמאפשר לראות בדיוק מה גוגל עושה עם הדפים שלכם. הדוח "כיסוי" (Coverage) מציג ארבע קטגוריות: שגיאות, אזהרות, תקין, ולא נכלל. הקטגוריה "לא נכלל" מכילה את כל הדפים שגוגל מצאה אבל לא אנדקסה, כולל דפים עם noindex.

כשמוסיפים noindex לדפים, כדאי לעקוב אחרי הדוח הזה כדי לוודא שהדפים הנכונים מוחרגים. אם רואים דפים חשובים בקטגוריה "לא נכלל" מסיבה של noindex, זה סימן שיש בעיה שצריך לתקן מיד.

הדוח גם מציג את מספר הדפים הכולל באינדקס לאורך זמן. אחרי ניקוי noindex מוצלח, אמורים לראות ירידה במספר הדפים הכולל באינדקס, אבל עלייה בתנועה האורגנית לדפים שנשארו. זה הסימן שהאסטרטגיה עובדת.

כלי שימושי נוסף הוא "בדיקת URL" שמאפשר להזין כתובת ספציפית ולראות האם גוגל מאנדקסת אותה, מתי סרקה אותה לאחרונה, ואם יש בה noindex. זה הדרך הכי מהירה לאמת שהיישום עבד.

noindex לעומת canonicalization: מה לבחור

שני הכלים פותרים בעיות של תוכן כפול, אבל בדרכים שונות. תגית canonical אומרת לגוגל "הדף הזה קיים, אבל הגרסה הסמכותית היא כאן" ומפנה לדף המקורי. Noindex אומרת "אל תאנדקס את הדף הזה בכלל".

מתי canonical עדיף: כשיש לכם דפים עם תוכן דומה שכולם בעלי ערך, למשל מוצר שמופיע בכמה קטגוריות שונות. Canonical מאחד את ערך הקישורים לדף אחד בלי להסתיר את האחרים לגמרי.

מתי noindex עדיף: כשהדף לא מכיל ערך ייחודי ואין סיבה שגוגל תדע על קיומו. דפי פילטר, דפי חיפוש פנימי, ודפי תגיות ריקים הם מועמדים טובים.

טעות שכדאי להימנע ממנה: שימוש בשני הכלים יחד על אותו דף. אם דף מכיל גם canonical לדף אחר וגם noindex, גוגל עלולה להתבלבל. בחרו אחד מהם.

לעסקים שמנהלים קידום עסקי בגוגל בצורה רצינית, ההחלטה בין noindex ל-canonical היא חלק מאסטרטגיה כוללת שצריך לתכנן מראש, לא לטפל בה דף אחרי דף.

בדקו את האתר שלכם: רשימת בדיקה מהירה

לפני שמחליטים על שינויים, כדאי לבצע סקירה מהירה של מצב ה-noindex הנוכחי באתר. הנה הצעדים המומלצים:

• היכנסו ל-Google Search Console ובדקו את דוח הכיסוי. כמה דפים נמצאים בקטגוריה "לא נכלל" בגלל noindex?
• סרקו את האתר עם Screaming Frog (גרסה חינמית עד 500 URL) וסננו לפי "noindex" כדי לראות את כל הדפים המסומנים
• בדקו את הגדרות וורדפרס תחת הגדרות > קריאה ווודאו שהאפשרות "בקש ממנועי חיפוש לא לאנדקס" כבויה
• בדקו את הגדרות תוסף ה-SEO שלכם לסוגי תוכן שונים: תגיות, קטגוריות, ארכיונים
• עברו על 10-20 דפים חשובים ובדקו ידנית שאין בהם noindex לא מכוון

הבדיקה הזו לוקחת שעה לכל היותר ויכולה לגלות בעיות שפוגעות בקידום כבר חודשים. אנחנו ממליצים לבצע אותה אחת לרבעון, במיוחד אחרי עדכונים גדולים לאתר או שינויי פלטפורמה.

לעסקים שרוצים להבין לעומק את המצב הטכני של האתר שלהם, כדאי לקרוא גם על קידום אתרים טכני ועל הגורמים שמשפיעים על הדירוג מעבר לתוכן.