מה זה תקציב זחילה?

אם מעולם לא שמעת על "תקציב זחילה" אתה לא לבד. זה בעצם משהו שאתרי חדשות ואתרים שמתעדכנים על בסיס יומי – לא צריכים לדאוג לו (כל עוד הדפים זוכים לסריקה ע"י הבוט ביום שהם מפורסמים). בנוסף, אם יש לך אתר קטן עם פחות מכמה אלפי כתובות דפים, הוא כנראה כבר עובר סריקה בזמן שהבוט רואה לנכון.

הכל התחיל בציוץ של חברנו עידן בן-אור:

ובתשובתו של גארי אילייס:

אז גארי הבטיח – גארי מקיים.

בפוסט שעלה בעמוד הרשמי של Webmaster Central גארי הסביר בדיוק מהו תקציב זחילה ואילו גורמים יכולים להשפיע על זחילה מהירה של גוגל.

ראשית כל יש את מגבלת קצב הזחילה אשר מגבילה את קצב החיבורים הסימולטני באתר מסוים על מנת לא להרוס את חווית המשתמש. "הבוט של גוגל נועד להיות אזרח אינטרנטי טוב. מטרתו העיקרית היא סריקה תוך כדי שהוא מוודא שהוא אינו פוגע בחווית המשתמש כאשר הוא מבקש קריאות רבות." אומר גארי.

קצב הזחילה (=סריקה) יעלה וירד בהתבסס על מהירות האתר ושגיאות שרת. אתרים תגובתיים ומהירים שאין להם שגיאות יקבלו יותר זחילות.

"גם אם אתר לא מגיע אל מגבלת קצב הזחילה שלו, כל עוד אין דרישה לאינדוקס (fetch, render & index), הבוט יפעל בצורה מועטה." אומר גארי. הוא אומר שאתרים פופולאריים מקבלים עדיפות לזחילה ושבכלליות גוגל רוצה לזחול בתוכן חדש. "אם נאחד את קצב הזחילה ואת הדרישה לזחילה ביחד אנו מגדירים את תקציב הזחילה כמספר כתובות האינטרנט שהבוט יכול ורוצה לזחול בהם."

איך ניתן לשפר את תקציב הזחילה?

דפי אינטרנט עם ערך נמוך לגולש יכולים להשפיע באופן שלילי על הזחילה של האתר ותהליך האינדוקס שלו. להלן דברים נוספים שיש לשים לב אליהם כשעוסקים בתקציב זחילה:
ניווט שגוי
תוכן משוכפל
עמודי שגיאה 404
עמודים שנפרצו ומכילים קודים זדוניים
תוכן באיכות נמוכה & ספאם

"בזבוז משאבי שרת על עמודים כגון אלו יפגע בפעילות הזחילה ועמודים שבאמת יש להם ערך עלולים להתעכב בקבלת הייחס המתאים." אומר גארי.

אז מה הדבר הבא שאתם עושים? מריצים Screaming Frog ובודקים שהכל תקין. מטפלים בדפים חסרי ערך. בהצלחה!

אליאב לנקרי

אליאב לנקרי

בעלים של חברת GH.A שיווק דיגיטלי. מומחה באסרטגיות לקידום אתרים נקיות לאורך זמן. כותב את הבלוג שמולכם כבר למעלה מ-7 שנים בגלל הכיף שבתחום.
מקדם אתרים ברוב הפעמים תחת הכובע הלבן ☺- אבל במקרים מסויימים יודע גם לעבור לצד השחור ☻.
אליאב לנקרי
אליאב לנקרי

אליאב לנקרי

בעלים של חברת GH.A שיווק דיגיטלי. מומחה באסרטגיות לקידום אתרים נקיות לאורך זמן. כותב את הבלוג שמולכם כבר למעלה מ-7 שנים בגלל הכיף שבתחום. מקדם אתרים ברוב הפעמים תחת הכובע הלבן ☺- אבל במקרים מסויימים יודע גם לעבור לצד השחור ☻.

2 תגובות על “מה זה תקציב זחילה?

  • ינואר 18, 2017 10:21 am

    אליאב תודה על המאמר וסחטיין לעידן שקיבל התייחסות ופוסט מצויין מגרי.
    אני אישית חושב שאתרים שמעלים פחות מ-5 דפי תוכן ביום – אין להם מה להתייחס למושג "תקציב זחילה".
    מושג זה מיועד בעיקר לאתרי תוכן ענקיים שמעלים 50+ עמודי תוכן ביום.

    הגב
    • אליאב לנקרי
      ינואר 19, 2017 3:39 pm

      מסכים איתך לחלוטין.

      הגב

כתיבת תגובה

האימייל לא יוצג באתר. שדות החובה מסומנים *