بودجه خزش چیست؟
به تعداد صفحاتی از یک سایت گفته می شود که ربات های گوگل در یک بازه زمانی خاص آنها را می خزند و ایندکس می کنند.
تعداد این صفحات در روزهای مختلف می تواند کمی تغییر کند.گوگل ممکن است هرروز۶ صفحه را در سایت شما کراول کند.
این عدد ممکن است به ۵۰۰۰ یا حتی گاهی به ۴ میلیون صفحه در روز برسد.
بودجه خزش چه اهمیتی برای سایت دارد ؟
مسلما هر مدیر وب سایتی می خواهد که پس از ایجاد صفحه ای جدید، هرچه سریعتر گوگل و موتورهای جستجو صفحات قابل ایندکس را پیدا کرده و تمام صفحات را در زمانی کوتاه ایندکس کنند.
چون هرچه قدر صفحات سریعتر کراول و ایندکس شوند، از رقیبان پیشی خواهند گرفت. بنابراین بودجه خزش بر سئو سایت و رتبه سایت و بالطبع بر تعداد کاربران از وبسایت تاثیر دارد.
دلیل در نظر گرفتن بودجه خزش برای هر سایت
هر سایتی سهمیه ای از ربات های گوگل دارد. گوگل و ربات های موتور جستجو نمی توانند همه صفحات یک سایت را با اولویت یکسان بخزند و ایندکس کنند.
درچنین شرایطی بودجه ای برای خزش درآن سایت اختصاص می‌دهند و میزان خزش را اولویت بندی می کنند.
اختصاص نرخ خزش به هر وب سایت، به موتورهای جستجو برای انجام اینکار کمک می‌کند. اگر گوگل صفحه را ایندکس نکند ،یعنی چنین صفحه ای اصلا وجود ندارد.
بنابراین اگر تعداد صفحات شما از بودجه خزش سایت بیشتر باشد، قطعاً در سایت خود صفحاتی خواهید داشت که ایندکس و درنتیجه دیده نمی شود.
بنابراین بودجه خزش، بیشتر در سایت های بزرگ نقش دارد زیرا ربات های گوگل می توانند سایت های کوچک را به راحتی کراول کرده و صفحاتشان را ایندکس کنند.