بودجه خزیدن چیست؟
هدف Google این است که اطلاعات مفید را در دسترس افراد جستجوگر در وب قرار دهد. برای دستیابی به آن ، Google می خواهد محتوا را از منابع با کیفیت خزیده و فهرست کند.
خزیدن در وب پرهزینه است: Google سالانه به اندازه کل شهر سانفرانسیسکو از انرژی صرفاً برای جستجوی وب سایت ها استفاده می کند. برای ردیابی هرچه بیشتر صفحات مفید ، ربات ها باید الگوریتم های برنامه ریزی را دنبال کنند که اولویت بندی کدام صفحات را خزیدن و چه زمانی انجام می دهد. اهمیت صفحه Google این ایده است که روشهای قابل اندازه گیری برای تعیین اولویت بندی صفحات وجود دارد.
هیچ شاخصی از مقادیر تعیین شده خزشها برای هر سایت وجود ندارد. در عوض ، خزشهای موجود براساس آنچه گوگل فکر می کند سرور شما از پس آن برمی آید و علاقه ای که کاربران معتقدند به صفحات شما دارند توزیع می شود.
بودجه خزیدن وب سایت شما روشی برای تعیین کمیت Google برای خزیدن آن است که به صورت میانگین تعداد صفحات در روز بیان می شود.
چرا بودجه خزیدن خود را بهینه کنید؟
با تشکر از داده های OnCrawl در صدها میلیون صفحه ، ما همچنین یاد گرفته ایم که بین دفعات خزیدن Google یک صفحه و تعداد بازدیدهایی که دریافت می کند ارتباط زیادی وجود دارد: صفحاتی که بیشتر خزیده می شوند بیشتر در نتایج جستجو مشاهده می شوند .
این همبستگی به این معنی است که شما می توانید از بهینه سازی بودجه خزیدن به عنوان یک استراتژی برای ارتقا گروهی از صفحات در نتایج جستجو استفاده کنید. اگر وب سایت شما دارای صفحات فصلی است ، این صفحات می توانند کاندیداهای عالی برای تبلیغات تبلیغاتی بر اساس بهینه سازی خلوص بهینه شده باشند.
برای جلوه دادن این صفحات در نتایج جستجو ، باید آنها را بالاتر از سایر صفحات وب سایت خود در دوره فصلی مناسب به Google ارتقا دهید.
با استفاده از استراتژی های بهینه سازی بودجه خزیدن ، می توانید توجه Google را به صفحات خاص و دور از دیگران جلب کنید تا تعداد بازدیدها را در صفحات موضوعی فصلی در وب سایت خود افزایش دهید.
شما می خواهید:
بودجه خزیدن عمومی خود را بهینه کنید.
با استفاده از مجموعه هایی که از صفحه اصلی دسته بندی ها در ساختار سایت شما پیوند دارند ، عمق صفحات مهم فصل را کاهش دهید.
با ایجاد بک لینک از صفحات مرتبط ، محبوبیت داخلی صفحات مهم را افزایش دهید.
شماره 1 بودجه خزیدن خود را کنترل کنید:
کنسول جستجوی Google مقادیر آماری خزیدن ترکیبی را برای بازدید از همه ربات های Google فراهم می کند. علاوه بر 12 ربات رسمی ، در OnCrawl متوجه یک ربات جدید شده ایم: ربات Google AMP. این داده ها شامل همه URL ها - از جمله JavaScript ، CSS ، فونت و URL های تصویر - برای همه بازدیدهای ربات است. به دلیل تفاوت در رفتار ربات ، مقادیر داده شده میانگین هستند. به عنوان مثال ، از آنجا که ربات های AdSense و موبایل باید هر صفحه را کاملاً ارائه دهند ، برخلاف دسک تاپ Googlebot ، زمان بارگذاری صفحه ارائه شده به طور متوسط بین زمان بارگذاری کامل و جزئی است.
این برای تجزیه و تحلیل SEO به اندازه کافی دقیق نیست.
بنابراین ، مطمئن ترین روش برای اندازه گیری بودجه خزیدن سایت شما ، بررسی منظم گزارشات سرور سایت است. اگر با گزارش های سرور آشنا نیستید ، اصل مطلب ساده است: سرورهای وب هر فعالیتی را ضبط می کنند. این گزارش ها معمولاً برای تشخیص مشکلات عملکرد سایت مورد استفاده قرار می گیرند.
فعالیتی که ثبت شده است درخواست URL است. در گزارش ، خطوط مربوط به این نوع فعالیت شامل اطلاعات مربوط به آدرس IP درخواست کننده ، URL ، تاریخ و زمان و نتیجه به صورت کد وضعیت است.
شماره 2 مشکلات سرور را برطرف کنید:
اگر سایت شما خیلی کند است یا سرور شما خیلی وقت تلف می کند یا خطاهای سرور را برمی گرداند ، Google نتیجه می گیرد که وب سایت شما نمی تواند تقاضای بیشتری برای صفحات خود پشتیبانی کند.
با اصلاح کدهای وضعیت 400 و 500 و اصلاح فاکتورهای مربوط به سرور برای سرعت صفحه ، می توانید مشکل سرور را درک کنید.
از آنجا که سیاهههای مربوط هم کدهای وضعیت برگردانده شده و هم تعداد بایتهای بارگیری شده را نشان می دهد ، نظارت بر ورود به سیستم برای تشخیص و اصلاح مشکلات سرور کلیدی است.
اگر سایت شما در یک سرور مشترک میزبانی شده باشد ، شما همچنان می توانید از طریق ذخیره سازی ، CDN ها ، تصاویر با اندازه مناسب ، به روزرسانی نسخه PHP خود و استفاده از تکنیک های بارگذاری تنبل یا ناهمزمان ، عملکرد سرور را بهبود بخشید.
شماره 3 هدر نده ، نمی خواهی:
Google را روی صفحاتی که می خواهید رتبه بندی کنید و از روده های سایت خود دور باشد متمرکز کنید. غالباً ، بودجه خزیدن شما برای کشف صفحات جدید یا به روز شده استفاده نمی شود زیرا این هزینه برای کارهای دیگر است.
داده های نظارت بر ورود شما تصویری از آنچه Google خزنده می کند - و آنچه که هرگز کشف نمی کند - در سایت شما ارائه می دهد.
ادغام اطلاعات ورود به سیستم با داده های یک خزنده SEO به شما کمک می کند تا به س questionsالات زیر پاسخ دهید:
آیا صفحاتی که با وجود فهرست نشدن قابل خزیدن هستند؟ (آیا آنها در نقشه سایت هستند؟)
آیا صفحاتی در حال خزیدن هستند که 200 کد وضعیت را بر نمی گردانند؟
آیا Google URL ها را برای تصاویر ، PDF و سایر رسانه ها خزنده است؟
آیا Google صفحاتی را خزنده می کند که هیچ بازدید کاربر برای آنها نداشته باشید؟
آیا Google بسیاری از صفحات هدایت شده را خزنده می کند؟
اگر می توانید به هر یک از این س “ال ها پاسخ "بله" دهید ، می توانید با هدایت ربات ها برای خزیدن این منابع ، بودجه خزیدن را آزاد کنید. مباحث مصرف کننده بیشترین بودجه را در اولویت قرار دهید.
علاوه بر این ، تجزیه و تحلیل OnCrawl می تواند روابط بین:
عمق صفحات در ساختار سایت و فرکانس خزش صفحه شما.
کدهای وضعیت و فرکانس خزش صفحه.
محبوبیت صفحات بر اساس تعداد بازدید و فرکانس خزش صفحه.
ساختار پیوند داخلی و فرکانس خزش صفحه.
اگر صفحات فصلی را تبلیغ می کنید ، اینجاست که می توانید بیشترین تفاوت را ایجاد کنید. این روابط بهترین نوع محتوا و ساختار را در سایت شما نشان می دهد. ساختار پیوندی صفحات فصلی را متناسب با آن تغییر دهید و این صفحات را در عمق بهینه سایت و بالاتر از سایر صفحات قرار دهید.
سرانجام ، نظارت بر ورود به سیستم و داده های خزیدن سایت ، هر صفحه یتیمی - سنی را که به ساختار سایت شما مرتبط نیستند - که توسط Google خزیده شده است ، نشان می دهد. اگر این صفحات از Google بازدید می کنند ، دوباره آنها را به ساختار سایت خود متصل کنید تا از این ترافیک استفاده کنید. در غیر این صورت ، آنها را پایین بیاورید یا ربات ها را ممنوع کنید.
شماره 4 برای Googlebot بهینه سازی کنید:
انسان ها می توانند انواع کارهایی را انجام دهند که ربات ها قادر به انجام آن نیستند - و نباید هم باشند. به عنوان مثال ، ربات ها باید بتوانند به صفحه ثبت نام شما دسترسی داشته باشند ، اما نباید سعی در ثبت نام یا ورود به سیستم داشته باشند. ربات ها فرم های تماس را پر نمی کنند ، به نظرات پاسخ نمی دهند ، بررسی ها را نمی گذرانند ، برای خبرنامه ها ثبت نام می کنند ، موارد را به سبد خرید یا سبد خرید آنها را مشاهده کنید.
با این حال ، مگر اینکه به آنها بگویید این کار را نکنند ، آنها همچنان سعی می کنند این پیوندها را دنبال کنند. برای جلوگیری از رباتها از اقداماتی که نمی توانند انجام دهند ، از پیوندها و محدودیت های nofollow در پرونده robots.txt خود به خوبی استفاده کنید. همچنین می توانید پارامترهای خاصی را که مربوط به گزینه های کاربر هستند منتقل کنید یا کوکی را مشاهده کنید یا فضای بی نهایت را در تقویم ها و بایگانی ها محدود کنید. این کار بودجه خزیدن را برای صرف در صفحات مهم آزاد می کند.
شماره 5 کیفیت محتوا را بهبود ببخشید:
اظهارات رسمی Google ، چه توسط نمایندگان و چه در صفحات پشتیبانی مدیر وب ، نشان می دهد که بودجه خزیدن شما به شدت تحت تأثیر کیفیت محتوای شما است.
شواهد حاصل از ترکیب داده های log و تجزیه و تحلیل معنایی توسط OnCrawl این واقعیت را تأیید می کند. ما دریافتیم که اکثر سایت ها رابطه ای بین این موارد نشان می دهند:
تعداد کلمات و رفتار خزش.
تکرار محتوا و رفتار خزش.
رفتار داخلی PageRank و خزش.
شما همچنین باید از مزیت محتوای با کیفیت استفاده کنید تا صفحات ضعیف را از طریق استفاده از موارد زیر تقویت کنید:
بک لینک خارجی.
ساختارهای پیوند داخلی.
بهینه سازی متعارف
اگر صفحات فصلی را تبلیغ می کنید ، ابتدا در بهینه سازی آنها تمرکز کنید. گزارش های حاصل از ممیزی سایت و خزیدن سایت نشان می دهد که کدام صفحات در این گروه ها بیشترین سود را از پیشرفت دارند.
بودجه خزیدن سالم شما:
بودجه خزیدن سالم با اطمینان از اینکه Google صفحاتی را که شما بهینه کرده اید مشاهده می کند ، کلید بهبود بازگشت سرمایه در سئو است.
پس از بهبود ، نظارت بر بودجه خزیدن سایت خود را ادامه دهید. این به شما امکان می دهد نتایج را اندازه گیری کرده و آماده واکنش به تغییرات باشید.
اسناد در دنیای بدون کوکی چالش برانگیز خواهد بود - اما غیرممکن نیست