مشکل بودجه خزش سئو در وردپرس

آموزش کامل رفع مشکل بودجه خزش سئو در وردپرس

ابتدا با هم یادمیگیریم که مشکل بودجه خزش سئو به چه معناست :به تعداد دفعاتی که موتورهای جستجو صفحات را در سایت شما مورد برسی قرار می دهند خزش موتور جستجو می گویند.حال زمانی که این خزش کم شود و یا اصلا اتفاق نیفتد ، سایت شما مشکل ایندکس نشدن صفحات و مطالب و یا مشکل بودجه خزش سئو را تجربه می کند .گاهی بعضی از کاربران برخلاف فعالیت کامل و استانداردی که دارند با مشکل بودجه خزش سئو در وردپرس مواجه می شوند .همین امر موجب آسیب رسیدن به وبسایت و افت رتبه می‌شود. امروز اینجاییم تا این معضل را بررسی کرده و با هم به حل آن بپردازیم.

خزش موتور جستجو چگونه انجام می شود؟

اگر شما در سایت خود محتوای جدیدی تولید کنیدو یا محتوای قبل را به روزکنید وتغییر ایجاد کنید موتور جستجو سایت شما را بررسی و محتوای آن را ایندکس می کند.موتور جستجویی مانند گوگل از یک ربات قوی برای خزیدن داخل سایت‌ها استفاده می‌کند. تصویر زیر این عملیات را نشان می دهد.  

موتور های جستجو تمام صفحات ، محتوا و حتی لینک های سایت شما را مورد بررسی قرار میدهند . دلیل اینکه از اصطلاح خزیدن برای موتورهای جستجو استفاده می کنند این است که حرکت آنها از یک پیوند به پیوند دیگر در یک صفحه شبیه به خزیدن عنکبوت در تارهایش است . همچنین ربات هایی وجود دارند که به عنوان عنکبوت موتور های جستجو شناخته می شوند .برای اینکه سئوی سایتتان استاندارد باشد باید از اینکه موتورهای جستجو می توانند سایت شما را به راحتی مورد برسی قرار دهند اطمینان حاصل کنید.برای سئو سایت وردپرس خود نیازبه خرید افزونه ی یوست سئو دارید .با نصب این افزونه و انجام تنظیمات آن موتورهای جستجو سایت شما را به راحتی بررسی می کنند.

سئوی بودجه خزش یا SEO crawl budget چیست؟

SEO crawl budget و یا همان سئوی بودجه خزش به تعداد دفعاتی که موتور جستجو در سایت شما خزش میکند می گویند .ربات‌های گوگل هر روز میلیاردها صفحه را مورد بررسی قرار می‌دهند. آنها تعداد صفحات در هر دامنه وبسایت را محاسبه کرده تا از منابع به طور موثر استفاده کنند. این عدد به طورخودکار توسط الگوریتم‌های خزنده براساس عوامل متعدد تعیین می‌شود. این محاسبات برای ربات گوگل ثابت نیستند ودر حال نوسان هستند .به این معنی که سایت هایی که بزرگتر هستند و محتوای بیشتری دارند بودجه خزیدن بالاتر و سایت هایی با محتوای کمتر و کوچکتر بودجه کمتری دارند.عوامل دیگری نیز بر SEO crawl budget تأثیر می‌گذارند، مانند محبوبیت URL، بروز بودن سایت از هر جهت، محتوای استاندارد و موارد دیگر.با این حال، به دلایل متعدد، ممکن است SEO crawl budget را در صفحات بطور ناخواسته از دست بدهید. به عنوان مثال، اگر وبسایت شما به درستی بهینه سازی نشده باشد، موتورهای جستجو بودجه خزش را صرف بخش‌های کم اهمیت وبسایت می‌کنند و همین امر سبب بروز مشکل بودجه خزش سئو در وردپرس می‌شود.

چه چیزی باعث بروز مشکلات در بودجه خزش سئو در وردپرس می شود؟

در روشی که وردپرس URLها و محتوای تکراری تولید می‌کند، می‌تواند باعث مشکلات crawl budget شود. به عنوان مثال، وردپرس به طور خودکار فیدهای RSS را برای مناطق مختلف وبسایت شما تولید می‌کند. فیدهای RSS برای وبلاگ اصلی، دسته‌ها و برچسب‌ها، نظرات در مورد هر پست و صفحه بصورت جداگانه وجود دارد و حتی انواع پست سفارشی دارای URLهای فید RSS بطور جداگانه هستند. پیوندهای این فیدهای RSS به کد منبع HTML وبسایت شما اضافه شده که باعث می‌شود موتورهای جستجو آنها را شناسایی کنند. اکنون، موتورهای جستجو به اندازه کافی هوشمند هستند که محتوای تکراری را تشخیص دهند و آن را نادیده بگیرند. با این حال، همچنان آنها را خزیده و بودجه خزش سئوی شما را خرج این موارد می‌کنند. جدای از آن، موتورهای جستجو اقلامات کم اهمیت را خیلی بیشتر از آنچه لازم است درنظر گرفته و مورد بررسی قرار می‌دهند. این اقداماتی که می‌گوییم شامل آرشیوها، دسته‌بندی‌ها، نویسندگان، فایل‌های PDF و موارد دیگر می‌شود. افزونه‌های وردپرسی یا سایر ابزارها نیز می‌توانند پارامترهای کوئری را به URLهای وردپرس شما اضافه کنند. خزنده‌های گوگل ممکن است این کوئری‌ها را یک صفحه متفاوت در نظر بگیرند و آنها را مورد بررسی و خزش قرار دهند. به عنوان مثال، پارامترهای UTM برای ردیابی Google Analytics استفاده می‌شوند و صفحه‌ای با یا بدون این پارامترهای کوئری همچنان برای خزنده‌ها یکسان به نظر می‌رسد. به عنوان مثال آدرس زیر را درنظر بگیرید: https://yourdomain.com/landingpage/?utm_source=newsletter چنین آدرسی باعث هدر رفتن بودجه خزش سئو برای موارد کم اهمیت شده و تبدیل به یک مشکل می‌شود.

چگونه می توان بودجه خزش سئو را محاسبه کرد؟

بودجه خزش یا SEO crawl budget تعداد صفحات مشخصی نیست. نوسانات زیادی دارد و هیچ روش قابل اعتمادی برای پیش‌بینی تعداد صفحاتی که گوگل در هر روز در وب‌سایت شما بررسی می‌کند، وجود ندارد. با این حال، می‌توانید براساس فعالیت‌های اخیر موتور جستجو، ایده بسیار مناسبی برای تخمین این خزش در وبسایت خود داشته باشید. اگر این کار را تا به حال انجام نداده‌اید، ابتدا باید وبسایت خود را به کنسول جستجوی گوگل متصل کنید. کنسول گوگل یک ابزار رایگان است که توسط Google ارائه شده تا به صاحبان وبسایت‌ها کمک کند تا از عملکرد وبسایت خود در موتور جستجوی Google مطلع شوند. همچنین مشکل بودجه خزش سئو در وردپرس را نیز بررسی کنند. پس از اتصال به کنسول گوگل؛ به سادگی به داشبورد کنسول جستجوی خود بروید. از ستون سمت چپ به منوی «settings» رفته و سپس روی «Open Report» از بخش «Crawling» کلیک کنید.

در این بخش می‌توانید گزارشات مربوط به Crawl stats را مشاهده کنید.

می‌توانید موس خود را روی نمودار ببرید تا ببینید هر روز چند صفحه برای خزش و بررسی درخواست شده است. این مشاهدات به شما کمک می‌کند تا میانگین نرخ خزیدن در سایت را متوجه شوید. در زیر آن، می‌توانید تفکیک فرآیند خزیدن را براساس یک سری فیلترها ببینید:

 محاسبه بودجه خزش

از اینجا، می‌توان دید که چقدر بودجه خزیدن برای خطاها، پیوند (فیدهای RSS)، جاوا اسکریپت، CSS، تصاویر و موارد دیگر صرف می‌شود. این به شما یک گزارش فوری از مواردی می‌دهد که می‌توانید برای استفاده موثرتر از این بودجه و رفع مشکل بودجه خزش سئو در وردپرس درنظر بگیرید. به عنوان مثال، اگر تعداد زیادی خطای 404 دارید و این صفحات در حال بررسی هستند، می‌توانید از یک افزونه تغییر مسیر مانند Redirect301 استفاده کنید تا اطمینان حاصل شود که این خزنده‌ها روی محتوای مفید قرار می‌گیرند.

چرا باید از crawl budget خود مراقبت کنیم؟

موتورهای جستجو باید وبسایت شما را به طور موثر بررسی کنند تا بتوانند محتوا را به موقع فهرست بندی کنند. با این حال، اگر بودجه خزش سئوی سایت هدر رود، ممکن است محتوای مهم و جدید شما به موقع بررسی نشود. حتی ممکن است هفته‌ها طول بکشد تا موتورهای جستجو متوجه بروزرسانی مقالات قدیمی شوند یا محتوای جدید شما را کشف کنند. دریافت ترافیک از موتورهای جستجو را از دست خواهید داد، ممکن است رتبه و جایگاه افت کرده و درنهایت در فروش خود ضرر خواهید کرد.

چگونه بودجه خزش سئو یا SEO crawl budget را بهینه کنیم؟

بهترین راه برای رفع مشکل بودجه خزش سئو در وردپرس استفاده از افزونه‌های موثر و حرفه‌ای یوست سئو است. افزونه‌هایی همچون Yoast seo یا All in one Seo که دارای تنظیمات خوبی بوده و جهت دهی خوبی برای موتورهای جستجو و خزش آن‌ها هستند. این افزونه‌ها نه تنها تنظیمات مشخصی برای موتورهای جستجو دارند بلکه عملیات ریدایرکت را می‌توان با کمک آن‌ها انجام داد تا دیگر صفحات بی مورد توسط گوگل خزش نشود. همچنین شما در صفحه محتوا با کمک آن‌ها می‌توانید بهینه سازی را بطور کامل انجام دهید. با مواردی که در این مقاله گفته شد، قطعا می‌توانید خزیدن موتورهای جستجو در سایت خود را کنترل کرده و به درستی هدایت کنید تا این خزش به سمت موارد پر اهمیت رفته و درنهایت موجب دیده شدن شما در موتورهای جستجو و دریافت امتیاز و جایگاه درستی شود. فقط یادتان باشد تنها نصب این افزونه‌های سئو و موارد مهمی که گفتیم کافی نیست، بلکه باید کار با آن‌ها را به درستی بلد باشید تا مرتکب خسارت نشوید.در صورت نیاز به کمک می توانید به بخش پشتیبانی وردپرسی مراجعه کنید.