در یکی از پست‌های اخیر لینکدین، گری ایلیز، تحلیلگر گوگل، آگاهی را در مورد دو مشکلی که خزنده‌های وب را آزار می‌دهد، افزایش داد: نرم‌افزار 404 و دیگر خطاهای «کریپتو».
این اشتباهات به ظاهر بی ضرر می توانند بر تلاش های سئو تأثیر منفی بگذارند.
آشنایی با Soft 404s
خطاهای Soft 404 زمانی رخ می‌دهند که یک وب سرور یک کد وضعیت استاندارد HTTP «200 OK» را برای صفحاتی که وجود ندارند یا حاوی پیام‌های خطا هستند، برمی‌گرداند. این باعث گمراه شدن خزنده‌های وب می‌شود و باعث می‌شود آنها منابع را برای محتوای ناموجود یا غیر مفید هدر دهند.
ایلیز این تجربه را به بازدید از یک کافی شاپی تشبیه کرد که در آن همه موارد با وجود فهرست شدن در منو، در دسترس نیستند. در حالی که این سناریو ممکن است برای مشتریان انسانی خسته کننده باشد، مشکل جدی تری برای خزنده های وب ایجاد می کند.
همانطور که ایلیز توضیح می دهد:
خزنده ها از کدهای وضعیت برای تفسیر موفقیت آمیز بودن واکشی استفاده می کنند، حتی اگر محتوای صفحه اساساً فقط یک پیام خطا باشد. آنها ممکن است با خوشحالی دوباره و دوباره به همان صفحه برگردند و منابع شما را هدر دهند، و اگر چنین صفحات زیادی وجود داشته باشد، منابع به طور تصاعدی بیشتر خواهد شد.”
هزینه های پنهان خطاهای نرم
پیامدهای خطاهای نرم 404 فراتر از استفاده ناکارآمد از منابع خزنده است.
به گفته ایلیز، بعید است که این صفحات در نتایج جستجو ظاهر شوند زیرا در طول نمایه سازی فیلتر می شوند.
برای مقابله با این مشکل، Illyes توصیه می‌کند زمانی که سرور یا کلاینت با خطا مواجه می‌شود، کد وضعیت HTTP مناسب را ارائه کنید.
این به خزنده ها اجازه می دهد تا موقعیت را درک کنند و منابع خود را به طور مؤثرتری تخصیص دهند.
Illyes همچنین نسبت به خزنده‌های محدودکننده نرخ با پیام‌هایی مانند «درخواست‌های بسیار کند می‌شود» هشدار داد، زیرا خزنده‌ها نمی‌توانند چنین دستورالعمل‌های مبتنی بر متن را تفسیر کنند.
چرا SEJ اهمیت می دهد
خطاهای Soft 404 می تواند بر خزیدن و نمایه سازی وب سایت تأثیر بگذارد.
با پرداختن به این مسائل، خزنده‌ها می‌توانند روی واکشی و نمایه‌سازی صفحات با محتوای ارزشمند تمرکز کنند و به طور بالقوه دید سایت را در نتایج جستجو بهبود بخشند.
حذف خطاهای نرم 404 همچنین می تواند منجر به استفاده کارآمدتر از منابع سرور شود، زیرا خزنده ها پهنای باند را برای بازدید مکرر از صفحات خطا هدر نمی دهند.
چگونه این می تواند به شما کمک کند
برای شناسایی و رفع خطاهای Soft 404 در وب سایت خود، مراحل زیر را در نظر بگیرید:
- به طور منظم گزارش‌های خزیدن و گزارش‌های وب‌سایت خود را برای شناسایی صفحاتی که کدهای وضعیت HTTP 200 را علیرغم حاوی پیام‌های خطا برمی‌گردانند، نظارت کنید.
- برای اطمینان از اینکه صفحات خطا با کدهای وضعیت HTTP مناسب ارائه می شوند (مثلاً 404 برای یافت نشد، 410 برای حذف دائمی) مدیریت صحیح خطا را در سرور خود پیاده کنید.
- از ابزارهایی مانند کنسول جستجوی گوگل برای نظارت بر پوشش سایت خود و شناسایی صفحاتی که به عنوان خطاهای 404 پرچم گذاری شده اند استفاده کنید.
پرداختن به خطاهای نرم 404 می تواند خزیدن، نمایه سازی و سئو وب سایت شما را بهبود بخشد.
تصویر ویژه: جولیا تیم / شاتر استوک