حتی اگر محتوای عالی تولید کنید، خطاهای فنی می‌توانند رتبه‌ی سایت شما را پایین بکشند. لینک‌های شکسته، تگ‌های عنوان ناقص و زنجیره‌های ریدایرکت را نمی‌توان با چشم یکی‌یکی پیدا کرد. Screaming Frog SEO Spider برنامه‌ای دسکتاپ است که سایت شما را مانند یک موتور جستجو می‌خزد و این مشکلات را در یک فهرست واحد به شما نشان می‌دهد.
تفاوت نسخه‌ی رایگان و پولی
نسخه‌ی رایگان Screaming Frog در هر خزش تا ۵۰۰ نشانی را بررسی می‌کند. این مقدار برای سایت‌های کوچک ممکن است کافی باشد، اما سایت‌های فروشگاهی و محتوایی به‌سرعت از این حد عبور می‌کنند. نسخه‌ی لایسنس‌دار این امکانات را باز می‌کند:
- خزش نامحدود نشانی‌ها
- خزش صفحاتی که با JavaScript ساخته می‌شوند (Render)
- استخراج داده‌ی سفارشی (Custom Extraction) و جستجوی سفارشی
- یکپارچگی با Google Search Console و Analytics
- ذخیره و مقایسه‌ی خزش‌ها
نسخه‌ی لایسنس‌دار را می‌توانید از طریق Screaming Frog یک‌ساله یا Screaming Frog با نام اختصاصی تهیه کنید.
گام ۱: اولین خزش
برنامه را باز کنید، نشانی سایت خود را در کادر بالا وارد کنید و روی Start بزنید. وقتی خزش تمام شد، در پنل Overview سمت راست، مشکلات بر اساس دسته‌بندی فهرست می‌شوند.
گام ۲: بررسی کدهای پاسخ
- 4xx (Client Error): لینک‌های شکسته. زبانه‌ی Inlinks در پنل پایین نشان می‌دهد از کدام صفحات به صفحه‌ی خراب لینک داده شده است؛ لینک‌ها را اصلاح کنید یا ریدایرکت بگذارید.
- 3xx (Redirection): ریدایرکت‌ها. مطمئن شوید لینک‌های داخلی سایت مستقیماً به نشانی نهایی می‌روند؛ ریدایرکت‌های زنجیره‌ای بودجه‌ی خزش و سرعت را تحت تأثیر قرار می‌دهند.
- 5xx (Server Error): خطاهای سرور؛ ممکن است از هاست یا افزونه باشند و باید در اولویت بررسی شوند.
گام ۳: عنوان و توضیحات متا
در زبانه‌های Page Titles و Meta Description این فیلترها را بررسی کنید:
- Missing: صفحاتی که عنوان یا توضیحات ندارند
- Duplicate: صفحاتی که عنوان یکسان دارند
- Over/Below X Characters: عنوان‌ها یا توضیحاتی که خیلی بلند یا خیلی کوتاه هستند
هر صفحه باید عنوان و توضیحات مخصوص به خود داشته باشد که کلمه‌ی کلیدی آن را دربر گیرد. در وردپرس می‌توانید این موارد را با افزونه‌های سئو مانند Rank Math Pro یا AIOSEO به‌راحتی ویرایش کنید.
گام ۴: تگ‌های عنوان (H1/H2)
در زبانه‌ی H1 صفحاتی را پیدا کنید که H1 ندارند یا بیش از یک H1 دارند. هر صفحه بهتر است یک H1 داشته باشد که موضوع آن را خلاصه کند.
گام ۵: تصاویر
در زبانه‌ی Images تصاویر با حجم زیاد و تصاویری را که alt text ندارند فیلتر کنید. تصاویر حجیم صفحه را کند می‌کنند و نبودن alt text هم به دسترس‌پذیری و هم به جستجوی تصویری آسیب می‌زند.
گام ۶: Canonical و قابلیت ایندکس
زبانه‌های Canonicals و Directives صفحاتی را نشان می‌دهند که به‌اشتباه noindex شده‌اند یا تگ canonical نادرست دارند. ایندکس نبودن یک صفحه‌ی مهم از پرهزینه‌ترین خطاهایی است که اغلب نادیده گرفته می‌شود.
گام ۷: ساخت نقشه‌ی سایت XML
از منوی Sitemaps ← XML Sitemap می‌توانید از صفحات خزیده‌شده نقشه‌ی سایت بسازید؛ همچنین می‌توانید نقشه‌ی سایت فعلی خود را بخزید و بررسی کنید که نشانی خطا در آن وجود دارد یا نه.
چند وقت یک‌بار خزش کنیم؟
در سایت‌های کوچک ماهی یک‌بار و در سایت‌های فروشگاهی یا سایت‌هایی که محتوای زیادی اضافه می‌کنند، هفته‌ای یک‌بار خزش کردن عادت خوبی است. پس از تغییر بزرگ طراحی یا انتقال سایت حتماً یک خزش کامل انجام دهید.
نتیجه‌گیری
Screaming Frog مشکلات فنی SEO را در چند دقیقه آشکار می‌کند. رفع مشکلات بر اساس اولویت (ابتدا 4xx/5xx و مشکلات ایندکس، سپس متا و تصاویر) به‌سرعت عملکرد سایت شما را در موتورهای جستجو بهبود می‌دهد. برای ابزارهای دیگر، دسته‌ی ابزارهای سئو ما را ببینید.
سؤالات متداول
آیا Screaming Frog روی Mac و Linux کار می‌کند؟
بله. Screaming Frog SEO Spider نسخه‌هایی برای Windows، macOS و Linux (Ubuntu) دارد و کلید لایسنس در همه‌ی این پلتفرم‌ها قابل استفاده است.
آیا هنگام خزش، سایتم کند می‌شود؟
سرعت پیش‌فرض برای بیشتر سایت‌ها مشکلی ایجاد نمی‌کند؛ اما در هاست‌های اشتراکی، خزش شدید ممکن است سرور را تحت فشار بگذارد. از مسیر Configuration ← Speed می‌توانید تعداد درخواست‌های همزمان را کم کنید و خزش را آرام‌تر انجام دهید.
تفاوت Screaming Frog و Google Search Console چیست؟
Search Console نشان می‌دهد Google سایت شما را چطور می‌بیند و عملکرد جستجوی آن چگونه است. Screaming Frog هم سایت شما را فوراً از ابتدا تا انتها می‌خزد و مشکلات فنی را فهرست می‌کند. این دو ابزار یکدیگر را تکمیل می‌کنند و استفاده‌ی همزمان از آن‌ها توصیه می‌شود.
