شرکت دیجیتال مارکتینگ وب آوا

فهرست
درخواست مشاوره

ابزار اسکریمینگ فراگ چیست؟

از /

اسکریمینگ فراگ یک نرم‌ افزار ویندوزی و البته قابل استفاده در مک و لینوکس است که با خزش در صفحات سایت شما، عملکردی شبیه به ربات‌های گوگل دارد. این ابزار صفحات وب‌سایت را بررسی می‌کند و خطاها و مشکلات فنی و برنامه نویسی را شناسایی می‌ کند؛ همان مشکلاتی که ممکن است ربات‌های موتور جستجو و کراولرهای گوگل هنگام بررسی سایت با آن‌ها مواجه شوند. به این ترتیب می‌توانید قبل از آن‌که این خطاها روی رتبه صفحات شما در نتایج جستجو تأثیر بگذارند، آن‌ها را شناسایی و برطرف کنید.

آشنایی با بخش‌های مختلف اسکریمینگ فراگ مانند Internal، External، Response Codes، Page Titles، Meta Description، H1 و H2، Images و Canonical به شما کمک می‌کند تا ساختار فنی سایت را دقیق‌تر بررسی کنید. در ادامه ما به شما، نحوه خزش سایت، تنظیمات مهم اسکریمینگ فراگ، بررسی و تحلیل صفحات، خروجی گرفتن از گزارش‌ ها و مدیریت پروژه‌ ها را به‌ صورت مرحله‌ به‌ مرحله توضیح می‌ دهیم. همچنین تمامی تب‌ های مهم آن را به شما معرفی میکنیم تا بدانید هر کدام چه اطلاعاتی در اختیار شما قرار می‌ دهند.

ابزار اسکریمینگ فراگ (Screaming Frog) چیست؟

اسکریمینگ فراگ ابزاری برای تحلیل بهینه سازی سایت می باشد که به شما اجازه می دهد URL های یک سایت را خزش کنید و نحوه کار آن دقیقا مانند ربات های موتور جستجو مانند گوگل و بینگ است. ابزار اسکریمینگ فراگ پشت‌ صحنه‌ی (HTML) یک صفحه وب را بررسی می‌ کند و تمام اطلاعات مهم آن مانند عنوان، توضیحات، تیترها، تصاویر و اطلاعاتی که به گوگل کمک می‌ کنند صفحه را بهتر بشناسد، استخراج و نمایش می‌ دهد. این ابزار به متخصصان کمک می کند تا مشکلات مهم سایت را سریع پیدا کنند، مواردی مانند لینک‌ های خراب، کند بودن سرعت بارگذاری صفحات، محتوای تکراری و … که می‌ توانند باعث افت رتبه سایت در نتایج گوگل شوند را شناسایی می‌ کند.

مزایای استفاده از اسکریمینگ فراگ برای بهینه سازی سایت چیست؟

ما در اینجا به شما تک‌ تک کاربردها و مزایایی را که می‌ توانید با استفاده از نرم‌افزار Screaming Frog از آن‌ها بهره‌ مند شوید، توضیح می‌ دهیم. این قابلیت‌ ها به شما کمک می‌ کنند مشکلات فنی و سئویی سایت را سریع‌ تر شناسایی کنید، ساختار صفحات را بهتر بررسی کنید، خطاهای رایج را برطرف کنید و در نهایت عملکرد سایت خود را در نتایج موتورهای جستجو بهبود دهید.

شناسایی لینک های شکسته

شناسایی لینک‌ های شکسته یعنی پیدا کردن لینک‌ هایی که دیگر کار نمی‌ کنند و با کلیک روی آن‌ ها کاربر به صفحه خطا (مثل خطای 404) منتقل می‌ شود. وجود این لینک‌ ها باعث می‌ شود کاربران زودتر سایت را ترک کنند، تجربه بدی از سایت داشته باشند و گوگل نیز کیفیت سایت را پایین‌تر ارزیابی کند. به همین دلیل، پیدا کردن و رفع لینک‌ های شکسته به بهبود و بهینه سازی سایت کمک می‌ کند.

شناسایی محتوای تکراری

محتوای تکراری یعنی پیدا کردن و شناسایی صفحاتی که متن یا بخش زیادی از محتوای آن‌ ها مشابه یا کاملاً یکسان است. وقتی چند صفحه محتوای تکراری داشته باشند، گوگل برای تشخیص صفحه اصلی آن دچار مشکل می‌ شود و رتبه صفحات را کاهش می دهد. به همین دلیل، ابزار اسکریمینگ فراگ با بررسی و شناسایی محتوای تکراری به متخصصان امکان رفع این مشکل را میدهد.

شناسایی تگ های عنوان

شناسایی تگ‌ های عنوان یعنی اینکه اسکریمینگ فراگ عنوان هر صفحه از سایت تا را بررسی می کند تا مطمئن شود عنوان مناسب، کامل و خاص است. اگر عنوان صفحه وجود نداشته باشد یا به‌ درستی نوشته نشده باشد و یا تکراری باشد، هم کاربران کمتر روی لینک سایت در نتایج گوگل کلیک می‌ کنند و هم گوگل موضوع صفحه را سخت‌ تر تشخیص می‌ دهد.

تولید نقشه سایت XML

از دیگر مزایای اسکریمینگ فراگ تولید نقشه سایت XML است. این ابزار با ساخت نقشه سایت XML

فهرست تمام صفحات مهم سایت را در اختیار موتور های جستجو قرار می‌ دهد و  کمک می‌ کند صفحات سایت را سریع‌ تر پیدا کند و آن‌ ها را خزش کند و ساختار سایت را بهتر بشناسد.

بررسی ریدایرکت ها

اسکریمینگ فراگ تمامی ریدایرکت های 301، 302، 303 و 304 را شناسایی و بررسی می‌ کند. این ابزار نشان می‌ دهد هر صفحه به کدام آدرس هدایت می‌ شود و اگر ریدایرکت‌ ها به‌درستی تنظیم نشده باشند یا زنجیره و حلقه ریدایرکت وجود داشته باشد، آن‌ ها را مشخص می‌ کند.

زمان بندی خودکار برای بررسی سایت

این قابلیت اسکریمینگ فراگ برای نسخه پولی این نرم افزار است. که به صورت منظم بررسی های فنی و مشکلاتی که بر روی سایت شما تاثیر می گذارد را شناسایی می کند.

خزش سایت های ساخته شده با جاوا اسکریپت

اسکریمینگ فراگ می‌ تواند صفحاتی را که محتوای آن‌ ها با جاوااسکریپت بارگذاری می‌ شود نیز بررسی و خزش بکند. این ابزار ابتدا صفحه را مانند یک مرورگر اجرا می‌ کند و سپس تمام محتوا، لینک‌ ها و عناصر آن را تحلیل می‌ کند.

ساخت نمایش تصویری ساختار سایت

اسکریمینگ فراگ ساختار صفحات و ارتباط آن‌ ها با یکدیگر را به‌ صورت گرافیکی نمایش می‌ دهد. با این قابلیت می‌ توانید ببینید که صفحات چگونه به هم لینک شده‌اند، آیا ساختار سایت منظم است و کاربران و موتور های جستجو چقدر راحت می‌ توانند به بخش‌ های مختلف سایت دسترسی پیدا کنند.

تحلیل تایتل و متادیتاها

تحلیل تایتل و متادیتا یعنی اینکه اسکریمینگ فراگ عنوان (Title) و توضیحات متا (Meta Description) صفحات سایت را بررسی می‌ کند تا مشکلاتی مانند تکراری بودن، طول نامناسب یا نبودن آن‌ ها را پیدا کند.

مقایسه بین خزش‌های مختلف و محیط Stage

از مزایای کاربردی اسکریمینگ فراگ مقایسه بین خزش‌ های مختلف و محیط Stage است یعنی اینکه شما می‌ توانید نتایج بررسی‌ های مختلف سایت را با هم مقایسه کنید؛ مثلاً قبل و بعد از انجام تغییرات یا بین نسخه آزمایشی (Stage) و نسخه اصلی سایت.

استخراج داده از HTML با CSS Selector یا XPath

با این قابلیت می‌ توانید داده‌ های سایت خود یا رقبا، مانند عنوان‌ ها، قیمت محصولات، دسته‌بندی‌ ها یا سایر بخش‌ های مهم را بررسی و تحلیل کنید.

اتصال به Google Analytics، Google Search Console و PageSpeed Insights

شما می توانید اسکریمینگ فراگ خود را به Google Analytics، Google Search Console و PageSpeed Insights متصل کنید تا اطلاعات بیشتری درباره سایت به دست آورید. با این کار می‌توانید رفتار کاربران، میزان بازدید صفحات، کلمات کلیدی، سرعت سایت و مشکلات مربوط به عملکرد صفحات را بررسی کنید.

بررسی تصاویر سایت

اسکریمینگ فراگ تمام تصاویر سایت را بررسی می‌ کند و مشکلاتی مانند نداشتن متن جایگزین (Alt)، حجم زیاد تصاویر یا تصاویر خراب را شناسایی می‌ کند.

بررسی هدینگ‌ ها (H1، H2 و …)

این ابزار تمام هدینگ‌ های صفحات را بررسی می‌ کند و اگر هدینگ تکراری، خالی یا بیش از یک H1 در صفحه وجود داشته باشد، آن را مشخص می‌ کند.

بررسی وضعیت ایندکس صفحات

اسکریمینگ فراگ صفحاتی را که تگ Noindex یا فایل robots.txt که از دید موتور های جستجو مخفی شده‌ اند را شناسایی می‌ کند. این قابلیت کمک می‌ کند مطمئن شوید صفحات مهم سایت به‌ درستی ایندکس می‌ شوند.

بررسی لینک‌ های داخلی و خارجی

این ابزار لینک‌ های داخلی و خارجی سایت را تحلیل می‌ کند و نشان می‌ دهد هر صفحه چه تعداد لینک ورودی و خروجی دارد. 

بررسی Canonical URL

اسکریمینگ فراگ تگ Canonical صفحات را بررسی می‌ کند و اگر اشتباه تنظیم شده باشد یا وجود نداشته باشد، آن را گزارش می‌ دهد. این کار از ایجاد محتوای تکراری جلوگیری می کند.

بررسی فایل Robots.txt

این ابزار فایل Robots.txt را بررسی می‌ کند و مشخص می‌ کند که آیا دسترسی موتورهای جستجو به صفحات مهم سایت مسدود شده است یا خیر.

بررسی وضعیت کدهای پاسخ (Status Codes)

اسکریمینگ فراگ تمام صفحات سایت را از نظر کد های پاسخ HTTP مانند 200، 301، 302، 404 و 500 بررسی می‌ کند. با این قابلیت می‌ توانید صفحات دارای خطا یا مشکلات فنی را سریع شناسایی و برطرف کنید.

پیدا کردن صفحات یتیم (Orphan Pages)

اگر اسکریم فراگ را به Google Analytics یا Google Search Console متصل کنید، می‌ توانید صفحاتی را پیدا کنید که در سایت هیچ لینک داخلی به آن‌ ها وجود ندارد که به اصطلاح به آن ها صفحات یتیم می گویند.

آیا ابزار اسکریمینگ فراگ رایگان است؟

بله، ابزار اسکریمینگ فراگ رایگان است، اما فقط می توان 500 URL را رایگان برای شما خزش کند. و نسخه رایگان اسکریمینگ فراگ قابلیت های مثل لینک‌ های شکسته، ریدایرکت‌ ها، عنوان صفحات و توضیحات متا، متا ربات‌ها و دستورات فایل robots.txt، ویژگی‌ های Hreflang، تولید نقشه سایت XML و نمایش‌ های گرافیکی را در اختیار شما قرار میدهد. نسخه پولی این ابزار بیشتر برای افرادی مناسب است که به‌ صورت حرفه‌ ای و قوی خدمات بهینه سازی سایت را ارائه می‌ دهند. ما به عنوان کسانی که در حوزه سئو در مشهد کار می کنیم نسخه پولی این نرم افزار را تهیه کرده ایم که بتوانیم از تمام قابلیت های حرفه ای آن استفاده کنیم.

با پرداخت هزینه لایسنس این ابزار از نسخه نامحدود این برنامه استفاده کنید و علاوه بر آن قابلیت های مهم دیگری مانند:

  • خزش نامحدود صفحات
  • ذخیره و ادامه پروژه‌ ها
  • مقایسه Crawl ها
  • جستجوی سفارشی (Custom Search) جستجوی کلمات، کدها یا الگو های خاص
  • استخراج داده با CSS Selector و XPath
  • بررسی و اعتبارسنجی تگ Canonical
  • بررسی صحت تگ‌های Hreflang برای سایت‌ های چند زبانه
  • بررسی فایل Robots.txt و Meta Robots
  • نمایش تعداد کلیک لازم برای رسیدن به هر صفحه و کمک به بهبود لینک‌ سازی داخلی.
  • گزارش‌ گیری زمان‌بندی‌ شده
  • رندر جاوااسکریپت
  • خزش و اعتبارسنجی AMP
  • یکپارچه‌ سازی با ابزار هایی مانند PageSpeed Insights، سرچ کنسول و گوگل آنالیتیکس
  • خزش و اعتبارسنجی داده‌های ساختار یافته
  • شناسایی صفحات تقریباً تکراری
  • تولید فایل robots.txt
  • پیدا کردن صفحات یتیم (Orphan Pages)
  • زمان‌ بندی خودکار خزش و ارسال گزارش
  • اتصال به API های مختلف
  • تشخیص محتوای نزدیک به تکراری (Near Duplicate Content)
  • اعتبارسنجی داده‌ های ساختاریافته (Schema)

آموزش نصب ابزار اسکریمینگ فراگ

ابزار اسکریمینگ فراگ برای سیستم های Windows، MacOS، Ubuntu و Fedora در دسترس است و ما در ادامه به آموزش نصب ابزار اسکریمینگ فراگ می پردازیم:

  • گام اول: دانلود Screaming Frog

به صفحه اصلی سایت Screaming Frog SEO Spider و روی دکمه دانلود کلیک کنید و خود اسکریمینگ فراگ نسخه مناسب با سیستم شما را دانلود می کند. 

نحوه نصب اسکریمینگ فراگ
نحوه نصب اسکریمینگ فراگ
  • گام دوم: نصب اسکریمینگ فراگ

فایل نصبی اسکریمینگ فراگ حدودا نزدیک 700 مگابایت می باشد و ممکن است نصب آن مدتی طول بکشد. به قسمتی که فایل های دانلود شده قرار دارند بروید و رو فایل .exe کلیک کنید و برنامه را نصب کنید.

 

دستورالعمل‌ های نصب را دنبال کرده و روی «Install» کلیک کنید و برای تکمیل نصب، روی «Finish» بزنید تا Screaming Frog آماده‌ اجرا شود پس از پایان نصب اگر شما بر روی دکمه Launch Screaming Frog SEO Spider کلیک کنید ابزار بلافاصله اجرا می‌ شود.

آموزش نصب لایسنس اسکریمینگ فراگ

برای نصب لایسنس Screaming Frog کافیست که از سایت های داخلی لایسنس مورد نظر را دانلود کنید و برنامه را  اجرا کنید.

سپس از هدر برنامه 10 مین گزینه بر روی گزینه لایسنس کلید کنید.

نصب لایسنس اسکریمینگ فراگ در ویندوز
نصب لایسنس اسکریمینگ فراگ

سپس بر روی گزینه Enter Licence کلیک کنید.  

نحوه نصب لایسنس اسکریمینگ فراگ
نحوه نصب لایسنس اسکریمینگ فراگ

سپس در این قسمت Username و Licence key را وارد کنید.

لایسنس اسکریمینگ فراگ
لایسنس اسکریمینگ فراگ

برای نظارت بر عملکرد بهبود سایت هر چند وقت یکبار از اسکریمینگ فراگ استفاده کنیم؟

تعداد دفعات استفاده از اسکریمینگ فراگ بسته به میزان تغییرات، اندازه صفحات سایت و اهداف بهینه‌ سازی موتور های جستجو متفاوت است. به طور تقریبی 

  • سایت هایی کوچک مثلا کمتر از 1000 صفحه ماهانه یکبار خزش کافی است. در این بررسی می‌ توانید لینک‌ های شکسته، خطا های 404، متا تایتل و متا دیسکریپشن، هدینگ‌ ها، تصاویر بدون Alt، ریدایرکت‌ ها و سایر مشکلات فنی را شناسایی و برطرف کنید.
  • سایت های متوسط بین 1000 تا 5000 صفحه هر دو هفته ای یک بار سایت را بررسی کنید. مشکلاتی مانند محتوای تکراری، صفحات یتیم، لینک‌ های خراب، خطاهای ریدایرکت و مشکلات ایندکس شدن از این قبیل مشکلات را بررسی کنید.
  • برای سایت های بزرگ و پیش از 5000 صفحه هر هفته یا حتی چند بار در هفته از Screaming Frog استفاده کنید. در این سایت‌ ها به دلیل تعداد زیاد صفحات و تغییرات مداوم، احتمال ایجاد خطاهای فنی بیشتر است.

معرفی کامل همه ی بخش‌ های مختلف Screaming Frog

برای آشنایی بهتر با اسکریمینگ فراگ نیاز است که شما تمامی بخش های آن را یاد بگیرید. هر یک از این تب ها اطلاعات مشخص و کاربردی درباره بهبود سایت و مشکلات فنی به متخصصان ارائه می دهد. ما در ادامه به صورت خلاصه و مفید تمامی بخش های اسکریمینگ فراگ را به شما توضیح می دهیم.

تب Internal

این تب تمامی صفحات داخلی سایت شما را خزش می کند. مهم ترین ستون های این تب عبارتند از : 

  • Address : آدرس (URL) هر صفحه را نمایش می‌ دهد.
  • Content Type: نوع محتوای صفحه را مشخص می‌ کند؛ مانند: HTML، تصویر (Image)، فایل PDF، فایل CSS، فایل JavaScript
  • Status Code: کد پاسخ سرور را نشان می‌ دهد.
  • Indexability: مشخص می‌ کند که آیا صفحه قابلیت ایندکس شدن توسط گوگل را دارد یا خیر.
  • Indexability Status: دلیل ایندکس نشدن صفحه را نمایش می‌ دهد.
  • Title: عنوان تایتل صفحه را به شما می دهد.
  • H1: هدینگ 1 و اصلی صفحه را نشان می دهد.
  • Word Count: تعداد تقریبی کلمات هر صفحه را نشان می‌ دهد.
  • Inlinks: تعداد لینک‌ های داخلی که به آن صفحه داده شده است را نمایش می‌ دهد.
  • Outlinks: تعداد لینک‌ های خارجی آن صفحه را نمایش می دهد.
  • Crawl Depth: نشان می دهد که صفحه با چند کلیک از صفحه اصلی قابل دسترس است. 
  • Canonical Link Element: اگر صفحه دارای تگ Canonical باشد، آدرس آن را نمایش می‌ دهد.
  • Response Time: مدت زمان پاسخگویی سرور برای بارگذاری صفحه
  • Size: حجم فایل HTML را نشان می دهد.

تب External

اسکریمینگ فراگ در تب External تمام لینک‌ ها و منابع خارجی را که صفحات سایت به آن‌ ها ارجاع داده شده است، نمایش می‌ دهد.

ما در تب External ستون های Address، Content Type، Status Code Crawl Depth و Inlinks رو داریم.

تب Security

تب Security برای شناسایی مشکلات امنیتی سایت است و در این تب مواردی مثل استفاده از HTTP به‌ جای HTTPS ، محتوای ناامن (Mixed Content) و لینک های ناامن استفاده می شود.

تب Response Codes

اسکریمینگ فراگ در تب Response Codes وضعیت پاسخ سرور برای تمام صفحات و فایل‌های سایت را بررسی می کند. هر وقت که ربات های گوگل صفحه ای را خزش می کنند، سرور یک کد وضعیت به نام HTTP Status Code برمی گرداند. مهم ترین کد های آن نیز شامل:

  • 200 صفحه اوکی است و مشکلی ندارد.
  • 301 ریدایرکت دائمی
  • 302 ریدایرکت موقت
  • 304 نسخه ذخیره‌ شده صفحه در مرورگر معتبر است و نیازی به دانلود دوباره نیست.
  • 404: Not Found و صفحه پیدا نشد.
  • 500: سرور با خطای داخلی رو به رو شده و نتوانسته صفحه را نمایش دهد.

تب Meta Description

برای بررسی توضیحات متای (Meta Description) تمام صفحات سایت استفاده می‌ شود. در این تب می توانید

  • وجود یا نبود متا دیسکریپشن برای هر صفحه
  • متا دیسکریپشن‌ های تکراری در چند صفحه
  • متا دیسکریپشن‌ های خیلی کوتاه یا خیلی بلند
  • تعداد کاراکترها و طول متا دیسکریپشن
  • آدرس صفحاتی که نیاز به اصلاح متا دیسکریپشن دارند.

را بررسی و شناسایی کنید.

تب Url

اسکریمینگ فراگ در تب Url به بررسی ساختار آدرس صفحات سایت می پردازد در این بخش شما

  •  URL های خیلی بلند
  •  وجود کاراکتر های نامناسب یا غیر مجاز در آدرس صفحات.
  • استفاده از حروف بزرگ (Uppercase) در URL ها.
  • وجود فاصله در آدرس های سایت.
  • URL های تکراری

شناسایی و پیدا می کنید.

تب Page Titles

تب Page Titles برای بررسی عنوان (Title) تمام صفحات سایت شناسایی می کند. در این تب می توانید موارد زیر مشاهد کنید:

  • صفحاتی که عنوان (Title) ندارند.
  • عنوان‌ و Title تکراری در چند صفحه.
  • عنوان‌ و Title خیلی کوتاه یا خیلی بلند.
  • تعداد کاراکترهای تایتل.

تب Meta Keywords

این تب در گذشته برای معرفی کلمات کلیدی هر صفحه به موتور های جستجو استفاده می‌ شد، اما الان گوگل دیگر از آن به‌ عنوان یک عامل رتبه‌ بندی استفاده نمی‌ کند.

تب H1 و H2

تب H1 و H2 به ترتیب به بررسی هدینگ های 1 و 2 سایت شما می پردازد در این تب شما

  • صفحاتی که تب هدینگ 1 و 2 را ندارند.
  • هدینگ 1 و 2 تکرار دارند.
  • صفحاتی که بیشتر از یکی هدینگ 1 را دارند.

تب Content

تب Content تعداد کلمات و جملات، خوانایی و سهولت خواندن ، خطاهای نگارشی، محتوا های تکراری را نمایش می دهد.

تب Images

این بخش اطلاعات کاملی مانند آدرس (URL) تصاویر، حجم، وضعیت تصاویر (مانند 200، 404 و…)، تصاویری که متن جایگزین (Alt Text) ندارند و تصاویر با حجم بالا را نمایش می‌ دهد.

تب Canonical

تگ Canonical به موتور های جستجو اعلام می‌ کند که نسخه اصلی یک صفحه کدام است و از ایجاد مشکلات مربوط به محتوای تکراری جلوگیری می‌ کند. صفحاتی که تگ Canonical ندارند، صفحاتی که Canonical آن‌ ها اشتباه تنظیم شده است، صفحاتی که Canonical آن‌ ها به آدرس دیگری اشاره می‌ کند همگی از جمله قابلیت های این تب در اسکریمینگ فراگ است.

تب Pagination

تب Pagination وضعیت لینک‌ های بین صفحات صفحه‌ بندی‌ شده نشان میدهد.

تب Directives

تب Directives در اسکریمینگ فراگ برای بررسی دستوراتی استفاده می‌ شود که به موتور های جستجو می‌ گویند که یک صفحه را ایندکس کنند یا نه و لینک‌ های آن را دنبال کنند یا نه. این دستورات از طریق Meta Robots یا هدرهای X-Robots-Tag به گوگل ارسال می‌ شوند. در این تب شما می توانید صفحاتی که دارای دستور Noindex، Nofollow و … هستند را شناسایی کنید.

تب Hreflang

تب Hreflang برای بررسی تگ‌ های Hreflang در سایت‌های چند زبانه استفاده و به موتورهای جستجو می گوید که هر نسخه از یک صفحه برای کدام زبان یا کشور طراحی شده است.

تب JavaScript

تب JavaScript خطا هایی را که ممکن است روی بارگذاری صفحات و یا خزش سایت توسط گوگل تأثیر بزارد را شناسایی کنید.

تب Links

در این تب نشان می‌ دهد که هر صفحه به چه صفحاتی لینک داده و از چه صفحاتی لینک دریافت کرده است. در این تب شما انکر تکست (Anchor Text) هر لینک، لینک داخلی و خارجی هر صفحه را می توانید ببینید.

تب Structured Data

برای بررسی داده های ساختار یافته مانند (Structured Data یا Schema Markup) استفاده می شود این داده ها به موتور های جستجو کمک می کند که صفحات را بهتر درک کنند مثل نظرات کاربران، سوالات متداول و امتیاز

تب Sitemaps

در اسکریمینگ فراگ تب Sitemap نشان میدهد که کدام صفحات در نقشه سایت قرار دارند و اینکه صفحات سایت آیا مشکلی دارند یا خیر.

تب PageSpeed

این تب برای بررسی سرعت سایت می پردازد و زمانی فعال می شود که اسکریمینگ فراگ به Google PageSpeed Insights متصل باشد. امتیاز عملکرد (Performance Score) هر صفحه و معیار های مهم سرعت مانند Largest Content Fun Paint (LCP)، First Contentful Paint (FCP) و Cumulative Layout Shift (CLS).

را در این بخش می توانید ببینید.

تب Mobile

این تب وضعیت صفحات سایت را در نسخه موبایل می باشد. این بخش در صورتی فعال می شود که اسکریمینگ فراگ به Google PageSpeed Insights و Lighthouse متصل باشد.

تب custom search

تب Custom Search این ویژگی را دارد که شما بتوانید کلمات و عبارات خود را در تمامی صفحات سایت جستجو کنید.

تب custom Extraction

این تب در اسکریمینگ فراگ به این گونه کار می کند که شما می توانید اطلاعات مشخصی از سایت را استخراج کنید. برای این کار شما با استفاده از CSS Selector، XPath یا Regex می‌ توانید داده‌ های دلخواه مانند قیمت، نام نویسنده، شماره تلفن، ایمیل یا هر چیز دیگری که شما می خواهید از این صفحه استخراج کنید.

تب custom Javascript

تب custom Javascript این امکان را به شما می دهد که کد های جاوا اسکریپت دلخواه خودتان را هنگام خزش سایت اجرا کنید.

تب Analytics

تب Analytics در اسکریمینگ فراگ برای فعال شدن باید به Googlr Analytics متصل باشد. پس از اتصال می توانید که با این تب رفتار کاربران و میزان بازدید صفحات را شناسایی کنید.

تب Search Console

تب سرچ کنسول در اسکریمینگ فراگ همانند تب آنالیتیکس می باشد از این لحاظ ئکه جفت این تب ها رفتار کابر و و میزان بازدید سایت را نشان میدهد و هر  این تب برای فعال شدن نیاز به اتصال به گوگل سرچ کنسول دارد.

تب Validation

کار این تب این است که بررسی دوباره مشکلاتی استفاده می‌ شود که قبلا در سایت شناسایی شده‌ اند. بعد از اینکه خطای فنی را برطرف کردید، می‌ توانید با این تب بررسی کنید که آیا آن مشکلات واقعاً رفع شده‌ یا خیر.

تب Link Metrics

یکی از تب های مهم اسکریم فراگ تب Link Metrics است که کار آن بررسی قدرت و کیفیت لینک‌ های صفحات سایت می باشد. البته این زمانی فعال می شود که این تب را به ابزارهایی مانند Moz یا Ahrefs متصل کنید. بعد از اتصال شما می توانید که تعداد بک لینک، اعتبار و قدرت لینک ها و تعداد دامنه های ارجاع شده را شناسایی کنید.

بیشتر بخوانید: هوش مولد گوگل

نحوه کار با اسکریمینگ فراگ

درباره نحوه کار با اسکریمینگ فراگ ما در اینجا به شما تنظیمات خزش و اطلاعات خزش در آن را به شما توضیح می دهیم که بتوانید راحت تر به بهبود سایت خود بپردازید.

تنظیمات خزش (Configuring the Crawl)

وقتی آدرس سایت را داخل Screaming Frog وارد می‌ کنید و روی Start می‌ زنید، ابزار به‌ صورت پیش‌ فرض سایت را مانند ربات‌ های گوگل بررسی می‌ کند. بنابراین در بیشتر مواقع نیازی نیست هیچ تنظیماتی را تغییر دهید.

اما اگر بخواهید فقط بخش خاصی از سایت را بررسی کنید، می‌ توانید از قسمت Configuration تنظیمات خزش را تغییر دهید. برای مثال:

فقط یک پوشه از سایت مثلا blog را خزش کنید.

بعضی صفحات را از بررسی حذف کنید.

فقط URLهای مشخصی را بررسی کنید.

اگر سایت با JavaScript ساخته شده است، قابلیت JavaScript Rendering را فعال کنید تا اسکریمینگ فراگ بتواند محتوایی را که با جاوااسکریپت نمایش داده می‌شود نیز بررسی کند.

مشاهده اطلاعات خزش (Viewing Crawl Data)

بعد از اینکه خزش شروع شد، اطلاعات سایت را لحظه‌ به لحظه داخل Screaming Frog نمایش داده می‌ شود.

مهم‌ترین بخش، تب Internal است که تمام صفحات سایت را نشان می‌ دهد.اگر روی هر صفحه کلیک کنید، در قسمت پایین اطلاعات بیشتری مانند موارد زیر نمایش داده می‌شود:

  • لینک‌ های ورودی (Inlinks)
  • لینک‌ های خروجی (Outlinks)
  • تصاویر صفحه
  • فایل‌ های CSS و JavaScript
  • منابع استفاده‌ شده در صفحه

همچنین با استفاده از تب‌ های مختلف مانند Response Codes، Page Titles، Images و… می‌ توانید هر بخش از سایت را جداگانه بررسی کنید.

پیدا کردن خطاها و مشکلات سایت (Finding Errors & Issues) در اسکریمینگ فراگ

یکی از بهترین قابلیت‌ های Screaming Frog این است که مشکلات سایت را به شما نشان می‌ دهد.

در سمت راست برنامه دو بخش مهم وجود دارد:

Overview : در این قسمت خلاصه‌ ای از تمام اطلاعات سایت نمایش داده می‌ شود.

مثلا تعداد:

  • صفحات دارای خطای 404
  • ریدایرکت‌ ها
  • صفحات بدون Title
  • صفحات بدون Meta Description
  • تصاویر بدون Alt
  • و سایر مشکلات

با کلیک روی هر مورد، مستقیما به همان بخش می روید.

Issues: تب Issues تمام مشکلات سایت را به سه دسته تقسیم می‌ کند:

Issues (خطاها): مشکلات مهمی هستند که بهتر است هرچه سریع‌تر برطرف شوند.
Warnings (هشدارها): مشکلات خیلی جدی نیستند، اما بهتر است بررسی شوند.
Opportunities (فرصت‌ها): پیشنهادهایی برای بهتر شدن بهینه سایت و عملکرد سایت هستند.

خلاصه اینکه اگر شما به دنبال بهبود سایت خود هستید بدون شک یکی از بهترین ابزارها، اسکریمینگ فراگ است. خزش در سایت و جمع آوری اطلاعات مربوطه به سایت فرآیند پیچیده ای است که Screaming Frog این کار را برای شما راحت تر کرده است.