سئو یکی از مباحث کاملا پیشرفته و پیچیده و جدید در دنیای اینترنت و وب سایت ها هستند که باید برای تحلیل و آنالیز سایت ها از یک سری ابزار مناسب کمک بگیرید. قطعا پوشش کامل سئوی یک سایت به صورت دستی کاملا سخت و زمان بر خواهد بود. از این رو ابزارهای متفاوت و جذابی برای پوشش بخش های مختلف سئویی یک وب سایت ارائه شده اند. امروز می خواهیم ابزاری بنام اسکریمینگ فراگ را در سایت نیکداد خدمت شما معرفی کنیم.
اسکریمینگ فراگ (Screaming Frog) چیست؟

اسکریمینگ فراگ یک ابزار جذاب و در عین حال مناسب که قابلیت نصب بر روی ویندوزهای مختلف کامپیوتر را دارد و تمام کارهای سئوی شما را انجام می دهد. آنالیز و تحلیل لینک های داخلی و خارجی ، ایجاد فایل ربات robot.txt تا اندازه گیری پارامترهای Core web Vitals از جمله این موارد هستند.
یکی از مهم ترین اقداماتی که در مبحث آموزش اسکریمینگ فراگ باید خدمتتان توضیح دهیم این است که قابلیت خزیدن سایت و تحلیل بخش های مختلف را با آن دارید. شما قابلیت مشاهده تمامی پارامترهای مهم سئو یک سایت از دیدگاه گوگل را خواهید داشت و به سادگی در عرض چند دقیقه تمامی ایرادات تان را برطرف نمایید.
سئو فنی یا سئو تکنیکال یکی از جنبه های مهم بهینه سازی سایت ها است که توسط دانشمندان سئو و متخصصین این حوزه انجام می شود. بنابراین به سادگی نمی توانید از این مبحث گذر کنید. شرکت Screaming Frog یک ابزار مناسب برای این کار طراحی کرده تا همانند ربات های خزنده موتورهای جستجوگر، تمامی صفحات را تک به تک خزیده و اگر مشکلاتی در این زمینه داشته باشند را رفع نماید. این ابزار جذاب به صورت عمیق تمامی مشکلات سئو سایت ها را با کلی فیلتر جذاب بررسی و رفع می نماید.
نصب برنامه اسکریمینگ فراگ

نصب و راه اندازی نرم افزار اسکریمینگ فراگ کاملا ساده است و شما می توانید به صورت رایگان از سایت سازنده به نشانی (https://www.screamingfrog.co.uk/quick-start-guide) برنامه را دانلود نمایید. البته ما پیشنهاد می کنیم از سایت دانلود سافت ور به نشانی (https://www.downloadsoftware.ir/screaming-frog-seo-spider.php) این برنامه را با کیجن یا کرک فعال سازی دریافت بکنید تا به صورت نامحدود از این ابزار بتوانید بهره مند شوید.
نصب برنامه کاملا ساده است و شما در چند قدم با کلیک روی دکمه Next می توانید آن را طی کنید و در ادامه باید با استفاده از کرک یا کیجن کد فعالسازی برنامه را ایجاد و درون نرم افزار اسکریمینگ فراگ قرار دهید تا به صورت دائمی فعالسازی آن انجام بگیرد. در ادامه با روش کار با این نرم افزار همراه ما باشید.
قرار دادن آدرس سایت و شروع خزش با Screaming Frog
خزیدن در وب سایت با نرم افزار اسکریمینگ فراگ با دو روش انجام می گیرد که شما با روش پیشفرض اسپایدر نام دارد که شما آدرس سایت تان را وارد نموده و نرم افزار شروع به خزیدن در کل سایت نماید. روش دیگر نیز تحت عنوان List نام داشته و لیستی از آدرس های url که می خواهید خزش شوند را وارد نمایید تا برنامه کار را برایتان انجام دهد. اگر می خواهید تمام محتوای یک سایت را خزش نمایید، باید آدرس صفحه اصلی آن را در کادر Enter URL to spider در بالای نرمافزار وارد کنید و دکمه Start را بزنید.

با این ابزار شروع به خزش سایت و تمام صفحاتی که url همین سایت را دارند می نماید. این نرم افزار عملیات خزش را به صورت زنده انجام می دهد و می توانید سرعت کار و تعداد لینک های باقی مانده و مدت زمان لازم برای پایان کار را در پایین صفحه برنامه مشاهده نمایید.

همچنین امکان توقف خزش نیز وجود دارد که یا آن را ذخیره نموده و بعد ادامه دهید. همچنین لیست کاملی از لینک هایتان را برای خزش به سایت دهید و باید از بخش Mode در منوی بالا گزینه List را انتخاب کرده و به طور کلی این نرم افزار طوری برنامه ریزی شده تا جای ممکن شبیه به خزنده های گوگل سایت را خزش نماید.

همچنین اگر مدل خزش خاصی را دارید می توانید آن را در برنامه اسکریمینگ فراگ اجرا نمایید. باید از منوی بالا در بخش Configuration بروید و روش مورد نظرتان را انتخاب نمایید. مثلا با انتخاب گزینه Exclude یا include ب سادگی یک ساب فولدر خاص را برای خزش ایجاد کنید. همچنین اگر سایت شما برای اجرا به اسکریپت های جاوا وابسته است، می توانید گزینه JavaScript rendering را برگزینید.

جستجوی ریدایرکت ها با نرم افزار اسکریمینگ فراگ
یافتن لینک های ریدایرکت در سایت ها به سادگی از طریق نرم افزار اسکریمینگ فراگ قابل انجام است و شما به سادگی می توانید خزش کل سایت را برای یافتن ریدایرکت ها و وارد کردن لیست کاملی از لینک های ریدایرکت انجام دهید.
ابتدا باید آدرس سایت یا لیست کاملی از url هایتان را که مد نظر شما قرار دارد در بخش Enter url to spider وارد نموده و سپس روی گزینه استارت کلیک کنید تا عملیات خزش وب سایت شروع گردد. روی تب Response Codes کلیک نموده و فیلتر را بر روی 3xx قرار دهید. سپس کمی صبر کنید تا تمامی مراحل خزیدن به اتمام برسد و سپس به سراغ ریدایرکت ها بروید.
کد هر ریدایرکت و تمامی وضعیت آن در کنار آن مشخص شده و ریدایرکت داخلی و خارجی که در ره بخش ستون مشخص گردیده است. همچنین در ستون بخش Redirect Url مقصد ریدایرکت هر لینک در ستون Address مشخص و قابل پیدا کردن است.

همچنین اگر قصد دارید که بدانید چه صفحاتی به صفحات دیگر ریدایرکت شده اند یا لینک داده شده اند تا آنها را اصلاح نمایند، کافی است روی هر لینک url مد نظرتان کلیک نموده و بر روی تب Inlinks کلیک کنید. در ستون From به سادگی می توانید صفحه ای که به ریدایرکت شما لینک داده اند را مشاهده نمایید. در ستون To صفحه ای که ریدایرکت شده است را مشاهده خواهید کرد. همچنین اطلاعاتی نظیر انکرتکست، خصوصیت alt عکس و فالو یا نوفالو بودن لینک ها را در این گزارش به شما نشان داده می شود.

جستجوی لینک های 404 با نرم افزار اسکریمینگ فراگ
لینک ها و صفحات حذف شده ای که به 404 معروف هستند یکی از مشکلات اصلی و دردسرساز در مبحث سئو است که باعث ایجاد مشکل خواهد شد. وجود لینک های 404 می تواند تمامی زحمات سئوی سایت شما را برباد دهد. در این بخش به شما یاد می دهیم که چطور در نرم افزار اسکریمینگ فراگ لینک های 404 را پیدا کنید.
ابتدا باید آدرس سایت تان را در باکس Enter Url to Spider قرار داده و روی گزینه start کلیک کنید تا خزش روی سایت شما آغاز شود. سپس روی تب Response Codes کلیک کرده و فیلتر آن را روی حالت 4xx در Client error قرار دهید. در این حالت تمامی لینک های 404 را می توان مشاهده کرد. در این بخش می توانید صبر کنید تا کار خزش سایت به اتمام برسد و سپس فیلتر را اعمال کرده یا می توانید همزمان با خزش فیلتر را قرار دهید.

سپس باید در این مرحله شناسایی صفحاتی که به url های 404 لینک شده اند را شناسایی نمایید. با شناخت این صفحات می توانید لینک های مورد نظر را اصلاح کنید. برای اینکار کافی است روی url مورد نظر در نتایج خزش کلیک کرده و از پایین صفحه تب Inlinks را انتخاب کنید. حالا به سادگی می توانید نتایج مد نظرتان را مشاهده نمایید. در پنجره ای که به شما نشان داده می شود، در ستون From صفحه ای که به 404 url لینک شده اند را ببینید. در ستون to نیز آدرس صفحه 404 نشان داده می شود.
جزئیات و اطلاعاتی نظیر انکرتکست، alt تصاویر و لینک های فالو و نوفالو را می توان در ستون های بعدی مشاهده کرد. به سادگی قابلیت مشاهده لینک های شکسته خارجی را نیز دارید.
یافتن مقالات تکراری با برنامه اسکریمینگ فراگ
در بخش آموزش نرم افزار Screming frog به سادگی قابلیت یافتن محتواهای تکراری را دارا هستید. از آنجایی که مقالات و محتوای تکراری بر روی سئو سایت شما مشکلاتی را ایجاد می کنند. بنابراین بر روی این موضوع باید تمرکز لازم را داشته باشید و برای جستجوی محتوای تکراری باید از منوی بالای صفحه گزینه Config را انتخاب نموده و بر روی گزینه Content بزنید و سپس روی گزینه Duplicates کلیک نمایید. سپس در پنجرهای که باز میشود تیک گزینه Near Duplicates را بزنید.

یکی از مهم ترین نکات در آموزش این نرم افزار این است که به طور پیش فرض اسکریمینگ فراک تمام صفحات که محتوای یکسان دارند را به شما نشان خواهند داد تا آنها را رفع نمایید. به همین علت می توانید میزان شباهت آن را بررسی کنید. در گزینه near duplicate similarity threshold میتوانید درصد شباهت موردنظرتان را هم تعیین کنید.

جستجوی تگ های کنونیکال با برنامه اسکریمینگ فراگ
تگ های کنونیکال یکی از موضوعات مهم در مبحث سئو سایت می باشد که یافتن آن باید در دستور کارتان قرار بگیرد که به طور پیش فرض در تنظیمات نرم افزار فعال است و اگر این مورد برایتان فعال نبود می توانید از منوی بالای صفحه بر روی گزینه کانفیگوریشن یا Configuration کلیک نموه و سپس روی گزینه Spider کلیک و انتخاب نموده و سپس روی Crawl بزنید. حالا در پنجره جدید تیک های مقابل Canonical را زده تا از این به بعد صفحات با تگ کنونیکال خزش بشوند.

سپس می توان در بخش Enter url to spider آدرس سایت خود را قرار داده و استارت را بزنید تا کار خزش سایت آغاز شود. بعد از اینکه عملیات خزیدن سایت به اتمام رسید. در تب کنونیکال تمامی صفحات با تگ canonicl و متناظر با آنها را در ستون های مجزا نشان دهید.

آنالیز لینک های شکسته سایت با اسکریمینگ فراگ
شما به سادگی می توانید از برنامه فوق برای بررسی و آنالیز لینک های شکسته سایت استفاده نمایید. به سادگی بک لینک های داده شده به صفحات سایت تان را بررسی و پیدا کنید. برای یافتن لینک های شکسته سایت باید از روی منوی بالای صفحه گزینه Configuration را انتخاب کنید و سپس روی custom کلیک نمایید و سپس به بخش Extraction بروید. در فیلترهای تنظیمات سایت باید به جای دامین Screamingfrog.co.uk دامنه سایت تان را وارد کنید.

سپس می توانید لینک های داده شده با به همراه انکرتکست مشاهده نمایید.

کاربرد نرم افزار Screaming Frog
برنامه اسکریمینگ فراگ یکی از مهم ترین ابزارهای سئو سایت است که به عنوان خزنده وب سایت ها نیز شناخته می گردد. مهم ترین کاربرد این برنامه خزیدن در سایت ها و ارائه اطلاعات مورد نیاز سئوکارها به طور کاملا ساده می باشد. اسکریمینگ فراگ اطلاعات کامل از عنوان ها و تگ های مختلف سایت ، محتوای تکراری، لینک های داخلی و خارجی وب سایت ها، ریدایرکت ها و کدهای پاسخ html و اطلاعات مربوط به core web vitals را در اختیار افراد می گذارد. هر سئوکار با این اطلاعات می تواند یک برآورد کامل از سایت های مد نظر خود داشته باشد.
- پیدا کردن خطاهای مربوط به محتوا
- پیدا کردن ارورهای کانیبالیزیشن یا همخوانی محتوا
- اکسپورت گرفتن یا استخراج داده ها از ابزار Screaming Frog

جمع بندی و سخنان پایانی:
در این مبحث سایت نیکداد به آموزش کامل نرم افزار Screming frog پرداخته ایم که یکی از ابزارهای کامل و جذاب برای سئوکارهای ایرانی به شمار می رود. همانطور که می دانید سئو یک فرآیند کاملا پیچیده ای است که بدون ابزار قطعا نمی توانید در آن موفق باشید. این نرم افزار به سادگی روی سیستم عامل ویندوز و مک نصب می شود و کافیست نسخه با کیجن و کرک آن را از سایت معرفی شده در این مقاله دریافت نمایید. سپس شروع به خزیدن در سایت مورد نظر خودتان کنید و با وارد کردن آدرس url اینکار سریعا انجام می گیرد.
شما با خزش در سایت تان می توانید اطلاعات کاملی از تب های مختلف برنامه اسکریمینگ فراگ را با اعمال فیلتر ببینید و یک وضعیت کلی از تحلیل سایت و اصلاح خطاها و ایرادات را انجام دهید.
همچنین در ادامه پیشنهاد می کنیم بقیه مقالات نیکداد را هم نگاهی بیندازید: