Screaming Frog چیست؟ آموزش صفر تا صد اسکریمینگ فراگ

سلام! اگر به دنبال بهینه‌سازی سایت خود هستید، اسکریمینگ فراگ (Screaming Frog) بی رقیب، بهترین ابزار برای شماست. این نرم‌افزار، که توسط شرکت Screaming Frog ساخته شده، به شما کمک می‌کند تا مشکلات فنی و محتوایی سایت خود را شناسایی و رفع کنید. از بررسی لینک‌های شکسته گرفته تا تحلیل متا تگ‌ها و شناسایی محتوای تکراری، همه با این ابزار امکان‌پذیر است.

آموزش اسکریمینگ فراگ برای هر کسی که در زمینه سئو و بهینه‌سازی سایت کار می‌کند، یک همراه فوق‌العاده است. فرقی نمی‌کند که تازه‌کار هستید یا حرفه‌ای، این ابزار می‌تواند به شما کمک کند تا سایت خود را به بهترین شکل ممکن بهینه‌سازی کنید و رتبه‌تان را در موتورهای جستجو بالا ببرید.

در این آموزش، قدم به قدم شما را با اسکریمینگ فراگ آشنا می‌کنیم، از نصب و راه‌اندازی گرفته تا استفاده از تمامی قابلیت‌های پیشرفته آن، همه و همه را می‌آموزیم. با آژانس دیجیتال مارکتینگ منتوریکس همراه باشید تا با هم به دنیای جذاب این قورباغه دوست داشتنی وارد شویم!

Screaming Frog چیست؟

قورباغه جیغ‌جیغو یا همان Screaming Frog، اپلیکیشن جمع‌وجوری است که می‌توانید روی ویندوز، مک یا لینوکس نصب کنید. این اپلیکیشن در لینک‌ها، تصاویر، کد CSS و… وبسایت می‌خزد و بهتان می‌گوید وقتی موتورهای جست‌وجوگر شروع به خزیدن در سایت می‌کنند به چه چیزی بر می‌خورند. این اطلاعات به شما کمک می‌کند که سایت را از منظر سئو تحلیل و بررسی کنید. جدا از همه چیز باعث می‌شود که حسابی در وقت صرفه‌جویی کنید. چون تجزیه‌وتحلیل دستی هر صفحه از سایت می‌تواند چالش‌برانگیز باشد.

دانلود ویدیو از آپارات ‌اسکریمینگ فراگ چیست؟

مزایای Screaming Frog

استفاده از این ابزار مثل آب خوردن است، اما اهمیت استفاده از آن در سئو چیست؟ یک سری جدول در اختیار شما قرار می‌دهد که بنابر سلیقه و نیاز خود می‌توانید آن‌ها را تنظیم کنید. مهم‌ترین مزایای قورباغه جیغ‌جیغو:

1. یوزر فرندلی بودن
2. رابط کاربری واضح
3. امکانات کاربردی مثل: امکان تولید نقشه سایت، شناسایی لینک‌های نامعتبر، ایندکس‌کردن وبسایت‌های قوی در جاوااسکریپت و…

در ادامه مقاله قدم به قدم یاد خواهیم داد تا چطور از این ابزار مفید و کاربردی استفاده کنید.

منتوریکس در ارائه خدمات سئو و بهینه سازی وبسایت، از ابزارهایی نظیر اسکریمینگ فراگ را برای بهبود عملکرد سایت شما، استفاده می‌کند.

آموزش نصب اسکریمینگ فراگ

این برنامه رو میتوانید از وب سایت خود اسکریمینگ فراگ یا سایت‌های معتبر دیگر دانلود کرده و بعد از نصب لایسنس خود را به ترتیب عکس‌های زیر وارد کنید:

مرحله 1:

مرحله 2:

آشنایی با بخش‌های مختلف نرم افزار Screaming frog

اسکریمینگ فراگ بخش‌های مختلفی دارد که هر کدام وظایف خاصی را بر عهده دارند و در تحلیل و بهینه‌سازی وب‌سایت‌ها نقش مهمی ایفا می‌کنند. در ادامه این آموزش Screaming frog با این بخش‌ها آشنا می‌شویم:

پنل ناوبری Screaming frog (Toolbar)

قسمتی که در عکس پایین با نوار قرمز مشخص شده پنل ناوبری اسکریمینگ فراگ هست که به ما دسترسی به بخش‌های مختلفی از نرم افزار را می‌دهد. از تنظیمات و پیکربندی گرفته تا گزارشات خاص و جامع را در این قسمت میتوانید ببینید.

فایل (File):

بخش فایل مثل سایر برنامه‌‌ها شامل گزینه‌هایی مانند Save، new و… است که در ادامه آنها را یک به یک معرفی کرده و در رابطه با آنها در این آموزش جامع اسکریمینگ فراگ توضیح می‌دهیم.

• New

گزینه “New” در منوی فایل Screaming Frog به شما امکان می‌دهد یک پروژه خزش جدید را از ابتدا آغاز کنید. با انتخاب این گزینه، تمامی داده‌ها و تنظیمات خزش فعلی پاک می‌شوند و برنامه آماده به کار برای یک پروژه جدید می‌شود. این قابلیت برای زمانی که می‌خواهید یک سایت جدید را تحلیل کنید و یا خزش جدیدی را با تنظیمات متفاوت شروع کنید، بسیار مفید است. با شروع یک پروژه جدید، شما می‌توانید URL سایت مورد نظر خود را وارد کرده و تنظیمات خزش را بر اساس نیازهای خاص خود سفارشی کنید.

استفاده از گزینه “New” به شما این امکان را می‌دهد که به طور مستقل بر روی پروژه‌های مختلف کار کنید، بدون اینکه داده‌های پروژه‌های قبلی تداخل پیدا کنند. این امر به ویژه برای تحلیل‌گران سئو که با چندین وب‌سایت کار می‌کنند، اهمیت دارد. با استفاده از این قابلیت، می‌توانید به طور مکرر و سریع پروژه‌های جدید را آغاز کنید و به طور جامع وب‌سایت‌های مختلف را مورد بررسی قرار دهید.

• Crawls

گزینه “Crawls” در منوی فایل Screaming Frog به شما امکان مدیریت خزش‌های فعلی و قبلی را می‌دهد. این منو شامل لیستی از خزش‌های ذخیره شده است که می‌توانید به آنها دسترسی پیدا کنید، باز کنید، یا حذف کنید. این قابلیت به شما کمک می‌کند تا به راحتی بین پروژه‌های مختلف جابجا شوید و داده‌های مربوط به هر خزش را مرور و تحلیل کنید.

مدیریت خزش‌ها با استفاده از این گزینه به شما این امکان را می‌دهد که پروژه‌های قبلی خود را دوباره باز کنید و تحلیل‌های بیشتری بر روی آنها انجام دهید. همچنین می‌توانید خزش‌های قدیمی و غیرضروری را حذف کنید تا فضای دیسک آزاد شود و دسترسی به خزش‌های مهم‌تر آسان‌تر شود. این ویژگی برای کاربرانی که به صورت منظم و گسترده از Screaming Frog استفاده می‌کنند، بسیار کارآمد است.

• Open Recent

گزینه “Open Recent” یک لیست از پروژه‌های خزش اخیراً باز شده را نمایش می‌دهد. این قابلیت به شما امکان می‌دهد تا به سرعت به پروژه‌هایی که اخیراً بر روی آنها کار کرده‌اید، دسترسی پیدا کنید و بدون نیاز به جستجو در فایل‌های ذخیره شده، آنها را باز کنید. این ویژگی به طور قابل توجهی زمان لازم برای بازگشت به پروژه‌های اخیر را کاهش می‌دهد و کار شما را سریع‌تر و کارآمدتر می‌کند.

با استفاده از “Open Recent”، می‌توانید به راحتی پروژه‌های مختلفی را که در یک دوره کوتاه زمانی مورد استفاده قرار داده‌اید، مجدداً باز کنید. این قابلیت برای تحلیل‌گرانی که همزمان بر روی چندین پروژه کار می‌کنند و نیاز دارند که به طور مکرر بین آنها جابجا شوند، بسیار مفید است. علاوه بر این، این ویژگی به شما کمک می‌کند تا از اشتباهات ناشی از انتخاب فایل‌های نادرست جلوگیری کنید.

• Close

گزینه “Close” برای بستن پروژه جاری بدون خروج از برنامه Screaming Frog استفاده می‌شود. با انتخاب این گزینه، تمامی داده‌های فعلی خزش بسته می‌شود و برنامه آماده به کار برای یک پروژه جدید یا باز کردن یک پروژه دیگر می‌شود. اگر تغییراتی در پروژه فعلی اعمال شده باشد که هنوز ذخیره نشده‌اند، برنامه از شما می‌پرسد که آیا می‌خواهید تغییرات را ذخیره کنید یا خیر.

بستن پروژه جاری به شما امکان می‌دهد بدون نیاز به بستن و باز کردن مجدد برنامه، به سرعت بین پروژه‌های مختلف جابجا شوید. این قابلیت برای کاربرانی که نیاز دارند به طور مکرر پروژه‌های مختلف را باز و بسته کنند، بسیار مفید است. همچنین این گزینه به شما کمک می‌کند تا سازماندهی بهتری در مدیریت پروژه‌های خود داشته باشید و به راحتی به پروژه‌های جدید یا ذخیره شده دسترسی پیدا کنید.

• Rename

گزینه “Rename” به شما امکان می‌دهد نام پروژه جاری را تغییر دهید. این قابلیت به خصوص زمانی مفید است که می‌خواهید نام پروژه را به طور دقیق‌تری بر اساس محتوای آن مشخص کنید یا از یک نامگذاری استاندارد برای سازماندهی بهتر پروژه‌های خود استفاده کنید. تغییر نام پروژه به شما کمک می‌کند تا پروژه‌های خود را به راحتی مدیریت کنید و به سرعت پروژه مورد نظر خود را پیدا کنید.

تغییر نام پروژه همچنین می‌تواند به جلوگیری از اشتباهات در زمان انتخاب پروژه‌ها کمک کند. به عنوان مثال، اگر چندین پروژه با نام‌های مشابه داشته باشید، تغییر نام آنها به نام‌های دقیق‌تر و مرتبط‌تر می‌تواند مدیریت و دسترسی به آنها را ساده‌تر کند. این ویژگی برای تحلیل‌گرانی که با تعداد زیادی از پروژه‌ها کار می‌کنند، بسیار اهمیت دارد.

• Delete

گزینه “Delete” به شما امکان می‌دهد پروژه‌های خزش ذخیره شده را حذف کنید. این قابلیت برای مدیریت فضای دیسک و سازماندهی بهتر پروژه‌های ذخیره شده بسیار مفید است. با حذف پروژه‌های قدیمی و غیرضروری، می‌توانید فضای بیشتری را برای پروژه‌های جدید و مهم‌تر آزاد کنید.

حذف پروژه‌ها همچنین می‌تواند به بهبود عملکرد برنامه کمک کند، زیرا تعداد کمتری از پروژه‌های ذخیره شده برای مدیریت وجود خواهد داشت. این امر به ویژه برای کاربرانی که به طور منظم و گسترده از Screaming Frog استفاده می‌کنند و پروژه‌های متعددی دارند، بسیار کاربردی است. این گزینه به شما امکان می‌دهد که پروژه‌های غیرضروری را به راحتی مدیریت و حذف کنید تا فضای کاری خود را بهینه کنید.

• Import

گزینه “Import” شامل زیرمنوهایی برای وارد کردن تنظیمات و داده‌ها به پروژه جاری است. این زیرمنوها شامل مواردی مانند بارگذاری تنظیمات خزش از یک فایل پیکربندی ذخیره شده و وارد کردن لیستی از URLها برای خزش به صورت مستقیم می‌شود. این قابلیت به شما امکان می‌دهد که به سرعت و به راحتی تنظیمات و داده‌های مورد نیاز خود را وارد کنید و خزش را آغاز کنید.

وارد کردن تنظیمات و داده‌ها به ویژه زمانی مفید است که شما نیاز دارید از تنظیمات مشخصی که قبلاً ذخیره کرده‌اید استفاده کنید یا لیستی از URLهای خاص را برای خزش وارد کنید. این امر به شما کمک می‌کند تا فرآیند خزش را سریع‌تر آغاز کنید و به طور دقیق‌تر به تحلیل وب‌سایت‌ها بپردازید. این ویژگی برای تحلیل‌گرانی که با پروژه‌های مختلف و تنظیمات متنوع کار می‌کنند، بسیار کاربردی است.

• Import Recent

گزینه “Import Recent” به شما امکان می‌دهد به سرعت به فایل‌هایی که اخیراً وارد کرده‌اید، دسترسی پیدا کنید و آنها را دوباره وارد کنید. این قابلیت برای زمانی که نیاز دارید به سرعت از فایل‌هایی که به تازگی استفاده کرده‌اید مجدداً استفاده کنید، بسیار مفید است. این ویژگی زمان لازم برای پیدا کردن و وارد کردن فایل‌های اخیر را کاهش می‌دهد و کار شما را سریع‌تر و کارآمدتر می‌کند.

با استفاده از “Import Recent”، می‌توانید به راحتی تنظیمات و داده‌های اخیراً استفاده شده را دوباره وارد کنید و پروژه‌های خود را سریع‌تر پیش ببرید. این ویژگی به خصوص برای تحلیل‌گرانی که به طور مکرر از فایل‌های وارد شده استفاده می‌کنند، اهمیت دارد. این قابلیت به شما کمک می‌کند تا بدون نیاز به جستجو در فایل‌های قدیمی، به سرعت به فایل‌های اخیر دسترسی پیدا کنید و آنها را وارد کنید.

• Export

گزینه “Export” برای استخراج داده‌ها و گزارش‌ها به فرمت‌ Screaming frog است. استخراج داده‌ها و گزارش‌ها به شما کمک می‌کند تا به طور جامع‌تر و دقیق‌تری به تحلیل وب‌سایت‌ها بپردازید و نتایج خزش را در قالبی مناسب برای اشتراک‌گذاری یا استفاده‌های دیگر آماده کنید. این ویژگی برای تحلیل‌گرانی که نیاز به تهیه گزارش‌های دقیق و استفاده از داده‌ها در ابزارهای تحلیلی دیگر دارند، بسیار مفید است.

با استفاده از این گزینه، می‌توانید داده‌ها و گزارش‌های مورد نیاز خود را به راحتی استخراج کنید و به طور مؤثرتری به تحلیل و بهینه‌سازی وب‌سایت‌ها بپردازید.

• Setting

گزینه “Settings” به شما امکان دسترسی به تنظیمات عمومی برنامه Screaming Frog را می‌دهد. از طریق این گزینه، می‌توانید تنظیمات مختلف برنامه را بر اساس نیازهای خاص خود تغییر دهید، مانند تنظیمات مرتبط با خزش، فیلترها، و سایر پارامترهای مرتبط با تحلیل وب‌سایت. این قابلیت به شما کمک می‌کند تا برنامه را به طور دقیق‌تر بر اساس نیازهای خود سفارشی کنید.

تنظیمات سفارشی‌سازی به شما امکان می‌دهد تا کارایی و دقت خزش‌ها را بهبود ببخشید و به طور دقیق‌تر به تحلیل وب‌ سایت‌ها بپردازید. با تنظیم پارامترهای مختلف، می‌توانید خزش‌ها را به طور بهینه‌تری انجام دهید و نتایج بهتری بدست آورید. این ویژگی برای تحلیل‌گرانی که نیاز به تنظیمات خاص و دقیق دارند، بسیار اهمیت دارد و به آنها کمک می‌کند تا به طور مؤثرتری به اهداف خود دست یابند. در ادامه آموزش Screaming frog همه قسمت‌های منو Setting را توضیح می‌دهیم:

• License: بخش “License” در تنظیمات Screaming Frog به شما امکان می‌دهد که مجوز (لایسنس) خود را مدیریت کنید. این قسمت به شما اجازه می‌دهد کلید مجوز خود را وارد کنید تا برنامه فعال شود و بتوانید از تمامی قابلیت‌های آن استفاده کنید. همچنین، اگر نیاز به تغییر یا به‌روزرسانی مجوز دارید، می‌توانید از این بخش اقدام کنید. مدیریت مجوز به خصوص برای کاربران تجاری و حرفه‌ای اهمیت دارد که نیاز به دسترسی کامل به تمامی امکانات Screaming Frog دارند.

در این قسمت، شما می‌توانید وضعیت فعلی مجوز خود را مشاهده کنید و در صورت نیاز، آن را تمدید یا تغییر دهید. داشتن مجوز معتبر برای بهره‌برداری از تمامی ویژگی‌های پیشرفته Screaming Frog ضروری است، زیرا نسخه رایگان دارای محدودیت‌های خاصی در تعداد URL‌های خزیده شده و برخی از قابلیت‌ها است.

• User Interface: بخش “User Interface” در تنظیمات Screaming Frog به شما امکان می‌دهد تنظیمات مرتبط با ظاهر و عملکرد رابط کاربری برنامه را سفارشی‌سازی کنید.

• Language: بخش “Language” در تنظیمات Screaming Frog به شما امکان می‌دهد زبان رابط کاربری برنامه را تغییر دهید. این قابلیت برای کاربرانی که ترجیح می‌دهند برنامه را به زبان مادری خود یا زبانی که با آن راحت‌تر هستند استفاده کنند، بسیار مفید است. انتخاب زبان مناسب می‌تواند تجربه کاربری را بهبود بخشد و به فهم بهتر و سریع‌تر ابزارها و امکانات کمک کند.

این بخش معمولاً شامل گزینه‌هایی برای انتخاب از بین زبان‌های مختلف است. با تغییر زبان، تمامی متون و منوهای برنامه به زبان انتخابی شما تغییر می‌کنند، که می‌تواند به کاربری راحت‌تر و مؤثرتر برنامه منجر شود.

• System Proxy: بخش “System Proxy” در تنظیمات Screaming Frog به شما امکان می‌دهد تنظیمات پراکسی سیستم را پیکربندی کنید. این قابلیت برای کاربرانی که نیاز دارند از طریق یک پراکسی به اینترنت متصل شوند، ضروری است. تنظیمات پراکسی به شما امکان می‌دهد که جزئیات سرور پراکسی، از جمله آدرس IP و پورت را وارد کنید و در صورت نیاز، احراز هویت با نام کاربری و رمز عبور را تنظیم کنید.

استفاده از پراکسی می‌تواند به شما کمک کند تا به سایت‌هایی که ممکن است به دلایل مختلف مسدود شده‌اند، دسترسی پیدا کنید یا ترافیک خود را از طریق یک شبکه امن هدایت کنید. این ویژگی برای کاربران حرفه‌ای و تجاری که نیاز به امنیت بیشتر و مدیریت بهتر ترافیک دارند، بسیار اهمیت دارد.

• Storage Mode: بخش “Storage Mode” در تنظیمات Screaming Frog به شما امکان می‌دهد نوع ذخیره‌سازی داده‌ها را بین RAM و پایگاه داده انتخاب کنید. استفاده از RAM به شما امکان می‌دهد که داده‌ها به صورت موقت و با سرعت بالاتر در حافظه موقت ذخیره شوند، که می‌تواند به عملکرد سریع‌تر برنامه منجر شود. این گزینه برای خزش‌های کوچکتر و زمانی که سیستم شما دارای حافظه RAM کافی است، مناسب است.

در مقابل، انتخاب حالت پایگاه داده به شما امکان می‌دهد داده‌ها را به صورت پایدارتر و در حجم بیشتری ذخیره کنید. این گزینه برای خزش‌های بزرگتر و زمانی که نیاز به مدیریت حجم زیادی از داده‌ها دارید، مناسب است. استفاده از پایگاه داده می‌تواند به جلوگیری از استفاده بیش از حد حافظه RAM کمک کند و عملکرد سیستم را بهبود بخشد.

• Memory Allocation: بخش “Memory Allocation” در تنظیمات Screaming Frog به شما امکان می‌دهد میزان حافظه‌ای که برنامه می‌تواند استفاده کند را تنظیم کنید. این تنظیمات به شما کمک می‌کند تا حافظه مورد نیاز برای اجرای خزش‌های بزرگتر و پردازش حجم بیشتری از داده‌ها را مدیریت کنید. با تخصیص حافظه بیشتر به Screaming Frog، می‌توانید عملکرد برنامه را بهبود بخشید و از بروز مشکلات مرتبط با کمبود حافظه جلوگیری کنید.

تنظیمات تخصیص حافظه معمولاً به شما امکان می‌دهد حداکثر میزان حافظه‌ای که برنامه می‌تواند استفاده کند را تعیین کنید. این تنظیمات برای سیستم‌هایی که دارای محدودیت‌های حافظه هستند یا کاربرانی که نیاز به اجرای خزش‌های بسیار بزرگ دارند، بسیار مفید است. با مدیریت صحیح تخصیص حافظه، می‌توانید کارایی و پایداری برنامه را افزایش دهید و از بهینه‌ترین استفاده از منابع سیستم خود مطمئن شوید.

• Crawl Recent

گزینه “Crawl Recent” یک لیست از خزش‌های اخیراً انجام شده را نمایش می‌دهد. این قابلیت به شما امکان می‌دهد به سرعت به خزش‌هایی که اخیراً انجام داده‌اید دسترسی پیدا کنید و بدون نیاز به جستجو در پروژه‌های ذخیره شده، آنها را باز کنید و بررسی کنید. این ویژگی به طور قابل توجهی زمان لازم برای بازبینی و تحلیل خزش‌های اخیر را کاهش می‌دهد و کار شما را سریع‌تر و کارآمدتر می‌کند.

با استفاده از “Crawl Recent”، می‌توانید به راحتی به خزش‌هایی که در یک دوره کوتاه زمانی انجام داده‌اید دسترسی پیدا کنید و نتایج آنها را مرور و تحلیل کنید. این قابلیت به خصوص برای تحلیل‌گرانی که به طور مکرر و گسترده از Screaming Frog استفاده می‌کنند و نیاز دارند به طور مکرر بین خزش‌های اخیر جابجا شوند، بسیار مفید است. این ویژگی به شما کمک می‌کند تا به سرعت به داده‌های خزش‌های اخیر دسترسی پیدا کنید و تحلیل‌های بیشتری بر روی آنها انجام دهید.

• Scheduling

گزینه “Scheduling” به شما امکان می‌دهد تا خزش‌ها را برای اجرا در زمان‌های مشخص برنامه‌ریزی کنید. با استفاده از این قابلیت، می‌توانید خزش‌های خود را به طور خودکار در زمان‌های معین آغاز کنید، بدون اینکه نیاز باشد به صورت دستی خزش را شروع کنید. این ویژگی برای تحلیل‌گرانی که نیاز دارند خزش‌ها به صورت منظم و در زمان‌های خاصی انجام شوند، بسیار مفید است.

زمان‌بندی خزش‌ها به شما کمک می‌کند تا فرآیند تحلیل وب‌سایت‌ها را بهینه‌سازی کنید و به طور منظم داده‌های به‌روز شده را جمع‌آوری کنید. با استفاده از این قابلیت، می‌توانید خزش‌ها را برای ساعات خارج از اوج کار برنامه‌ریزی کنید تا از بار اضافی بر روی سرورهای سایت جلوگیری کنید و نتایج بهتری بدست آورید. این ویژگی به شما امکان می‌دهد تا به طور مؤثرتری به تحلیل و بهینه‌سازی وب‌سایت‌ها بپردازید و از زمان خود به بهترین نحو استفاده کنید.

• Exit

گزینه “Exit” برای خروج از برنامه Screaming Frog استفاده می‌شود. با انتخاب این گزینه، برنامه بسته می‌شود و اگر پروژه جاری ذخیره نشده باشد، برنامه از شما می‌پرسد که آیا می‌خواهید تغییرات را ذخیره کنید یا خیر. این قابلیت به شما امکان می‌دهد به طور کامل از برنامه خارج شوید و تمامی فرآیندهای مربوط به خزش و تحلیل را متوقف کنید.

View

شامل گزینه‌هایی برای نوع نمایش تب‌ها برگرداندن آنها به حالت عادی است.

Mode

1. Spider Mode

حالت “Spider” اصلی‌ترین و پرکاربردترین حالت در Screaming Frog است. در این حالت، برنامه به صورت خودکار تمامی صفحات یک وب‌سایت را خزیده و داده‌های مختلفی را جمع‌آوری می‌کند. این داده‌ها شامل وضعیت کدهای HTTP، متا تگ‌ها، عناوین صفحات، لینک‌های داخلی و خارجی، تصاویر و بسیاری از اطلاعات دیگر است. حالت Spider به کاربران امکان می‌دهد تا به طور جامع وب‌سایت خود را تحلیل کرده و مشکلات مختلفی مانند لینک‌های شکسته، محتوای تکراری، و مسائل مربوط به SEO را شناسایی کنند.

این حالت برای کاربران حرفه‌ای سئو و مدیران وب‌سایت بسیار مفید است زیرا به آنها کمک می‌کند تا دید کاملی از وضعیت فعلی سایت خود داشته باشند و بتوانند بهبودهای لازم را اعمال کنند. همچنین، حالت Spider به کاربران امکان می‌دهد تا تنظیمات مختلفی را برای بودجه خزش سفارشی‌سازی کنند، مانند سرعت خزش، عمق خزش، و استثنا کردن یا شامل کردن URLهای خاص.

2. List Mode

حالت “List” در Screaming Frog به کاربران امکان می‌دهد تا به جای خزش کل وب‌سایت، لیستی از URLهای خاص را وارد کنند و فقط آن URLها را تحلیل کنند. این حالت برای مواقعی مفید است که شما یک مجموعه مشخص از صفحات را برای تحلیل دارید، مانند صفحات لندینگ، صفحات محصول، یا URLهای خاص که نیاز به بررسی دقیق‌تر دارند.

در حالت List، شما می‌توانید لیست URLهای خود را به صورت دستی وارد کنید یا از یک فایل متنی یا CSV بارگذاری کنید. سپس Screaming Frog این URLها را خزیده و داده‌های مرتبط را جمع‌آوری می‌کند. این حالت برای تحلیل‌های سریع و متمرکز بر روی مجموعه‌ای از صفحات خاص بسیار کارآمد است و به شما کمک می‌کند تا به سرعت مشکلات یا فرصت‌های بهینه‌سازی را شناسایی کنید.

3. SERP Mode

حالت “SERP” در Screaming Frog به شما امکان می‌دهد تا صفحات نتایج موتورهای جستجو را بررسی و تحلیل کنید. این حالت به خصوص برای تحلیل‌گران سئو و بازاریابان دیجیتال که نیاز به فهم بهتر رتبه‌بندی و نمایش نتایج در موتورهای جستجو دارند، بسیار مفید است. در حالت SERP، شما می‌توانید نتایج جستجوی یک کلمه کلیدی خاص را بررسی کرده و داده‌هایی مانند عناوین صفحات، توضیحات متا، و URLهای نمایش داده شده را جمع‌آوری کنید.

این حالت به شما کمک می‌کند تا عملکرد رقبای خود را در نتایج جستجو تحلیل کنید و بفهمید که چگونه می‌توانید بهینه‌سازی‌های لازم را انجام دهید تا رتبه‌بندی خود را بهبود بخشید. همچنین، این حالت به شما امکان می‌دهد تا تغییرات در نتایج جستجو را در طول زمان دنبال کنید و استراتژی‌های سئوی خود را بر اساس آن تنظیم کنید.

4. Compare Mode

حالت “Compare” در Screaming Frog به شما امکان می‌دهد دو خزش مختلف را با یکدیگر مقایسه کنید. این حالت به خصوص برای مواقعی مفید است که شما نیاز دارید تغییرات بین دو نسخه مختلف از وب‌سایت خود را بررسی کنید یا تاثیر بهینه‌سازی‌ها و تغییرات اخیر را بسنجید. در حالت Compare، شما می‌توانید داده‌های جمع‌آوری شده از دو خزش مختلف را با یکدیگر مقایسه کرده و تفاوت‌ها و تغییرات را مشاهده کنید.

این حالت به شما کمک می‌کند تا به سرعت مشکلات جدید یا بهبودهای ایجاد شده را شناسایی کنید و فهم بهتری از عملکرد وب‌سایت خود در طول زمان داشته باشید. همچنین، این حالت برای تحلیل تغییرات ناشی از به‌روزرسانی‌های بزرگ سایت یا بررسی تاثیر کمپین‌های سئو و بازاریابی دیجیتال بسیار مفید است. با استفاده از حالت Compare، شما می‌توانید تصمیمات بهتری بر اساس داده‌های دقیق‌تر و جامع‌تر اتخاذ کنید. برای مثال میتوانید افزایش یا کاهش تعداد صفحات 404 خود را در طول زمان بررسی کنید.

Configuration

بخش configuration شامل تنظیماتی است که بهینه کردن آنها می‌تواند کمک بسیار زیادی به تحلیل‌های ما کند. این بخش شامل قسمت‌های مختلفی است که یک به یک آنها را بررسی میکنیم:

Spider -1

این بخش دارای چند زیرمجموعه هست که هر کدام تنظیمات خاصی از بخش خزش را بررسی میکنند. این مجموعه تنظیمات عبارتند از:

• Crawl

Resource Links: بخش “Resource Links” در تنظیمات خزش (Crawl) مربوط به نحوه مدیریت و خزیدن لینک‌های منابع است. این لینک‌ها شامل فایل‌های CSS، JavaScript، و سایر منابعی است که برای بارگذاری و نمایش صحیح صفحات وب ضروری هستند. با تنظیم این گزینه، می‌توانید تصمیم بگیرید که آیا این منابع باید خزیده شوند یا نه. این تنظیم به خصوص برای تحلیل کامل و دقیق ساختار وب‌سایت و اطمینان از دسترسی و بهینه بودن تمامی منابع سایت اهمیت دارد.

مدیریت لینک‌های منابع می‌تواند به شما کمک کند تا مشکلات احتمالی در بارگذاری و عملکرد صفحات وب را شناسایی کنید. برای مثال، اگر برخی از منابع مهم نتوانند به درستی خزیده شوند، ممکن است نشان‌دهنده مشکلاتی در دسترسی به این منابع باشد که می‌تواند بر عملکرد و تجربه کاربری سایت تأثیر منفی بگذارد. با خزیدن لینک‌های منابع، می‌توانید اطمینان حاصل کنید که تمامی اجزای سایت به درستی عمل می‌کنند و بهینه هستند.

• Crawl Behavior: بخش “Crawl Behavior” به شما امکان می‌دهد تا رفتار خزیدن را تنظیم کنید. این شامل گزینه‌هایی مانند پیروی از ریدایرکت‌ها، مدیریت پارامترهای URL، و کنترل تگ‌های nofollow است. این تنظیمات به شما کمک می‌کنند تا کنترل دقیقی بر نحوه خزش سایت داشته باشید و اطمینان حاصل کنید که خزنده به طور بهینه و کارآمد عمل می‌کند. برای مثال، می‌توانید تعیین کنید که خزنده چگونه با ریدایرکت‌ها برخورد کند یا پارامترهای خاصی را نادیده بگیرد.

تنظیم رفتار خزش می‌تواند به شما کمک کند تا فرآیند خزش را بهبود بخشید و از بروز مشکلات احتمالی مانند خزش بی‌پایان یا خزیدن صفحات غیرضروری جلوگیری کنید. این تنظیمات به خصوص برای وب‌سایت‌های بزرگ و پیچیده که دارای ساختارهای لینک‌دهی متنوع و پارامترهای URL متعدد هستند، اهمیت دارد. با سفارشی‌سازی رفتار خزش، می‌توانید به طور دقیق‌تری به تحلیل وب‌سایت بپردازید و نتایج بهتری بدست آورید.

• Page Links: بخش “Page Links” در تنظیمات خزش مربوط به نحوه مدیریت و خزیدن لینک‌های موجود در صفحات وب است. این تنظیمات شامل گزینه‌هایی برای خزیدن لینک‌های داخلی و خارجی، پیروی از تگ‌های nofollow، و مدیریت لینک‌های نسبت به صفحات تکراری است. با تنظیم این گزینه‌ها، می‌توانید کنترل دقیقی بر نحوه خزیدن لینک‌های صفحات وب‌سایت خود داشته باشید و اطمینان حاصل کنید که تمامی لینک‌های مهم و مرتبط به درستی خزیده می‌شوند.

خزش لینک‌های صفحه می‌تواند به شما کمک کند تا ساختار لینک‌دهی داخلی و خارجی سایت را بهبود بخشید و مشکلاتی مانند لینک‌های شکسته یا لینک‌های تکراری را شناسایی و رفع کنید. این تنظیمات به شما امکان می‌دهد تا تحلیل جامعی از لینک‌های سایت خود داشته باشید و استراتژی‌های بهینه‌سازی لینک‌دهی خود را بر اساس نتایج خزش تنظیم کنید. با کنترل دقیق بر لینک‌های صفحات، می‌توانید به بهبود سئو و تجربه کاربری سایت کمک کنید.

• XML Sitemaps: بخش “XML Sitemaps” به شما امکان می‌دهد تا تنظیمات مربوط به خزیدن نقشه‌های سایت XML را مدیریت کنید. نقشه‌های سایت XML فایل‌هایی هستند که تمامی URLهای مهم سایت را فهرست می‌کنند و به موتورهای جستجو کمک می‌کنند تا ساختار سایت را بهتر درک کنند و تمامی صفحات را به درستی خزیده و ایندکس کنند. با تنظیم این گزینه، می‌توانید تعیین کنید که آیا نقشه‌های سایت XML باید خزیده شوند و چگونه با این فایل‌ها برخورد شود.

خزش نقشه‌های سایت XML می‌تواند به شما کمک کند تا مطمئن شوید که تمامی صفحات مهم و مرتبط سایت شما به درستی خزیده و ایندکس شده‌اند. این تنظیمات به شما امکان می‌دهد تا به طور دقیق‌تر ساختار و محتوای سایت خود را به موتورهای جستجو معرفی کنید و از بروز مشکلات مرتبط با ایندکس نشدن صفحات مهم جلوگیری کنید. با استفاده از این قابلیت، می‌توانید استراتژی سئوی خود را بهبود بخشید و از دسترسی بهتر به تمامی صفحات سایت اطمینان حاصل کنید.

• Extraction

• Page Details: بخش “Page Details” در تنظیمات استخراج به شما امکان می‌دهد تا اطلاعات مختلفی از صفحات وب‌سایت خود را استخراج کنید. این اطلاعات شامل عناصر HTML مانند عناوین (H1، H2)، متا تگ‌ها، توضیحات متا، و سایر جزئیات مرتبط با صفحه است. با تنظیم این گزینه‌ها، می‌توانید تعیین کنید که کدام عناصر باید خزیده و اطلاعات آنها استخراج شود و چگونه این اطلاعات نمایش داده شود.

استخراج جزئیات صفحه به شما کمک می‌کند تا تحلیل دقیق‌تری از محتوای صفحات وب‌سایت خود داشته باشید و مطمئن شوید که تمامی عناصر مهم به درستی تنظیم شده‌اند. این تنظیمات برای بهینه‌سازی سئو بسیار مفید است زیرا به شما امکان می‌دهد تا عناوین، متا تگ‌ها، و سایر جزئیات صفحه را بررسی و بهبود بخشید. با استخراج دقیق جزئیات صفحه، می‌توانید به طور مؤثرتری استراتژی‌های سئوی خود را تنظیم کنید و نتایج بهتری در موتورهای جستجو بدست آورید.

• URL Details: بخش “URL Details” به شما امکان می‌دهد تا اطلاعات مرتبط با URLهای وب‌سایت خود را استخراج کنید. این اطلاعات شامل عناصر مختلفی مانند طول URL، پارامترهای URL، و وضعیت کدهای HTTP است. با تنظیم این گزینه‌ها، می‌توانید تعیین کنید که کدام جزئیات مربوط به URLها باید استخراج و نمایش داده شود. این قابلیت به شما کمک می‌کند تا تحلیل دقیق‌تری از ساختار و عملکرد URLهای سایت خود داشته باشید.

استخراج جزئیات URL می‌تواند به شما کمک کند تا مشکلات مرتبط با ساختار URLها، مانند طولانی بودن URLها یا استفاده از پارامترهای نامناسب را شناسایی و رفع کنید. این تنظیمات به خصوص برای بهبود سئو و تجربه کاربری اهمیت دارد، زیرا URLهای بهینه و مناسب می‌توانند به رتبه‌بندی بهتر در موتورهای جستجو و دسترسی آسان‌تر کاربران به محتوای سایت کمک کنند. با استفاده از این قابلیت، می‌توانید به طور دقیق‌تری URLهای سایت خود را بررسی و بهینه‌سازی کنید.

• Directives: بخش “Directives” در تنظیمات استخراج به شما امکان می‌دهد تا دستورالعمل‌های مختلف موجود در صفحات وب را شناسایی و استخراج کنید. این دستورالعمل‌ها شامل تگ‌های مرتبط با SEO مانند “noindex”، “nofollow”، “canonical”، و “hreflang” است. با تنظیم این گزینه‌ها، می‌توانید تعیین کنید که کدام دستورالعمل‌ها باید شناسایی و استخراج شوند و چگونه این اطلاعات نمایش داده شود.

برای آشنایی بیشتر با نوع لینک‌های فالو و نوفالو این مطلب را بخوانید.

استخراج دستورالعمل‌ها به شما کمک می‌کند تا مطمئن شوید که تمامی تگ‌های مرتبط با SEO به درستی تنظیم شده‌اند و بهینه‌سازی سایت شما به بهترین شکل ممکن انجام می‌شود. این تنظیمات به خصوص برای اطمینان از این که صفحات مهم سایت به درستی ایندکس می‌شوند و لینک‌های مهم به درستی فالو یا نوفالو هستند، اهمیت دارد. با استفاده از این قابلیت، می‌توانید تحلیل دقیق‌تری از دستورالعمل‌های موجود در سایت خود داشته باشید و به بهبود استراتژی سئوی خود کمک کنید.

• Structured Data: بخش “Structured Data” به شما امکان می‌دهد تا داده‌های ساختاریافته موجود در صفحات وب را شناسایی و استخراج کنید. داده‌های ساختاریافته شامل اطلاعاتی است که به صورت سازماندهی شده و با استفاده از استانداردهایی مانند Schema.org در صفحات وب قرار می‌گیرند. این داده‌ها به موتورهای جستجو کمک می‌کنند تا محتوای صفحات را بهتر درک کنند و نتایج جستجوی بهتری ارائه دهند.

استخراج داده‌های ساختاریافته به شما کمک می‌کند تا مطمئن شوید که تمامی داده‌های مهم و مرتبط به درستی در صفحات وب قرار گرفته‌اند و بهینه‌سازی سئوی شما به بهترین شکل ممکن انجام می‌شود. این تنظیمات به شما امکان می‌دهد تا تحلیل دقیقی از داده‌های ساختاریافته موجود در سایت خود داشته باشید و مشکلات یا نواقص موجود را شناسایی و رفع کنید. با استفاده از این قابلیت، می‌توانید بهبودهای بیشتری در نتایج جستجو و نمایش سایت خود در موتورهای جستجو بدست آورید.

• Limits

بخش “Limits” در تنظیمات Spider به شما امکان می‌دهد تا محدودیت‌های م