Crawled – currently not indexed چیست و چطور در سرچ کنسول رفع می‌شود؟
در دنیای دیجیتال، دیده شدن سایت شما در نتایج جستجوی گوگل یک اولویت مهم است. اما چه اتفاقی می‌افتد زمانی که صفحات سایت شما خزش می‌شوند ولی هنوز در نتایج جستجو نمایش داده نمی‌شوند؟ این وضعیت به عنوان “Crawled – currently not indexed” در Google Search Console شناخته می‌شود. در این مقاله قصد داریم بررسی کنیم که این وضعیت دقیقاً چیست، چرا به وجود می‌آید و چگونه می‌توان آن را برطرف کرد.
1. وضعیت “Crawled – currently not indexed” به چه معناست؟
گوگل هر روزه میلیاردها صفحه را خزش می‌کند تا محتوای آن‌ها را برای نمایش در نتایج جستجو بررسی کند. خزش به معنای این است که ربات‌های گوگل (Googlebot) به صفحات سایت شما سر زده‌اند، اما وقتی با پیام “Crawled – currently not indexed” مواجه می‌شوید، یعنی صفحه شما خزش شده ولی به دلایلی در نتایج جستجوی گوگل ایندکس نشده است.
این به آن معنا نیست که صفحه شما هرگز ایندکس نخواهد شد، بلکه گوگل تصمیم گرفته است که فعلاً آن را از فهرست خود خارج کند. این وضعیت می‌تواند بر ترافیک وب‌سایت شما تأثیر بگذارد زیرا صفحاتی که ایندکس نشده‌اند، نمی‌توانند در نتایج جستجو ظاهر شوند.
2. دلایل نمایش پیام “Crawled – currently not indexed”
چندین دلیل وجود دارد که چرا صفحات شما توسط گوگل خزش شده اما هنوز ایندکس نشده‌اند. درک این دلایل می‌تواند به شما کمک کند تا استراتژی‌های لازم برای رفع آن را پیاده‌سازی کنید.
الف) محتوای تکراری یا مشابه
گوگل تلاش می‌کند بهترین محتوای ممکن را به کاربران ارائه دهد. اگر محتوای صفحه شما با محتوای دیگر صفحات سایت یا حتی سایت‌های دیگر تکراری باشد، گوگل ممکن است تصمیم بگیرد آن را ایندکس نکند. این مشکل اغلب در سایت‌هایی که دارای محصولات مشابه با توضیحات یکسان هستند دیده می‌شود. راه‌حل این است که محتوای منحصر به‌فرد و تازه تولید کنید تا گوگل آن را به عنوان محتوای جدید و مفید برای کاربران تشخیص دهد.
ب) محتوای کم‌کیفیت یا کوتاه
یکی از دلایل رایج عدم ایندکس شدن صفحات، محتوای کوتاه یا کم‌کیفیت است. صفحاتی که حاوی اطلاعات کافی نیستند، یا به طور کلی ارزش زیادی برای کاربر ندارند، ممکن است از سوی گوگل نادیده گرفته شوند. به عنوان مثال، صفحاتی با چند خط متن یا صفحات “در دست ساخت” به طور معمول ایندکس نمی‌شوند. بنابراین باید مطمئن شوید که محتوای صفحه شما کامل، مرتبط و مفید برای کاربران باشد.
ج) مشکلات فنی و دسترسی
مسائل فنی از جمله دلایل مهم دیگر عدم ایندکس شدن صفحات هستند. اگر گوگل در خزش صفحه با مشکلاتی مانند خطاهای سرور (مانند ارور ۵۰۳)، سرعت پایین لود صفحه یا محدودیت‌های دسترسی (مانند بلاک شدن ربات‌های گوگل) مواجه شود، ممکن است صفحه را ایندکس نکند.
د) بهینه نبودن ساختار سایت
ساختار سایت شما باید به گونه‌ای باشد که خزش گوگل به راحتی بتواند به تمام صفحات دسترسی پیدا کند. سایت‌هایی که لینک‌های داخلی ضعیف دارند یا صفحاتی که به آن‌ها لینک داده نشده است، ممکن است با مشکلات ایندکس شدن مواجه شوند. علاوه بر این، اگر تعداد صفحات ایندکس شده شما بسیار زیاد باشد و سرعت خزش پایین، برخی از صفحات شما از فهرست ایندکس حذف خواهند شد.
3. چگونه می‌توان مشکل “Crawled – currently not indexed” را رفع کرد؟
حالا که دلایل احتمالی این پیام را می‌دانید، بیایید به راه‌حل‌های مختلفی که می‌توانید برای رفع این مشکل به کار ببرید، بپردازیم.
الف) تولید محتوای باکیفیت و به‌روز
یکی از اولین قدم‌ها برای رفع این مشکل این است که کیفیت محتوای صفحات خود را ارتقا دهید. محتوای شما باید هم برای کاربران جذاب و هم برای موتورهای جستجو بهینه باشد. محتوای خود را با اطلاعات ارزشمند، تصاویر مرتبط، ویدیوها و لینک‌های داخلی تقویت کنید. این کار نه تنها باعث افزایش اعتماد گوگل به محتوای شما می‌شود، بلکه احتمال ایندکس شدن آن را نیز بالا می‌برد.
نکته: استفاده از کلمات کلیدی مرتبط و بهینه نیز می‌تواند در ایندکس شدن صفحه شما تاثیرگذار باشد، اما مراقب باشید که از کلیدواژه‌ها به طور طبیعی و نه افراطی استفاده کنید.
ب) افزایش لینک‌های داخلی به صفحات غیرا ایندکس شده
صفحات شما باید از طریق لینک‌های داخلی با دیگر صفحات سایت مرتبط باشند که مربوط به سئو محلی. این لینک‌ها به گوگل نشان می‌دهند که صفحه مذکور بخشی از ساختار سایت است و ارزش خزش و ایندکس شدن دارد. از صفحات مرتبط و مهم سایت به صفحات غیرا یندکس‌شده لینک دهید تا گوگل بیشتر به آن‌ها توجه کند.
ج) بررسی و رفع مشکلات فنی
همان‌طور که اشاره شد، مشکلات فنی مانند کندی سایت یا خطاهای سرور می‌توانند مانع از ایندکس شدن صفحات شما شوند. با استفاده از ابزارهای تحلیل وب مانند Google PageSpeed Insights، مشکلات سرعت و کارایی سایت را شناسایی و برطرف کنید. همچنین در صورت وجود خطاهای دسترسی در سرچ کنسول، باید آن‌ها را در اسرع وقت برطرف کنید.
د) ارسال درخواست ایندکس دوباره از طریق Google Search Console
اگر پس از بهبود محتوا و ساختار سایت، همچنان با مشکل عدم ایندکس صفحات مواجه هستید، می‌توانید از طریق سرچ کنسول درخواست ایندکس دوباره بدهید. برای این کار مراحل زیر را طی کنید:
- به Google Search Console بروید.
- وارد بخش URL Inspection شوید.
- آدرس صفحه مورد نظر خود را وارد کرده و روی گزینه Request Indexing کلیک کنید.
این فرایند به گوگل اعلام می‌کند که شما درخواست دارید تا صفحه دوباره خزش و ایندکس شود.
ه) ایجاد و ارسال نقشه سایت (Sitemap)
یک نقشه سایت (Sitemap) می‌تواند به گوگل کمک کند تا بهتر و سریع‌تر صفحات شما را پیدا کند. مطمئن شوید که نقشه سایت شما به‌روز است و تمامی صفحات مهم را شامل می‌شود. می‌توانید نقشه سایت خود را از طریق سرچ کنسول ارسال کنید و از بخش Sitemaps پیگیری کنید که آیا صفحات شما در حال خزش و ایندکس شدن هستند یا خیر.
سئو تکنیکال چیست را بخوانید
4. بهینه‌سازی سایت برای ایندکس سریع‌تر
برای اطمینان از اینکه صفحات شما سریع‌تر و راحت‌تر ایندکس می‌شوند، می‌توانید بهینه‌سازی‌هایی انجام دهید که به گوگل کمک کند محتوای شما را بهتر درک کند:
- استفاده از ساختار مناسب برای عناوین و هدینگ‌ها: از تگ‌های H1، H2 و H3 به درستی استفاده کنید تا گوگل ساختار محتوای شما را بهتر متوجه شود.
- بهینه‌سازی تصاویر: مطمئن شوید که تصاویر شما دارای تگ‌های alt هستند و حجم آن‌ها کم شده است تا صفحه شما سریع‌تر لود شود.
- ایجاد محتوای تازه و به‌روز: صفحات قدیمی که مدت‌هاست به‌روزرسانی نشده‌اند، ممکن است از ایندکس خارج شوند. بنابراین به‌روز نگه داشتن محتواهای مهم سایت ضروری است.
مقاله فایل Robots.txt چیست؟ را بخوانید
وضعیت “Crawled – currently not indexed” در سرچ کنسول ممکن است در ابتدا نگران‌کننده به نظر برسد، اما با شناخت دلایل و اقدامات مناسب، می‌توانید این مشکل را رفع کنید. ارتقای کیفیت محتوا، رفع مشکلات فنی و استفاده از استراتژی‌های لینک‌سازی داخلی به شما کمک خواهد کرد تا صفحات شما در نتایج جستجوی گوگل نمایش داده شوند و ترافیک بیشتری به سایت شما هدایت شود.
