خطای Crawled – Currently Not Indexed چیست؟

خطای Crawled – Currently Not Indexed چیست؟

خطای Crawled – Currently Not Indexed در گوگل سرچ کنسول نشان می‌دهد گوگل صفحه را پیدا کرده و محتوای آن را خزش کرده است، اما در حال حاضر آن را وارد فهرست صفحات ایندکس‌شده نکرده است. در نتیجه، این صفحه معمولاً از طریق نتایج عادی جست‌وجوی گوگل نمایش داده نمی‌شود. این وضعیت لزوماً به معنی وجود یک خطای فنی یا جریمه سایت نیست؛ ممکن است گوگل محتوای صفحه را برای ایندکس شدن به‌اندازه کافی ارزشمند یا متمایز تشخیص نداده باشد. برای رفع آن باید وضعیت فنی URL، کیفیت و یکتایی محتوا، نسخه canonical و ارتباط صفحه با سایر بخش‌های سایت بررسی شود.

عامل احتمالی نشانه یا دلیل اقدام پیشنهادی
محتوای کم‌ارزش یا سطحی اطلاعات صفحه پاسخ کاملی به نیاز کاربر نمی‌دهد تکمیل محتوا با اطلاعات دقیق و کاربردی
محتوای تکراری یا مشابه صفحات متعددی با موضوع و محتوای نزدیک وجود دارند ادغام صفحات یا متمایز کردن محتوای آن‌ها
انتخاب canonical متفاوت گوگل نسخه دیگری از URL را مناسب‌تر می‌داند بررسی canonical اعلام‌شده و نسخه انتخابی گوگل
لینک‌سازی داخلی ضعیف صفحه از صفحات مهم سایت لینک مناسبی دریافت نمی‌کند ایجاد لینک داخلی مرتبط و قابل‌خزش
کیفیت پایین تجربه صفحه استفاده از صفحه دشوار یا ساختار آن نامناسب است بهبود ساختار، خوانایی و تجربه کاربری
مشکل در رندر محتوا بخشی از محتوای اصلی پس از اجرای JavaScript قابل مشاهده نیست بررسی HTML رندرشده و دسترسی گوگل به محتوا
ارزش پایین صفحه برای سایت صفحه نقش مشخصی در پاسخ به نیاز کاربر یا ساختار سایت ندارد بازنگری در ضرورت انتشار یا حفظ صفحه

خطای Crawled – Currently Not Indexed چه معنایی دارد؟

خطای Crawled – Currently Not Indexed یعنی گوگل URL را پیدا کرده، به آن دسترسی داشته و محتوایش را خزش کرده است؛ اما تصمیم نگرفته آن را در ایندکس قرار دهد. بنابراین مشکل اصلی لزوماً «دسترسی ربات گوگل به صفحه» نیست، بلکه باید بررسی کرد چرا صفحه پس از خزش، برای ورود به ایندکس انتخاب نشده است.

در گزارش Page Indexing سرچ کنسول، این وضعیت در گروه صفحات ایندکس‌نشده نمایش داده می‌شود. گوگل تأکید می‌کند که ایندکس نشدن همه URLهای یک سایت لزوماً مشکل محسوب نمی‌شود؛ هدف باید ایندکس شدن صفحات اصلی و ارزشمند سایت باشد، نه تمام آدرس‌های موجود.

تفاوت Crawled – Currently Not Indexed با Discovered – Currently Not Indexed

این دو وضعیت گاهی با یکدیگر اشتباه گرفته می‌شوند، اما مرحله‌ای که گوگل در آن قرار دارد متفاوت است:

  • Crawled – Currently Not Indexed: گوگل صفحه را خزش کرده، اما فعلاً آن را ایندکس نکرده است.
  • Discovered – Currently Not Indexed: گوگل URL را شناسایی کرده، اما هنوز آن را خزش نکرده است.

بنابراین اگر صفحه در وضعیت Crawled قرار دارد، صرفاً ارسال دوباره نقشه سایت یا درخواست خزش، راه‌حل قطعی نیست. ابتدا باید کیفیت محتوا، تکراری نبودن صفحه و سیگنال‌های فنی آن بررسی شود.

مهم‌ترین دلایل ایندکس نشدن صفحه پس از خزش

مهم‌ترین دلایل ایندکس نشدن صفحه پس از خزش

۱. محتوای کم‌کیفیت یا ناکافی

یکی از مواردی که باید بررسی شود، میزان ارزش محتوای صفحه برای کاربر است. اگر صفحه فقط یک تعریف کوتاه، توضیحات عمومی یا اطلاعات تکراری ارائه کند، ممکن است برای ورود به ایندکس انتخاب نشود.

برای مثال، اگر چند مقاله سایت فقط با تغییر جزئی عنوان، یک موضوع یکسان را توضیح دهند، هرکدام ارزش مستقلی ایجاد نمی‌کنند. در چنین شرایطی بهتر است محتوا را بر اساس نیاز واقعی کاربر توسعه دهید و از تکرار مطالب مشابه خودداری کنید.

۲. محتوای تکراری یا صفحات بسیار مشابه

اگر چند URL محتوای یکسان یا بسیار نزدیک داشته باشند، گوگل ممکن است یک نسخه را به‌عنوان صفحه canonical انتخاب کند و نسخه‌های دیگر را ایندکس نکند.

برای بررسی این موضوع، در ابزار URL Inspection مقدار Google-selected canonical را با User-declared canonical مقایسه کنید. اگر گوگل آدرس دیگری را انتخاب کرده است، باید علت این انتخاب را بررسی کنید؛ از جمله شباهت محتوا، لینک‌های داخلی و تنظیمات canonical.

۳. لینک‌سازی داخلی ضعیف

صفحه‌ای که از بخش‌های مهم سایت لینک داخلی دریافت نمی‌کند، ممکن است ارتباط موضوعی و جایگاه مشخصی در ساختار سایت نداشته باشد.

برای بهبود وضعیت:

  • از مقالات مرتبط به صفحه موردنظر لینک بدهید.
  • از انکرتکست توصیفی و مرتبط استفاده کنید.
  • صفحه را در دسته‌بندی مناسب قرار دهید.
  • مطمئن شوید لینک‌ها به نسخه اصلی و canonical URL اشاره می‌کنند.

۴. محتوای اصلی قابل مشاهده برای گوگل نیست

در سایت‌هایی که از JavaScript برای نمایش محتوا استفاده می‌کنند، ممکن است محتوای اصلی پس از اجرای اسکریپت بارگذاری شود. اگر گوگل نتواند محتوای ضروری صفحه را به‌درستی رندر یا دریافت کند، ارزیابی آن با مشکل مواجه می‌شود.

در این شرایط، نسخه رندرشده صفحه را با URL Inspection بررسی کنید و مطمئن شوید متن اصلی، عنوان‌ها و محتوای مهم در دسترس گوگل هستند.

۵. انتخاب نسخه canonical اشتباه

گاهی صفحه از نظر محتوا و دسترسی مشکلی ندارد، اما تنظیمات canonical به URL دیگری اشاره می‌کند. در این حالت، گوگل ممکن است صفحه فعلی را نسخه اصلی در نظر نگیرد.

برای رفع این مشکل، canonical صفحه را بررسی کنید و مطمئن شوید:

  • به URL صحیح و ترجیحی اشاره می‌کند.
  • با نسخه درج‌شده در نقشه سایت تناقض ندارد.
  • لینک‌های داخلی به نسخه اصلی صفحه اشاره می‌کنند.

گوگل برای تشخیص نسخه اصلی، از سیگنال‌هایی مانند ریدایرکت، تگ canonical و حضور URL در نقشه سایت استفاده می‌کند؛ البته انتخاب نهایی با گوگل است.

آموزش رفع خطای Crawled – Currently Not Indexed

برای رفع خطای Crawled – Currently Not Indexed، ابتدا باید مطمئن شوید صفحه واقعاً ارزش ایندکس شدن دارد و سپس مشکلات احتمالی آن را برطرف کنید. مراحل زیر را به‌ترتیب برای رفع خطای Crawled – Currently Not Indexed انجام دهید.

مرحله اول: بررسی وضعیت URL در سرچ کنسول

وارد Google Search Console شوید و آدرس صفحه را در ابزار URL Inspection وارد کنید. اطلاعات زیر را بررسی کنید:

  • Last crawl: آخرین زمان خزش صفحه توسط گوگل
  • Page fetch: موفقیت‌آمیز بودن دریافت صفحه
  • Indexing allowed: مجاز بودن ایندکس صفحه
  • User-declared canonical: آدرس canonical اعلام‌شده توسط سایت
  • Google-selected canonical: آدرسی که گوگل به‌عنوان نسخه اصلی انتخاب کرده است

اگر گوگل نسخه دیگری را canonical تشخیص داده، پیش از درخواست ایندکس باید علت آن را پیدا کنید.

مرحله دوم: بهبود محتوا و رفع شباهت صفحات

محتوای صفحه را با صفحات مشابه سایت مقایسه کنید. بررسی کنید آیا مقاله به سؤال مشخصی پاسخ می‌دهد یا صرفاً مطالبی را تکرار می‌کند که در صفحات دیگر وجود دارند.

در صورت نیاز:

  1. اطلاعات ناقص را با توضیحات دقیق و کاربردی تکمیل کنید.
  2. مثال، مراحل اجرایی یا مقایسه‌های مرتبط اضافه کنید.
  3. بخش‌های تکراری را حذف یا بازنویسی کنید.
  4. اگر دو صفحه یک هدف جست‌وجو دارند و ارزش مستقلی ایجاد نمی‌کنند، ادغام آن‌ها و ریدایرکت صفحه فرعی را بررسی کنید.

صرفاً افزایش تعداد کلمات، تضمینی برای ایندکس شدن صفحه نیست.

مرحله سوم: بررسی تنظیمات فنی صفحه

مطمئن شوید صفحه با کد پاسخ مناسب، معمولاً HTTP 200، در دسترس است و دستور ناخواسته noindex ندارد. همچنین فایل robots.txt نباید دسترسی گوگل به محتوای ضروری صفحه را مسدود کرده باشد.

توجه کنید که وضعیت Crawled – Currently Not Indexed به‌تنهایی به معنی وجود مشکل robots.txt یا noindex نیست؛ این موارد باید جداگانه بررسی شوند.

مرحله چهارم: تقویت لینک‌سازی داخلی و بررسی نقشه سایت

از صفحات مرتبط و معتبر سایت به URL موردنظر لینک بدهید. همچنین بررسی کنید آدرس صحیح و canonical صفحه در XML Sitemap قرار داشته باشد.

نقشه سایت به گوگل کمک می‌کند URLهای مهم را شناسایی کند، اما ارسال آن به‌تنهایی تضمین‌کننده ایندکس شدن نیست.

مرحله پنجم: درخواست ایندکس مجدد

پس از اعمال تغییرات، دوباره URL را در URL Inspection بررسی کنید. در صورت دسترسی‌پذیر بودن صفحه، از گزینه Request Indexing استفاده کنید.

این درخواست فقط صفحه را برای بررسی مجدد به گوگل معرفی می‌کند و تضمینی برای ایندکس شدن آن نیست. همچنین برای تعداد زیادی URL، ارسال نقشه سایت روش مناسب‌تری است.

چه زمانی لازم نیست وضعیت خطای Crawled – Currently Not Indexed را رفع کنیم؟

همه صفحات سایت نباید در گوگل ایندکس شوند. برای مثال، صفحات فیلترشده، URLهای دارای پارامتر، نسخه‌های تکراری و صفحاتی که ارزش مستقلی برای جست‌وجو ندارند، ممکن است عمداً در ایندکس قرار نگیرند.

اگر صفحه موردنظر نسخه تکراری یک صفحه اصلی است، لازم نیست برای ایندکس کردن آن تلاش کنید. در مقابل، اگر یک مقاله مهم، صفحه محصول یا صفحه خدمات با هدف جذب ورودی ارگانیک در این وضعیت قرار دارد، بررسی و رفع مشکل اهمیت دارد.

جمع‌بندی

خطای Crawled – Currently Not Indexed نشان می‌دهد گوگل صفحه را خزش کرده، اما فعلاً آن را در ایندکس قرار نداده است. برای رفع این وضعیت، ابتدا URL را در سرچ کنسول بررسی کنید؛ سپس کیفیت محتوا، شباهت صفحات، تنظیمات canonical، دسترسی فنی و لینک‌سازی داخلی را ارزیابی کنید. بعد از اصلاح مشکلات، می‌توانید درخواست ایندکس مجدد ثبت کنید. بااین‌حال، هدف سئو نباید ایندکس کردن تمام URLها باشد؛ تمرکز اصلی باید بر صفحاتی باشد که محتوای ارزشمند، مستقل و متناسب با نیاز جست‌وجوی کاربران ارائه می‌کنند.

سؤالات متداول

۱. آیا خطای Crawled – Currently Not Indexed یک خطای فنی است؟

خیر. خطای Crawled – Currently Not Indexed الزاماً نشان‌دهنده خطای فنی نیست. گوگل صفحه را خزش کرده، اما فعلاً آن را ایندکس نکرده است. علت می‌تواند به کیفیت محتوا، تکراری بودن صفحه یا سیگنال‌های فنی مربوط باشد.

۲. چقدر طول می‌کشد تا صفحه از وضعیت خطای Crawled – Currently Not Indexed خارج شود؟

زمان مشخصی برای خارج شدن از خطای Crawled – Currently Not Indexed وجود ندارد. پس از اصلاح مشکلات، گوگل باید صفحه را دوباره بررسی کند و ممکن است آن را ایندکس کند یا همچنان از ایندکس خارج نگه دارد.

۳. آیا با Request Indexing مشکل برطرف می‌شود؟

خیر. این گزینه فقط درخواست بررسی مجدد صفحه را ارسال می‌کند و ایندکس شدن آن را تضمین نمی‌کند.

۴. تفاوت خطای Crawled – Currently Not Indexed و Discovered – Currently Not Indexed چیست؟

در وضعیت خطای Crawled – Currently Not Indexed، گوگل صفحه را خزش کرده اما ایندکس نکرده است. در وضعیت دوم، URL شناسایی شده اما هنوز خزش نشده است.

۵. آیا تمام صفحات دارای این وضعیت باید اصلاح شوند؟

خیر. فقط صفحاتی را بررسی و اصلاح کنید که برای کسب‌وکار، کاربران و استراتژی سئوی سایت ارزش دارند.

AI ASSISTANT

این مقاله را با هوش مصنوعی بررسی کنید

مقاله را برای هوش مصنوعی ارسال کنید تا خلاصه، تحلیل و نکات مهم آن را بررسی کند.

تصویر الهام رضایی
الهام رضایی

‫الهام رضایی هستم با بیش از ۶ سال سابقه در زمینه تولید محتوای تخصصی و دیجیتال، در حوزه نگارش و تدوین مقالات آموزشی فعالیت دارم. با تمرکز بر موضوعاتی مانند سئو و بهینه‌سازی سایت، دیجیتال مارکتینگ، طراحی وب‌سایت، بازاریابی شبکه‌های اجتماعی و تبلیغات آنلاین، تلاش می‌کنم مفاهیم تخصصی را به زبانی ساده، دقیق و کاربردی به مخاطبان منتقل کنم.

بدون دیدگاه

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

آخرین مقاله ها

در این بخش می توانید جدیدترین مقالات ما را بخوانید و با ایده های نوآورانه ، استراتژی های تبلیغاتی و نکات کاربردی برای رشد و موفقیت کسب و کار خود آشنا شوید.