خطا Submitted URL marked noindex در سرچ کنسول
رفع خطا Submitted URL marked noindex اقدامی مهم برای بهبود سئو و افزایش شانس ایندکس شدن صفحات در گوگل است. این خطا زمانی در سرچ کنسول ظاهر میشود که صفحهای به دلیل وجود تگ noindex اجازه ایندکس شدن نداشته باشد و گوگل آن را مسدود کند.
در ادامه همراه گروه مشاوران بازاریابی اینترنتی جَم باشید تا با علت خطا Submitted URL marked noindex، روشهای رفع خطا Submitted URL marked noindex در سرچ کنسول، بررسی اینکه اگر خطا Submitted URL marked noindex مرتبط با هیچکدام از این موارد نباشد چه باید کرد و همچنین راهکارهای پیداکردن صفحاتی که دارای تگ نوایندکس هستند آشنا شوید؛ موضوعاتی که در طراحی سایت باید بدان توجه نمود.
علت خطا Submitted URL marked noindex
خطای submitted URL marked noindex یا submitted URL marked ‘noindex’ زمانی در گزارش Pages سرچ کنسول دیده میشود که یک آدرس از طریق نقشه سایت ارسال شده اما به دلیل وجود تگ noindex در متا یا هدر HTTP، امکان ایندکس شدن ندارد. این تگ معمولاً با دستور
<meta name=”robots” content=”noindex”>
یا هدر X-Robots-Tag: noindex اعمال میشود و به رباتها اعلام میکند که صفحه نباید وارد نتایج جستجو شود. بروز این وضعیت و بیتوجهی به آن میتواند مانع از رشد ارگانیک سایت شود.
همچنین این خطا زمانی ایجاد میشود که صفحه بهاشتباه هم در سایتمپ قرار گرفته و هم با تگ عدم ایندکس محدود شده است. در سیستمهایی مانند وردپرس نیز فعال بودن گزینه جلوگیری از نمایش سایت در موتورهای جستجو یا تنظیمات افزونههای سئو یا فایل robots.txt مانند Yoast و Rank Math میتواند باعث ثبت تگ ایندکس اشتباه یا اعمال noindex شود.
مدیریت صحیح ساختار سایتمپ و بررسی تنظیمات سئو، بهترین راه برای رفع خطا: Submitted URL marked noindex در سرچ کنسول است و به شما کمک میکند از بروز سایر خطاهای سرچ کنسول نیز جلوگیری کنید. برای شناخت دیگر ارورهای سئو می توانید مقاله مرتبط را بررسی کنید:
ما در این مقالات شما را در شناخت و برطرف کردن خطاهایی چون؛ خطا Submitted URL blocked by robots.txt، ارور too many redirects، خطای soft 404، راهنمایی کرده ایم.
روش های پیشگیری از بروز خطا Submitted URL marked noindex
برای جلوگیری از بروز خطا Submitted URL marked noindex و اطمینان از ایندکس صحیح صفحات، لازم است برخی تنظیمات کلیدی در سایت و CMS خود رعایت شوند. جدول زیر نکات مهم پیشگیری و محل اعمال آنها را به شکل روشن و عملی ارائه میکند تا بتوانید به راحتی مراحل را دنبال کرده و از خطاهای مشابه در آینده جلوگیری کنید.
|
نکته پیشگیری |
توضیح |
محل یا ابزار اعمال |
|---|---|---|
|
بررسی نقشه سایت |
مطمئن شوید فقط URLهایی که باید ایندکس شوند در سایتمپ قرار دارند. |
فایل sitemap.xml یا افزونههای نقشه سایت |
|
استفاده صحیح از تگ ایندکس |
صفحات مهم را با <meta name="robots" content="index, follow"> مشخص کنید. |
HTML صفحه یا تنظیمات افزونههای سئو |
|
محدود کردن تگ noindex به صفحات غیرضروری |
صفحات مانند سبد خرید، تسویه حساب یا صفحات داخلی که نیاز به ایندکس ندارند. |
HTML صفحه یا افزونه سئو مثل Yoast / Rank Math |
|
بررسی تنظیمات CMS |
گزینه جلوگیری از نمایش سایت در موتورهای جستجو را فقط برای صفحات خاص فعال کنید. |
وردپرس – تنظیمات خواندن |
|
بررسی HTTP Header |
اطمینان از اینکه X-Robots-Tag: noindex فقط در صفحات غیرضروری اعمال شود. |
فایل htaccess، httpd.conf یا تنظیمات سرور |
|
بررسی منظم |
بررسی دورهای صفحات برای اطمینان از عدم اعمال ناخواسته تگ noindex |
ابزارهای سئو و گزارشهای سرچ کنسول |
روش های رفع خطا Submitted URL marked noindex در سرچ کنسول
برای اینکه از عدم وجود تگهای نوایندکس در کدهای صفحات خود اطمینان کسب کنید، دو راهکار وجود دارد:
اول اینکه مطمئن شوید URL صفحه را از طریق سایت مپ ارسال کرده باشید.
روش دوم این است که، URL را باز کنید و کش سایت خود را پاک کنید با اینکه به صورت ناشناس با زدن 3 کلید Ctrl+Shift+N در مرورگر کروم وارد URL بشوید. سپس کلیک راست بکنید و گزینه Inspect را انتخاب کنید و توسط فیلترهای جستجو تگ noindex را سرچ کنید، تا از استفاده نکردن آن در صفحات مطمئن شوید.
نکته اول
به جای این روشها میتوانی از ابزار URL Inspection و ابزار تست Live URL نیز استفاده کنید و بعد تست آنها بر روی گزینه View Tested Pages کلیک کنید و کدهای HTML را بررسی کنید. اطلاعات موجود در بخش Pages indexing حتما باید چک شود تا ببنید اجازه خزش Crawl allowed و اجازه ایندکس Indexing allowed در چه وضعیتی هستند.
نکته دوم
درصورت استفاده از سایت وردپرس، از منو پیشخوان وارد بخش تنظیمات بشوید و گزینه خواندن را انتخاب کنید. در این قسمت از فعال نبودن گزینه نمایش به موتورهای جستجو اطمینان حاصل کنید.
نکته سوم
افزونههای سئو مانند یوآست و رنک مث باید بتوانند به صورت اتوماتیک صفحاتی که قابل ایندکس شدن نیستند را از نقشه سایت حذف کنند. شما میتوانید در تنظیمات افزونههای یوآست سئو و رنک مث، تنظیمات مرتبط با ایندکس را بررسی کنید.
برای مثال در این بخشها میتوان تنظیمات ایندکس یا نمایه سازی را پیدا کرد.
زمانی که همه موارد را بررسی کردید 2 حالت وجود دارد:
- خود شما خواستار ایندکس نشدن صفحات هستید و به آنها تگ nouindex را اضافه کردهاید. اما به اشتباه صفحه را بوسیله نقشه سایت ارسال کردهاید. در این صورت باید URL را از نقشه سایت حذف کرد.
- صفحه شما به اشتباه تگ نوایندکس را گرفته است؛ در صورتی که شما برای ایندکس شدن آن را در site map ارسال کرده بودید. در این مواقع باید تگ نوایندکس را حذف کنید و آن را به نقشه سایت اضافه و بروزرسانی کنید تا مشکل نوایندکس شدن صفحات برطرف شود.
اگر خطا Submitted URL marked noindex مرتبط با هیچ کدام از این موارد نباشد؟
در برخی مواقع ممکن است عامل وجود خطا Submitted URL marked noindex در سرچ کنسول چیزی به جز تگ نوایندکس در قسمت متا تگ باشد. دقت کنید ممکن است این تگ در سطح HTTP Header هم تعریف شده باشد که در سطح وب مدیریت میشود.
اگر تگ noindex را با روشهای بالا پیدا نکردید، به سمت هاست و فایلهای روت یا ریشه آن بروید. امکان دارد که در یکی از فایلهای htaccess یا httpd.conf تگ نو ایندکس وجود داشته باشد. معمولا این تگ به صورت X-Robots-Tag: noindex در فایلها ظاهر میشود.
در صورتیکه مشکلات بالا وجود نداشت و دوباره URL را تست کردید و هنوز خطا Submitted URL marked noindex در قسمت خطاهای سرچ کنسول وجود داشت عوامل زیر را بررسی کنید:
از سالم بودن و مشکل نداشتن سرور اطمینان کسب کنید.
آخرین تاریخ خزش صفحات را چک کنید. در صورتی که زمان زیادی از تایخ گذشته بود و رباتهای گوگل هنوز برای ثبت تغییرات از صفحه شما بازدید نکرده بودند، میتوانید درخواست ایندکس را با استفاده از ابزار URL Inspection ثبت کنید.
اطمینان کسب کنید که صفحات برای خزیدن به رمز نیاز ندارند و فقط مربوط به کاربران سایت نباشد.
راهکار های پیدا کردن صفحاتی که دارای تگ نو ایندکس هستند
برای رفع خطا Submitted URL marked noindex لازم است بدانید که کدام صفحات سایت بهصورت ناخواسته دارای تگ noindex هستند. روشهای پیشنهادی عبارتند از:
- در سرچ کنسول، به بخش Pages مراجعه کرده و روی ردیف مربوط به این خطا کلیک کنید. در اینجا تعدادی از صفحات نمونه که دارای این خطا هستند نمایش داده میشوند.
- توجه داشته باشید که این صفحات نمونه هستند و همه صفحات دارای تگ noindex در سرچ کنسول نشان داده نمیشوند.
- برای شناسایی کامل صفحات، میتوانید از ابزارهای سئو تخصصی استفاده کنید تا همه URLهایی که تگ noindex دارند را پیدا کنید.
- پس از شناسایی صفحات، روی دکمه Validate Fix در سرچ کنسول کلیک کنید تا روند اعتبارسنجی و رفع خطا آغاز شود و صفحات اصلاحشده دوباره بررسی شوند.
با این روشها میتوانید صفحات دارای تگ noindex را پیدا و اصلاح کرده و اطمینان حاصل کنید که صفحات مهم سایت شما به درستی ایندکس گوگل میشوند.
سوالات متداول کاربران در رابطه با خطا Submitted URL marked noindex
ابزارهایی مانند Screaming Frog SEO Spider، Ahrefs Site Audit، Semrush Site Audit و افزونههای وردپرس مانند Yoast SEO و Rank Math امکان شناسایی صفحات دارای تگ noindex برای رفع خطا Submitted URL marked noindex را بهصورت سریع و دقیق فراهم میکنند.
پس از اصلاح تگ noindex و ارسال URL برای ایندکس، معمولاً بین چند ساعت تا چند روز طول میکشد تا گوگل صفحه را دوباره بررسی و ایندکس کند، اما گاهی تا چند هفته ممکن است طول بکشد بسته به سرعت خزش سایت.
خیر، خود خطا بهطور مستقیم رتبه سایت را تغییر نمیدهد، اما اگر صفحات مهمی به اشتباه noindex شوند، از نتایج گوگل حذف میشوند و این میتواند به کاهش ترافیک ارگانیک و رتبه کلی سایت اثر غیرمستقیم بگذارد.
