ایندکس گوگل چیست و معرفی 8 روش سریع index Google
ایندکس گوگل درواقع مرحلهای است که طی آن، اطلاعات و صفحات یک وبسایت در پایگاه دادهی گوگل ثبت و بایگانی میشوند. هرصفحهای که در سایت ساخته میشود برای دیده شدن توسط کاربران، به ایندکس شدن در گوگل نیاز دارند. ایندکس نشدن سایت در گوگل منجر به ظاهر نشدن آن در نتایج جستجو میشود. در این صورت شما هیچ ترافیک ارگانیکی دریافت نمیکنید.
به عبارتی در بیان ایندکس چیست؟ میتوان گفت، ایندکس گوگل به معنای اطلاعات ثبت شده و لیست شده است که امکان بازیابی فوری صفحات مدنظر را از پایگاه داده ایجاد میکند. مراحل ایندکس مطالب در گوگل بدین ترتیب است که صفحات فرآیندهای شناسایی، ذخیرهسازی و رتبهبندی را پیموده و بعد از آن در نتایج جستجو ظاهر میشوند.
بعد از اینکه سایت خود را به گوگل معرفی کردید، گوگل با استفاده از رباتهای خزنده در محیط سایت، صفحات جدیدی را پیدا میکند. گوگل این روند را با رباتی به نام Googlebot انجام میدهد. وقتی شما مطلبی را در گوگل جستجو میکنید، در واقع از گوگل درخواست میکنید تا صفحات ایندکس شده را به شما نمایش دهد.
امکان دارد میلیونها محتوا مرتبط با موضوع درخواستی شما وجود داشته باشد، به همین منظور رتبهبندی گوگل سعی میکند صفحات را به نحوی مرتب کند تا شما بهترین و مرتبطترین مطلب را دریافت کنید. نکته قابل توجه این است که رتبه بندی و ایندکس گوگل دو موضوع متفاوت است. برای مثال ایندکس کردن همانند شرکت در مسابقه و رتبهبندی مانند برنده شدن در آن است.
برای برنده شدن در مسابقه شما باید فاکتورهای گوگل را داشته باشید که این مسئله برعهده سئو و بهینه سازی سایت میباشد. در این میان ایندکس لینکها نیز اهمیت دارد، زیرا لینکهای ایندکسشده به گوگل کمک میکنند ساختار و ارتباط صفحات سایت را بهتر درک کند.
در ادامه این مقاله از سایت مشاوران بازاریابی اینترنتی جَم به ایندکس شدن سایت در گوگل، علت ایندکس نشدن سایت در گوگل پرداخته و به پرسشهای شما نظیر ایندکس چیست؟ از کجا بفهمیم سایت ایندکس گوگل شده؟ پاسخ میدهیم.
دلایل ایندکس نشدن سایت در گوگل و راه حل آن
کند بودن لود سایت، وجود مشکل و بیکیفیتی صفحات سایت از دیدگاه گوگل از دلایل ایندکس نشدن سایت در گوگل هستند. توجه داشته باشید که ایندکس شدن سایت در گوگل به معنای کسب رتبه یا افزایش ترافیک نیست. بلکه به این منظور میباشد که گوگل از وجود صفحات شما آگاه است.
جدول زیر به شما کمک میکند تا مشکلات ایندکس گوگل سایت خود را شناسایی کرده و با ابزارهای مشخص، بهطور عملی آنها را رفع کنید.
|
دلیل ایندکس نشدن |
توضیح |
راه حل عملی |
ابزارهای پیشنهادی |
|---|---|---|---|
|
خطاهای فنی سایت |
مشکلات سرور، ارورهای 5xx یا 404 باعث عدم دسترسی رباتها میشود. |
رفع ارورهای سرور، بررسی صفحات 404، اطمینان از دسترسی صحیح سایت. |
Google Search Console (Coverage)، Screaming Frog |
|
محدودیت در فایل robots.txt |
دسترسی رباتهای گوگل به صفحات مسدود شده است. |
اصلاح فایل robots.txt، حذف محدودیت برای صفحات مهم. |
Google Search Console، فایل robots.txt بررسیکننده آنلاین |
|
نبود نقشه سایت (Sitemap) |
گوگل مسیر صفحات سایت را نمیشناسد. |
ایجاد نقشه سایت XML و ارسال آن در سرچ کنسول. |
Google Search Console، Yoast SEO، XML Sitemap Generator |
|
محتوای تکراری یا ضعیف |
محتوای کپی یا کمارزش توسط گوگل ایندکس نمیشود. |
تولید محتوای منحصر به فرد و باکیفیت، بهینهسازی SEO صفحات. |
Copyscape، Grammarly، Surfer SEO |
|
لینکدهی داخلی و خارجی ناکافی |
صفحات بدون لینک کافی سخت پیدا میشوند. |
ایجاد ساختار لینکدهی داخلی منطقی و دریافت بکلینکهای معتبر. |
Ahrefs، Moz، Screaming Frog |
|
صفحات تازه ایجاد شده |
گوگل هنوز فرصت خزیدن و ایندکس کردن آنها را پیدا نکرده است. |
ارسال آدرس صفحات جدید در Google Search Console یا صبر برای ایندکس طبیعی. |
Google Search Console، Fetch as Google |
|
استفاده نادرست از تگ noindex |
صفحات مهم بهطور اشتباه با noindex علامتگذاری شدهاند. |
حذف تگ noindex از صفحاتی که باید ایندکس شوند. |
Screaming Frog، بررسی سورس کد صفحات |
|
سرعت پایین سایت یا تجربه کاربری ضعیف |
رباتها ممکن است صفحات را به دلیل زمان بارگذاری طولانی نادیده بگیرند. |
بهینهسازی سرعت سایت، کاهش حجم تصاویر و بهبود UX. |
Google PageSpeed Insights، GTmetrix |
|
مشکلات مربوط به HTTPS یا نسخههای تکراری URL |
صفحات با http و https یا www و non-www باعث سردرگمی گوگل میشوند. |
استفاده از ریدایرکت 301، انتخاب نسخه اصلی سایت و استانداردسازی URLها. |
Google Search Console، Screaming Frog |
|
ایندکس کردن محتوا با JavaScript پیچیده |
ربات گوگل ممکن است محتوای JS پیچیده را نتواند به درستی ایندکس کند. |
استفاده از SSR یا prerendering برای محتوای مهم. |
Google Search Console (URL Inspection)، Lighthouse |
این جدول به شما کمک میکند تا مشکلات ایندکس گوگل سایت خود را شناسایی کرده و با ابزارهای مشخص، بهطور عملی آنها را رفع کنید.
زبان نشانهگذاری گسترشپذیر (به انگلیسی: Extensible Markup Language) با کوتهنوشت XML نوعی زبان نشانهگذاری است که شامل مجموعه قواعدی است که به کمک آن میتوان یک سند رایانهای را کدبندی کرد.
نحوه بررسی ایندکس گوگل کردن سایت
برای اینکه آگاه شوید سایت شما توسط گوگل ایندکس شده است، دو روش وجود دارد:
روش سرچ Site برای ایندکس گوگل
در این روش URL موردنظر خود را در گوگل پس از عبارت site وارد و آن را جستجو کنید. در صورتی که صفحه شما ایندکس گوگل شده باشد، در نتایج نمایش داده میشود. برای مثال برای مشاهده صفحهای از سایت jamweb.co میبایست لینک آن را کپی کرده و در بخش سرچ پس از عبارت site وارد کنید تا نتیجه برای شما نمایش داده شود.
دقیقا مشابه با الگوی زیر:
Site:jamweb.co عبارت موردنظر
برای بررسی کل صفحات سایتتان نیز میتوانید آدرس سایتتان را به همین ترتیب وارد کنید و پس از آن تعداد تمامی صفحات ایندکس شده را برای شما مشخص میکند.
Site:jamweb.co
برای بررسی کل صفحات سایتتان نیز میتوانید آدرس سایتتان را به همین ترتیب وارد کنید و پس از آن تعداد تمامی صفحات ایندکس شده را برای شما مشخص میکند.
روش استفاده از سرچ کنسول برای ایندکس گوگل
روش بعدی برای پاسخ به این پرسش که از کجا بفهمیم سایت ایندکس گوگل شده، استفاده از سرچ کنسول است. بدین منظور وارد Google search console شده و از باکس بالای صفحه (Inspect any URL) لینک مورد نظر را وارد و اینتر را بزنید.
در صورتی که با پیغام URL is not on Google روبرو شدید یعنی لینک شما در گوگل ایندکس نشده است.
URL is on Google یعنی ایندکس گوگل انجام شده است و لینک شما در گوگل ایندکس شده است.
راهکار های ایندکس شدن سایت در گوگل
اگر متوجه شدید که سایتتان یا یکی از صفحات آن در گوگل ایندکس نشده است راهکار زیر را امتحان کنید:
ایتدا وارد سرچ کنسول گوگل شوید، سپس به بخش URL inspection بروید؛ در این قسمت URL را که میخواهید ایندکس گوگل شود در نوار جستجو وارد کنید. منتظر پاسخ گوگل بمانید و بعد روی گزینه Request indexing کلیک کنید. این روند مناسب پستهایی است که تازه منتشر شدهاند.
چرا که با این روش به گوگل اعلام میکنید محتوای جدیدی به سایت شما اضافه شده است و اینگونه منجر به دیده شدن سایت در گوگل میشود.
در ادامه چک لیستی را برای حل مشکل ایندکس نشدن سایت ارائه میدهیم:
حذف سد های کراول در فایل robots.txt
ممکن است یکی از دلایلی که ایندکس گوگل نشدن سایت یا صفحات، وجود مشکل در فایل robots.txt باشد. چرا که امکان دارد شما کراول کردن صفحه را بسته باشید. برای چک کردن این مشکل، به آدرس yourdomain.com/robots.txt مراجعه کنید .
این کدها به Googlebot میگویند که اجازه کروال کردن صفحات در سایت را ندارند. برای حل این مسئله، این کدها را پاک کنید.
حذف تگ های No index
با اضافه کردن تگ نوایندکس به صفحات سایت، دسترسی خزندههای گوگل را خواهید بست. در سایتهای وردپرس با روشن کردن گزینه (از موتورهای جستجو درخواست کن تا محتوای سایت را بررسی نکنند.) کل سایت شما کراول نخواهد شد.
اگر عدم نمایش سایت وردپرسی در گوگل را انجام دهید، گوگل سایت شما را ایندکس نخواهد کرد. اما این روش برای خصوصی نگه داشتن برخی از صفحات مناسب میباشد. دو راهکار برای انجام آن وجود دارد:
روش متاتگ برای ایندکس گوگل
صفحهای که دارای این متا تگها در قسمت head باشد، ایندکس بر روی صفحات سایت انجام نمیشود.
این موارد متا تگهای رباتها هستند که به موتورهای جستجوی اجازه ایندکس صفحات یا سایت را میدهند. اگر nonindex برابر مقدار Content باشد، ایندکس برای صفحات انجام نمیشود.
روش تگ X-Robots برای ایندکس گوگل
پاسخ HTTP تگ X-Robots، برای کراولها اهمیت دارد. برای انجام آن میتوان از زبان سمت سرور مانند PHP استفاده کنید، یا در فایل htaccess قرار دهید یا اینکه تنظیمات سرور خودتان را تغییر بدهید.
قرار دادن صفحات در نقشه سایت
sitemap یا نقشه سایت گوگل را آگاه میکند که کدامیک از صفحات در سایت شما اهمیت زیادی دارند. همچنین امکان دارد که اطلاعاتی در مورد زمان مجدد کروال صفحات را نیز به گوگل بگوید. اگر شما صفحات را در نقشه سایت قرار ندهید، گوگل باز آنها را پیدا میکند. بنابراین بهتر است که شما خودتان این کار را انجام بدهید.
برای چک کردن صفحات در نقشه سایت، ابتدا در سرچ کنسول آدرس صفحه را جستجو کنید، اگر با خطای URL is not on Google یا Sitemap: N/A مواجه شدید، صفحه موردنظر در نقشه سایت وجود ندارد یا ایندکس گوگل نشده است.
حذف تگ های کنونیکال برای ایندکس گوگل
تگ کنونیکال، به گوگل میگوید کدام ورژن صفحه را برای نمایش انتخاب کنید. این تگ به صورت زیر است:
<link rel=”canonical” href=”https://jamweb.co/” />
صفحات معمولا یا از تگ کنونیکال استفاده نمیکنند؛ یا از تگ کنونیکال با اسم self-referencing استفاده مینمایند. این تگ گوگل را آگاه میکند که صفحهی اصلی همین صفحه یا احتمالا تنها نسخه آن میباشد.
به بیانی دیگر شما میخواهید ایندکس گوگل روی این صفحه انجام شود. اما اگر تگ کنونیکال زائد در صفحه وجود داشته باشد، به گوگل اعلام کردهاید که هیچکدام از نسخهها را ترجیح نمیدهید و گوگل آن صفحه را ایندکس نکند.
برای چک کردن این تگ، از ابزار URL inspection سرچ کنسول گوگل استفاده کنید. اگر با پیام Alternate page with canonical tag مواجه شدید، باید برای ایندکس صفحات در گوگل این تگ را حذف کنید.
بررسی Orphan Page نبودن صفحه
Orphan page یا صفحات یتیم، صفحاتی هستند که هیچ صفحهای از آنها برای لینک داخلی استفاده نکرده است. باتوجه به اینکه گوگل با کراول در سایت، محتوای جدید را دریافت میکند، پیدا کردن صفحات یتیم کار سختی است. درضمن کاربران هم نمیتوانند آنها را پیدا کند.
برای پیدا کردن این صفحات باید از یک Site Explorer، استفاده کنید، بعد گزارش لینکهای صفحات یتیم را چک کنید.
برای برطرف کردن مشکل ایندکس شدن سایت در گوگل دو راه زیر وجود دارد:
- اگر صفحه اهمیت ندارد، آن را حذف کنید و از نقشه سایت پاک کنید.
- اگر صفحه مهم است، در سایر صفحات سایت خود به آن لینک داده و محتوای آن را بروز رسانی نمایید.
ویرایش لینک های داخلی NO Follow
این لینکها دارای تگ rel=“nofollow” هستند و از منتقل شدن رتبه صفحه به URL مقصد جلوگیری به عمل میآورند. درضمن گوگل این صفحات را بررسی نمیکند. چراکه استفاده از این لینکها باعث میشود، گوگل لینکهای هدف را از گراف کلی سایت حذف کند.
در ضمن اگر صفحه هدف در سایتهای دیگر به عنوان منبع استفاده بشود یا در نقشه سایت URL آن قرار بگیرد، در ایندکس گوگل ظاهر خواهد شد.
گوگل محتوای جدید را با خزش در سایت شما را پیدا میکند. برای نمایش سایت در گوگل میتوانید، از لینکهای داخلی صفحاتی که ایندکس گوگل روی آنها انجام میشود، استفاده کنید.
برای اینکه ایندکس گوگل روی صفحات به سرعت انجام شود، یک لینک از URL موردنظر را در صفحات قدرتمند خود قرار دهید؛ چرا که امکان کراول دوباره صفحات قدرتمند بوسیله گوگل وجود دارد. در این صورت لینک صفحه شما توسط رباتهای گوگل بررسی میشود.
استفاده از محتوای با ارزش برای ایندکس شدن سایت در گوگل
وجود صفحات بیکیفیت در سایت، بودجه خزش را هدر میدهد. بنابراین برای ایندکس گوگل و دیده شدن سایت در گوگل، باید صفحات با کیفیت داشته باشید. تلاش کنید محتوای منحصربفرد و با ارزش تولید کنید تا ایندکس شدن سایت در گوگل برای شما انجام بشود و احتمال قرار گرفتن صفحه در نتایج برتر جستجو افزایش پیدا کند.
به اشتراک گذاشتن مطالب در شبکه های اجتماعی با لینک
بهاشتراکگذاری محتوا در شبکههای اجتماعی با ایجاد لینک، ارزش صفحات را افزایش میدهد و به گوگل نشان میدهد که محتوا مفید است. هرچند گوگل صفحات بدون بک لینک را هم ایندکس میکند، اما داشتن بکلینک شانس ایندکس سریعتر و کراول مجدد را بالا میبرد. بنابراین نقش بکلینکها را دستکم نگیرید.
بلاک نکردن ربات گوگل و تاثیر آن در ایندکس مطالب
رباتهای گوگل را مسدود نکنید، زیرا جلوگیری از دسترسی آنها مانع ایندکس مطالب در گوگل و مشاهده محتوای شما در نتایج جستجو میشود.
اجازهدادن به گوگل برای کراول صفحات، شانس نمایش بهتر سایت، افزایش ترافیک و بهبود رتبه را فراهم میکند. جلوگیری از دسترسی رباتها، رشد سایت را مختل خواهد کرد.
روش های حذف صفحات ایندکس شده در گوگل
حذف صفحات ایندکسشده در گوگل زمانی ضرورت پیدا میکند که نخواهید محتوایی در نتایج جستجو نمایش داده شود. این صفحات معمولاً شامل مطالب قدیمی، بیارزش، تکراری یا صفحاتی هستند که به اشتباه در دسترس کاربران قرار گرفتهاند.
برای این کار گوگل چند روش مختلف در اختیار وبمسترها قرار میدهد تا بتوانند بهطور موقت یا دائمی نمایش صفحات را از نتایج حذف کنند. در ادامه مهمترین روشهای حذف صفحات ایندکسشده را بررسی می کنیم:
- استفاده از ابزار Remove URLs در سرچ کنسول برای حذف موقت صفحه از نتایج جستجو.
- افزودن تگ noindex در بخش <head> صفحه برای جلوگیری از ایندکس دوباره آن.
- حذف کامل صفحه از سایت یا محدود کردن دسترسی آن با رمز برای جلوگیری از خزیدن رباتها.
- بهروزرسانی Sitemap و حذف آدرسهای غیرضروری از نقشه سایت جهت آگاهی سریعتر گوگل.
- استفاده از کدهای وضعیت 404 یا 410 برای صفحاتی که کاملاً حذف شدهاند تا گوگل متوجه عدم وجود آنها شود.
- پس از اعمال این تغییرات، گوگل طی مدتزمانی مشخص صفحات را دوباره بررسی کرده و آنها را از نتایج پاک میکند. این فرآیند به بهبود کیفیت ایندکس سایت و نمایش تنها صفحات ارزشمند کمک میکند.
سوالات پرتکرار کاربران در رابطه با ایندکس گوگل
شاید بسیاری به این پرسش برخورده باشند که ایندکس گوگل یعنی چه؟ یا ایندکس سایت چیست؟ در پاسخ باید گفت ایندکس گوگل به معنای اطلاعات قبت و فهرست شده است و نوعی تکنیک ساختار داده برای بازیابی سریع صفحات از پایگاه داده میباشد.
تا وقتی صفحات جدید در سایت ایندکس نشوند، از نظر گوگل این صفحات وجود ندارند. چراکه گوگل از وجود این صفحات آگاه نیست. در نتیجه تا زمانی که سایت شما در گوگل ایندکس نشود، در نتایج جستجوی ظاهر نمیشوید.
سایت معمولاً بهدلیل مشکلات فنی، نبود نقشه سایت، خطاهای کراول، محتوای ضعیف یا نبود لینکدهی ایندکس نمیشود. برای ایندکس شدن باید سایت را در سرچ کنسول ثبت کنید، نقشه سایت ارسال کنید، خطاها را رفع کرده و لینکسازی داخلی مناسب انجام دهید.
برای ایندکس صفحات، سایت را در سرچ کنسول ثبت کرده، نقشه سایت ارسال کنید، محتوای باکیفیت منتشر کنید، خطاها و محدودیتها را رفع کنید و لینکسازی داخلی و خارجی مناسبی ایجاد نمایید.
برای جلوگیری از ایندکس سایت، میتوان از تگ <meta name="robots" content="noindex"> در صفحات، فایل robots.txt برای مسدود کردن رباتها، رمزگذاری صفحات یا حذف کامل محتوا استفاده کرد تا گوگل آنها را ایندکس نکند.
