گوگل سایت شما را ایندکس نمی کند؟ شما تنها نیستید. مشکلات بالقوه زیادی وجود دارد که ممکن است گوگل را از ایندکس کردن صفحات وب باز دارد و این مقاله 14 علت ایندکس نشدن سایت در گوگل را پوشش می دهد!

اگر می‌ خواهید بدانید که در صورتی که سایت شما با موبایل سازگار نیست یا با مشکلات پیچیده ایندکس مواجه هستید، چه کاری باید انجام دهید، ما اطلاعات مورد نیاز شما را داریم.

یاد بگیرید که چگونه این مشکلات رایج را برطرف کنید تا گوگل بتواند دوباره صفحات شما را ایندکس کند.

1. نام دامنه ندارید

اولین دلیل ایندکس نشدن سایت توسط گوگل این است که شما نام دامنه ندارید. این موضوع ممکن است به این دلیل باشد که از URL اشتباهی برای محتوا استفاده می‌ کنید و یا به درستی در وردپرس تنظیم نشده است.

اگر این اتفاق برای شما می افتد، راه حل های آسانی وجود دارد.

بررسی کنید که آیا آدرس وب شما با “…https://XXX.XXX” شروع می شود یا نه، به این معنی که ممکن است شخصی به جای نام دامنه، یک IP آدرس را تایپ کرده و به وب سایت شما هدایت شود.

یکی از راه‌ های رفع این مشکل افزودن ریدایرکت 301 از نسخه‌ های WWW صفحات به دامنه مربوطه است. اگر وقتی افرادی که سعی می‌ کنند چیزی مانند [سایت شما] را جستجو کنند، به اینجا هدایت می‌ شوند باید به نام دامنه فیزیکی شما ارجاع داده شوند.

مهم است که مطمئن شوید نام دامنه دارید، اگر می خواهید در گوگل رتبه بندی شوید و در رقابت حضور داشته باشید، راهی جز این نیست.

2. سایت شما Mobile-Friendly نیست

وب‌ سایت سازگار با موبایل برای ایندکس شدن سایت توسط گوگل بسیار مهم است.

مهم نیست که محتوای وب سایت شما چقدر عالی باشد، اگر برای نمایش در گوشی یا تبلت بهینه نشده باشد، رتبه و ترافیک را از دست خواهید داد، بنابراین عامل مهمی که می تواند باعث ایندکس نشدن سایت توسط گوگل شود را جدی بگیرید.

بهینه‌ سازی موبایل لازم نیست دشوار باشد، صرفاً افزودن اصول طراحی ریسپانسیو مانند گرید ها و مدیا کوئری های CSS می‌ تواند اطمینان حاصل شود که کاربران بدون هیچ مشکلی، آنچه را که نیاز دارند پیدا می‌کنند.

3. از زبان برنامه نویسی به گونه ای استفاده می کنید که برای گوگل بسیار پیچیده است

اگر از زبان برنامه نویسی به روشی پیچیده استفاده می کنید، باید بگوییم که دلیل دیگر ایندکس نشدن سایت شما توسط گوگل همین است. فرقی نمی‌کند که چه زبانی باشد – می‌ تواند قدیمی یا حتی به‌ روزرسانی شده باشد، مانند جاوا اسکریپت – تا زمانی که تنظیمات نادرست باشند، باعث مشکلات خزیدن و ایندکس می شوند.

اگر این مشکل را دارید، توصیه می‌ کنم از طریق ابزار تست سازگار با موبایل Google استفاده کنید تا ببینید سایت شما واقعاً تا چه اندازه سازگار با موبایل است (و هر گونه اصلاحاتی را که ممکن است نیاز باشد انجام دهید).

اگر وب سایت شما هنوز بر اساس استاندارد های گوگل قابل قبول نیست، آن ها منابع زیادی را با دستورالعمل هایی در مورد انواع ویژگی های طراحی که می تواند هنگام طراحی یک صفحه وب واکنش گرا به وجود بیاید، ارائه می دهند.

4. بارگیری سایت شما کُند است

سایت‌ های با بارگیری آهسته باعث می‌ شوند گوگل کمتر بخواهد که آن ها را در نتایج برتر فهرست خود نشان دهد. اگر سایت شما زمان زیادی برای بارگذاری نیاز دارد، ممکن است به دلیل عوامل مختلفی باشد.

حتی ممکن است محتوای زیادی در صفحه داشته باشید که مرورگر کاربر قادر به مدیریت آن نیست یا از یک سرور قدیمی با منابع محدود استفاده می کنید!

راه حل ها:

  • از Google Page Speed Insights استفاده کنید: این یکی از ابزار های مورد علاقه من است که در سال‌ های اخیر پیدا کرده‌ام و به من کمک می‌ کند شناسایی کنم که چه بخش‌ هایی از وبسایت برای بهبود سرعت نیاز به اصلاحات فوری دارند. این ابزار صفحه وب شما را در برابر پنج روش برتر عملکرد (که برای داشتن سایت‌ های بارگذاری سریع‌ تر بسیار مهم هستند) تجزیه و تحلیل می‌ کند، مانند به حداقل رساندن connections، کاهش حجم بارگذاری، استفاده از حافظه پنهان مرورگر، و … و به شما پیشنهاد می‌ دهد که چگونه می‌ توانید هر یک از جنبه‌ های آن را در سایت خود بهبود بخشید.
  • از ابزاری مانند webpagetest.org استفاده کنید: این ابزار به شما اطلاع می دهد که آیا وب سایت شما با سرعت کافی بارگیری می شود یا خیر. همچنین به شما این امکان را می دهد که با جزئیات، عناصر خاصی را در سایت خود ببینید که باعث ایجاد مشکل در سایت شما می شوند. می تواند به شما کمک کند تا مشکلات قابل توجه سرعت صفحه را قبل از ایجاد مشکلات جدی شناسایی کنید.
  • دوباره از Google Page Speed insights استفاده کنید: ببینید کجا می توانید برای زمان بارگذاری در سایت بهبود هایی ایجاد کنید. به عنوان مثال، ممکن است ارزش جستجو در یک پلن میزبانی جدید با منابع بیشتر را داشته باشد (سرور های اختصاصی به مراتب بهتر از سرور های اشتراکی هستند) یا از یک سرویس CDN استفاده کنید که محتوای ایستا را از حافظه پنهان خود در مکان های مختلف در سراسر جهان ارائه می دهد.

در حالت ایده آل، مطمئن شوید که اعداد سرعت صفحه شما به 70 یا بیشتر برسد. تا حد امکان نزدیک به 100 ایده آل است.

5. سایت شما دارای حداقل محتوایی است که خوب نوشته شده

محتوای خوب نوشته شده برای موفقیت در گوگل بسیار مهم است. اگر محتوایی دارید که حداقل با سطح رقبای شما مطابقت ندارد، ممکن است با مشکلات مهمی روبرو شوید که مسبب ایندکس نشدن سایت شما توسط گوگل خواهد شد.

در تجربه ما، محتوایی که کمتر از 1000 کلمه است، به خوبی محتوایی که بیش از 1000 کلمه است، کار نمی کند.

آیا ما یک شرکت تولید محتوا هستیم؟ نه نیستیم. آیا تعداد کلمات یک عامل رتبه بندی است؟ بازهم نه.

اما، هنگامی که در حال قضاوت در مورد اینکه در زمینه رقابت چه کاری باید انجام دهید، هستید، اطمینان از اینکه محتوای شما به خوبی نوشته شده است، کلید موفقیت است.

محتوای سایت شما باید خوب و آموزنده باشد. باید به سؤالات پاسخ دهد، اطلاعات ارائه کند یا دیدگاهی داشته باشد که به اندازه کافی با سایت های دیگر در جایگاه شما متفاوت باشد.

اگر این استاندارد ها را رعایت نکند، گوگل احتمالاً سایت دیگری با محتوای با کیفیت بهتر پیدا خواهد کرد.

اگر تعجب می‌ کنید که چرا وب‌ سایت شما با وجود پیروی از بهترین شیوه‌ های سئو مانند افزودن کلمات کلیدی مرتبط در سراسر متن (نکته: محتوای شما) رتبه بالایی در نتایج جستجوی گوگل برای برخی از کلمات کلیدی کسب نمی‌کند، ممکن است یکی از مقصران صفحاتی باشد که در آن وجود دارد. باید بیش از 100 کلمه در هر صفحه باشد!

صفحات دارای محتوای نا کافی می توانند باعث مشکلات ایندکس شوند، زیرا حاوی محتوای منحصر به فرد زیادی نیستند و در مقایسه با رقبای شما حداقل سطح کیفیت را ندارند.

6. سایت شما کاربر پسند و جذاب برای بازدید کنندگان نیست

سایت باید کاربر پسند باشد

داشتن یک سایت کاربر پسند و جذاب برای “سئوی خوب” بسیار مهم است. اگر برای بازدید کنندگان آسان باشد که آنچه را که به دنبال آن هستند پیدا کنند و بدون احساس ناامیدی یا ناراحتی در وب سایت حرکت کنند، گوگل رتبه سایت شما را در نتایج جستجو بالاتر خواهد داد.

گوگل نمی‌ خواهد کاربران زمان زیادی را در صفحه‌ ای بگذرانند که بارگیری آن همیشه طول می‌ کشد، پیمایش گیج‌ کننده‌ ای دارد، یا استفاده از آن ساده نیست، زیرا بیش از حد شلوغ است (مانند تبلیغات در بالای صفحه).

اگر در هر دسته به جای چندین محصول فقط یک محصول را فهرست کرده اید، ممکن است به همین دلیل باشد که محتوای شما در گوگل رتبه خوبی ندارد! مهم است که نه تنها کلمات کلیدی را در هر پست هدف قرار دهید، بلکه مطمئن شوید که همه پست‌ های مرتبط به مقالات/صفحه‌ های مرتبط دیگر در موضوع مرتبط هستند.

  1. آیا مردم دوست دارند وبلاگ شما را به اشتراک بگذارند؟
  2. آیا خوانندگان از محتوای شما شگفت زده می شوند؟

در غیر این صورت، به همین دلیل است که گوگل ایندکس کردن سایت شما را متوقف کرده است.

اگر شخصی به جای استفاده از کلمات کلیدی نسبی مانند «خرید» مستقیماً به یک صفحه محصول خاص لینک داده شود، ممکن است در نحوه لینک صفحات دیگر به آن محصول خاص، مشکلی وجود داشته باشد.

اطمینان حاصل کنید که همه محصولات لیست شده در صفحات دسته بندی در زیر مجموعه مربوطه نیز وجود دارند تا کاربران بتوانند به راحتی بدون نیاز به پیمایش سلسله مراتب لینک دهی پیچیده خرید کنند.

7. شما یک زنجیره ریدایرکت دارید

زنجیره ریدایرکت یکی دیگر از مشکلات رایج است که از ایندکس شدن جلوگیری می کند. این ها معمولاً به دلیل یک اشتباه تایپی معمولی ایجاد می شوند و می توان با مراحل زیر آن را برطرف کرد:

صفحه ای که باعث ایجاد زنجیره ریدایرکت می شود را پیدا کنید. اگر از وردپرس استفاده می‌ کنید، منبع HTML یکی از پست‌ های خود را در این صفحه یا در یک فایل htaccess. پیدا کنید و به دنبال “Redirect 301” بگردید تا ببینید از کدام صفحه می‌ خواهد ترافیک را هدایت کند. همچنین ارزش آن را دارد که ریدایرکت های 302 را اصلاح کنید و مطمئن شوید که روی 301 تنظیم شده است.

از «find» در Windows Explorer (یا Command + F اگر از مک دارید) استفاده کنید تا در همه فایل‌ های حاوی «redirect» جستجو کنید تا زمانی که مشکل را پیدا کنید.

هرگونه اشتباه تایپی را برطرف کنید تا آدرس URL تکراری به سمت خود نباشد، سپس از کد ریدایرکت مانند زیر استفاده کنید:

وضعیت کد هایی مانند 404s همیشه در گوگل سرچ کنسول نمایش داده نمی شود. با استفاده از یک خزنده خارجی مانند Screaming Frog، می توانید کد های 404s و سایر خطا ها را پیدا کنید.

اگر همه چیز خوب به نظر می رسد، از گوگل سرچ کنسول در سایت برای خزیدن مجدد سایت و ارسال مجدد آن برای ایندکس شدن استفاده کنید. اگر هشدار های جدیدی ظاهر می شود که نیاز به بررسی دارد، قبل از بررسی مجدد با Google Search Console یک هفته یا بیشتر صبر کنید.

گوگل زمانی برای بروزرسانی ایندکس های خود در هر روز ندارد، اما هر چند ساعت یک بار تلاش می‌ کند، به این معنی که گاهی اوقات ممکن است محتوای شما بلافاصله نمایش داده نشود، حتی اگر می‌ دانید بروزرسانی شده است. صبور باشید! باید به زودی ایندکس شود.

8. شما از افزونه هایی استفاده می کنید که Googlebot را از خزیدن در سایت شما مسدود می کند

یکی از نمونه های این افزونه پلاگین robots.txt است. اگر فایل robots.txt را از طریق این افزونه به صورت noindex در سایت خود تنظیم کنید، Googlebot نمی تواند آن را بخزد.

  • یک فایل robots.txt راه اندازی کنید و موارد زیر را انجام دهید:

وقتی ایجاد می کنید، آن را به عنوان عمومی تنظیم کنید تا خزنده ها بتوانند بدون محدودیت به آن دسترسی داشته باشند.

مطمئن شوید که فایل robots.txt شما دارای خطوط زیر نیست:

* :User-agent
/ :Disallow

اسلش رو به جلو به این معنی است که فایل robots.txt همه صفحات را از پوشه root سایت مسدود می کند. باید مطمئن شوید که فایل robots.txt شما بیشتر شبیه این است:

* :User-agent
:Disallow

با خالی بودن خط غیر مجاز، به خزنده‌ ها می‌ گویید که همه می‌ توانند هر صفحه در سایت شما را بدون محدودیت بخزند و ایندکس کنند (با فرض اینکه صفحات خاصی را که به‌ عنوان ایندکس نشده علامت‌ گذاری شده‌ اند) داشته باشید.

9. سایت شما از جاوا اسکریپت برای ارائه محتوا استفاده می کند

استفاده از جاوا اسکریپت به خودی خود همیشه مسئله پیچیده ای نیست که باعث مشکلات ایندکس کردن شود. یک قانون واحد وجود ندارد که بگوید JS تنها چیزی است که باعث ایجاد مشکل می شود. شما باید صورت منحصر به فرد به سایت نگاه کنید و مشکلات را بررسی کنید تا تشخیص دهید که آیا مشکل از اینجا است یا خیر.

جایی که JS به عنوان یک مشکل مطرح می شود زمانی است که JS با انجام کار های مبهم از خزیدن جلوگیری می کند، تکنیک هایی که ممکن است شبیه به پنهان کاری باشند.

اگر HTML خام و HTML رندر شده دارید و لینکی در HTML خام دارید که در HTML رندر شده نیست، گوگل ممکن است آن لینک را نخزد یا ایندکس نکند. به دلیل این نوع اشتباهات، تعریف HTML رندر شده و HTML خام موضوع بسیار مهم است.

اگر به دنبال مخفی کردن فایل های JS و CSS خود هستید، این کار را نکنید. گوگل اشاره کرده است که آن ها می خواهند تمام فایل های JS و CSS شما را هنگام خزیدن ببینند.

گوگل از شما می خواهد که همه فایل های JS و CSS را قابل خزیدن نگه دارید. اگر هر یک از آن فایل‌ ها را مسدود کرده‌ اید، ممکن است لازم باشد آن‌ها را رفع انسداد کنید و اجازه خزیدن کامل را بدهید تا به گوگل آنچه را که از سایت شما به آن نیاز دارد، بدهید.

10. شما همه ویژگی های دامنه را به گوگل سرچ کنسول اضافه نکردید

اگر بیش از یک نسخه از دامنه خود دارید، به خصوص در شرایطی که از http:// به https:// منتقل کرده اید، باید همه تغییرات دامنه خود را در گوگل سرچ کنسول اضافه و تأیید کنید.

مهم است که مطمئن شوید هیچ یک از تغییرات دامنه خود را هنگام اضافه کردن آن ها به گوگل سرچ کنسول از دست نمی دهید.

آن ها را به گوگل سرچ کنسول اضافه کنید و مطمئن شوید که تمام ویژگی های دامنه را تأیید می کنید.

برای سایت‌ های جدیدی که تازه شروع به کار کرده‌ اند، این موضوع احتمالاً مشکلی نیست.

11. متا تگ های شما روی Noindex ،Nofollow تنظیم شده اند

گاهی اوقات با بدشانسی محض، متا تگ ها روی noindex ،nofollow تنظیم می شوند. به عنوان مثال، سایت شما ممکن است دارای یک لینک یا صفحه باشد که توسط خزنده گوگل ایندکس شده و سپس قبل از تغییر به noindex حذف شده است و nofollow به درستی در بک اند وب سایت تنظیم شده است.

در نتیجه، ممکن است آن صفحه دوباره ایندکس نشده باشد و اگر از افزونه ای برای جلوگیری از خزیدن گوگل در سایت خود استفاده می کنید، آن صفحه ممکن است دیگر هرگز ایندکس نشود.

راه حل ساده است: هر متا تگی را که noindex ،nofollow هستند، تغییر دهید تا به جای آن index و follow را بخوانند.

با این حال، اگر هزاران صفحه از این قبیل دارید، ممکن است راه سختی در پیش داشته باشید.

12. از نقشه سایت استفاده نمی کنید

نقشه سایت

شما باید از نقشه سایت استفاده کنید!

نقشه سایت لیستی از تمام صفحات سایت شما است و همچنین یکی از راه های گوگل برای یافتن محتوای شماست. این ابزار کمک می کند تا اطمینان حاصل شود که هر صفحه توسط گوگل سرچ کنسول خزیده و ایندکس می شود.

اگر نقشه سایت ندارید، گوگل کور می شود! مگر اینکه تمام صفحات شما در حال حاضر ایندکس شده باشند و ترافیک دریافت کنند.

با این حال، توجه به این نکته مهم است که نقشه سایت HTML در گوگل سرچ کنسول منسوخ شده است. فرمت ترجیحی برای نقشه های سایت امروزه نقشه های XML هستند.

شما باید از نقشه سایت برای اطلاع به گوگل از صفحات مهم سایت خود، استفاده کنید و باید آن را به طور منظم برای خزیدن و ایندکس شدن ارسال کنید.

13. شما در گذشته توسط گوگل جریمه شده اید و هنوز آن را حل نکرده اید

گوگل بار ها اعلام کرده است که جریمه ها می توانند شما را دنبال کنند!

اگر قبلا جریمه شده اید و آن را حل نکرده اید، گوگل سایت شما را ایندکس نمی کند.

پاسخ به این سوال بسیار ساده است: اگر گوگل سایتی را جریمه کند، ممکن است نتوانند کاری در این مورد انجام دهند. زیرا جریمه ها مانند دوست ناخوانده ای که پاهای خود را روی فرش می کشد در هر اتاق خانه دنبال شما می آید.

اگر جریمه شدید، ایمن ترین مسیر پاکسازی کامل اشتباهاتی است که از قبل مرتکب شده اید. شما باید محتوای کاملاً جدیدی داشته باشید و دامنه را از ابتدا دوباره بسازید، یا یک ممیزی کامل محتوا انجام دهید.

14. سئوی تکنیکال شما وحشتناک است

اشتباه نکنید! خرید سئو تکنیکال مانند خرید یک لامبورگینی از یک صرافی است: احتمالاً به جای کالای واقعی، یک کالای تقلبی دریافت خواهید کرد.

انجام صحیح سئوی تکنیکال ارزشش را دارد: گوگل و کاربران شما را دوست خواهند داشت.

بیایید نگاهی به برخی مشکلات و راه حل های رایج بیندازیم و اینکه سئوی تکنیکال چطور می تواند به شما کمک کند.

مشکل: سایت شما به اعداد Core Web Vitals دسترسی ندارد

راه حل: سئوی تکنیکال به شما کمک می کند تا مشکلات موجود در Core Web Vitals را شناسایی کرده و راهی برای اصلاح این مشکلات در اختیار شما قرار می دهد. فقط به ممیزی استراتژیک اعتماد نکنید! این همیشه در این زمینه ها به شما کمک نمی کند. برای کشف برخی از این مسائل به یک ممیزی کامل سئوی تکنیکال نیاز دارید، زیرا آن ها می توانند از ساده ترین تا فوق العاده پیچیده ترین متغیر باشند.

مشکل: سایت شما دارای مشکلات خزیدن و ایندکس کردن است

راه حل: آن ها می توانند فوق العاده پیچیده باشند و به یک سئوی تکنیکال برای کشف و اصلاح آن ها نیاز دارید. اگر متوجه شدید که هیچ عملکردی از سایت خود دریافت نمی کنید، باید آن ها را شناسایی کنید.

همچنین، مطمئن شوید که به‌طور تصادفی کادر «discourage search engines from indexing your website» را در وردپرس علامت نزده‌ اید.

مشکل: فایل robots.txt سایت شما به نحوی ناخواسته خزنده ها را از فایل های مهم مسدود می کند.

راه حل: باز هم، سئوی تکنیکال اینجاست تا شما را از این مشکل نجات دهد. مشکلات برخی از سایت ها آنقدر عمیق است که ممکن است راهی جز حذف سایت و شروع دوباره نداشته باشید. اما اولین گزینه همیشه بهترین گزینه نیست. اینجاست که یک متخصص سئوی تکنیکال با تجربه ارزش طلایی دارد.

شناسایی مسائل ایندکس کردن وب سایت یک چالش است، اما ارزش حل کردن را دارد!

محتوا، سئوی تکنیکال و لینک ها همگی برای حفظ مسیر عملکرد سایت شما مهم هستند. اما اگر سایت شما دارای مشکلات ایندکس کردن باشد، سایر عناصر سئو فقط شما را به این نتیجه می رساند.

مطمئن شوید که تمام کادر ها را علامت بزنید و مطمئن شوید که واقعاً سایت خود را به درست ترین روش ارائه می دهید.

و فراموش نکنید که هر صفحه از وب سایت خود را برای کلمات کلیدی مرتبط بهینه کنید! اطمینان از اینکه سئوی تکنیکال شما در حد یکسان است، ارزش آن را نیز دارد زیرا هرچه گوگل بهتر بتواند سایت شما را بخزد، ایندکس و رتبه بندی کند، نتایج بهتری خواهید داشت.

گوگل (و ترافیک وب سایت شما) از شما تشکر خواهند کرد.