ویدیو ایندکس کردن سایت در گوگل بدون دسترسی خارج

به دلایل مرتبط با امنیت یا کپی رایت یا هر چیز دیگری ممکنه دسترسی خارج از ایران رو به سایتتون بسته باشید.

در این ویدیو درباره سایت هایی که دسترسی خارج رو بستن توضیح میدم که چرا متادسکریپشن ندارن و چرا بعضی از صفحاتشون ایندکس شده!

در نهایت هم دو راه برای دسترسی بات های گوگل هست که یکی لیست سفید آی پی های گوگل هست که در پایین مستندات و لیستش رو قرار دادم. یکی هم چک کردن از طریق User Agent و سپس Reverse DND Lookup برای هر Request خارج از ایران که یوزر ایجنتی شبیه یوزر ایجنت های بات گوگل دارند. راه دوم راه صحیحی هست چون لیست قطعی آی پی ثابتی وجود نداره. برای جزئیات بیشتر و راه حل، ویدیو رو کامل ببینید. برای یادگیری مفصل تمام بخش های سئو، دوره سئو جامع رو ببینید.

اما درباره لینک هایی که در ویدیو اشاره کردم:

لینک زیر حاوی دو لیست هست که البته اینها لزوما آی پی های گوگل بات نیستند!

https://support.google.com/a/answer/10026322?hl=en

https://www.gstatic.com/ipranges/cloud.json

https://www.gstatic.com/ipranges/goog.json

لینک زیر هم هیچ ربطی به آی پی های خود گوگل نداره! ولی از اونجا که صحبت از آی پی هست لینکش رو میارم که شما هم موقع گشت و گذار برای پیدا کردن لیست آی پی های ثابت بات های گوگل (که در ویدیو گفتم وجود نداره) کمتر گمراه شید:

https://support.google.com/websearch/answer/1696588?hl=en

https://cloud.google.com/vpc/docs/configure-private-google-access#ip-addr-defaults

اینجا هم بحث های ملت درباره لیست لعنتی آی پی های ثابت بات های گوگل هست:

https://webmasters.stackexchange.com/questions/71344/what-does-google-use-173-194-90-xxx-ips-for-why-is-it-not-a-googlebot-com-poin/71359#71359

https://stackoverflow.com/questions/27665531/how-to-find-googles-ip-address

https://webmasters.stackexchange.com/questions/85820/how-to-identify-if-ip-address-is-really-googles-ip

اینجا هم گوگل گفته که چجوری بفهمید این بات نگون بخت که اومده به شما ریکوئست داده، واقعا بات گوگل هست یا User Agent ساختگی بات هست:

https://developers.google.com/search/docs/advanced/crawling/verifying-googlebot?hl=en

اینجا هم چند تا بنده خدا اومدن لیست آی پی های بات های گوگل رو گذاشتن و دوست دارن اپدیت بمونه لیستشون. در حالی که آی پی ها متغیرن!(تو ویدیو گفتم!)

https://gist.github.com/x011/b93ebc0ab874b002d3bc4889eca83db2

evert.meulie.net/faqwd/googlebot-ip-ranges/

محسن طاوسی هستم. با تجربه مدیریت اجرایی و ارائه مشاوره به بیش از 300 مجموعه از رقابت های کم تا بالاترین سطوح در انواع تکنولوژی ها و CMS ها.

محسن طاوسی هستم. با تجربه مدیریت اجرایی و ارائه مشاوره به بیش از 300 مجموعه از رقابت های کم تا بالاترین سطوح در انواع تکنولوژی ها و CMS ها.

23 دیدگاه. ارسال دیدگاه جدید

  • Dont Spam!
    9 آذر 1401 18:25

    من وب سایت طراحی سایت سایت بیلدر رو ساختم ولی صفحاتی که از قسمت برگه ساختم ایندکس نمیشن و لی نوشت ها ایندکس میشن به نظرتون مشکل از چیه؟ آیا میتونه مشکل از هاستی که استفاده می کنم باشه؟

    پاسخ
    • محسن طاوسی
      22 آذر 1401 16:43

      مشکل از نوشته یا برگه بودنشون نیست.

  • سلام استاد طاووسی
    1-آیا گوگل سایت هایی(دامنه) که به اسم یک نفر باشه چه از طریق اکانت سرج کنسول و یا هو ایز به همدیگر مرتبط میدونه؟سوالم به این منظور است که من یکی از دامنه هام بر اثر بی تجربگی و اشتباهات سئویی پنالتی شده و داخل همان سرج کنسول سایت های دیگری دارم آیا میتواند تاثیر منفی سئویی روی آنها داشته باشد؟
    2-آیا ساب دامنه یک دامنه کاملا جدا است؟ یا نه تاثیر سئویی روی دامنه اصلی خصوصا از نوع منفی داره؟
    ممنون خواهم شد در این دو مورد راهنمایی بفرمایید.تشکر

    پاسخ
    • محسن طاوسی
      29 خرداد 1401 13:05

      ما نمیتونیم بفهمیم. اما من صرفا حدس میزنم که از یک سرچ کنسول، پروفایل بک لینک ها رو میبینه. و از اون میتونه به یه اطلاعاتی برسه. و اگر این کارو کنه، برای اونهایی که نمیتونه از این چیزا دیتا پیدا کنه، نمیتونه این رو لحاظ کنه. در نتیجه نا همگونی اطلاعات بوجود میاد و رتبه بندی بهم میریزه. من سال 93 یک تجربه بدی در این باره دارم که ترجیح میدم ریسک نکنم. اما نمیتونم محکم دربارش حرف بزنم.

  • سلام استاد در ویدیویی که در یوتیوب برای شما بود تو اون آموزشی که افزایش رتبه کلمه کلیدی بدون استفاده از بک لینک هستم . به سیستم های بازدیدی یا سیستم های کلیک و میبره بالا مگه داریم چنین سیستم هایی که تعداد باردید و ببره بالا؟

    پاسخ
    • محسن طاوسی
      1 اردیبهشت 1401 14:18

      قدیمیاش که پاپ اپ هستند. بله داریم. ولی الان بازدید هایی ارزشمند هستند که از کروم های لاگین شده در اکانت های واقعی گوگل باشند و زوری هم نباشند مثل پاپ اپ.

  • سلام و تشکر از مطالب خوبتون
    1-من چند برچسب داشتم که هر کدام را که ساختم و پشیمان شدم به یک برچسب ریدایرکت کردم سه برچسب البته جدا جدا ساخته بودم الان این سه به یک برچسب ریداریکت است
    در سایتی خوندم که ریدایرکت زیاد از سرعت سایت میکاهد کل ریدایرکت های سایت من 5 عدد است حالا به نظر شما اون سه برچسب را بهتر نیست دوتا شو به 410 تغییر بدم چون الان از جستجو هم حذف شدند و بخاطر کم نشدن سرعت بگم کاملا از سایت حذف شده

    2- اگر این حرف درسته و از سرعت سایت کاسته میشه دقیقا کجا کل سایت یا فقط مطلب ریدایرکت شده

    3- آیا این روش کار من درسته که سه ریدایرکت را به هم ریدایرکت نکردم و همه را به برچسب حدف ریدایرکت کردم یعنی 1 به ۲ و ۲ به ۳ و ۳ هم به چهار این اشتباه است درسته باید هر سه را به چهار ریدایرکت کنم

    ۴_ بهتر نیست اصلا اگه امکانش باشه اصلا از برچسب استفاده نکنم چون حس میکنم مطالبی که برچسب ندارند رتبه بهتری دارند

    5- شما با افزونه رنک مث برام با دریافت هزینه اسکیما تعریف میکنید اگر بله کجا تماس بگیرم

    ممنون میشم راهنمایی دقیق کامل فرمایید سوال یک برام خیلی مهم است

    پاسخ
    • محسن طاوسی
      18 بهمن 1400 17:52

      نمیشه که هم 410 باشه هم 301. یکدومه. نه عزیزم شما مهاجرت کنی به https یا دامین عوض کنی کلی ریدایرکت داری که. پس نکنی؟ در حد میلی ثانیه هست. ریدایرکت زنجیره ای خوب نیست. از این بره به اون ازون بره به اون ازون بره به اون یکی. از این ریدایرکت سعی کنید فاصله بگیرید. اولی رو به اخری ریدایرکت کنید. برچسب مهم نیست مگر اینکه لندینگ کیورد خاصی غیر از صفحه ای که براش برچسب زدید باشه و مشابه نداشته باشه. آموزش کیورد تارگتینگ رو ببینید توضیح دادم. دو ساعت و نیم باید اموزش ببینید برای سوال چهار. 5- نه.

  • زینب اسدپور
    6 بهمن 1400 23:46

    استاد سلام یک سوال دارم سایت که مقاله هاش ایندکس نمیشه چکار باید کنم ایندکس بشه خیلی وقته تو این حالت سایت تکون نمی خوره لطفا یک راهکار بهم بگید من هر راهکاری بلد بودم انجام دادم

    پاسخ
  • مهدی نیکونام
    5 دی 1400 17:25

    سلام و عرض ادب.
    چند وقتی هست که وبسایت ها بخصوص وردپرسی که معمولا هر روز یا دو روز یکبار ایندکس میشدند به مشکل خوردند در پروژه ها برای بحث ایندکس شدن. در بعضی سایت ها از هر سه مقاله که کاملا یونیک هستند و لینک داخلی دارند و سئو محتوا رو رعایت کردیم یکی ایندکس میشه و دو تای دیگه میرن در بخش اکسکلود سرچ کنسول و دو بخش Discovered – currently not indexed و Crawled – currently not indexed. مفاهیم این دو بخش کاملا مشخص هستند ولی این مشکل اخیرا طی دو سه ماه ایجاد شده و خیلی دردسر ساز شده.
    برای شما هم مورد مشابه پیش اومده؟ راهکاری بجز لینک سازی داخلی، آپدیت محتوا، معرفی سایت مپ و درخواست ایندکس وجود داره که جواب بده؟
    چون واقعا روی محتوا زحمت کشیده شده.

    پاسخ
    • محسن طاوسی
      7 دی 1400 15:36

      از سرچ کنسول بخش removals ریموو کش کنید و سپس ریکوئست ایندکسینگ بزنید

  • سلام آقای طاووسی این کار برای سایت های فیلم که محتوای منتشر شدشون دقیقا موضوع کپی رایت هست کاربرد داره یا اگر نداره راهی بهتر میتونید پیشنهاد بدید که از شر dmca از طرف شرکت های فیلم سازی خلاص شیم

    پاسخ
    • محسن طاوسی
      10 آذر 1400 19:20

      فقط یک راه داره. اون هم اینه که با آر پی جی، شرکت های فیلم سازی رو منفجر کنید و با راه اندازی مجددشون به صورت فیزیکال مبارزه کنید.

  • داخل سرچ کنسول درمورد عبارت “گیفت کارت پلی استیشن” ؛ پوزیشن بهم میده ۴۵ و نشون میده ایمپرشن هم داشتم برای این عبارت.
    اما اصلا با این عبارت داخل نتایج نیستم، انگار که حذف شدم…

    توی عبارات دیگه رتبه دارم بدون مشکل نمایشم میده، این “گیفت کارت پلی استیشن” هم صفحه دوم بود، ولی الان کلا نیست…

    تنها کاریم که کردم حدود ۳ روز تبلیغات همسان و کلیکی رفتم روی این صفحه.
    لینکسازی هم خیلی کم براش انجام دادم با رعایت همه نکات و دقت کامل.

    چکار کنم برگردم به نتایج؟

    پاسخ
    • محسن طاوسی
      1 آذر 1400 16:38

      فیلتر سرچ کنسول رو بذارید روی روز جاری. کشورش ایران. کوئری اگزکت. دستگاه موبایل یا دسکتاپ. از هر جا که دارید سرچ میکنید نیستید. اون پوزیشن درسته. نه پوزیشن میانگین سه ماه و 28 روز اخیر در همه کشور ها و دستگاه ها.
      چیکار کنم برگردم به نتایج برابر است با کل فرایند سئو

  • سلام اگر دسترسی رو ببندیم دیگه خبری از رتبه گرفتن هست؟

    پاسخ
    • محسن طاوسی
      31 شهریور 1400 12:56

      خبری از رنکینگ که هیچ، خبری از ایندکسینگ هم نیست.

  • … We have noticed an unusual activity from your IP 91.219.214.50 and blocked access to this website. Please confirm that you are not a robot.
    بعد تغییر سرور در قسمت Meta Description متن بالا نوشته شده است.
    همینطورم داره رتبه های از گوگل حذف میشه
    می خواستم بدونم مشکل از کجاست؟

    پاسخ
    • محسن طاوسی
      16 خرداد 1400 12:39

      این پیامیه که مکررا سرور شما به بات های گوگل داده و این جمله رو در صفحه نشون داده. بخاطر همین در دسکریپشن شما به عنوان بخشی از محتوای صفحه نمایش داده شده. مشکل دسترسی نداشتن بات های گوگل به محتوای صفحات شماست. راه حلشم باید با تست های مکرر و ارتباط با پشتیبانی سرور و گاها سی دی ان و مسئولین شبکه خودتون به دست بیارید.

  • سلام
    آقای طاووسی عزیز بستن دسترسی خارج از کشور رو بیشتر چه سایت هایی باید ببندن؟

    پاسخ
    • محسن طاوسی
      23 فروردین 1400 18:20

      هیچ سایتی. معمولا به خاطر امنیت یا کپی رایت مجبور میشن بعضی از سایت ها ببندند.

  • احمد علی همتی
    10 فروردین 1400 17:49

    خدا قوت آقای طاووسی آموزش کوتاه و مفیدی بود. تشکر

    پاسخ
  • مشتی هستی

    پاسخ

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

این فیلد را پر کنید
این فیلد را پر کنید
لطفاً یک نشانی ایمیل معتبر بنویسید.