چطور چند میلیون صفحه رو در گوگل ایندکس کنیم؟

برای یه سایت و دامنه جدید قراره چیزی حدود 20 میلیون صفحه محتوا داشته باشیم. میدونم گوگل بودجه کراول برای هر سایت درنظر میگیره و میخوام بدونم بهترین روش و راه درست ایندکس کردن این همه صفحه در گوگل چیه؟ و چقدر طول میکشه تا همه صفحات ایندکس بشه؟


1 پاسخ
85
یک برنامه‌نویس
یک برنامه‌نویس @a_programmer
محتوای آموزشی پیرامون برنامه نویسی
1 سال قبل

گوگل این همه صفحه رو روی یه سایت جدید کراول و ایندکس نمی کنه.

میزان کراول گوگل به میزان تقاضا و ورودی اون صفحات بستگی داره. اگه بتونید به نحوی مثلا با یه استراتژی هوشمندانه به همه اون صفحات ترافیک بفرستید شاید گوگل خیلی سریع صفحات شما رو کراول کنه.

به طور نرمال ممکنه سال ها طول بکشه که بودجه کراول کافی برای ایندکس این همه صفحه به دست بیارید. ثبت یکجای همه این صفحات در گوگل (مثلا از طریق سایت مپ) به هیچ وجه جواب نمیده.

پیشنهاد من:

  • از صفحات مهم شروع کن مثلا صفحه اصلی، درباره، تماس، صفحات خدمات، محصولات و … سطح بالا و مهم

  • صفحات عمیق تر رو با استفاده از robots.txt برای ربات ها بلاک کن ولی برای کاربر قابل دسترسی باشه

  • کمپین ها و استراتژی هات رو روی یه بخش کوچیک متمرکز کن و این بخش رو برای ربات ها باز کن (از طریق robots.txt که بلاکشون کردی)

  • تاثیرش رو آنالیز و تحلیل کن

  • کم کم بخش های دیگه رو هم باز کن و کمپین ها و استراتژی های مربوط به اون بخش ها رو شروع کن

چندتا نکته دیگه:

  • خیلی سخته که این همه صفحه درست کنی و واقعا نسبت به محتوا های موجود که در جاهای دیگه پیدا میشه منحصر به فرد باشه.

  • باید محتوای تو برای کاربر و بازدیدکننده با ارزش تر از محتوای رقیبت باشه تا بتونی رقابت کنی و پیروز بشی.

  • مطمئن شو که واقعا برای همه این صفحات تقاضا وجود داره.

  • باید لینک این صفحات در جاهای مختلف و متعدد وجود داشته باشه که ربات بتونه راحتتر به اونها دسترسی پیدا کنه.