آیا تا به حال محتوای جدیدی را در وب‌سایت خود منتشر کرده‌اید و ساعت‌ها یا حتی روزها منتظر مانده‌اید تا در نتایج جستجوی گوگل ظاهر شود؟ این انتظار می‌تواند برای کسب‌وکارها و تولیدکنندگان محتوا آزاردهنده باشد، به خصوص زمانی که سرعت انتشار اطلاعات اهمیت حیاتی دارد.

نمایه‌سازی فوری (Instant Indexing) راه حلی است که به شما کمک می‌کند تا محتوای جدید یا به‌روزرسانی شده خود را در کمترین زمان ممکن به موتورهای جستجو معرفی کنید و اطمینان حاصل کنید که کاربران به سرعت به جدیدترین اطلاعات شما دسترسی پیدا می‌کنند.

این راهنمای گام‌به‌گام به شما نشان می‌دهد که نمایه‌سازی فوری چیست، چگونه پروتکل IndexNow را برای موتورهای جستجوی پشتیبانی‌کننده فعال کنید و رویکرد گوگل در این زمینه چگونه است. با دنبال کردن این مراحل، می‌توانید فرآیند نمایه‌سازی وب‌سایت خود را بهینه کرده و حضوری فعال‌تر در نتایج جستجو داشته باشید.

نمایه‌سازی فوری چیست؟

نمایه‌سازی فوری به فرآیندی گفته می‌شود که در آن، صاحبان وب‌سایت‌ها به صورت فعال و بلافاصله پس از ایجاد یا به‌روزرسانی محتوا، موتورهای جستجو را از این تغییرات مطلع می‌کنند. در روش‌های سنتی، موتورهای جستجو باید وب‌سایت‌ها را به صورت دوره‌ای خزش (Crawl) کنند تا تغییرات را شناسایی و سپس آن‌ها را نمایه‌سازی (Index) کنند. این فرآیند می‌تواند زمان‌بر باشد و باعث تأخیر در نمایش محتوای جدید در نتایج جستجو شود.

با استفاده از نمایه‌سازی فوری، شما به موتورهای جستجو سیگنال می‌دهید که یک صفحه جدید ایجاد شده یا یک صفحه موجود تغییر کرده است. این کار به موتورهای جستجو کمک می‌کند تا منابع خود را به طور مؤثرتری مدیریت کنند و محتوای شما را سریع‌تر در پایگاه داده خود ثبت کنند. نتیجه این کار، نمایش سریع‌تر محتوای شما در نتایج جستجو و افزایش شانس دیده شدن توسط مخاطبان هدف است.

تفاوت IndexNow و Google Indexing API

در حوزه نمایه‌سازی فوری، دو پروتکل اصلی وجود دارد: IndexNow و Google Indexing API. مهم است که تفاوت این دو را بدانید، زیرا رویکرد گوگل در این زمینه با سایر موتورهای جستجو متفاوت است.

IndexNow:

IndexNow یک پروتکل باز و رایگان است که توسط مایکروسافت بینگ (Microsoft Bing) و یاندکس (Yandex) معرفی شده و توسط چندین موتور جستجوی دیگر نیز پشتیبانی می‌شود. هدف اصلی IndexNow این است که به وب‌سایت‌ها اجازه دهد تا به صورت خودکار و فوری موتورهای جستجو را از تغییرات محتوایی مطلع کنند. این پروتکل برای انواع صفحات وب قابل استفاده است و به طور گسترده‌ای توسط وب‌سایت‌ها پذیرفته شده است.

Google Indexing API:

ویدیو آموزشی:

گوگل نیز یک رابط برنامه‌نویسی کاربردی (API) برای نمایه‌سازی فوری دارد که با نام Google Indexing API شناخته می‌شود. با این حال، گوگل به صراحت اعلام کرده است که این API فقط برای صفحات مربوط به آگهی‌های شغلی (Job Posting) و رویدادهای پخش زنده (Livestreaming Video Pages) طراحی شده است. استفاده از این API برای سایر انواع محتوا (مانند مقالات وبلاگ، صفحات محصول و غیره) توصیه نمی‌شود و ممکن است نتایج مورد انتظار را به همراه نداشته باشد.

نکته مهم: در حال حاضر، گوگل به طور رسمی از پروتکل IndexNow برای نمایه‌سازی عمومی صفحات وب پشتیبانی نمی‌کند و در حال آزمایش آن است. بنابراین، برای نمایه‌سازی فوری در گوگل، باید از روش‌های دیگری که در ادامه توضیح داده می‌شود، استفاده کنید.

یک پیشنهاد خواندنی دیگر: افزایش سرعت سایت بدون افزونه؛ 9 روش حرفه‌ای برای بهینه‌سازی سرعت

فعال‌سازی IndexNow برای موتورهای جستجو (غیر از گوگل)

اگرچه گوگل به طور کامل از IndexNow پشتیبانی نمی‌کند، اما فعال‌سازی آن برای موتورهای جستجویی مانند بینگ و یاندکس می‌تواند به بهبود نمایه‌سازی وب‌سایت شما در این پلتفرم‌ها کمک کند. فرآیند فعال‌سازی IndexNow نسبتاً ساده است و شامل چند مرحله کلیدی می‌شود:

۱. تولید کلید API (API Key)

برای استفاده از IndexNow، ابتدا باید یک کلید API منحصر به فرد برای وب‌سایت خود تولید کنید. این کلید برای تأیید مالکیت وب‌سایت شما استفاده می‌شود. می‌توانید این کلید را با استفاده از ابزارهای آنلاین تولید کلید UUID (Universally Unique Identifier) ایجاد کنید. کلید باید شامل ۳۲ کاراکتر هگزادسیمال باشد.

۲. میزبانی فایل کلید (Host Key File)

پس از تولید کلید، باید یک فایل متنی با نام کلید خود (مثلاً your-key.txt) ایجاد کنید و آن را در پوشه ریشه (Root Directory) وب‌سایت خود قرار دهید. محتوای این فایل باید همان کلید API باشد. به عنوان مثال، اگر کلید شما 3e2f1d0c-b9a8-4765-8432-1fedcba98765 است، فایلی به نام 3e2f1d0c-b9a8-4765-8432-1fedcba98765.txt ایجاد کرده و محتوای آن را نیز همین کلید قرار دهید. این کار به موتورهای جستجو اجازه می‌دهد تا مالکیت وب‌سایت شما را تأیید کنند.

۳. ارسال URLها (Submit URLs)

اکنون که کلید API را تنظیم کرده‌اید، می‌توانید URLهای جدید یا به‌روزرسانی شده خود را به موتورهای جستجو ارسال کنید. این کار از طریق یک درخواست HTTP ساده انجام می‌شود. شما می‌توانید یک یا چند URL را در یک درخواست ارسال کنید. فرمت درخواست به صورت زیر است:

https://www.bing.com/IndexNow?url=URL_CHANGED&key=YOUR_KEY

برای ارسال چندین URL، می‌توانید یک درخواست POST به آدرس https://www.bing.com/IndexNow ارسال کنید که شامل یک آرایه از URLها و کلید API شما باشد. این کار را می‌توانید به صورت دستی یا با استفاده از اسکریپت‌های برنامه‌نویسی انجام دهید.

۴. استفاده از افزونه‌های وردپرس (WordPress Plugins )

اگر وب‌سایت شما بر پایه وردپرس (WordPress) است، می‌توانید از افزونه‌های (Plugins) مخصوص IndexNow استفاده کنید که این فرآیند را به صورت خودکار انجام می‌دهند. افزونه‌هایی مانند

Rank Math SEO یا افزونه رسمی IndexNow، این فرآیند را به سادگی برای شما انجام می‌دهند. این افزونه‌ها به طور خودکار کلید API را تولید کرده، فایل کلید را در وب‌سایت شما قرار می‌دهند و URLهای جدید یا به‌روزرسانی شده را به موتورهای جستجوی پشتیبانی‌کننده ارسال می‌کنند.

ویدیو آموزشی (ایندکس فوری با افزونه رنک مث):

رویکرد گوگل به نمایه‌سازی فوری: Google Indexing API

همانطور که پیش‌تر اشاره شد، گوگل به طور رسمی از پروتکل IndexNow برای نمایه‌سازی عمومی صفحات وب پشتیبانی نمی‌کند. گوگل برای نمایه‌سازی فوری، یک API اختصاصی به نام Google Indexing API ارائه کرده است، اما کاربرد آن محدود به دو نوع محتوای خاص است:

• صفحات آگهی‌های شغلی (Job Posting pages): وب‌سایت‌هایی که آگهی‌های استخدام منتشر می‌کنند، می‌توانند از این API برای اطلاع‌رسانی فوری به گوگل در مورد آگهی‌های جدید یا حذف شده استفاده کنند.
• صفحات ویدئوهای پخش زنده (Livestreaming Video pages): وب‌سایت‌هایی که محتوای ویدئویی زنده ارائه می‌دهند، می‌توانند از این API برای اطلاع‌رسانی به گوگل در مورد شروع یا پایان پخش زنده استفاده کنند.

اگر وب‌سایت شما یکی از این دو نوع محتوا را ارائه می‌دهد، می‌توانید از Google Indexing API برای نمایه‌سازی فوری استفاده کنید. در غیر این صورت، برای سایر انواع محتوا، باید به روش‌های سنتی‌تر مانند ارسال نقشه سایت (Sitemap) و درخواست خزش دستی از طریق گوگل سرچ کنسول (Google Search Console) تکیه کنید.

فعال‌سازی Google Indexing API (برای محتوای مجاز)

فعال‌سازی Google Indexing API کمی پیچیده‌تر از IndexNow است و نیازمند انجام چند مرحله در کنسول توسعه‌دهندگان گوگل (Google Developers Console) و گوگل سرچ کنسول است:

1. فعال‌سازی Indexing API در کنسول توسعه‌دهندگان:

• به کنسول توسعه‌دهندگان گوگل بروید و یک پروژه جدید ایجاد کنید یا یک پروژه موجود را انتخاب کنید.
• در بخش «کتابخانه‌ها» (Libraries)، «Indexing API» را جستجو کرده و آن را فعال کنید.

2. ایجاد حساب سرویس (Service Account):

• در کنسول توسعه‌دهندگان، به بخش «اعتبارنامه‌ها» (Credentials) بروید و یک «حساب سرویس» جدید ایجاد کنید.
• یک نام برای حساب سرویس خود انتخاب کنید و نقش (Role) آن را به «مالک» (Owner) یا «ویرایشگر» (Editor) تنظیم کنید. این حساب سرویس یک آدرس ایمیل منحصر به فرد خواهد داشت.
• یک کلید JSON برای حساب سرویس خود ایجاد و دانلود کنید. این فایل JSON حاوی اطلاعات احراز هویت است که برای دسترسی به API استفاده می‌شود.

دیگران این مطلب را هم خوانده اند:  10 بهترین ابزار تست خرابی سایت؛ بررسی قطعی، خطا و وضعیت سرور

3. تأیید مالکیت در گوگل سرچ کنسول:

• آدرس ایمیل حساب سرویس خود را کپی کنید.
• به گوگل سرچ کنسول بروید و وب‌سایت خود را انتخاب کنید.
• در بخش «تنظیمات» (Settings)، به «کاربران و مجوزها» (Users and permissions) بروید و حساب سرویس خود را به عنوان یک «مالک» یا «کاربر» اضافه کنید.

4. ارسال URLها از طریق API:

• اکنون می‌توانید با استفاده از زبان‌های برنامه‌نویسی مانند پایتون، PHP یا Node.js، درخواست‌های HTTP به Google Indexing API ارسال کنید. شما باید فایل JSON کلید حساب سرویس خود را برای احراز هویت استفاده کنید.
• درخواست‌ها می‌توانند برای اطلاع‌رسانی در مورد URLهای جدید (Update) یا حذف شده (Remove) باشند.

مثال کد پایتون برای ارسال URL جدید:

خطاهای رایج و راه جلوگیری

در فرآیند نمایه‌سازی فوری، ممکن است با خطاهایی مواجه شوید. شناخت این خطاها و نحوه رفع آن‌ها می‌تواند به شما در بهینه‌سازی فرآیند کمک کند:

• خطای ۴۰۳ (Forbidden) در Google Indexing API: این خطا معمولاً به دلیل عدم تأیید مالکیت وب‌سایت در گوگل سرچ کنسول برای حساب سرویس شما رخ می‌دهد. اطمینان حاصل کنید که آدرس ایمیل حساب سرویس را به عنوان مالک یا کاربر مجاز در سرچ کنسول اضافه کرده‌اید.
• محدودیت‌های API (API Quota Exceeded): Google Indexing API دارای محدودیت‌هایی در تعداد درخواست‌هایی است که می‌توانید در یک بازه زمانی ارسال کنید. اگر تعداد URLهای شما زیاد است، درخواست‌ها را به صورت دسته‌ای (Batch) ارسال کنید و بین هر دسته، تأخیر (Delay) مناسبی قرار دهید تا از این محدودیت‌ها عبور نکنید.
• عدم نمایه‌سازی صفحات غیرمجاز در Google Indexing API: همانطور که ذکر شد، این API فقط برای آگهی‌های شغلی و ویدئوهای پخش زنده است. تلاش برای نمایه‌سازی سایر انواع محتوا با این API ممکن است به نتیجه نرسد و زمان شما را هدر دهد. برای این صفحات، از نقشه سایت و ابزار بازرسی URL در سرچ کنسول استفاده کنید.
• مشکل در فایل کلید IndexNow: اگر فایل کلید IndexNow در پوشه ریشه وب‌سایت شما قرار نگرفته باشد یا نام آن با کلید تولید شده مطابقت نداشته باشد، موتورهای جستجو نمی‌توانند مالکیت شما را تأیید کنند. مسیر و نام فایل را به دقت بررسی کنید.
• مشکلات فنی وب‌سایت: اگر وب‌سایت شما دارای مشکلات فنی مانند سرعت پایین، خطاهای سرور، یا مسدود شدن توسط فایل robots.txt باشد، حتی با استفاده از نمایه‌سازی فوری نیز ممکن است صفحات شما به درستی نمایه‌سازی نشوند. ابتدا مشکلات فنی وب‌سایت را برطرف کنید.

نکات پایانی:

1. بررسی نوع محتوا: ابتدا مشخص کنید که آیا وب‌سایت شما محتوای آگهی شغلی یا ویدئوی پخش زنده دارد یا خیر. اگر بله، برای Google Indexing API برنامه‌ریزی کنید.

2. فعال‌سازی IndexNow: برای وب‌سایت خود IndexNow را فعال کنید تا از مزایای نمایه‌سازی فوری در بینگ و سایر موتورهای جستجوی پشتیبانی‌کننده بهره‌مند شوید.

3. نظارت بر سرچ کنسول: به طور منظم گوگل سرچ کنسول و بینگ وب‌مستر تولز (Bing Webmaster Tools) را بررسی کنید تا وضعیت نمایه‌سازی صفحات خود را پیگیری کرده و خطاهای احتمالی را شناسایی و رفع کنید.

4. به‌روزرسانی دانش: همواره با آخرین تغییرات و به‌روزرسانی‌ها در زمینه نمایه‌سازی موتورهای جستجو آشنا باشید، زیرا این حوزه به سرعت در حال تحول است.