إن التعرّف على كيفية تفاعل برامج وكيل المستخدم من Google مع موقعك الإلكتروني يمكن أن يساعدك في عرض أهم صفحاتك في المزيد من المواضع ضمن منظومة Google المتكاملة، بدون تحميل الخوادم المستخدمة عبئًا زائدًا. سواء كنت مالك موقع إلكتروني أو مطوّرًا، تمنحك هذه المستندات تحكّمًا أفضل في كيفية الزحف إلى موقعك الإلكتروني.
يمكنك التحقّق مما إذا كان زاحف الويب أو برنامج الجلب الذي يصل إلى خادمك هي فعلاً من Google، مثل Googlebot.
تتكيّف برامج الزحف من Google تلقائيًا مع موقعك الإلكتروني وخادمك للعثور على المحتوى الأفضل والأحدث لديك وعرضه بكفاءة. لمساعدتك في إدارة الحالات الطارئة المتعلقة بالخادم والزحف، يمكنك خفض معدّل الزحف مسبقًا عند الحاجة.
يمكنك استخدام ملف robots.txt للسماح بالزحف إلى صفحات فردية أو إلى موقعك الإلكتروني بالكامل أو حظره.

تأثير الإعدادات المفضّلة للزحف في أماكن ظهور موقعك الإلكتروني على Google

تتم مشاركة البنية الأساسية للزحف من Google بين مجموعة متنوعة من منتجات Google. وهذا يعني أنّ اتّباع أفضل الممارسات يساعد في العثور على محتوى الويب الخاص بك بشكل أكثر فعالية وعرضه على Google.
يستخدم "بحث Google" برنامج Googlebot للزحف إلى موقعك الإلكتروني والعثور على المحتوى الملائم للمستخدمين.
تستخدم تطبيقات Gemini وVertex AI API for Gemini وكيل المستخدم Google-Extended. مزيد من المعلومات حول Google-Extended
إنّ إعدادات الزحف المفضّلة الموجّهة إلى وكيل المستخدم Storebot-Google تؤثر في جميع مساحات عرض Google Shopping.
يزور زاحف AdSense المواقع الإلكترونية المشارِكة لتزويدها بالإعلانات الملائمة.
إنّ إعدادات الزحف المفضّلة الموجّهة إلى وكيل المستخدم "Googlebot للأخبار" تؤثّر في منتج "أخبار Google"، بما في ذلك news.google.com وتطبيق "أخبار Google".
يطلب برنامج الجلب Google-NotebookLM عناوين URL فردية قدّمها مستخدمو NotebookLM كمصادر لمشاريعهم.