Google'ın özel tarayıcılarının listesi
Özel durum tarayıcıları, taranan site ile ürün arasında tarama işlemi hakkında anlaşmaya varılan belirli ürünler tarafından kullanılır. Örneğin AdsBot
, reklam yayıncısının izniyle genel robots.txt kullanıcı aracısını (*
) yoksayar. Google tarayıcılarının
genel teknik özellikleri,
özel tarayıcılar için de geçerlidir.
Özel
durum tarayıcıları, robots.txt kurallarını yoksayabilir ve bu nedenle, yaygın olarak kullanılan tarayıcılardan farklı bir IP
aralığında çalışır. IP aralıkları, special-crawlers.json nesnesinde yayınlanır. Özel
tarayıcıların ters DNS maskesi, rate-limited-proxy-***-***-***-***.google.com
ile eşleşir.
Aşağıdaki listede özel durum tarayıcıları, HTTP isteklerinde göründükleri şekliyle kullanıcı aracısı dizeleri, robots.txt dosyasındaki User-agent:
satırı için kullanıcı aracısı jetonları ve tarayıcının tarama tercihlerinden etkilenen ürünler gösterilmektedir. Bu liste tam
kapsamlı değildir. Yalnızca günlük dosyalarında görünme olasılığı daha yüksek olan ve hakkında
soru aldığımız istekleri kapsar.
APIs-Google
-
HTTP isteklerinde kullanıcı aracısı APIs-Google (+https://developers.google.com/webmasters/APIs-Google.html)
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu APIs-Google
Genel kullanıcı aracısı (
*
) yoksayılır.Örnek robots.txt grubu user-agent: APIs-Google allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler APIs-Google
kullanıcı aracısına yönelik tarama tercihleri, Google API'lerinin push bildirimi mesajlarını göndermesini etkiler. AdsBot Mobil Web
-
HTTP isteklerinde kullanıcı aracısı Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; AdsBot-Google-Mobile; +http://www.google.com/mobile/adsbot.html)
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu AdsBot-Google-Mobile
Genel kullanıcı aracısı (
*
) yoksayılır.Örnek robots.txt grubu user-agent: AdsBot-Google-Mobile allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler AdsBot-Google-Mobile
kullanıcı aracısına yönelik tarama tercihleri, Google Ads'in web sayfası reklam kalitesini kontrol etme özelliğini etkiler. AdsBot
-
HTTP isteklerinde kullanıcı aracısı AdsBot-Google (+http://www.google.com/adsbot.html)
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu AdsBot-Google
Genel kullanıcı aracısı (
*
) yoksayılır.Örnek robots.txt grubu user-agent: AdsBot-Google allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler AdsBot-Google
kullanıcı aracısına yönelik tarama tercihleri, Google Ads'in web sayfası reklam kalitesini kontrol etme özelliğini etkiler. AdSense
-
HTTP isteklerinde kullanıcı aracısı Masaüstü aracısı Mediapartners-Google
Mobil aracısı (Various mobile device types) (compatible; Mediapartners-Google/2.1; +http://www.google.com/bot.html)
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Mediapartners-Google
Genel kullanıcı aracısı (
*
) yoksayılır.Örnek robots.txt grubu user-agent: Mediapartners-Google allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler Mediapartners-Google
kullanıcı aracısına yönelik tarama tercihleri, Google AdSense'i etkiler. AdSense tarayıcısı, katılan sitelere alakalı reklamlar sunmak için bu siteleri ziyaret eder. Google-Safety
-
HTTP isteklerinde kullanıcı aracısı Google-Safety
robots.txt Google-Safety kullanıcı aracısı, robots.txt kurallarını yoksayar. Etkilenen ürünler Google-Safety kullanıcı aracısı, Google mülklerinde herkese açık olarak yayınlanan bağlantılar için kötü amaçlı yazılım keşfi gibi kötüye kullanıma özel taramaları yönetir. Bu nedenle, tarama tercihlerinden etkilenmez.
Kullanımdan kaldırılan özel tarayıcılar
Aşağıdaki özel tarayıcılar artık kullanılmamakta olup yalnızca geçmişe dönük referans olması için burada belirtilmiştir.
AdsBot Mobil Web
-
HTTP isteklerinde kullanıcı aracısı Mozilla/5.0 (iPhone; CPU iPhone OS 14_7_1 like Mac OS X) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/14.1.2 Mobile/15E148 Safari/604.1 (compatible; AdsBot-Google-Mobile; +http://www.google.com/mobile/adsbot.html)
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu AdsBot-Google-Mobile
Genel kullanıcı aracısı (
*
) yoksayılır.Etkilenen ürünler AdsBot-Google-Mobile
kullanıcı aracısına yönelik tarama tercihleri, Google Ads'in iPhone web sayfası reklam kalitesini kontrol etme özelliğini etkiliyordu. Duplex on the web
-
HTTP isteklerinde kullanıcı aracısı Mozilla/5.0 (Linux; Android 11; Pixel 2; DuplexWeb-Google/1.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.193 Mobile Safari/537.36
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu DuplexWeb-Google
Duplex on the web,
*
joker karakteri yoksayabilir.Etkilenen ürünler Duplex on the web hizmetini destekliyordu. Google Favicon
-
HTTP isteklerinde kullanıcı aracısı Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.75 Safari/537.36 Google Favicon
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Googlebot-Image
Googlebot
Mobil Uygulamalar Android
-
HTTP isteklerinde kullanıcı aracısı AdsBot-Google-Mobile-Apps
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu AdsBot-Google-Mobile-Apps
AdsBot-Google-Mobile-Apps
kullanıcı aracısı,AdsBot-Google
robots kurallarına uyuyor ancak genel kullanıcı aracısını (*
) yoksayıyordu.Etkilenen ürünler AdsBot-Google-Mobile-Apps
kullanıcı aracısına yönelik tarama tercihleri, Google Ads'in Android uygulama sayfasındaki reklam kalitesini kontrol etme özelliğini etkiler. Web Light
-
HTTP isteklerinde kullanıcı aracısı Mozilla/5.0 (Linux; Android 4.2.1; en-us; Nexus 5 Build/JOP40D) AppleWebKit/535.19 (KHTML, like Gecko; googleweblight) Chrome/38.0.1025.166 Mobile Safari/535.19
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu googleweblight
googleweblight
kullanıcı aracısı, yalnızca gerçek ziyaretçinin açıkça yaptığı göz atma istekleri için kullanılırdı. Bu nedenle, otomatik tarama isteklerini engellemek için kullanılan robots.txt kurallarını yoksayıyordu.Etkilenen ürünler Web Light kullanıcı aracısı, kullanıcı uygun koşullar altında Arama'da sayfanızı her tıkladığında no-transform
üstbilgisinin olup olmadığını kontrol ediyordu.