Google'ın genel tarayıcılarının listesi
Google'ın genel tarayıcıları; bilgi toplayarak Google'ın arama dizinlerini oluşturmak, ürüne özgü diğer taramaları gerçekleştirmek ve analiz yapmak için kullanılır. Otomatik olarak tarama yaparken robots.txt kurallarına her zaman uyarlar. Google tarayıcılarının genel teknik özellikleri, genel tarayıcılar için de geçerlidir.
Genel tarayıcılar çoğunlukla googlebot.json nesnesinde yayınlanan IP aralıklarından
tarama yapar ve ana makine adlarının ters DNS maskesi crawl-***-***-***-***.googlebot.com
veya geo-crawl-***-***-***-***.geo.googlebot.com
ile
eşleşir.
Aşağıdaki listede genel tarayıcılar, HTTP isteklerinde göründükleri şekliyle kullanıcı aracısı dizeleri, robots.txt
dosyasındaki User-agent:
satırı için kullanıcı aracısı jetonları ve tarayıcının tarama
tercihlerinden etkilenen ürünler gösterilmektedir. Bazı tarayıcıların birden fazla kullanıcı
aracısı jetonu vardır. Bir kuralı uygulamak için yalnızca bir tarayıcı jetonunun eşleşmesi yeterlidir. Bu liste tam
kapsamlı değildir. Yalnızca günlük dosyalarında görünme olasılığı daha yüksek olan ve hakkında
soru aldığımız istekleri kapsar.
-
Googlebot
-
HTTP isteklerinde User-Agent
Googlebot Akıllı Telefon Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Googlebot Masaüstü Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36
Nadiren:
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Googlebot/2.1 (+http://www.google.com/bot.html)
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Googlebot
Örnek robots.txt grubu user-agent: Googlebot allow: /archive/1Q84 disallow: /archive
Etkilenen ürünler Googlebot
kullanıcı aracısına yönelik tarama tercihleri, Google Arama'nın (Keşfet ve tüm Google Arama özellikleri dahil) yanı sıra Google Görseller, Google Video, Google Haberler ve Keşfet gibi diğer ürünleri etkiler. Googlebot Görsel
-
HTTP isteklerinde kullanıcı aracısı Googlebot-Image/1.0
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Googlebot-Image
Googlebot
Örnek robots.txt grubu user-agent: Googlebot-Image allow: /archive/1Q84 disallow: /archive/moons.jpg
Etkilenen ürünler Googlebot-Image
kullanıcı aracısına yönelik tarama tercihleri; Google Görseller, Keşfet, Google Video ve Google Arama'da görsellerin, logoların ve site simgelerinin sunulduğu tüm özellikleri etkiler. Googlebot Video
-
HTTP isteklerinde kullanıcı aracısı Googlebot-Video/1.0
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Googlebot-Video
Googlebot
Örnek robots.txt grubu user-agent: Googlebot-Video allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler Googlebot-Video
kullanıcı aracısına yönelik tarama tercihleri, videoyla ilgili Google Arama özelliklerini ve videolara bağlı diğer ürünleri etkiler. Googlebot News
-
HTTP isteklerinde kullanıcı aracısı Googlebot-News'da ayrı bir HTTP isteği kullanıcı aracısı dizesi yoktur. Tarama, çeşitli Googlebot kullanıcı aracısı dizeleriyle yapılır. robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Googlebot-News
Googlebot
Örnek robots.txt grubu user-agent: Googlebot-News allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler Googlebot-News
kullanıcı aracısına yönelik tarama tercihleri; tüm Google Haberler yüzeylerini (örneğin, Google Arama'daki Haberler sekmesi ve Google Haberler uygulaması) etkiler. Google StoreBot
-
HTTP isteklerinde kullanıcı aracısı Masaüstü aracısı Mozilla/5.0 (X11; Linux x86_64; Storebot-Google/1.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Safari/537.36
Mobil aracısı Mozilla/5.0 (Linux; Android 8.0; Pixel 2 Build/OPD3.170816.012; Storebot-Google/1.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Storebot-Google
Örnek robots.txt grubu user-agent: Storebot-Google allow: /archive/1Q84 disallow: /archive/konbini
Etkilenen ürünler Storebot-Google
kullanıcı aracısına yönelik tarama tercihleri, tüm Google Alışveriş yüzeylerini (örneğin, Google Arama'daki Alışveriş sekmesi ve Google Alışveriş) etkiler. Google-InspectionTool
-
HTTP isteklerinde kullanıcı aracısı Masaüstü aracısı Mozilla/5.0 (compatible; Google-InspectionTool/1.0;)
Mobil aracısı Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; Google-InspectionTool/1.0;)
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Google-InspectionTool
Googlebot
Örnek robots.txt grubu user-agent: Google-InspectionTool allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler Google-InspectionTool
kullanıcı aracısına yönelik tarama tercihleri; Search Console'daki Zengin Sonuç Testi ve URL denetimi gibi Arama test araçlarını etkiler. Google Arama veya diğer ürünler üzerinde etkisi yoktur. GoogleOther
-
HTTP isteklerinde kullanıcı aracısı Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; GoogleOther)
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GoogleOther) Chrome/W.X.Y.Z Safari/537.36
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu GoogleOther
Örnek robots.txt grubu user-agent: GoogleOther allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler GoogleOther
kullanıcı aracısına yönelik tarama tercihleri, belirli bir ürünü etkilemez. GoogleOther, sitelerden herkese açık içerikleri getirmek için çeşitli ürün ekipleri tarafından kullanılabilecek genel tarayıcıdır. Örneğin, dahili araştırma ve geliştirme çalışmalarına yardımcı olması amacıyla tek seferlik taramalar için kullanılabilir. Google Arama veya diğer ürünler üzerinde etkisi yoktur. GoogleOther-Image
-
HTTP isteklerinde kullanıcı aracısı GoogleOther-Image/1.0
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu GoogleOther-Image
GoogleOther
Örnek robots.txt grubu user-agent: GoogleOther-Image allow: /archive/1Q84 disallow: /archive/moon.jpg
Etkilenen ürünler GoogleOther-Image
kullanıcı aracısına yönelik tarama tercihleri, GoogleOther'a benzer şekilde belirli bir ürünü etkilemez. GoogleOther-Image, GoogleOther'ın herkese açık resim URL'lerini getirmek için optimize edilmiş sürümüdür. GoogleOther-Video
-
HTTP isteklerinde kullanıcı aracısı GoogleOther-Video/1.0
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu GoogleOther-Video
GoogleOther
Örnek robots.txt grubu user-agent: GoogleOther-Video allow: /archive/1Q84 disallow: /archive
Etkilenen ürünler GoogleOther-Video
kullanıcı aracısına yönelik tarama tercihleri, GoogleOther'a benzer şekilde belirli bir ürünü etkilemez. GoogleOther-Video, GoogleOther'ın herkese açık video URL'lerini getirmek için optimize edilmiş sürümüdür. Google-CloudVertexBot
-
HTTP isteklerinde kullanıcı aracısı alt dizesi Google-CloudVertexBot
robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Google-CloudVertexBot
Googlebot
Örnek robots.txt grubu user-agent: Google-CloudVertexBot allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler Google-CloudVertexBot
kullanıcı aracısına yönelik tarama tercihleri, site sahiplerinin Vertex AI Agent oluştururken talep ettikleri taramaları etkiler. Google Arama veya diğer ürünler üzerinde etkisi yoktur. Google-Extended
-
HTTP isteklerinde kullanıcı aracısı Google-Extended'de ayrı bir HTTP isteği kullanıcı aracısı dizesi yoktur. Tarama, mevcut Google kullanıcı aracısı dizeleriyle yapılır. Robots.txt kullanıcı aracısı jetonu kontrol kapasitesiyle kullanılır. robots.txt Robots.txt dosyasındaki kullanıcı aracısı jetonu Google-Extended
Örnek robots.txt grubu user-agent: Google-Extended allow: /archive/1Q84 disallow: /archive/
Etkilenen ürünler Google-Extended
bağımsız bir ürün jetonudur. Web yayıncıları bu jetonu kullanarak sitelerinin Gemini Uygulamaları ve Vertex yapay zeka üretici API'lerini (bu ürünleri destekleyen gelecekteki modeller dahil) iyileştirmeye yardımcı olup olmayacağını belirleyebilirler. Vertex AI'da Google Arama ile temellendirme, temellendirme için Google-Extended'a izin verilmeyen web sayfalarını kullanmaz. Google-Extended, bir sitenin Google Arama'ya dahil edilmesini veya Google Arama'daki sıralamasını etkilemez.
Kullanıcı aracılarındaki Chrome/W.X.Y.Z ile ilgili bir not:
Listedeki kullanıcı aracısı dizelerinde yer alan Chrome/W.X.Y.Z dizesi, kullanıcı
aracısı tarafından kullanılan Chrome tarayıcının sürümünü temsil eden yer tutucudur:
Örneğin, 41.0.2272.96
. Googlebot tarafından kullanılan en son
Chromium sürümüyle eşleşmesi için bu sürüm numarası zaman içinde artar.
Bu sürüm numarası kalıbına sahip bir kullanıcı aracısı için günlüklerinizde arama yapıyor veya sunucunuzu filtreliyorsanız sürüm numarasını tam olarak belirtmek yerine joker karakterler kullanın.