Google 사용자 트리거 가져오기 도구 목록
사용자 트리거 가져오기 도구는 사용자가 Google 제품 내에서 가져오기 기능을 수행하기 위해 사용자에 의해 시작됩니다. 예를 들어 Google 사이트 인증 도구는 사용자의 요청에 따라 작동하거나 Google Cloud(GCP)에서 호스팅되는 사이트에는 사이트 사용자가 외부 RSS 피드를 가져오도록 허용하는 기능이 있습니다. 사용자가 가져오기를 요청했기 때문에 이러한 가져오기 도구에서는 보통 robots.txt 규칙을 무시합니다. Google 크롤러의 일반 기술 속성은 사용자 트리거 가져오기 도구에도 적용됩니다.
사용자 트리거 가져오기 도구가 사용하는 IP 범위는 user-triggered-fetchers.json 및 user-triggered-fetchers-google.json 객체에 게시됩니다. 사용자 트리거 가져오기 도구의 역방향 DNS 마스크는 가져오기 도구가 Google 소유인지 사용자 소유인지에 따라 각각 ***-***-***-***.gae.googleusercontent.com
또는 google-proxy-***-***-***-***.google.com
과 일치합니다.
다음 목록은 사용자 트리거 가져오기 도구, HTTP 요청에 표시되는 사용자 에이전트 문자열, 연결된 제품을 보여줍니다. 이 목록은 일부일 뿐 전부 포함하지는 않습니다. 로그 파일에 나타날 가능성이 더 높으며 Google에 관련 문의가 접수되는 요청자만 다룹니다.
Feedfetcher
-
HTTP 요청의 사용자 에이전트 FeedFetcher-Google; (+http://www.google.com/feedfetcher.html)
연결된 제품 Feedfetcher는 Google 뉴스, PubSubHubbub에 RSS 또는 Atom 피드를 크롤링하는 데 사용됩니다. Google 게시자 센터
-
HTTP 요청의 사용자 에이전트 GoogleProducer; (+https://developers.google.com/search/docs/crawling-indexing/google-producer)
연결된 제품 Google 게시자 센터에서는 Google 뉴스 방문 페이지에서 사용하기 위해 게시자가 명시적으로 제공한 피드를 가져와 처리합니다. Google Read Aloud
-
HTTP 요청의 사용자 에이전트 모바일 에이전트 Mozilla/5.0 (Linux; Android 7.0; SM-G930V Build/NRD90M) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.125 Mobile Safari/537.36 (compatible; Google-Read-Aloud; +https://support.google.com/webmasters/answer/1061943)
데스크톱 에이전트 Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.118 Safari/537.36 (compatible; Google-Read-Aloud; +https://support.google.com/webmasters/answer/1061943)
이전 에이전트(지원 중단됨) google-speakr
연결된 제품 사용자 요청에 따라 Google Read Aloud에서는 텍스트 음성 변환(TTS)을 통해 웹페이지를 가져와 읽습니다. Google 사이트 인증 도구
-
HTTP 요청의 사용자 에이전트 Mozilla/5.0 (compatible; Google-Site-Verification/1.0)
연결된 제품 Google 사이트 인증 도구는 Search Console 확인 토큰을 가져옵니다.