क्रॉल और इंंडेक्स करने से जुड़े विषयों की खास जानकारी

इस सेक्शन में बताया गया है कि आपके कॉन्टेंट को ढूंढने और पार्स करने के लिए Google जो प्रोसेस इस्तेमाल करता है, उसे कैसे कंट्रोल किया जा सकता है. इससे आपके कॉन्टेंट को Search और दूसरी Google प्रॉपर्टीज़ में दिखाने में मदद मिलती है. इस सेक्शन में यह भी बताया गया है कि Google को अपनी साइट के किसी खास कॉन्टेंट को क्रॉल करने से कैसे रोका जा सकता है.

यहां हर पेज के बारे में कम शब्दों में जानकारी दी गई है. क्रॉल और इंडेक्स होने से जुड़ी खास जानकारी पाने के लिए, Search के काम करने के तरीके के बारे में बताने वाली गाइड पढ़ें.

विषय
ऐसे फ़ाइल टाइप जिन्हें Google इंडेक्स कर सकता है	Google, ज़्यादातर टाइप के पेजों और फ़ाइलों के कॉन्टेंट को इंडेक्स कर सकता है. जिन फ़ाइल टाइप को Google Search सबसे ज़्यादा इंडेक्स करता है उनकी सूची देखें.
यूआरएल की बनावट	अपने कॉन्टेंट को व्यवस्थित करें, ताकि यूआरएल सही तरीके से बनाए जा सकें और लोग इन्हें आसानी से समझ सकें.
साइटमैप	Google को आपकी साइट के उन पेजों के बारे में बताते हैं जो नए हैं या अपडेट किए गए हैं.
क्रॉलर मैनेजमेंट	अपने यूआरएल फिर से क्रॉल कराने के लिए, Google से अनुरोध करना Googlebot की क्रॉल दर को कम करना Googlebot और दूसरे क्रॉलर की पुष्टि करना किसी बड़ी साइट के मालिक के लिए, वेबसाइट का क्रॉल बजट मैनेज करने से जुड़ी गाइड Google Search पर एचटीटीपी स्टेटस कोड, नेटवर्क की गड़बड़ियों, और डीएनएस की गड़बड़ियों का क्या असर पड़ता है Google के क्रॉलर
robots.txt	robots.txt फ़ाइल की मदद से, सर्च इंजन के क्रॉलर को यह जानकारी मिलती है कि वे आपकी साइट के किन पेजों या फ़ाइलों को क्रॉल करने का अनुरोध कर सकते हैं और किन पेजों को क्रॉल करने का अनुरोध नहीं कर सकते.
यूआरएल के कैननिकल होने की जांच करना	यूआरएल के कैननिकल होने की जांच करने का तरीका जानें. साथ ही, अपनी साइट के किसी भी डुप्लीकेट पेज के बारे में Google को बताने का तरीका जानें, ताकि Google उस पेज को बार-बार क्रॉल करने से बच सके. जानें कि Google, डुप्लीकेट कॉन्टेंट का अपने-आप कैसे पता लगाता है, डुप्लीकेट कॉन्टेंट को कैसे इस्तेमाल करता है, और कैसे किसी डुप्लीकेट पेज के ग्रुप के लिए एक कैननिकल यूआरएल तय करता है.
मोबाइल साइटें	मोबाइल डिवाइसों के लिए अपनी साइट को ऑप्टिमाइज़ करने का तरीका जानें. साथ ही, यह पक्का करें कि आपकी साइट सही तरीके से क्रॉल और इंडेक्स की गई है.
एएमपी	अगर आपके पास एएमपी पेज हैं, तो Google Search में एएमपी के काम करने का तरीका जानें.
JavaScript	अपने पेज और ऐप्लिकेशन डिज़ाइन करते समय, आपको अलग-अलग तरह के क्रॉलर के बीच के अंतर और उनकी सीमाओं का ध्यान रखना होगा. ऐसा इसलिए, ताकि आप कॉन्टेंट को ऐक्सेस और रेंडर करने के उनके तरीके के हिसाब से अपने पेज या ऐप्लिकेशन तैयार कर सकें.
पेज और कॉन्टेंट से जुड़ा मेटाडेटा	पेज के मेटाडेटा के बारे में बताने के लिए, सही एचटीएमएल का इस्तेमाल करना सभी meta टैग जिन्हें Google पहचानता है Robots meta टैग, data-nosnippet, और X-Robots-Tag की विशेषताएं noindex meta टैग से इंडेक्स करने पर रोक लगाना सेफ़ सर्च और आपकी वेबसाइट अपनी साइट के लिंक को क्रॉल करने लायक बनाना rel एट्रिब्यूट के साथ, अपने आउटबाउंड लिंक को Google पर खुलने लायक बनाना
हटाने की प्रोसेस	यह कंट्रोल करना कि आप Google के साथ कौनसी जानकारी शेयर करेंगे अपनी साइट पर मौजूद किसी पेज को Google के खोज नतीजों से हटाना पेज पर होस्ट की गई इमेज को खोज के नतीजों से हटाना छिपाने के लिए बदली गई जानकारी को Google Search के नतीजों में दिखने से रोकना
साइट को नए प्लैटफ़ॉर्म या यूआरएल पर ले जाना और उसमें बदलाव करना	रीडायरेक्ट और Google Search साइट को नई जगह पर ले जाना Google Search में A/B टेस्टिंग के असर को कम करना वेबसाइट को कुछ समय के लिए रोकना या बंद करना