मुफ़्त · साइन-अप की ज़रूरत नहीं

AI बॉट एक्सेस जाँच

AI असिस्टेंट आपकी साइट पढ़कर जवाबों में आपको सुझा सकें, इसके लिए आपको उनके क्रॉलर को अनुमति देनी होगी। 14 AI क्रॉलर की अनुमति एक क्लिक में देखें।

robots.txt, llms.txt और आपके होमपेज के robots टैग पढ़े जाते हैं।

क्यों ज़रूरी है?

ChatGPT, Claude और Perplexity जैसे असिस्टेंट जवाब देते समय अपने क्रॉलर से वेब पढ़ते हैं। अगर आपकी robots.txt फ़ाइल इन क्रॉलर को ब्लॉक करती है, तो आपकी साइट जवाबों में स्रोत के रूप में नहीं दिख सकती।

कुछ क्रॉलर सिर्फ़ मॉडल ट्रेनिंग के लिए होते हैं (उदा. GPTBot, Google-Extended); कुछ लाइव सर्च और यूज़र अनुरोधों के लिए होते हैं (OAI-SearchBot, ChatGPT-User, PerplexityBot)। ट्रेनिंग बॉट्स को ब्लॉक करना और सर्च बॉट्स को अनुमति देना एक आम और संतुलित विकल्प है।

  • robots.txt फ़ाइल में हर AI क्रॉलर की अनुमति की स्थिति
  • सर्च, यूज़र अनुरोध और ट्रेनिंग वाले बॉट्स में अंतर
  • llms.txt फ़ाइल मौजूद है या नहीं और उसका साइज़
  • पेज पर noai / noimageai और X-Robots-Tag टैग

अक्सर पूछे जाने वाले सवाल

llms.txt क्या है?
llms.txt एक प्रस्तावित फ़ाइल फ़ॉर्मैट है जो आपकी साइट के सबसे ज़रूरी पेज और एक छोटा सारांश सरल रूप में सूचीबद्ध करता है, जिसे AI मॉडल पढ़ सकें। हमारे मुफ़्त llms.txt जनरेटर से आप इसे कुछ सेकंड में बना सकते हैं।
क्या AI बॉट्स को ब्लॉक करने से SEO पर असर पड़ता है?
जब तक आप Googlebot को ब्लॉक नहीं करते, आपकी Google रैंकिंग पर असर नहीं पड़ता। लेकिन सर्च वाले AI बॉट्स को ब्लॉक करने से ChatGPT या Perplexity के जवाबों में आपकी साइट के स्रोत के रूप में दिखने की संभावना घटती है।
Google-Extended विज़िटर के रूप में क्यों नहीं दिखता?
Google-Extended और Applebot-Extended robots.txt टोकन हैं; साइट को सामान्य Googlebot और Applebot ही क्रॉल करते हैं। ये टोकन सिर्फ़ यह तय करते हैं कि कंटेंट AI मॉडल में इस्तेमाल हो सकता है या नहीं।

दूसरे मुफ़्त टूल

AI विज़िबिलिटी जाँचक्या ChatGPT और Perplexity आपको सुझाते हैं?लोकप्रिय AI तैयारी टेस्ट10 सवालों में आपकी साइट की AI तैयारी llms.txt जनरेटरAI असिस्टेंट के लिए अपनी साइट का सार दें AI आपके पेज को कैसे देखता है?JavaScript के बिना टेक्स्ट व्यू और AI एक्सेस SEO विश्लेषण80 से ज़्यादा जाँचें, श्रेणी स्कोर और प्राथमिकता वाले सुझावलोकप्रिय SEO साइट ऑडिट15 पेज तक की तकनीकी और ऑन-पेज जाँचलोकप्रिय

सभी मुफ़्त टूल

20 सेकंड में देखें कि आपकी साइट किस हाल में है।

मुफ़्त विश्लेषण से अपनी तकनीकी समस्याएँ और AI विज़िबिलिटी की कमियाँ जानें; फिर सुधार का काम AutoAiSeo पर छोड़ दें।

  • कार्ड की ज़रूरत नहीं
  • सेटअप 5 मिनट में
  • जब चाहें रद्द करें
मुफ़्त में विश्लेषण करें