llms.txt को सही तरीके से लागू कैसे करें
व्यावहारिक टेम्पलेट, CMS वर्कफ़्लो, गुणवत्ता जाँच और आम समस्याओं के समाधानों के साथ llms.txt फ़ाइल की योजना बनाएँ, लिखें, प्रकाशित करें, जाँचें और अपडेट रखें।
त्वरित जवाब
llms.txt लागू करने के लिए /llms.txt पर एक संक्षिप्त Markdown फ़ाइल प्रकाशित करें। इसमें साइट का नाम, उसका उद्देश्य और चुनिंदा उपयोगी कैनॉनिकल पेजों के लिंक दें। robots.txt और sitemap.xml को अलग रखें, पूरे पेजों की सामग्री फ़ाइल में कॉपी न करें, हर URL की जाँच करें और महत्वपूर्ण सामग्री का स्थान बदलने पर सूची अपडेट करें।
मुख्य बातें
- llms.txt चुनिंदा सामग्री खोजने में मदद करने वाला दस्तावेज़ है, न कि एक्सेस नियंत्रित करने वाली फ़ाइल या sitemap.xml का विकल्प।
- हर पेज की सूची बनाने के बजाय प्रासंगिक और ठोस जानकारी देने वाले कैनॉनिकल URL की छोटी सूची अधिक उपयोगी होती है।
- लिंक किए गए हर पेज पर क्रॉल करने की अनुमति, स्थिर HTML, कैनॉनिकल URL और सीधा उत्तर होना फिर भी ज़रूरी है।
- प्रकाशित करने से पहले स्टेटस कोड, रीडायरेक्ट, डुप्लिकेट और कॉन्टेंट टाइप की जाँच करें।
- llms.txt को नियमित रूप से अपडेट किए जाने वाले दस्तावेज़ की तरह रखें और साइट की संरचना बदलने पर उसकी समीक्षा करें।
llms.txt में क्या शामिल होना चाहिए?
इस फ़ाइल से AI सिस्टम को तुरंत समझ आना चाहिए कि साइट किस बारे में है, कौन-से पेज प्रामाणिक हैं और मुख्य दस्तावेज़ या नीतियाँ कहाँ मिलेंगी। ऐसे पेज शामिल करें जो लंबे समय तक उपयोगी रहें और संगठन, उत्पाद, दस्तावेज़, कीमतों, महत्वपूर्ण अवधारणाओं और बदलावों के रिकॉर्ड की जानकारी दें। कम उपयोगी सामग्री वाले आर्काइव, ट्रैकिंग URL, डुप्लिकेट, फ़िल्टर और ऐसे पेज छोड़ दें जिनका सारांश आप नहीं चाहते।
| शामिल करें | आम तौर पर छोड़ दें | कारण |
|---|---|---|
| उत्पाद और दस्तावेज़ों के कैनॉनिकल पेज | खोज और फ़िल्टर के नतीजे | स्थिर पेज ऐसा संदर्भ देते हैं जिसका बार-बार उपयोग किया जा सके |
| शब्दावली और अच्छी गुणवत्ता वाली गाइड | टैग आर्काइव और पेजिनेशन | परिभाषाएँ और प्रक्रियाएँ आसानी से निकाली जा सकती हैं |
| मौजूदा कीमतें, नीतियाँ और बदलावों का रिकॉर्ड | समाप्त हो चुके अभियान | समय के साथ बदलने वाले तथ्यों के लिए प्रामाणिक URL ज़रूरी है |
| कुछ चुनिंदा प्रतिनिधि उदाहरण | लगभग एक जैसी सामग्री वाला हर स्थान-विशिष्ट पेज | सोच-समझकर किए गए चयन से अस्पष्टता कम होती है |
llms.txt का व्यावहारिक फ़ॉर्मैट कैसा होना चाहिए?
सामान्य Markdown इस्तेमाल करें: एक H1, छोटा सारांश, ज़रूरत हो तो कुछ नोट्स और फिर उद्देश्य के अनुसार समूहों में विवरण सहित लिंक। लिंक के लेबल ऐसे रखें कि आसपास के पेज का संदर्भ न होने पर भी उनका अर्थ स्पष्ट रहे। यह प्रस्तावित तरीका जानबूझकर ऐसा रखा गया है कि इंसान और मशीन, दोनों इसे पढ़ सकें। इसलिए स्क्रिप्ट, छिपे हुए निर्देश या मनगढ़ंत रैंकिंग कमांड न जोड़ें।
# Example Company
> Official documentation and product information for Example Company.
## Core
- [Product overview](https://example.com/product): Capabilities and supported use cases.
- [Documentation](https://example.com/docs): Setup and API reference.
- [Pricing](https://example.com/pricing): Current plans and limits.
## Learn
- [Glossary](https://example.com/glossary): Definitions of domain terms.फ़ाइल को प्रकाशित करके उसकी जाँच कैसे करें?
- उन पेजों की सूची बनाएँ जिनमें आपके सबसे प्रामाणिक उत्तर मौजूद हैं।
- रीडायरेक्ट होने वाले, डुप्लिकेट, निजी, पुराने और कम उपयोगी URL हटा दें।
- बचे हुए लिंक को विज़िटर के उद्देश्य के अनुसार समूहों में बाँटें और हर लिंक का स्पष्ट विवरण लिखें।
- ठीक /llms.txt रूट पाथ पर प्लेन-टेक्स्ट Markdown रिस्पॉन्स प्रकाशित करें।
- सार्वजनिक URL फ़ेच करें, हर लिंक खोलें और पुष्टि करें कि हर गंतव्य पेज कैनॉनिकल है और इंडेक्स किया जा सकता है।
- नेविगेशन और साइटमैप अपडेट करने वाले वर्कफ़्लो में ही इसकी ज़िम्मेदारी और समीक्षा की समय-सारणी भी तय करें।
अलग-अलग टेक स्टैक पर llms.txt कैसे डिप्लॉय करें?
| टेक स्टैक | सुझाया गया तरीका | जाँच |
|---|---|---|
| स्टैटिक साइट | public/llms.txt फ़ाइल कमिट करें | डिप्लॉय करने के बाद रूट URL खोलें |
| CMS | रूट-स्तर का रूट, प्लगइन या एज नियम इस्तेमाल करें | पुष्टि करें कि रिस्पॉन्स के चारों ओर थीम का HTML नहीं जुड़ा है |
| हेडलेस ऐप | सार्वजनिक ओरिजिन से प्लेन-टेक्स्ट रूट सर्व करें | केवल प्रीव्यू नहीं, प्रोडक्शन पर भी जाँच करें |
| दस्तावेज़ों की बड़ी साइट | स्वीकृत कैनॉनिकल URL रजिस्ट्री से फ़ाइल जनरेट करें | बदलावों का डिफ़ देखें और CI में टूटे लिंक अस्वीकार करें |
llms.txt की कौन-सी गलतियाँ इसकी उपयोगिता घटाती हैं?
- बिना विवरण या क्रमबद्ध संरचना के सैकड़ों URL की सूची देना।
- रीडायरेक्ट, स्टेजिंग होस्ट, ट्रैकिंग पैरामीटर वाले URL या गैर-कैनॉनिकल डुप्लिकेट के लिंक देना।
- robots के निर्देश llms.txt में कॉपी करके यह मान लेना कि वे एक्सेस नियंत्रित करेंगे।
- हर पेज की सामग्री का निष्पक्ष विवरण देने के बजाय मार्केटिंग दावे प्रकाशित करना।
- फ़ाइल एक बार बनाकर छोड़ देना और उसमें हटाए जा चुके या पुराने पेजों के लिंक बने रहने देना।
- उस पाथ पर HTML एरर पेज, लॉगिन स्क्रीन या गलत कॉन्टेंट टाइप सर्व करना।
कैसे मापें कि llms.txt मदद कर रहा है या नहीं?
रैंकिंग बढ़ने के वादे के बजाय पूरी प्रक्रिया को मापें। पहले पुष्टि करें कि फ़ाइल फ़ेच हो रही है। फिर देखें कि लिंक किए गए पेजों पर क्रॉलर आ रहे हैं या नहीं, जानकारी खोजकर तैयार किए गए उत्तरों में वे स्रोत के रूप में दिख रहे हैं या नहीं और उनका सारांश सही बन रहा है या नहीं। प्रकाशन से पहले और बाद में प्रॉम्प्ट के एक तय समूह पर मिले नतीजों की तुलना करें। साथ ही अन्य बदलाव भी दर्ज करें, ताकि सामग्री या स्कीमा में सुधार से मिले लाभ का श्रेय llms.txt को न दिया जाए।
स्टेप बाय स्टेप
- 1कैनॉनिकल पेज चुनें
लंबे समय तक उपयोगी रहने वाले कुछ चुनिंदा पेज लें, जिनमें वे तथ्य और प्रक्रियाएँ हों जिनका सहायक को इस्तेमाल करना चाहिए।
- 2विवरण सहित Markdown लिंक लिखें
लिंक को उद्देश्य के अनुसार समूहों में बाँटें और एक वाक्य में बताएँ कि हर गंतव्य पेज क्या विशिष्ट उपयोगिता देता है।
- 3रूट पर प्रकाशित करें
फ़ाइल को /llms.txt पर प्लेन टेक्स्ट या Markdown के रूप में सार्वजनिक रूप से उपलब्ध कराएँ, ताकि उसे खोलने के लिए प्रमाणीकरण की ज़रूरत न हो।
- 4हर गंतव्य की जाँच करें
हर URL का स्टेटस, रीडायरेक्ट गंतव्य, कैनॉनिकल, भाषा और पेज पर दिखाई देने वाला उत्तर जाँचें।
- 5समीक्षा की समय-सारणी तय करें
प्रमुख पेजों, उत्पादों, कीमतों, नीतियों या दस्तावेज़ों में बदलाव होने पर फ़ाइल अपडेट करें।
अक्सर पूछे जाने वाले प्रश्न
- क्या llms.txt आधिकारिक वेब मानक है?
- llms.txt समुदाय का एक प्रस्ताव है, न कि हर जगह लागू होने वाला वेब मानक। इसे सामग्री खोजने में मदद करने वाले कम जोखिम के उपाय के रूप में प्रकाशित करें, लेकिन robots.txt, साइटमैप, कैनॉनिकल और सुलभ HTML जैसी स्थापित व्यवस्थाएँ सही रखें।
- क्या llms.txt, robots.txt की जगह लेता है?
- नहीं। robots.txt क्रॉल की अनुमतियाँ बताता है, जबकि llms.txt उपयोगी पेजों और संदर्भ का चुनिंदा संग्रह देता है। llms.txt में दिया गया लिंक robots के किसी नियम, फ़ायरवॉल ब्लॉक, लॉगिन की आवश्यकता या पेज तक पहुँच न होने की बाधा को दरकिनार नहीं कर सकता।
- llms.txt में कितने URL होने चाहिए?
- सभी साइटों के लिए कोई एक संख्या तय नहीं है। उतने ही URL शामिल करें जितने साइट को सही ढंग से समझाने के लिए ज़रूरी हों। सभी URL भर देने के बजाय विवरण सहित कैनॉनिकल लिंक वाली केंद्रित फ़ाइल को अपडेट रखना और समझना आसान होता है।
- क्या llms.txt में हर ब्लॉग पोस्ट शामिल करनी चाहिए?
- आम तौर पर नहीं। आधारभूत लेख, लंबे समय तक उपयोगी शोध और प्रमुख गाइड शामिल करें। व्यापक स्तर पर सामग्री खोजने का काम sitemap.xml पर छोड़ें और llms.txt से उन पेजों की ओर मार्गदर्शन करें जो साइट को सबसे अच्छी तरह समझाते हैं।
- llms.txt की जाँच कैसे करें?
- प्रोडक्शन से /llms.txt फ़ेच करें और पुष्टि करें कि सफल प्लेन-टेक्स्ट रिस्पॉन्स मिल रहा है। फिर हर लिंक किए गए URL का स्टेटस, अंतिम गंतव्य, कैनॉनिकल, भाषा और सर्वर पर रेंडर की गई उपयोगी सामग्री जाँचें।
Sources
अपनी साइट की AI विज़िबिलिटी स्कैन करें
एक मुफ्त GEO और AEO स्कैन चलाएं और अपने डोमेन के लिए llms.txt, robots.txt, स्कीमा और कंटेंट फिक्स प्राप्त करें।
मुफ्त स्कैन चलाएं