RAG डॉक्यूमेंट चंकर

एक क्लाइंट-साइड RAG डॉक्यूमेंट चंकर लंबे टेक्स्ट को सीधे आपके ब्राउज़र में छोटे इकाइयों में विभाजित करता है ताकि सामग्री को सर्वर पर अपलोड किए बिना पुनर्प्राप्ति वर्कफ़्लो में उपयोग किया जा सके।

हाँ। लक्ष्य एक ब्राउज़र-आधारित टूल प्रदान करना है जो खाता निर्माण या बैकएंड प्रसंस्करण की आवश्यकता के बिना LangChain-शैली चंकिंग व्यवहार का पालन करता है।

अपनी सामग्री पेस्ट करें, चंक आकार और ओवरलैप सेट करें, परिणाम उत्पन्न करें, और JSON निर्यात करें। आउटपुट Pinecone, Milvus, Weaviate, Chroma, या Supabase Vector के लिए एम्बेडिंग में बदलने में आसान है।

हाँ। यदि आप Markdown पेस्ट करते हैं, तो टूल टेक्स्ट को चंक करता है और संरचित JSON निर्यात करता है जिसे डाउनस्ट्रीम प्रीप्रोसेसिंग स्क्रिप्ट या अंतर्ग्रहण नौकरियों में फीड किया जा सकता है।

बड़े कॉन्टेक्स्ट विंडो अभी भी महंगे हैं और पुनर्प्राप्ति गुणवत्ता को खराब कर सकते हैं। चंकिंग कॉन्टेक्स्ट को केंद्रित रखती है, लागत कम करती है, और खो-गए-बीच की समस्याओं को कम करती है।

हाँ। यह एम्बेडिंग और भंडारण चरण से पहले टेक्स्ट को स्थिर चंक में तैयार करके Pinecone के लिए टेक्स्ट विभाजित करने और Milvus के लिए टेक्स्ट विभाजित करने में मदद करता है।

कोई सार्वभौमिक संख्या नहीं है, लेकिन 800 से 1200 वर्ण 100 से 200 ओवरलैप के साथ सामान्य दस्तावेज़ीकरण और समर्थन सामग्री के लिए एक व्यावहारिक प्रारंभिक बिंदु है।

एक बेसिक स्प्लिटर निश्चित लंबाई से काटता है। एक स्मार्ट चंकर पैराग्राफ, लाइन ब्रेक और प्राकृतिक सीमाओं का सम्मान करता है ताकि विचारों के टूटने की संभावना कम हो।

नहीं। इच्छित अनुभव घर्षण रहित और गोपनीयता-अनुकूल है: पृष्ठ खोलें, टेक्स्ट पेस्ट करें, चंक सेटिंग्स कॉन्फ़िगर करें, और निर्यात करें।

नहीं। इच्छित कार्यान्वयन पूरी तरह से स्थानीय ब्राउज़र निष्पादन है, जो डेवलपर टूल के लिए Gadegetkit के गोपनीयता-प्रथम दृष्टिकोण के अनुरूप है।