أداة تقسيم مستندات RAG

تقوم أداة تقسيم مستندات RAG من جانب العميل بتقسيم النص الطويل إلى وحدات أصغر مباشرة في متصفحك حتى يمكن استخدام المحتوى في سير عمل الاسترجاع دون تحميله إلى خادم.

نعم. الهدف هو توفير أداة قائمة على المتصفح تتبع سلوك تقسيم LangChain دون الحاجة إلى إنشاء حساب أو معالجة من جانب الخادم.

الصق المحتوى الخاص بك، واضبط حجم الجزء والتداخل، وقم بإنشاء النتائج، وقم بتصدير JSON. من السهل تحويل المخرجات إلى تضمينات لـ Pinecone أو Milvus أو Weaviate أو Chroma أو Supabase Vector.

نعم. إذا قمت بلصق Markdown، فإن الأداة تقسم النص وتصدر JSON منظمًا يمكن تغذيته في نصوص المعالجة المسبقة اللاحقة أو وظائف الاستيعاب.

لا تزال نوافذ السياق الكبيرة مكلفة ويمكن أن تقلل من جودة الاسترجاع. التقسيم يحافظ على تركيز السياق، ويقلل التكلفة، ويقلل من مشاكل الضياع في المنتصف.

نعم. إنها تساعدك في تقسيم النص لـ Pinecone وتقسيم النص لـ Milvus عن طريق إعداد النص إلى أجزاء ثابتة قبل خطوة التضمين والتخزين.

لا يوجد رقم عالمي، ولكن 800 إلى 1200 حرف مع تداخل 100 إلى 200 هو نقطة انطلاق عملية للمستندات العامة ومحتوى الدعم.

تقوم أداة التقسيم الأساسية بالقطع حسب طول ثابت. تقوم أداة التقسيم الأكثر ذكاءً باحترام الفقرات وفواصل الأسطر والحدود الطبيعية حتى لا تتفكك الأفكار بسهولة.

لا. التجربة المقصودة خالية من الاحتكاك وصديقة للخصوصية: افتح الصفحة، الصق النص، قم بتكوين إعدادات التقسيم، وقم بالتصدير.

لا. التنفيذ المقصود هو تنفيذ كامل في المتصفح المحلي، بما يتماشى مع نهج Gadegetkit الذي يركز على الخصوصية لأدوات المطورين.