تقنيات
تقطيع المستندات
Chunking
تقسيم المستندات الطويلة إلى قطع صغيرة قبل تخزينها كـ Embeddings.
الشرح التفصيلي
Chunking خطوة حرجة في RAG: قطع كبيرة جداً تجعل الاسترجاع غير دقيق، وقطع صغيرة جداً تفقد السياق. الحجم النموذجي 200-1000 توكن مع تداخل بسيط بين القطع.
مصطلحات ذات صلة
الدورة المرتبطة بهذا المحتوى
بناء قواعد المعرفة وRAG بالذكاء الاصطناعي
اجعل النموذج يجيب من مستنداتك أنت: تقطيع، تضمين، استرجاع، وتحقق.