إجابات مستمدة من مستنداتك أنت
يصل التوليد المعزَّز بالاسترجاع، المعروف اختصاراً بـ RAG، نموذجاً لغوياً بمحتواك. يُطابَق السؤال مع أقرب المقاطع صلة به، فيكتب النموذج إجابة من تلك المقاطع مع روابط تعود إليها. ونبني طبقات جلب المحتوى والفهرسة والاسترجاع والإجابة، إضافة إلى التقييم الذي يبيّن هل يجد النظام المادة الصحيحة.
يناسب هذا المؤسسات التي تتوزع معرفتها بين مجلدات التخزين المشتركة وقواعد المعرفة الداخلية وتذاكر الدعم وملفات السياسات، ويضيّع فيها الموظفون أو العملاء وقتهم في البحث. وعلى الأساس نفسه يقوم البحث في معرفة المؤسسة ومساعدو الدعم وأدوات البحث والتحليل. لكنه لا يناسب الأسئلة التي تتطلب حساباً على سجلات منظمة، فمكانها استعلام في قاعدة البيانات، ونفصل بين الأمرين منذ البداية.
جلب المحتوى
تسحب الموصلات المستندات من مجلدات التخزين المشتركة وقواعد المعرفة وأنظمة الدعم وقواعد البيانات، وتستخرج النص من الملفات والمستندات الممسوحة ضوئياً، وتبقي الفهرس متوافقاً مع كل تغيير في المحتوى.
ضبط الاسترجاع
نجمع بين البحث بالكلمات المفتاحية والبحث الدلالي، ونعيد ترتيب النتائج، ونحدد حجم المقاطع بما يناسب المحتوى، ونقيس أثر كل تغيير على أسئلة حقيقية.
وراثة صلاحيات الوصول
يحمل الفهرس صلاحيات الأنظمة المصدر، فلا يتلقى الشخص إلا إجابات مستمدة من مستندات يحق له فتحها.
إجابات بمصادرها
ترتبط كل إجابة بالمقاطع التي استخدمتها، فيتحقق القارئ من أي معلومة بنقرة واحدة، وتستطيع أنت تتبع الإجابة الضعيفة حتى سببها.
سلوك الامتناع عن الإجابة
حين لا يجد الاسترجاع شيئاً موثوقاً، يقول النظام إنه لا يعرف ويقترح أين يبحث الشخص، بدل أن يصوغ تخميناً واثقاً.
التقييم وحداثة المحتوى
تقيس مجموعة أسئلة بإجابات معروفة جودة الاسترجاع والإجابة عند كل تغيير، وتنبّه المراقبة إلى المصادر التي تقادمت أو توقفت مزامنتها.
ما تتسلمه منا
- مصادر محتوى موصولة بالنظام
- فهرس بحث يحمل الصلاحيات
- مسار للاسترجاع وإعادة ترتيب النتائج
- واجهة إجابات مقرونة بمصادرها
- مجموعة تقييم ونتائجها
- مراقبة المزامنة وحداثة المحتوى
- أدوات للآراء والمراجعة
- التوثيق والشيفرة المصدرية
طريقة عملنا
- 01
رسم خريطة المعرفة
ندرج المصادر ومسؤوليها وصيغها وأحجامها وقواعد الوصول إليها، ونجمع أسئلة حقيقية ممن سيستخدمون النظام، ونتفق على شكل الإجابة الصحيحة.
- 02
الاسترجاع أولاً
نبني جلب المحتوى والبحث ونقيسهما قبل توليد أي إجابة، لأن معظم الإجابات الضعيفة مصدرها العثور على مقاطع خاطئة، لا النموذج.
- 03
إضافة الإجابات
نعطي النموذج المقاطع المسترجعة وتعليمات صارمة عن ذكر المصادر والامتناع والبقاء ضمن المصادر، ونبني الواجهة لتعرض الدليل بجانب كل إجابة.
- 04
التقييم والإطلاق
نقيّم النظام على مجموعة الأسئلة، وتختبره مجموعة تجريبية تُسجَّل آراؤها، ثم نضبطه حيث يقصّر ونفتحه لمزيد من المستخدمين والمراقبة تعمل.
التقنيات التي نستخدمها
| المجال | التقنيات |
|---|---|
| الاسترجاع | pgvector، Elasticsearch، OpenSearch، Pinecone، Qdrant |
| النماذج | OpenAI API، Anthropic API، Cohere Rerank، Amazon Bedrock |
| مسارات المعالجة | LlamaIndex، LangChain، Unstructured، Temporal |
| التقييم | Ragas، Langfuse، Promptfoo، OpenTelemetry |
الإجابة موجودة، لكن لا أحد يجدها
السياسات والإجراءات والعقود والإجابات السابقة موزعة على عدة أنظمة، فيسأل الناس زميلاً لأن البحث يستغرق وقتاً طويلاً. أما روبوت المحادثة العام فلا يرى مستنداتك، ولا ينبغي أن يراها كلها. وما تريده إجابات من محتواك أنت، تحترم المصادر والصلاحيات.
- البحث في معرفة المؤسسة
- مساعدون لإجابات الدعم
- الرجوع إلى السياسات والإجراءات
- البحث في العقود والمستندات
- البحث في الوثائق التقنية
- الإجابة عن أسئلة الموظفين الجدد
أسئلة شائعة
ما هو RAG، ومتى يكون النهج الصحيح؟
RAG اختصار لعبارة التوليد المعزَّز بالاسترجاع. يبحث النظام في محتواك عن المقاطع المتصلة بالسؤال، ثم يكتب نموذج لغوي الإجابة منها. وهو النهج الصحيح حين تكون الإجابات في مستندات تتغير، وحين يجب عرض المصادر، وحين يختلف حق الوصول من شخص إلى آخر. وهو أقل ملاءمة للحسابات على السجلات، أو للمهام التي لا تحتاج إلى معرفة الشركة.
كيف تمنعون الناس من رؤية مستندات لا يحق لهم رؤيتها؟
تُطبَّق الصلاحيات عند الاسترجاع، قبل أن يرى النموذج أي شيء. يحفظ الفهرس من يحق له فتح كل مستند، كما هو في النظام المصدر، وتُصفّى كل عملية بحث بحسب هوية السائل. فالمقطع الذي لا يستطيع المستخدم فتحه لا يُسترجع أصلاً، ولا يمكن أن يظهر في إجابة. ونختبر ذلك بحسابات تحمل صلاحيات مختلفة.
كيف تقيسون جودة الإجابات؟
بمجموعة من الأسئلة الحقيقية لها إجابات صحيحة متفق عليها ومستندات مصدر معروفة. ونقيّم كل تغيير على ثلاثة أمور: هل استُرجعت المقاطع الصحيحة، وهل تدعم هذه المقاطع الإجابة، وهل تعالج الإجابة السؤال. ويقيّم الناس الإجابات أيضاً أثناء الاستخدام، وتعود التقييمات المنخفضة إلى المجموعة. وتُعرض الجودة في صورة أرقام عبر الزمن.
ماذا يحدث حين لا تحتوي المستندات على إجابة؟
ينبغي أن يقول النظام ذلك. نوجّهه ونختبره ليمتنع حين لا يعيد الاسترجاع شيئاً ذا صلة أو حين تتعارض المقاطع، وليوجّه الشخص إلى المسؤول عن المحتوى أو إلى البحث. ونسجّل حالات الامتناع، لأن تكرار أسئلة بلا إجابة يكشف بالضبط المحتوى الناقص. فالمساعد الذي يجيب دائماً هو مساعد يختلق أحياناً.
ما الفرق بين هذا والبحث في معرفة المؤسسة؟
هو الأساس نفسه مستخدماً بطريقتين. يعيد البحث في المعرفة مستندات ومقاطع مرتبة ليقرأها الناس، بينما يتقدم مساعد RAG خطوة ويكتب منها إجابة. ويعتمد الاثنان على جودة جلب المحتوى ودقة النتائج والصلاحيات وحداثة المحتوى. وتبدأ مؤسسات كثيرة بالبحث، فتثبت أن الاسترجاع يعمل، ثم تضيف فوقه الإجابات المولَّدة.