ميموري بريدج تحقق 95٪ في اختبار LongMemEval لذاكرة الذكاء الاصطناعي

وبهذه النتيجة نكون ضمن أعلى النتائج المعلنة فيه. ولم يكن الاختبار عندنا مجرد شهادة نعلّقها، بل أداة طوّرنا بها الخدمة: ففي كل مرة نقيس فيها النتائج، نرى موضعًا فاتت فيه المساعدَ معلومةٌ كان ينبغي أن يجدها، فنعالجه ثم نعيد القياس. وكل تحسين من هذه التحسينات وصل إلى المشتركين في الخدمة التي يستخدمونها كل يوم.

ما هو هذا الاختبار؟

يقيس الاختبار شيئًا واحدًا: هل يتذكر المساعد الذكي ما قيل له في محادثات طويلة متباعدة في الزمن. فهو يعرض على المساعد عشرات المحادثات السابقة، ثم يسأله عن تفاصيل متفرقة فيها: معلومة ذكرها المستخدم مرة واحدة، أو أمر تغيّر بعد أسابيع، أو حدث لا تصح الإجابة عنه إلا بمعرفة وقت وقوعه.

وهذا بالضبط ما يحتاجه من يعمل مع كلود أو شات جي بي تي كل يوم: ما تشرحه لمساعدك اليوم ينبغي أن يجده حين تسأله عنه بعد شهر. والاختبار لا ينظر إلى سرعة المساعد ولا إلى جمال أسلوبه، بل إلى أمر واحد: هل وجد المعلومة الصحيحة وأجاب بها؟

كيف طوّرنا الخدمة بالاختبار

في أول قياس، كان البحث يصل إلى كل ما تحتاجه الإجابة في 84.5٪ من الأسئلة. وكشف لنا القياس خللًا لم نكن نراه: الملاحظة التي تتكرر فيها كلمات السؤال بنصّها كانت تتقدم على ملاحظات أقرب منها إلى المعنى المطلوب. فأعدنا بناء طريقة الجمع بين البحث باللفظ والبحث بالمعنى، حتى يأخذ كل منهما حقه، فصار المساعد يجيب إجابة صحيحة عن 89.8٪ من الأسئلة.

ثم حسّنا البحث باللفظ نفسه، فصار يزن كل كلمة في السؤال بقدر أهميتها، بدل أن يبحث عن الجملة كما كُتبت، فبلغنا 92٪. وفي المرحلة الثالثة وسّعنا نظر المساعد حين يبحث في ذاكرتك، فلم تعد تفوته معلومة لمجرد أنها كُتبت بألفاظ غير ألفاظ سؤالك. وعندها صار المساعد يجيب إجابة صحيحة عن 95٪ من الأسئلة.

عن ميموري بريدج

ميموري بريدج خدمة ذاكرة عربية للمساعدات الذكية، تعمل بأي لغة يكتب بها المستخدم. بياناتك محفوظة داخل المملكة العربية السعودية، وتصل إليها من كلود وشات جي بي تي معًا. ويجد المساعد عندك صورتك كاملة: من أنت، وما مشاريعك، وكيف تحب أن تعمل، إلى جانب مكتبة مهارات تعلّمه طريقتك في مهامك المتكررة.

تابعنا على لينكدإن ويوتيوب وتيك توك.