Anthropic توضح ذاكرة وكلاء Claude والأهمية وdreaming

نشرت Anthropic أفكارها حول ذاكرة الوكلاء لـ Claude، وصفت كيف تعمل ملاحظات الذاكرة، وتقدير الأهمية، وdreaming معاً بين الجلسات. كما تغطي تقييمات على مهام قواعد البيانات، وPokémon Red، وويكيات المستندات.

الذاكرة وdreaming

تعرّف Anthropic ذاكرة الوكلاء بأنها المعرفة التي يكتسبها Claude من التجربة، بما في ذلك التفاعلات مع المستخدمين والمهام الموكولة إليه، وتستمر بين الجلسات كسياق يمكنه قراءته لاحقاً. وهي تستبعد التغييرات في أوزان النموذج، والتعلم داخل السياق ضمن محادثة واحدة، والضغط. وتقارن الشركة هذا بذاكرة الإنسان: يلتقط الحصين التجارب بسرعة، بينما يحدث الكثير من التوحيد في المعرفة طويلة المدى أثناء النوم والراحة الهادئة من خلال الإعادة. بالنسبة للوكلاء، تسجل السجلات والنصوص العمل، واقترح باحثون في Letta وUC Berkeley مفهوم sleep-time compute، باستخدام الوقت الخامل بين التفاعلات لإعادة تنظيم السياق. وتقول Anthropic إن الفكرة نفسها يمكن أن تساعد الوكلاء على تنظيم الذاكرة من خلال التأمل في السجلات، ويُطلق على ذلك غالباً dreaming.

الأهمية وحلقات التعلم

يمكن لـ Claude أن يوسّم الأحداث البارزة في سجل جلسة أثناء حدوثها أو كتابتها إلى مخزن ذاكرة مثل مجلد من ملاحظات الذاكرة. يمكن للذاكرة أيضاً أن تتنبأ بالاحتياجات المستقبلية، مثل حقيقة مُتحقَّق منها أو قاعدة. في مهمة قاعدة بيانات Continual Learning Bench 1.0، اختلفت النماذج: أنتج Sonnet 4.6 نظريات غير مختبرة، ووحّد Opus 4.7 الملاحظات ووسّم الحقائق المُتحقَّق منها، ووسّم Sonnet 5 الإجابات المؤكدة والتصحيحات، وأغلق Opus 5 حلقة التعلم بقواعد وإجابات سابقة وتحذيرات من الفخاخ. كما أغلق Opus 5.5 وSonnet 5.5 الحلقة وسجّلا تقريباً نفس نتيجة Opus 5 مع الذاكرة، رغم أن خط الأساس بدون ذاكرة كان أعلى قليلاً.

في Pokémon Red، كتب Sonnet 3.7 413 ملف ذاكرة عبر 225 مجلداً وحصل على شارة واحدة، بينما كتب Fable 5 تسعة ملفات في مجلدين بالإضافة إلى global.md وحصل على أربع شارات. أصبحت سجلات Sonnet 3.7 غير المميزة قديمة واستهلكت الوقت؛ خزّن Fable 5 استراتيجية وخطط وقواعد مُختبرة، مع global.md بدور لوحة متابعة. استخدم Opus 5.5 مجلداً صغيراً من الملاحظات لتتبع الأهداف الحالية والخطوات التالية، وأعاد كتابتها أثناء اللعب، وفاز باللعبة.

تصحيح الذاكرة وبناؤها

يمكن لـdreaming أن يختبر الملاحظات مقابل النصوص الأصلية. في Pokémon، قالت ملاحظة غير صحيحة إن PokéCenter كان على الجانب الشرقي من Mt. Moon؛ مع الملاحظة غير المصححة، عاد Claude ثلاث مرات إلى مسار سابق ولم يصل أبداً إلى Cerulean City، بينما صحّح dreaming الملاحظة ووصل Claude إلى Cerulean City. يمكن لـdreaming أيضاً بناء ويكيات، وهي مجموعات من الصفحات المترابطة. على مدى 128 جلسة على نحو 350,000 ملف Stainless ونحو 420M tokens، ارتفع الأداء على 25 سؤالاً من 13% إلى 48% من المعايير المُقيّمة. باستخدام البحث والويكي، ارتفعت الدرجات المجمعة من 54% إلى 61% مع نمو الويكي، مقارنة بـ 53% للبحث وحده، ووفّر الجمع نحو 20,000 tokens لكل سؤال.

في أسئلة الاندماج، سجّل Claude 87% عند استشارة الويكي مقابل 73% مع البحث وحده، خاصة عندما شملت المعلومات عدة مستندات. يمكن لـdreaming أيضاً سد الفجوات: في مهمة واحدة وجد تسعة روابط إلى صفحة مفقودة وأعاد توجيهها، وأضاف ثلاث صفحات جديدة بما في ذلك فهرس.

ترقية الذاكرة والتركيز على الهدف

يمكن لـdreaming أن يرقّي الملاحظات إلى أعلى هرم الذاكرة، حيث يمكن للنظام (harness) تحميلها في كل جلسة. يجب أن تبقى هذه الطبقة المُحقَنة صغيرة لأن الذكريات المُحقَنة تستخدم tokens والملاحظة غير الصحيحة يمكن أن تنتشر؛ يحمّل Claude Code فقط أول 200 سطر أو 25 KB من MEMORY.md كفهرس. يمكن لـdreaming أيضاً تشكيل الذاكرة نحو هدف. في مهمة عقد، فقد جدول مشترك حقائق لأن الوكلاء كتبوا فوق بعضهم؛ بعد تعليمات مُنقّحة أعطت كل عقد صفحته الخاصة مع شروط كلمة بكلمة، ارتفعت معايير الموجز المُقيّمة من 72% إلى 100%.

المصادر: anthropic.com