Anthropic Claude agent yaddaşı, salience və dreaming haqqında təfərrüat verir

Anthropic Claude üçün agent yaddaşı haqqında düşüncələrini yayımlayıb və yaddaş qeydləri, salience qiymətləndirməsi və dreaming-in sessiyalar arası necə birgə işlədiyini təsvir edib. Burada database tapşırıqları, Pokémon Red və sənəd wikiləri üzrə qiymətləndirmələr əhatə olunur.

Yaddaş və dreaming

Anthropic agent yaddaşını Claude-un təcrübədən, o cümlədən istifadəçilərlə qarşılıqlı əlaqələrdən və ona tapşırılmış işlərdən əldə etdiyi, sonradan oxuya biləcəyi kontekst kimi sessiyalar arasında qalan bilik kimi müəyyən edir. Buraya model çəkilərinin dəyişməsi, bir söhbət daxilində kontekstdaxili öyrənmə və compaction daxil deyil. Şirkət bunu insan yaddaşı ilə müqayisə edir: hippokamp təcrübələri tez tutur, uzunmüddətli bilikə konsolidasiyanın böyük hissəsi isə yuxu və sakit istirahət zamanı replay vasitəsilə baş verir. Agentlər üçün loglar və transkriptlər işi tutur, Letta və UC Berkeley tədqiqatçıları isə qarşılıqlı əlaqələr arasındakı boş vaxtdan istifadə edərək konteksti yenidən qurmaq üçün sleep-time compute təklif ediblər. Anthropic eyni ideyanın loglara nəzər salmaqla agent yaddaşını təşkil etməyə kömək edə biləcəyini bildirir; buna çox vaxt dreaming deyilir.

Salience və öyrənmə dövrələri

Claude sessiya logunda salient hadisələri baş verən kimi işarələyə bilər və ya onları yaddaş qeydləri qovluğu kimi yaddaş anbarına yaza bilər. Yaddaş həmçinin yoxlanmış fakt və ya qayda kimi gələcək ehtiyacları proqnozlaşdıra bilər. Continual Learning Bench 1.0 database tapşırığında modellər fərqləndi: Sonnet 4.6 yoxlanmamış nəzəriyyələr yaratdı, Opus 4.7 qeydləri birləşdirdi və yoxlanmış faktları işarələdi, Sonnet 5 təsdiqlənmiş cavabları və düzəlişləri qeyd etdi, Opus 5 isə qaydalar, əvvəlki cavablar və tələlər haqqında xəbərdarlıqlarla öyrənmə dövrəsini bağladı. Opus 5.5 və Sonnet 5.5 də dövrəni bağladı və yaddaşla Opus 5 ilə təxminən eyni bal topladı, baxmayaraq ki, yaddaşsız baza xətti onlarda bir qədər yüksək idi.

Pokémon Red oyununda Sonnet 3.7 225 qovluq üzrə 413 yaddaş faylı yazdı və bir nişan qazandı, Fable 5 isə iki qovluqda doqquz fayl və global.md yazdı və dörd nişan qazandı. Sonnet 3.7-nin seçici olmayan qeydləri köhnəldi və vaxt apardı; Fable 5 strategiya, planlar və yoxlanmış qaydalar saxladı, global.md isə panel kimi işlədi. Opus 5.5 cari məqsədləri və növbəti addımları izləyən kiçik qeyd qovluğundan istifadə etdi, oynadıqca onları yenidən yazdı və oyunu qazandı.

Yaddaşın düzəldilməsi və qurulması

Dreaming qeydləri orijinal transkriptlərə qarşı yoxlaya bilər. Pokémon-da yanlış qeyd PokéCenter-in Mt. Moon-un şərq tərəfində olduğunu deyirdi; düzəldilməmiş qeyd ilə Claude üç dəfə əvvəlki marşruta qayıtdı və heç vaxt Cerulean City-yə çatmadı, dreaming qeydi düzəltdi və Claude Cerulean City-yə çatdı. Dreaming həmçinin wiki-lər, əlaqəli səhifələr kolleksiyası qura bilər. Təxminən 350 000 Stainless faylı və təxminən 420M token üzrə 128 sessiya ərzində 25 sual üzrə performans qiymətləndirilmiş meyarların 13%-dən 48%-ə qədər yüksəldi. Axtarış və wiki istifadə edilərkən wiki böyüdükcə ümumi ballar 54%-dən 61%-ə qədər yüksəldi; yalnız axtarış üçün 53% idi və birləşmə hər sual üçün təxminən 20 000 token qənaət etdi.

Birləşmə suallarında Claude wikiyə müraciət edərkən 87%, yalnız axtarışla isə 73% bal topladı; xüsusilə məlumat bir neçə sənədə yayılıbsa. Dreaming həmçinin boşluqları bağlaya bilər: bir tapşırıqda o, çatışmayan səhifəyə doqquz keçid tapdı və onları yenidən yönəltdi, həmçinin indeks daxil olmaqla üç yeni səhifə əlavə etdi.

Təşviq və məqsəd yönümlü yaddaş

Dreaming qeydləri yaddaş iyerarxiyasının yuxarısına təşviq edə bilər; burada harness onları hər sessiyaya yükləyə bilər. Bu inyeksiya edilmiş qat kiçik qalmalıdır, çünki inyeksiya edilmiş yaddaşlar token istifadə edir və yanlış qeyd yayıla bilər; Claude Code MEMORY.md faylının yalnız ilk 200 sətrini və ya 25 KB-ni indeks kimi yükləyir. Dreaming həmçinin yaddaşı bir məqsədə yönəldə bilər. Müqavilə tapşırığında ümumi cədvəl faktları itirdi, çünki agentlər bir-birinin üzərinə yazdı; yenilənmiş təlimatlar hər müqaviləyə söz-bə-söz şərtlərlə öz səhifəsini verdikdən sonra qiymətləndirilmiş qısa xülasə meyarları 72%-dən 100%-ə qədər yüksəldi.

Mənbələr: anthropic.com