Nylig oppnådde @supermemory 99 % på LongMemEval. Problemet er at minnebenchmarks ble laget da LLM-er hadde et veldig lite kontekstvindu. For eksempel er LongMemEval_M ~1,5 millioner tokens. Som nesten er innenfor Opus 4.6-kontekstvinduet. Så vidt jeg forstår, er dagens beste benchmark BEAM med 10 millioner kontekstvindu. Så jeg evaluerer alle nye minnesystemer basert på poengsummen der. Gleder meg til å se hvordan @supermemory vil score! Jeg er sikker på at det kommer til å gå bra!

Den selvforbedrende hukommelsen til Hermes' agent fra @NousResearch er en ganske kul ting. Så jeg visualiserte hvordan det fungerer: (1/7)

Siden jeg begynte å bruke @honchodotdev, har jeg fullstendig endret mening om åpen kildekode-AI. Før syntes jeg ikke det var så viktig. Men å se hvor mye data jeg sender til AI-laboratorier og hva man kan lære av disse dataene, fikk meg til å ville gå helt lokalt. (1/2)