#pamäť

Práca BASIS navrhuje spôsob, ako odpojiť pamäťové nároky backpropagácie od dĺžky sekvencie a batchu cez vyvážené skicovanie aktivácií. Ak sa výsledky potvrdia, môže ísť o praktický posun pre tréning dlhokontextových modelov na obmedzenom hardvéri.

LangChain vo svojom novom texte tvrdí, že agent harnesses sa stávajú dominantným spôsobom stavby agentov a že kľúčový boj sa presúva k pamäti. Ak je memory vrstva uzavretá v proprietárnom rozhraní, firma podľa autorov odovzdáva kontrolu nad najcennejšou časťou svojho agentického produktu tretej strane.