Ce este un model ieftin de bol mare, tactic invers. Veștile bune despre implementarea locală a modelelor mari sunt aici! Vă aducem analiza tehnică a noului Kimi-Linear-48B-A3B al Părții Întunecate a Lunii! Să începem cu o versiune de propoziție - acesta este modelul ieftin de fast-food cu bol mare. 48B-A3B atinge 1M context și apoi atenție liniară, ceea ce economisește foarte multă memorie. Consumul de memorie cauzat de creșterea lungimii tradiționale a contextului de atenție este exponențial, ceea ce este liniar, deci acest model este în regulă pe procesor. Deja îl descarc și mă pregătesc să-l adaug la modelul meu comun local. Cea mai mare incertitudine în prezent este că nu știu care este nivelul de amintire, îl voi descărca și îl voi umple cu câteva romane, voi întreba detaliile romanului și voi vedea cum răspunde modelul pentru a evalua efectul de reamintire. Dacă doriți să vedeți rezultatele, vă rugăm să vă placă și peste 100 vor publica evaluarea pentru dvs. în weekend.