Mô hình "rẻ và lớn" là gì nhỉ, chiến thuật ngả về phía sau. Tin vui cho việc triển khai mô hình lớn tại địa phương đã đến! Mang đến cho mọi người phân tích kỹ thuật của Kimi-Linear-48B-A3B vừa được phát hành bởi "Mặt trăng tối"! Trước tiên, một câu tóm tắt - đây mới thực sự là mô hình thức ăn nhanh "rẻ và lớn". Mức 48B-A3B này đã đạt được khoảng 1M ngữ cảnh, và vẫn là sự chú ý tuyến tính, rất tiết kiệm bộ nhớ. Sự tiêu tốn bộ nhớ do độ dài ngữ cảnh tăng lên trong sự chú ý truyền thống là theo cấp số nhân, trong khi cái này là tuyến tính, vì vậy mô hình này chạy trên CPU cũng không vấn đề gì. Tôi đã bắt đầu tải xuống, chuẩn bị thêm vào danh sách mô hình thường dùng tại địa phương. Hiện tại, sự không chắc chắn lớn nhất là không biết mức độ hồi phục như thế nào, tôi chuẩn bị tải xuống và cho nó một vài cuốn tiểu thuyết để hỏi về chi tiết tiểu thuyết xem mô hình trả lời ra sao để đánh giá hiệu quả hồi phục. Những ai muốn xem kết quả, xin hãy thích, nếu vượt quá 100, tôi sẽ công bố đánh giá vào cuối tuần.