Memory³: Kiến trúc bộ nhớ thứ ba cho LLM vượt trội hơn RAG và mô hình tham số lớn

Nghiên cứu từ Viện Nghiên cứu Thuật toán Thượ Hải, Đại học Bắc Kinh và các cộng sự dưới sự dẫn dắt của viện sĩ Ngạc Duy Nam đề xuất một kiểu bộ nhớ mới cho mô hình ngôn ngữ lớn: bộ nhớ hiển (explicit memory). Mô hình Memory³ với 2.4 tỷ tham số không nhúng đạt hiệu năng vượt trội so với các LLM quy mô lớn hơn và các hệ thống RAG. Động lực: Cấu ...

Đăng vào ngày 14 tháng 8 lúc 23:21