Phân tích Kiến trúc Transformer từ Gốc
Phân tích Kiến trúc Transformer
1. Tổng quan về Kiến trúc Transformer
Transformer là mô hình học sâu dựa trên cơ chế attention, không phụ thuộc vào các cấu trúc tuần tự như RNN hay CNN. Nó được thiết kế cho các tác vụ xử lý ngôn ngữ tự nhiên (NLP) như dịch máy, sinh văn bản và xây dựng mô hình ngôn ngữ tiền huấn luyện — sau đó có thể tinh ch ...
Đăng vào ngày 5 tháng 7 lúc 20:26