Mô hình Transformer, nền tảng của nhiều mô hình ngôn ngữ lớn hiện nay (ví dụ: BERT, GPT), khắc phục nhược điểm chính nào của mô hình RNN (Recurrent Neural Network) trong NLP?
24/30
Mô hình Transformer, nền tảng của nhiều mô hình ngôn ngữ lớn hiện nay (ví dụ: BERT, GPT), khắc phục nhược điểm chính nào của mô hình RNN (Recurrent Neural Network) trong NLP?
Khả năng xử lý văn bản đa ngôn ngữ.
Khả năng xử lý song song và vấn đề 'vanishing gradient'.