Trong mô hình ngôn ngữ dựa trên mạng nơ-ron, 'attention mechanism' (cơ chế chú ý) giúp giải quyết vấn đề gì?

Vấn đề từ vựng không có trong từ điển (out-of-vocabulary words)

Vấn đề phụ thuộc tầm xa (long-range dependencies) trong câu

Vấn đề tốc độ xử lý chậm của mạng nơ-ron

Vấn đề thiếu dữ liệu huấn luyện