1000+ câu Trắc nghiệm Nhập môn xử lý ngôn ngữ tự nhiên có đáp án - Phần 19

Để xử lý các từ "out-of-vocabulary" (OOV) (ngoài từ vựng) trong mô hình ngôn ngữ, kỹ thuật nào thường được sử dụng?

24/30

Để xử lý các từ "out-of-vocabulary" (OOV) (ngoài từ vựng) trong mô hình ngôn ngữ, kỹ thuật nào thường được sử dụng?

Stemming

Lemmatization

Byte-Pair Encoding (BPE) hoặc WordPiece tokenization

Stop word removal

Giải thích

Chọn đáp án C