Mục tiêu chính của việc 'token hóa' (tokenization) trong NLP là gì?

Loại bỏ các từ dừng (stop words).

Chia văn bản thành các đơn vị nhỏ hơn, có ý nghĩa.

Chuẩn hóa văn bản về dạng chữ thường.

Tìm gốc từ (stemming) của các từ.