Mục đích chính của việc 'tách từ' (tokenization) trong NLP là gì?

Giảm kích thước dữ liệu văn bản.

Chia văn bản thành các đơn vị nhỏ hơn, thường là từ hoặc cụm từ, để máy tính có thể xử lý.

Tìm ra chủ đề chính của văn bản.

Chuyển đổi văn bản sang dạng số.