1000+ câu Trắc nghiệm Nhập môn xử lý ngôn ngữ tự nhiên có đáp án - Phần 5

Tăng cường dữ liệu huấn luyện bằng cách dịch văn bản từ ngôn ngữ nguồn sang ngôn ngữ đích, sau đó dịch ngược lại về ngôn ngữ nguồn

Đánh giá chất lượng của mô hình dịch máy

Tóm tắt văn bản đã dịch

Phân loại văn bản đã dịch

Word2Vec

GloVe

One-hot encoding

TF-IDF

Text Generation

Text Summarization

Text Classification

Text Translation

Xác định chủ đề chính của văn bản

Xác định cảm xúc hoặc thái độ của người viết đối với một chủ đề cụ thể

Tóm tắt nội dung chính của văn bản

Dịch văn bản sang một ngôn ngữ khác

Đo lường độ phức tạp của mô hình

Đo lường khả năng dự đoán của mô hình

Đo lường tốc độ huấn luyện của mô hình

Đo lường kích thước của mô hình

Text Summarization

Text Generation

Text Classification

Text Translation

Named Entity Recognition (NER)

Sentiment Analysis

Topic Modeling

Text Summarization

Cho phép mô hình tập trung vào các phần quan trọng nhất của câu khi xử lý

Giúp mô hình dịch văn bản sang ngôn ngữ khác

Giúp mô hình tóm tắt văn bản

Giúp mô hình nhận diện các thực thể có tên

Chuyển đổi văn bản thành chữ thường

Loại bỏ các stop words

Đưa các từ về dạng gốc của chúng

Phân tích cú pháp của câu

Các từ mang ý nghĩa quan trọng nhất trong văn bản

Các từ phổ biến nhưng ít mang ý nghĩa, thường bị loại bỏ trong quá trình tiền xử lý

Các từ được sử dụng để đánh dấu sự kết thúc của một câu

Các từ được sử dụng để liên kết các câu lại với nhau

Dự đoán các từ bị che giấu trong câu

Dịch văn bản sang ngôn ngữ khác

Tóm tắt văn bản

Phân loại văn bản

Xử lý dữ liệu tuần tự, chẳng hạn như văn bản

Phân loại hình ảnh

Phân tích dữ liệu tài chính

Dự đoán thời tiết

Quá trình gán nhãn từ loại (ví dụ: danh từ, động từ, tính từ) cho mỗi từ trong câu

Quá trình loại bỏ các stop words

Quá trình chuyển đổi văn bản thành chữ thường

Quá trình phân tích cú pháp của câu

Text Summarization

Text Classification

Text Generation

Text Translation

Xác định tần suất xuất hiện của các từ trong văn bản

Đánh giá tầm quan trọng của một từ trong một văn bản so với toàn bộ tập hợp văn bản

Loại bỏ các stop words

Chuyển đổi văn bản thành chữ thường

Chuyển đổi từ thành dạng số và biểu diễn chúng trong một không gian vector

Loại bỏ các từ không quan trọng khỏi văn bản

Phân tích cấu trúc ngữ pháp của câu

Tạo ra các từ mới từ văn bản hiện có

Phân tích cú pháp (Parsing)

Phân tích cảm xúc (Sentiment Analysis)

Nhận dạng thực thể có tên (Named Entity Recognition)

Mô hình hóa chủ đề (Topic Modeling)

Text Summarization

Topic Modeling

Text Clustering

Machine Translation

BLEU (Bilingual Evaluation Understudy)

TF-IDF (Term Frequency-Inverse Document Frequency)

Word2Vec

PoS Tagging (Part-of-Speech Tagging)

Stemming

Tokenization

Vector hóa văn bản (Text Vectorization)

Part-of-Speech Tagging

Một mô hình ngôn ngữ dựa trên mạng nơ-ron

Một chuỗi gồm n từ liên tiếp trong một văn bản

Một phương pháp loại bỏ stop words

Một kỹ thuật phân tích cú pháp