1000+ câu Trắc nghiệm Nhập môn xử lý ngôn ngữ tự nhiên có đáp án - Phần 2

BLEU (Bilingual Evaluation Understudy)

ROUGE (Recall-Oriented Understudy for Gisting Evaluation)

TF-IDF

Word2Vec

Tần suất xuất hiện của một từ trong toàn bộ văn bản

Tần suất xuất hiện của một từ trong một tài liệu

Tổng số từ trong một tài liệu

Số lượng tài liệu chứa một từ

Tiếng Việt không có dấu

Tiếng Việt là ngôn ngữ đơn âm tiết

Tiếng Việt có cấu trúc ngữ pháp đơn giản hơn

Tiếng Việt có nhiều từ mượn từ tiếng Pháp

Tokenization

Normalization

Vectorization

Stemming

Một thuật toán phân cụm dữ liệu

Một mô hình sinh xác suất để khám phá các chủ đề tiềm ẩn trong một tập hợp các tài liệu

Một phương pháp để giảm chiều dữ liệu

Một kỹ thuật để tăng cường dữ liệu

Chỉ hiểu ngôn ngữ theo một hướng (từ trái sang phải)

Hiểu ngôn ngữ theo cả hai hướng (trái sang phải và phải sang trái)

Dịch văn bản từ tiếng Anh sang tiếng Việt

Tạo sinh văn bản mới hoàn toàn

Quá trình chuyển đổi văn bản thành giọng nói

Quá trình diễn đạt lại một câu hoặc đoạn văn bằng cách sử dụng các từ ngữ khác nhưng vẫn giữ nguyên ý nghĩa

Quá trình phân tích cấu trúc ngữ pháp của một câu

Quá trình tóm tắt một văn bản dài thành một phiên bản ngắn hơn

Tokenization

Stemming

Principal Component Analysis (PCA)

Stop word removal

Dự đoán từ tiếp theo trong một câu

Tìm ra mối quan hệ ngữ nghĩa giữa các từ

Phân loại văn bản dựa trên chủ đề

Chuyển đổi văn bản thành giọng nói

Stemming

Context management

Sentiment analysis

Named entity recognition

BLEU score

Perplexity

Distinct-n

ROUGE score

Quá trình chuyển đổi văn bản thành giọng nói

Quá trình xác định tất cả các tham chiếu đến cùng một thực thể trong một văn bản

Quá trình phân tích cấu trúc ngữ pháp của một câu

Quá trình dịch văn bản từ ngôn ngữ này sang ngôn ngữ khác

Tăng tốc độ huấn luyện mô hình

Đánh giá hiệu suất của mô hình trên dữ liệu chưa thấy

Giảm kích thước của dữ liệu huấn luyện

Cải thiện khả năng diễn giải của mô hình

Tập trung vào các từ quan trọng nhất trong câu đầu vào

Dịch văn bản sang ngôn ngữ khác

Tạo ra các câu văn mới

Phân loại văn bản theo chủ đề

Cảm xúc của người dùng

Mục đích của người dùng khi tương tác với chatbot

Ngôn ngữ lập trình được sử dụng để xây dựng chatbot

Số lượng người dùng đang sử dụng chatbot

Phân tích thị trường chứng khoán

Dịch máy

Phân tích cảm xúc

Chatbot

Một kỹ thuật để tăng cường dữ liệu huấn luyện

Một phương pháp để điều chỉnh trọng số của mô hình

Một chiến lược huấn luyện trong đó đầu ra thực tế từ bước trước được sử dụng làm đầu vào cho bước hiện tại

Một kỹ thuật để giảm overfitting

Độ phức tạp của thuật toán

Khả năng dự đoán của mô hình ngôn ngữ

Tốc độ xử lý của máy tính

Mức độ chính xác của phân tích cú pháp

Một mô hình ngôn ngữ dựa trên mạng nơ-ron

Một chuỗi gồm n từ liên tiếp trong một văn bản

Một phương pháp để loại bỏ nhiễu trong dữ liệu văn bản

Một kỹ thuật để tóm tắt văn bản

Giảm kích thước của dữ liệu đầu vào

Cho phép mô hình tập trung vào các phần quan trọng nhất của dữ liệu đầu vào khi tạo ra đầu ra

Tăng tốc độ huấn luyện mô hình

Cải thiện khả năng song song hóa của mô hình

Stemming

Tokenization

Stop word removal

Part-of-speech tagging