1000+ câu Trắc nghiệm Nhập môn xử lý ngôn ngữ tự nhiên có đáp án - Phần 2

Question encoder

Answer decoder

Context retriever

Information extractor

Underfitting

Overfitting

Regularization

Normalization

Phân tích cảm xúc

Nhận dạng thực thể có tên (Named Entity Recognition)

Tóm tắt văn bản

Dịch máy

Loại bỏ HTML tags

Chuyển đổi văn bản thành chữ thường

Huấn luyện mô hình

Loại bỏ dấu câu

Tokenization

Stemming

Part-of-speech tagging

Stop word removal

Không thể xử lý văn bản dài

Không giữ được thứ tự của từ trong câu

Yêu cầu lượng lớn bộ nhớ

Chỉ hoạt động với tiếng Anh

Chuyển đổi từ thành dạng số để máy tính có thể xử lý

Giảm số lượng từ trong văn bản

Phân loại các từ theo loại từ (danh từ, động từ, tính từ)

Tìm gốc của từ để chuẩn hóa văn bản

Tìm gốc của từ để chuẩn hóa văn bản

Phân loại các từ theo loại từ (danh từ, động từ, tính từ)

Loại bỏ các từ dừng (stop words) khỏi văn bản

Chia văn bản thành các token nhỏ hơn

Overfitting

Underfitting

Regularization

Normalization

BLEU (Bilingual Evaluation Understudy)

ROUGE (Recall-Oriented Understudy for Gisting Evaluation)

TF-IDF

Word2Vec

Tần suất xuất hiện của một từ trong toàn bộ văn bản

Tần suất xuất hiện của một từ trong một tài liệu

Tổng số từ trong một tài liệu

Số lượng tài liệu chứa một từ

Tiếng Việt không có dấu

Tiếng Việt là ngôn ngữ đơn âm tiết

Tiếng Việt có cấu trúc ngữ pháp đơn giản hơn

Tiếng Việt có nhiều từ mượn từ tiếng Pháp

Tokenization

Normalization

Vectorization

Stemming

Một thuật toán phân cụm dữ liệu

Một mô hình sinh xác suất để khám phá các chủ đề tiềm ẩn trong một tập hợp các tài liệu

Một phương pháp để giảm chiều dữ liệu

Một kỹ thuật để tăng cường dữ liệu

Chỉ hiểu ngôn ngữ theo một hướng (từ trái sang phải)

Hiểu ngôn ngữ theo cả hai hướng (trái sang phải và phải sang trái)

Dịch văn bản từ tiếng Anh sang tiếng Việt

Tạo sinh văn bản mới hoàn toàn

Quá trình chuyển đổi văn bản thành giọng nói

Quá trình diễn đạt lại một câu hoặc đoạn văn bằng cách sử dụng các từ ngữ khác nhưng vẫn giữ nguyên ý nghĩa

Quá trình phân tích cấu trúc ngữ pháp của một câu

Quá trình tóm tắt một văn bản dài thành một phiên bản ngắn hơn

Tokenization

Stemming

Principal Component Analysis (PCA)

Stop word removal

Dự đoán từ tiếp theo trong một câu

Tìm ra mối quan hệ ngữ nghĩa giữa các từ

Phân loại văn bản dựa trên chủ đề

Chuyển đổi văn bản thành giọng nói

Stemming

Context management

Sentiment analysis

Named entity recognition

BLEU score

Perplexity

Distinct-n

ROUGE score