Để xử lý hiệu quả các từ "out-of-vocabulary" (OOV - từ ngoại từ điển) mà mô hình chưa từng gặp trong quá trình huấn luyện, kỹ thuật nào thường được sử dụng trong các mô hình ngôn ngữ hiện đại, ví dụ như mô hình dựa trên Transformer?
Thay thế từ OOV bằng từ đồng nghĩa
Sử dụng mã hóa theo cặp byte (Byte Pair Encoding - BPE) hoặc các phương pháp phân tách từ con
Bỏ qua hoàn toàn các từ OOV trong quá trình xử lý
Gán ngẫu nhiên vectơ cho các từ OOV
Quảng cáo
Trả lời:
Giải bởi Vietjack
Chọn đáp án B
Hot: 1000+ Đề thi cuối kì 2 file word cấu trúc mới 2026 Toán, Văn, Anh... lớp 1-12 (chỉ từ 60k). Tải ngay
CÂU HỎI HOT CÙNG CHỦ ĐỀ
Câu 1
Sinh văn bản (Text Generation)
Dịch máy (Machine Translation)
Trích xuất thông tin (Information Extraction)
Phân loại văn bản (Text Classification)
Lời giải
Chọn đáp án C
Câu 2
Độ chính xác (Accuracy)
ĐộRecall (Recall)
Điểm F1 (F1-score)
Lỗi dương tính giả (False Positive)
Lời giải
Chọn đáp án D
Câu 3
Mạng nơ-ron truyền thẳng (Feedforward Neural Network)
Mạng nơ-ron tích chập (Convolutional Neural Network - CNN)
Mạng nơ-ron hồi quy dài-ngắn hạn (Long Short-Term Memory - LSTM)
Mạng tự mã hóa (Autoencoder)
Lời giải
Bạn cần đăng ký gói VIP ( giá chỉ từ 250K ) để làm bài, xem đáp án và lời giải chi tiết không giới hạn.
Câu 4
Chọn lọc và kết hợp các câu quan trọng nhất từ văn bản gốc để tạo bản tóm tắt
Diễn giải lại nội dung của văn bản gốc bằng ngôn ngữ khác
Sử dụng mô hình sinh văn bản để tạo ra bản tóm tắt mới hoàn toàn
Loại bỏ các thông tin không quan trọng và giữ lại các từ khóa chính
Lời giải
Bạn cần đăng ký gói VIP ( giá chỉ từ 250K ) để làm bài, xem đáp án và lời giải chi tiết không giới hạn.
Câu 5
Tách từ (Tokenization)
Loại bỏ từ dừng (Stop word removal)
Nguyên thể hóa (Lemmatization)
Chuẩn hóa văn bản (Text normalization)
Lời giải
Bạn cần đăng ký gói VIP ( giá chỉ từ 250K ) để làm bài, xem đáp án và lời giải chi tiết không giới hạn.
Câu 6
Các mệnh đề độc lập và phụ thuộc
Các từ khóa quan trọng nhất trong câu
Các cụm từ có nghĩa (ví dụ: cụm danh từ, cụm động từ)
Các thực thể có tên (Named Entities)
Lời giải
Bạn cần đăng ký gói VIP ( giá chỉ từ 250K ) để làm bài, xem đáp án và lời giải chi tiết không giới hạn.
Nhắn tin Zalo
Hỏi bài tập