Để xử lý hiệu quả các từ "out-of-vocabulary" (OOV - từ ngoại từ điển) mà mô hình chưa từng gặp trong quá trình huấn luyện, kỹ thuật nào thường được sử dụng trong các mô hình ngôn ngữ hiện đại, ví dụ như mô hình dựa trên Transformer?
Thay thế từ OOV bằng từ đồng nghĩa
Sử dụng mã hóa theo cặp byte (Byte Pair Encoding - BPE) hoặc các phương pháp phân tách từ con
Bỏ qua hoàn toàn các từ OOV trong quá trình xử lý
Gán ngẫu nhiên vectơ cho các từ OOV
Quảng cáo
Trả lời:
Chọn đáp án B
Đăng nhập để xem lời giải
Lưu tiến độ và luyện tập hiệu quả hơn. Hoàn toàn miễn phí!
Đang tải chế độ Học...
Dành cho bạn Hot
CÂU HỎI HOT CÙNG CHỦ ĐỀ
Câu 1/30
Sinh văn bản (Text Generation)
Dịch máy (Machine Translation)
Trích xuất thông tin (Information Extraction)
Phân loại văn bản (Text Classification)
Đăng nhập để xem lời giải
Lưu tiến độ và luyện tập hiệu quả hơn. Hoàn toàn miễn phí!
Lời giải
Chọn đáp án C
Câu 2/30
Mạng nơ-ron truyền thẳng (Feedforward Neural Network)
Mạng nơ-ron tích chập (Convolutional Neural Network - CNN)
Mạng nơ-ron hồi quy dài-ngắn hạn (Long Short-Term Memory - LSTM)
Mạng tự mã hóa (Autoencoder)
Đăng nhập để xem lời giải
Lưu tiến độ và luyện tập hiệu quả hơn. Hoàn toàn miễn phí!
Lời giải
Chọn đáp án C
Câu 3/30
Tách từ (Tokenization)
Loại bỏ từ dừng (Stop word removal)
Nguyên thể hóa (Lemmatization)
Chuẩn hóa văn bản (Text normalization)
Đăng nhập để xem lời giải
Lưu tiến độ và luyện tập hiệu quả hơn. Hoàn toàn miễn phí!
Lời giải
Bạn cần đăng ký gói VIP ( giá chỉ từ 250K ) để làm bài, xem đáp án và lời giải chi tiết không giới hạn.
Câu 4/30
Độ chính xác (Accuracy)
ĐộRecall (Recall)
Điểm F1 (F1-score)
Lỗi dương tính giả (False Positive)
Đăng nhập để xem lời giải
Lưu tiến độ và luyện tập hiệu quả hơn. Hoàn toàn miễn phí!
Lời giải
Bạn cần đăng ký gói VIP ( giá chỉ từ 250K ) để làm bài, xem đáp án và lời giải chi tiết không giới hạn.
Câu 5/30
Chọn lọc và kết hợp các câu quan trọng nhất từ văn bản gốc để tạo bản tóm tắt
Diễn giải lại nội dung của văn bản gốc bằng ngôn ngữ khác
Sử dụng mô hình sinh văn bản để tạo ra bản tóm tắt mới hoàn toàn
Loại bỏ các thông tin không quan trọng và giữ lại các từ khóa chính
Đăng nhập để xem lời giải
Lưu tiến độ và luyện tập hiệu quả hơn. Hoàn toàn miễn phí!
Lời giải
Bạn cần đăng ký gói VIP ( giá chỉ từ 250K ) để làm bài, xem đáp án và lời giải chi tiết không giới hạn.
Đăng ký để học cùng Vietjack. Hoàn toàn miễn phí!
Bằng việc đăng ký, bạn đồng ý với Điều khoản sử dụng và Chính sách bảo mật của Vietjack.