-
Toàn cảnh vụ triệt phá đường dây ma túy liên tỉnh cực lớn, tóm gọn 140 đối tượng tại TP.HCM -
Kim Soo Hyun nhập viện điều trị tâm lý giữa khủng hoảng, diện mạo hiện tại khiến nhiều người ngỡ ngàng -
Kỳ án hôn nhân nghìn tỷ: 10 năm hầu tòa và những nút thắt ly kỳ của bác sĩ nha khoa -
Cuộc đua nghẹt thở vào lớp 10 chuyên tại Hà Nội và TP.HCM chính thức bắt đầu -
Từ tháng 6, nghệ sĩ và KOL sai phạm sẽ đối mặt với "danh sách đen" -
Chiếc Maybach tháo bánh của bà Trương Mỹ Lan chốt giá gấp đôi, hai xe sang khác "ế ẩm" -
Việt Nam lên tiếng trước cáo buộc của Mỹ nhắm vào Đại tướng Raul Castro -
Nguyên Phó chủ tịch nước Nguyễn Thị Bình đón nhận Huân chương cao quý của Palestine -
Khởi tố hai nữ sinh quay clip đánh hội đồng bạn học dã man trong nhà vệ sinh -
Giữa ồn ào dư luận, Ngọc Sơn livestream tuyên bố tặng hết tài sản nếu xét nghiệm phát hiện chất cấm
Công nghệ
16/12/2023 17:02AI Việt Nam dịch tiếng Lào, Thái, Khmer,… sang tiếng Việt
Dịch máy là một trong những ứng dụng thành công nhất của công nghệ trí tuệ nhân tạo trong việc xử lý ngôn ngữ tự nhiên. Các hệ thống dịch máy chất lượng cao như Google Translate của Google hay Bing Translator của Microsoft cần các bộ dữ liệu song ngữ quy mô lớn, lên tới hàng triệu cặp câu để huấn luyện mô hình.
Tuy nhiên, rất nhiều ngôn ngữ trên thế giới không có đủ tài nguyên. Do đó, việc xây dựng mô hình dịch máy hiệu quả cho những ngôn ngữ nghèo tài nguyên, trong đó có các ngôn ngữ của khu vực Đông Nam Á là việc rất cấp thiết và gặp nhiều thách thức.
Mới đây, Viện Công nghệ Thông tin (Viện Hàn lâm Khoa học và Công nghệ Việt Nam) đã nghiên cứu, làm chủ công nghệ dịch máy tiên tiến nhất hiện nay. Đơn vị này cũng đã xây dựng thành công hệ thống dịch văn bản đa ngữ giữa tiếng Việt với các ngôn ngữ của khu vực bao gồm tiếng Lào, tiếng Khmer, tiếng Thái Lan, tiếng Malaysia và tiếng Indonesia.
Theo đơn vị phát triển, các ngôn ngữ như Lào, Thái và Khmer mang lại những thách thức rất lớn khi xây dựng mô hình dịch máy. Khó khăn không chỉ đến từ sự khan hiếm của dữ liệu song ngữ mà còn vì những ngôn ngữ này rất phong phú về mặt hình thái, thiếu sự phân tách từ, phân tách câu và tính đa nghĩa.
Mô hình AI do Viện Công nghệ thông tin phát triển đã "học" được cách "thích ứng" với tất cả những điểm đặc biệt của các ngôn ngữ nói trên. Từ đó, phần mềm cho phép nhanh chóng bổ sung các ngôn ngữ khác khi cần với chất lượng dịch tương đương các sản phẩm tiên tiến của nước ngoài.
Điểm đặc biệt là phần mềm dịch đa ngữ này chạy riêng, lưu trữ dữ liệu tại chỗ, không phải sử dụng API của hãng cung cấp dịch vụ khác. Điều này giúp đảm bảo an ninh, an toàn và không lộ lọt thông tin ra ngoài.
Một vấn đề của các hệ thống dịch như Google Translate hay Bing Translator là khả năng thích ứng miền chuyên biệt (domain-specific). Nghĩa là, chúng có thể dịch tốt cho miền ngôn ngữ chung, phổ thông phục vụ đại chúng nhưng chất lượng dịch kém trong các miền ngôn ngữ mang tính chuyên môn như y tế, luật pháp, an ninh…
Để khắc phục tồn tại trên, nhóm nghiên cứu tại Viện Công nghệ thông tin đã phát triển một hệ thống dịch thuật lấy tiếng Việt làm trung tâm, có khả năng dịch hai chiều sang các ngôn ngữ nghèo tài nguyên với chất lượng tốt.
Cụ thể, phần mềm này có chất lượng tương đương hoặc cao hơn Google Translate đối với cùng văn bản. Ngoài ra, phần mềm không hạn chế độ dài của văn bản.
Trong giai đoạn 2022-2023, hệ thống tập trung triển khai kỹ thuật mô hình ngôn ngữ lớn (Large Language Models – LLMs) ưu tiên các cặp ngôn ngữ sau Việt – Khmer, Việt – Lào, Việt – Thái, Việt – Malay và Việt – Indo.
Với ngôn ngữ tiếng Anh (tài nguyên dữ liệu rất dồi dào và là thế mạnh ưu tiên của Google), phần mềm của Viện Công nghệ thông tin đảm bảo chất lượng gần tương đương Google Translate. Đặc biệt, hệ thống có khả năng tinh chỉnh để thích ứng với các miền ngôn ngữ chuyên sâu như y tế, luật… theo yêu cầu riêng của đối tác.
Hệ thống này được nhóm nghiên cứu tự phát triển, dựa trên hạ tầng kỹ thuật hỗ trợ lưu trữ dữ liệu ngôn ngữ lớn và năng lực siêu tính toán trí tuệ nhân tạo/học máy (AI/ML) mạnh nhất Việt Nam.
Viện Công nghệ thông tin hoàn toàn làm chủ các công nghệ liên quan. Do vậy, đơn vị này có thể dễ dàng mở rộng ứng dụng sang các ngôn ngữ đích mới bao gồm các ngôn ngữ dân tộc thiểu số tại Việt Nam (thường rất nghèo tài nguyên dữ liệu) như tiếng Mường, tiếng Thái,… và các ngôn ngữ nước ngoài phổ biến như tiếng Trung, tiếng Pháp, tiếng Nga… khi cần.
Phần mềm dịch đa ngôn ngữ Make in Viet Nam này được kỳ vọng sẽ là lời giải cho bài toán tiếp cận thông tin của đồng bào các dân tộc thiểu số.
Theo Trọng Đạt (VietNamNet)
- Đề thi Tiếng Anh lớp 10 chuyên Khoa học Tự nhiên (59 phút trước)
- Dat Bike ra mắt "tân binh" xe máy điện gia đình mới: Giá chưa tới 30 triệu đồng, chạy 150km/lần sạc (1 giờ trước)
- Red Magic Gaming Tablet 5 Pro xác nhận ra mắt vào tháng 6, lộ diện cấu hình cực khủng (1 giờ trước)
- Hà Nội nóng nhất cả nước, đợt nắng nóng hiện nay kéo dài đến khi nào? (1 giờ trước)
- Bắt giữ 11 YouTuber vì hành vi lừa đảo chiếm đoạt tài sản, thu 3 ô tô và phong tỏa 8 tài khoản ngân hàng (2 giờ trước)
- Gia Lai: Phát hiện đôi nam nữ thương vong trong phòng trọ, nhân chứng nhìn thấy gì trước đó? (2 giờ trước)
- Bí mật ở nơi chữa bệnh bằng nước của "thần y dởm" vừa bị bắt: Từng có người tử vong khi điều trị (2 giờ trước)
- Sự thật chuyện Ronaldo tặng loạt Rolls-Royce Phantom mạ vàng cho cả đội Al Nassr mừng chức vô địch (2 giờ trước)
- Nam thanh niên vào khám bệnh rồi bất ngờ đập phá phòng khám (3 giờ trước)
- Vì sao nhiều người trẻ bỗng dưng bị lệch mặt vì nốt mụn thông thường? (3 giờ trước)