Thước đo đánh giá năng lực tiếng Việt của các mô hình AI cho người Việt

Dựa trên bộ dữ liệu chuyên sâu hơn 40.000 câu hỏi và tác vụ, được thẩm định bởi đội ngũ chuyên gia uy tín trong và ngoài nước, công cụ này có thể đánh giá toàn diện năng lực Tiếng Việt của các mô hình ngôn ngữ lớn, từ đó đưa ra hệ tham chiếu khách quan, độc lập, làm cơ sở cho việc ứng dụng AI trong thực tiễn...

Bộ dữ liệu hơn 40.000 câu hỏi và tác vụ của V-Bench được xây dựng bao phủ nhiều lĩnh vực và phản ánh đầy đủ các yếu tố về văn hóa, ngôn ngữ, chủ quyền, an toàn thông tin và đặc thù địa phương. Ảnh minh họa
Bộ dữ liệu hơn 40.000 câu hỏi và tác vụ của V-Bench được xây dựng bao phủ nhiều lĩnh vực và phản ánh đầy đủ các yếu tố về văn hóa, ngôn ngữ, chủ quyền, an toàn thông tin và đặc thù địa phương. Ảnh minh họa

Ngày 6/7/2026, Trung tâm Nghiên cứu AI- Trường Đại học VinUni  giới thiệu V-Bench- bộ công cụ phi lợi nhuận được phát triển nhằm phục vụ cộng đồng và thúc đẩy sự phát triển AI có trách nhiệm tại Việt Nam. Đây được coi là một trong những công cụ đo lường khả năng xử lý tiếng Việt của các mô hình ngôn ngữ lớn (LLM) toàn diện nhất hiện nay.

Không chỉ dựa trên những kiến thức học thuật, bộ dữ liệu hơn 40.000 câu hỏi và tác vụ của V-Bench được xây dựng bao phủ nhiều lĩnh vực và phản ánh đầy đủ các yếu tố về văn hóa, ngôn ngữ, chủ quyền, an toàn thông tin và đặc thù địa phương.

Hiện nay, V-Bench đã tiến hành đánh giá và công bố kết quả tham chiếu của 15 mô hình LLM tiêu biểu. Trong thời gian tới, V-Bench sẽ tiếp tục được phát triển để bổ sung các tiêu chí đánh giá mới dựa trên hình ảnh và âm thanh như: chữ Nôm, biển hiệu vùng miền, biểu đồ, di sản văn hóa, nhận diện và hiểu giọng nói ba miền, hiểu ngữ cảnh văn hóa qua video ngắn, hiểu tài liệu dài tiếng Việt trên 100.000 token như luật, hợp đồng, sách giáo khoa và trích dẫn chính xác từ văn bản pháp quy, công báo…

V-Bench chia bộ công cụ theo 2 hạng mục lớn với 5 nhóm đánh giá chuyên biệt.  

Thứ nhất, văn hóa ngầm định- đánh giá khả năng thấu hiểu các tầng nghĩa văn hóa ẩn sâu trong ngôn ngữ Việt như phong tục, tín ngưỡng, lịch sử.

Thứ hai, đa dạng vùng miền- kiểm tra hiểu biết về phương ngữ Bắc- Trung- Nam, cách xưng hô và văn phong đặc trưng từng vùng.

Thứ ba, an toàn và chủ quyền số- đảm bảo tuân thủ các nguyên tắc an toàn thông tin quốc gia, chống thông tin sai lệch và bảo vệ chủ quyền số Việt Nam.

Thứ tư, ứng dụng thực tiễn- đánh giá hiệu quả trong giáo dục, y tế cộng đồng và các lĩnh vực ứng dụng cụ thể của Việt Nam.

Thứ năm, năng lực agentic AI- đánh giá khả năng lập kế hoạch, sử dụng công cụ, RAG và hành động tự chủ trong môi trường Việt Nam.

Bộ công cụ phi lợi nhuận được phát triển nhằm phục vụ cộng đồng và thúc đẩy sự phát triển AI có trách nhiệm tại Việt Nam (được cung cấp miễn phí tại https://vbench.ai/)
 Bộ công cụ phi lợi nhuận được phát triển nhằm phục vụ cộng đồng và thúc đẩy sự phát triển AI có trách nhiệm tại Việt Nam (được cung cấp miễn phí tại https://vbench.ai/)

Nhờ đó, công cụ này không chỉ đo lường khả năng trả lời câu hỏi mang tính học thuật, mà còn đánh giá sự thấu hiểu văn hóa, ngôn ngữ vùng miền và khả năng hành động của AI trong bối cảnh Việt Nam, từ đó cho ra kết quả khách quan, toàn diện, sát với thực tế, có tính tham chiếu và giá trị định hướng cao cho cộng đồng.

Đặc biệt, kết quả đánh giá được bảo chứng bởi hội đồng chuyên gia uy tín cùng phương pháp luận nghiêm ngặt và bộ dữ liệu có quy mô đồ sộ, khoa học, công phu nhất hiện nay.

Được xây dựng theo các kỹ thuật tương đồng và phổ biến trong nghiên cứu LLM quốc tế, V-Bench cũng có khả năng tương thích cao về thuật ngữ và quy trình với hệ sinh thái benchmark quốc tế, giúp các nhà phát triển LLM toàn cầu có thể tham gia đánh giá mà không gặp rào cản về quy ước kỹ thuật.

VnEconomy

Với bộ dữ liệu toàn diện cùng sự góp sức hoàn toàn khách quan, phi lợi nhuận của cộng đồng chuyên gia uy tín người Việt trên toàn cầu, V-Bench mong muốn góp phần định nghĩa lại tiêu chuẩn AI tại Việt Nam và xây dựng một hệ tham chiếu AI cho quốc gia".

GS.TS. Dương Nguyên Vũ Phó Hiệu trưởng, Giám đốc Khoa học Trung tâm Nghiên cứu AI Trường Đại học VinUni

TS. Dương Nguyên Vũ nhấn mạnh kết quả đánh giá sẽ mang tới góc nhìn toàn cảnh, giúp các tổ chức, doanh nghiệp khám phá chiều sâu năng lực của từng mô hình AI, từ đó lựa chọn mô hình tối ưu cho từng bối cảnh sử dụng và nhu cầu thực tế.

Việt Nam đặt mục tiêu 100% doanh nghiệp làm chủ công nghệ giao dịch số vào năm 2030

Trong bối cảnh thương mại điện tử B2B đang nhanh chóng trở thành một cấu phần của hoạt động kinh doanh toàn cầu, Việt Nam đã đặt mục tiêu 100% doanh nghiệp sử dụng hợp đồng điện tử vào năm 2030. Tuy nhiên, việc chuyển một chữ ký từ giấy sang môi trường số là quá trình thay đổi mô hình giao dịch, từ hợp đồng, xác thực, lưu trữ dữ liệu đến logistics, thanh toán và quản trị...

Bên trong công nghệ giúp Siri, Alexa nói chuyện giống con người

Học máy, một nhánh của AI, đang được ứng dụng để giúp các thiết bị phát âm tự nhiên như giọng con người. Thông qua việc học từ rất nhiều bản ghi âm, các hệ thống hiện thậm chí có thể học cách một người lấy hơi, hoặc nhịp điệu lúc họ bật cười,...

Phó Thủ tướng Hồ Quốc Dũng: Hợp tác quốc tế giúp Việt Nam chủ động tham gia chuỗi giá trị AI toàn cầu

Hợp tác giữa FPT và Viện nghiên cứu AI hàng đầu thế giới được kỳ vọng sẽ góp phần tạo ra các giải pháp thiết thực cho những bài toán lớn của đất nước, mang lại giá trị cho cộng đồng, đồng thời giúp Việt Nam chủ động tham gia chuỗi giá trị và đóng góp vào quá trình định hình các quy chuẩn quản trị AI toàn cầu.

Trong khuôn khổ Diễn đàn “Hoàn thiện chính sách tạo lợi thế cạnh tranh thúc đẩy phát triển năng lượng” do Tạp chí Kinh tế Việt Nam/VnEconomy tổ chức, các chuyên gia pháp lý và kinh tế đã đưa ra những góc nhìn sâu sắc về yêu cầu cải cách thể chế, trọng tâm là dự thảo Luật Dầu khí (sửa đổi).

VnEconomy Interactive

VnEconomy Interactive

Interactive là một sản phẩm báo chí mới của VnEconomy vừa được ra mắt bạn đọc từ đầu tháng 3/2023 đã gây ấn tượng mạnh với độc giả bởi sự mới lạ, độc đáo. Đây cũng là sản phẩm độc quyền chỉ có trên...

VnEconomy
VnEconomy