mới nhất Dân sinh Đô thị Di sản Thị dân Văn hóa Khoa học Lối sống Diễn đàn multimedia nhận định bóng kèo nhà cái hôm nay Đô Thị nhận định bóng đá

Bộ tiêu chuẩn đánh giá năng lực tiếng Việt miễn phí cho các mô hình trực tiếp kèo nhà cái Nam

16:15 | Thứ ba, 14/11/20230
Zalo trực tiếp kèo nhà cái vừa chính thức công bố bộ tiêu chuẩn đánh giá năng lực tiếng Việt VMLU (Vietnamese Multitask Language Understanding). VMLU do Zalo trực tiếp kèo nhà cái phối hợp với Viện Khoa học và Công nghệ tiên tiến Nhật Bản (JAIST) xây dựng nhằm giúp cộng đồng nghiên cứu và phát triển trí tuệ nhân tạo (trực tiếp kèo nhà cái) ở Việt Nam có thêm công cụ đánh giá chất lượng đầu ra của các mô hình Generative trực tiếp kèo nhà cái (trực tiếp kèo nhà cái tạo sinh) tiếng Việt.

Sự ra đời củaVMLUđã tạo động lực cho các cá nhân, startup hay các nhóm nghiên cứu nhỏ trong việc phát triển ra các mô hình trực tiếp kèo nhà cái tiếng Việt mới. Điều này tạo điều kiện cho các nghiên cứu mới, đặt nền móng đo lường sự chính xác và nâng cấp kết quả của các mô hình cơ bản, giúp hoàn thiện quá trình phát triển các ứng dụng trực tiếp kèo nhà cái ngôn ngữ Việt, do chính người Việt tạo ra để phục vụ người Việt.

Đây cũng là một trong những yếu tố quan trọng thúc đẩy sự phát triển Generative trực tiếp kèo nhà cái Nam đi nhanh hơn, bắt kịp với làn sóng phát triển AI trên thế giới.

Đây làbộ tiêu chuẩn đánh giá tiếng Việtđa khía cạnh, đa cấp độ và đáp ứng đa dạng nhu cầu bậc nhất trên thị trường hiện nay với 10.880 câu hỏi trắc nghiệm xoay quanh 58 chủ đề khác nhau.


Theo đó, đây là bộ tiêu chuẩn đánh giá tiếng Việt đa khía cạnh, đa cấp độ và đáp ứng đa dạng nhu cầu hàng đầu trên thị trường nghiên cứu và phát triển Generative trực tiếp kèo nhà cái Nam, hướng đến hai phần chính: dữ liệu (test dataset) và bộ công cụ tiêu chuẩn đánh giá, làm cơ sở để kiểm tra đối với các mô hình AI ứng dụng ngôn ngữ Việt.

Cụ thể, bộ dữ liệu bao gồm 10.880 câu hỏi trắc nghiệm xoay quanh 58 chủ đề khác nhau. Mỗi chủ đề có khoảng 200 câu hỏi và được phân bổ trên 4 lĩnh vực bao gồm: STEM, khoa học xã hội, khoa học nhân văn và một danh mục rộng “Mở rộng”.

Với khối dữ liệu này, VMLU có sự phân tầng độ khó với 4 cấp bậc: tiểu học, trung học cơ sở, trung học phổ thông và chuyên nghiệp - cho đại học và sau đại học. Từ đó, bộ công cụ giúp đánh giá hiệu quả năng lực ngôn ngữ tiếng Việt của các mô hình trực tiếp kèo nhà cái về cả kiến thức sơ đẳng lẫn giải quyết các vấn đề phức tạp.

Bên cạnh đó, để giúp các nhóm nghiên cứu dễ dàng đánh giá năng lực các mô hình trực tiếp kèo nhà cái tiếng Việt của mình, đội ngũ kĩ sư Zalo trực tiếp kèo nhà cái thiết kế kèm theo hướng dẫn để các nhóm có thể sử dụng một cách nhanh chóng và đơn giản.

Lưu ý: VMLU giới hạn 5 lần thử nghiệm/tài khoản/ngày. Kết quả được ghi nhận từ lịch sử đánh giá gần nhất.


Bộ tiêu chuẩn VMLU ra đời chính là một sản phẩm được nghiên cứu nhằm hướng đến mục đích đóng góp và phát triển cộng đồng nghiên cứu trực tiếp kèo nhà cái Nam nói riêng cũng như cộng đồng công nghệ thông tin nói chung, không thu phí bất kỳ người dùng, nhóm nghiên cứu hay doanh nghiệp nào.

Trước đó, Zalo AI đã thực hiện, triển khai và tổ chức hàng loạt các cuộc thi, chương trình cho cộng đồng trực tiếp kèo nhà cái Nam như: Zalo AI Challenge, Zalo AI Hackathon, Zalo AI Summit… Những hoạt động này không chỉ tạo sân chơi cho cộng đồng trực tiếp kèo nhà cái mà còn khuyến khích việc ứng dụng AI vào cuộc sống, giải quyết các bài toán cấp thiết của xã hội, phục vụ cho nhu cầu của hàng triệu người Việt Nam.

TS. Châu Thành Đức – Trưởng bộ phận nghiên cứu Zalo AI - Giảng viên Trường Đại học Khoa học tự nhiên  Đại học Quốc gia TP.HCM, khẳng định: “Zalo AI luôn hướng tới sự đóng góp cho cộng đồng trực tiếp kèo nhà cái Nam, tạo động lực để trực tiếp kèo nhà cái Nam phát triển. Từ đó kỳ vọng ngày càng có nhiều sản phẩm AI của người Việt, cho người Việt”.

Sự phát triển bùng nổ của chat GPT đã tạo ra một cuộc đua mới: Generative trực tiếp kèo nhà cái. Theo số liệu thống kê, kể từ thời điểm chat GPT được giới thiệu, trên thế giới hiện có khoảng 16.000 mô hình tương tư như chat GPT ra đời. Việt Nam cũng không đứng ngoài xu thế đó khi có rất nhiều nhóm nghiên cứu với quy mô, tiềm lực khác nhau cũng đang muốn thử nghiệm với Generative trực tiếp kèo nhà cái sử dụng tiếng Việt. Điều này đã kéo theo nhu cầu về một bộ đánh giá năng lực tiếng Việt cho chính các mô hình trực tiếp kèo nhà cái này để đo lường mức độ nắm tri thức cũng như tư duy ngôn ngữ tiếng Việt.

Trên thị trường hiện nay, hầu hết các nhóm nghiên cứu mô hình ngôn ngữ lớn (LLM) ở Việt Nam đều phải tự xây dựng bộ công cụ đánh giá với chuẩn mực riêng cho mô hình của mình. Đây là những bộ đánh giá nội bộ, chưa được công khai ra thị trường. Bộ đánh giá của Zalo trực tiếp kèo nhà cái hướng đến nhu cầu tổng quát, có thể làm tiêu chuẩn chung cho các mô hình LLM và được cung cấp ra cho cộng đồng trực tiếp kèo nhà cái. Điều này vừa giúp những nhóm nghiên cứu nhỏ có thể tiếp cận được bộ dữ liệu đánh giá toàn diện vừa để các bên có thể so sánh kết quả lẫn nhau. Từ đó, tạo ra động lực hoàn thiện hơn mô hình.

Trà My

bài viết liên quan
để lại bình luận của bạn
có thể bạn quan tâm
Cùng chuyên mục
Xem nhiều nhất

Đọc tin nhanh

*Chỉ được phép sử dụng thông tin từ website này khi có chấp thuận bằng văn bản của Người Đô Thị.