Cuộc cạnh tranh cuối cùng của dự án mô hình AI độc lập (độc lập AI foundation model - độcpa mô) đã thu hẹp lại còn ba ứng viên: Upstage, SK Telecom (SKT) và Viện Nghiên cứu AI LG. Công ty Motif Technologies, tham gia vào cuộc thi qua đợt công bố bổ sung, đã không vượt qua được vòng đánh giá giai đoạn 2.
Ngày 18 tháng 8, Bộ Khoa học và Công nghệ thông tin (Bộ Khoa học) cùng với Cơ quan Phát triển Công nghiệp Thông tin (NIPA) đã công bố kết quả đánh giá giai đoạn 2 của dự án độcpa mô. Kết quả cho thấy Motif đã bị loại, trong khi Upstage, SKT và Viện Nghiên cứu AI LG tiến vào giai đoạn tiếp theo.
Theo Bộ Khoa học, đánh giá giai đoạn 2 lần này được thực hiện dựa trên ba tiêu chí: đánh giá benchmark (40 điểm), đánh giá chuyên gia (35 điểm) và đánh giá người dùng (25 điểm).
Đánh giá benchmark bao gồm 25 điểm từ Chỉ số Thông minh của Phân tích Nhân tạo (AAII) và 15 điểm từ benchmark của NIA. AAII đã sử dụng 9 loại benchmark khó khăn bao gồm các lĩnh vực như đại lý, lập trình, tổng quát và khoa học để thực hiện đánh giá. Đánh giá benchmark của NIA tập trung vào các lĩnh vực như toán học, kiến thức, hiểu biết văn bản dài, thực hiện chỉ dẫn, tiếng Hàn, độ ổn định và độ tin cậy.
Điểm trung bình của bốn đội xuất sắc trong đánh giá benchmark là 22,5 điểm, với khoảng cách điểm giữa vị trí thứ nhất và thứ tư là 4,0 điểm.
Đánh giá chuyên gia được thực hiện bởi một ủy ban chuyên gia gồm các chuyên gia AI bên ngoài. Dựa trên tài liệu đánh giá mà các đội xuất sắc đã nộp, ủy ban đã tiến hành đánh giá sâu trong khoảng một tuần với các tiêu chí như chiến lược và công nghệ phát triển (10 điểm), thành tựu và kế hoạch phát triển (10 điểm), tác động và kế hoạch đóng góp (15 điểm). Ủy ban chuyên gia bao gồm 10 chuyên gia không có xung đột lợi ích và có chuyên môn trong các lĩnh vực thuật toán AI, dịch vụ và dữ liệu.
Điểm trung bình của bốn đội xuất sắc trong đánh giá chuyên gia là 28,8 điểm, với khoảng cách điểm giữa vị trí thứ nhất và thứ tư là 2,4 điểm.
Đánh giá người dùng, lần đầu tiên được áp dụng trong giai đoạn đánh giá này, bao gồm đánh giá từ người dùng chuyên nghiệp AI (15 điểm) và đánh giá từ công chúng (10 điểm). Đánh giá từ người dùng chuyên nghiệp có sự tham gia của 49 đại diện từ các công ty khởi nghiệp AI, trong khi đánh giá từ công chúng có 185 người tham gia. Mục đích của đánh giá này không chỉ là đánh giá hiệu suất của mô hình AI mà còn để tổng hợp đánh giá về tính khả dụng và hiệu quả mà người dùng thực tế cảm nhận được khi sử dụng mô hình.
Điểm trung bình của bốn đội xuất sắc trong đánh giá người dùng là 17,6 điểm, với khoảng cách điểm giữa vị trí thứ nhất và thứ tư là 5,0 điểm, cho thấy sự chênh lệch lớn hơn so với đánh giá benchmark và đánh giá chuyên gia.
Trong khi đó, Bộ Khoa học cho biết sẽ mở rộng hỗ trợ cho các đội xuất sắc đã tiến vào giai đoạn tiếp theo của dự án độcpa mô bằng cách cung cấp GPU B200 hiệu suất cao.
Bộ Khoa học nhấn mạnh rằng "cần nhận thức sâu sắc về sự cần thiết của mô hình AI độc lập hàng đầu và đang thảo luận với các cơ quan liên quan về một hệ thống hỗ trợ mới vượt qua các phương pháp hiện tại" và cho biết sẽ công bố thông tin cụ thể trong thời gian tới.
* Bài viết này được dịch tự động bằng AI.
© Bản quyền thuộc về Thời báo Kinh tế AJU & www.ajunews.com: Việc sử dụng các nội dung đăng tải trên vietnam. kyungjeilbo.com phải có sự đồng ý bằng văn bản của Aju News Corporation.