Giai đoạn đánh giá lần hai của dự án "mô hình nền tảng AI độc lập" (Độc-PAMO) do Bộ Khoa học và Công nghệ thông tin Hàn Quốc thúc đẩy đang đến gần. Trong khi các công ty công bố mô hình của mình, họ đã chứng minh được sức cạnh tranh trong các lĩnh vực chuyên biệt như tiếng Hàn, toán học và khoa học, nhưng vẫn còn khoảng cách với các mô hình tiên tiến toàn cầu về khả năng vận hành mô hình lớn và hiệu quả suy luận.
Theo thông tin từ ngành công nghiệp vào ngày 2 tháng 8, SK Telecom, Upstage và LG AI Research, những đơn vị tham gia dự án Độc-PAMO, đã công bố mô hình của họ trên Hugging Face vào tháng trước. Công ty Motif Technologies cũng đã tham gia và giới thiệu phiên bản xem trước.
Phân tích các thẻ mô hình được công bố trên Hugging Face cho thấy có 7 chỉ số chung được công bố với các tên gọi tương tự, bao gồm: suy luận toán học, suy luận khoa học, suy luận tổng hợp khó, thực hiện chỉ thị, suy luận dài, kiến thức tiếng Hàn, và văn hóa cũng như kiến thức chung của Hàn Quốc. Các chỉ số đánh giá chuyên biệt trong nước như kiến thức tiếng Hàn và hiểu biết văn hóa cũng được bao gồm trong các chỉ số chung này.
Mô hình A.X K2 của SKT ghi điểm cao nhất trong số ba mô hình với 91.6 điểm cho kiến thức văn hóa và kiến thức chung của Hàn Quốc, 80.5 điểm cho kiến thức tiếng Hàn, 66.0 điểm cho suy luận dài và 97.1 điểm cho suy luận toán học. Mô hình Solar Open 2 của Upstage cũng ghi điểm tương đối cao với 86.3 điểm cho suy luận khoa học, 28.8 điểm cho suy luận tổng hợp khó và 80.0 điểm cho thực hiện chỉ thị.
Ngược lại, mô hình K-EXAONE 2.0 của LG AI Research, đứng đầu trong giai đoạn đánh giá lần một, không ghi được điểm cao nhất trong bất kỳ chỉ số chung nào trong số 7 chỉ số.
Về quy mô mô hình, LG AI Research dẫn đầu với K-EXAONE có 750 tỷ tham số, là quy mô lớn nhất trong nước. LG AI Research dự định sẽ cải thiện chất lượng dữ liệu và phát triển học tăng cường để nâng cấp mô hình này lên cấp độ toàn cầu.
Giám đốc nghiên cứu chung của LG AI Research, Im Woo-hyung, cho biết: "Mô hình hiện tại không phải là kết quả hoàn thiện mà là điểm khởi đầu để nâng cấp lên mô hình cấp độ tiên tiến. Chúng tôi sẽ hoàn thiện hiệu suất của K-EXAONE thông qua cải thiện chất lượng dữ liệu, học tập tiếp theo, học tăng cường và tinh chỉnh công nghệ suy luận."
Tuy nhiên, các chuyên gia cho rằng mô hình được công bố lần này không phải là bản cuối cùng mà chỉ là phiên bản xem trước, do đó có những hạn chế trong việc đánh giá khả năng cạnh tranh toàn cầu. Các chỉ số công bố cũng có tỷ lệ cao về các lĩnh vực chuyên biệt như tiếng Hàn và hiểu biết văn hóa trong nước, vì vậy kết quả lần này có ý nghĩa hơn trong việc xác định điểm mạnh và hướng công nghệ của từng công ty hơn là phân định rõ ràng giữa các mô hình toàn cầu.
Bong Gang-ho, nhà nghiên cứu cao cấp tại Viện Nghiên cứu Chính sách Phần mềm, cho biết: "Kết quả lần này có ý nghĩa trong việc xác định xem liệu một số lĩnh vực có đạt được khả năng cạnh tranh cấp độ tiên tiến toàn cầu hay không, thay vì đánh giá xem có vượt qua được các mô hình toàn cầu trong tất cả các chỉ số hay không. Công nghệ và kinh nghiệm phát triển tích lũy từ Độc-PAMO sẽ là nền tảng cho khả năng cạnh tranh AI trong nước trong tương lai."
Cuộc cạnh tranh giữa các mô hình tiên tiến toàn cầu đang diễn ra không chỉ về quy mô mô hình lớn mà còn về hiệu quả suy luận. Gần đây, mô hình Kimi K3 do công ty Trung Quốc Moonshot AI công bố có quy mô tham số lớn hơn khoảng 3.7 lần so với K-EXAONE, đồng thời tích hợp khả năng xử lý văn bản dài, đa phương thức và chức năng tác nhân.
Đặc biệt, Kimi K3 áp dụng cấu trúc MoE (Mixture of Experts) với 896 chuyên gia, trong đó chỉ chọn 16 chuyên gia cho mỗi token, giảm tỷ lệ tham số hoạt động tham gia tính toán xuống khoảng 3.7%. Điều này giúp duy trì quy mô mô hình lớn trong khi giảm khối lượng tính toán và chi phí, từ đó nâng cao hiệu quả suy luận. Trong khi đó, tỷ lệ tham số hoạt động của các mô hình công bố trong nước dao động từ khoảng 4.1% đến 6.0%, cho thấy cuộc cạnh tranh công nghệ để nâng cao hiệu quả suy luận của các mô hình lớn đang diễn ra mạnh mẽ.
* Bài viết này được dịch tự động bằng AI.
© Bản quyền thuộc về Thời báo Kinh tế AJU & www.ajunews.com: Việc sử dụng các nội dung đăng tải trên vietnam. kyungjeilbo.com phải có sự đồng ý bằng văn bản của Aju News Corporation.