ARC-AGI-4 thông báo trước: Thế hệ tiếp theo sẽ kiểm tra xem AI có thể tự mình phát minh ra thứ gì đó hay không

Động Sát Beating Tin nhanh AI, tổ chức đánh giá AI phi lợi nhuận ARC Prize công bố trước ARC-AGI-4. Benchmark thế hệ tiếp theo sẽ tập trung kiểm tra "đổi mới sáng tạo tự chủ mở", xem AI có thể tự khám phá, đưa ra ý tưởng mới, thậm chí tạo ra phát minh và khám phá mới hay không.

Đề bài cụ thể, cách chấm điểm và thời gian công bố vẫn chưa được tiết lộ. ARC Prize chỉ cho biết, con người hiện vẫn dẫn trước AI rõ rệt về đổi mới sáng tạo mở, đây cũng là một trong những năng lực then chốt thúc đẩy tiến bộ khoa học và công nghệ.

Thông báo này còn trích dẫn bài viết về giảm tốc AI vừa được Dario Amodei công bố. ARC Prize nhấn mạnh, mã nguồn mở vẫn là nền tảng cho tiến bộ AI, phản đối việc ngành công nghiệp giảm mở để phối hợp giảm tốc, tập trung AI tiên tiến vào tay một số ít tổ chức.

ARC-AGI luôn được mệnh danh là bài đánh giá AGI khó nhất toàn cầu. Khi ARC-AGI-3 ra mắt, con người đạt 100%, AI tiên tiến chỉ đạt 0,51%. GPT-6 Astra mới nhất đã bám đuổi đáng kể, nhưng dưới Standard harness thống nhất cũng chỉ đạt 62,7%; sau khi kết nối Provider Adapter của OpenAI mới vọt lên 99,9%.

ARC Prize giờ lại chuẩn bị đẩy cửa ải tiếp theo lên "AI có thể tự đổi mới sáng tạo hay không".