Nvidia chính thức mã nguồn mở mô hình Nemotron 3 Ultra cấp cao nhất 550B: Kiến trúc MoE lai Mamba-Transformer đầu tiên, được thiết kế riêng cho tác nhân thông minh đường dài.

Theo Động Sát Beating giám sát, NVIDIA chính thức mã nguồn mở mô hình ngôn ngữ lớn hàng đầu Nemotron 3 Ultra với 550 tỷ tham số, kích hoạt 55 tỷ, vào ngày 4 tháng 6. Mô hình được tối ưu hóa cho các tác vụ tác nhân đường dài như lập kế hoạch phức tạp, suy luận và gọi công cụ.

Trong Chỉ số Thông minh của nền tảng điểm chuẩn bên thứ ba Artificial Analysis, Nemotron 3 Ultra đạt 47,7 điểm, trở thành mô hình mã nguồn mở có hiệu suất mạnh nhất tại Mỹ hiện tại, nhưng vẫn xếp sau các mô hình mã nguồn mở Trung Quốc như Kimi K2.6 (53,9 điểm), MiMo-V2.5-Pro (53,8 điểm) và DeepSeek V4 Pro (51,5 điểm) trên phạm vi toàn cầu.

Về kiến trúc kỹ thuật, mô hình sử dụng kiến trúc chuyên gia hỗn hợp MoE Mamba-Transformer, luân phiên sử dụng các lớp mô hình không gian trạng thái Mamba-2 và các lớp tự chú ý Transformer, khắc phục nút thắt bộ nhớ do bộ đệm KV tăng theo cấp số nhân trong ngữ cảnh siêu dài, hỗ trợ cửa sổ ngữ cảnh 1 triệu token với chi phí bộ nhớ cực thấp. Kiến trúc hỗn hợp đạt được mức tăng thông lượng lên tới 5 lần và giảm 30% chi phí suy luận trong các tác vụ tác nhân.

Về hệ sinh thái, NVIDIA đồng thời phát hành bộ công cụ tác nhân Agent Toolkit, bao gồm bản thiết kế điều phối NemoClaw và thời gian chạy OpenShell. Nội dung mã nguồn mở trực tiếp bao gồm trọng số mô hình, bộ dữ liệu và công thức huấn luyện. Mô hình đã có mặt trên Hugging Face, NVIDIA NIM và OpenRouter. Nhà cung cấp dịch vụ tìm kiếm AI cấp doanh nghiệp Glean và các bên khác đã thông báo tích hợp, sử dụng làm giải pháp thay thế cho các mô hình ngôn ngữ lớn thương mại đóng.