Kimi K3 trở thành mô hình trọng số mở mạnh nhất từng có, được xây dựng với lượng GPU khan hiếm
Mô hình 2.8 nghìn tỷ tham số của Moonshot xếp thứ ba chung cuộc sau Claude và GPT-5.6, dự kiến công bố trọng số vào ngày 27 tháng 7.
- Kimi K3 xếp hạng 2 trên Vals AI Index và hạng 1 trong Frontend Code Arena.
- Kiến trúc Kimi Delta Attention và Attention Residuals mới giúp giảm khoảng 2.5 lần khối lượng tính toán huấn luyện so với Kimi K2.
- Nhà phân tích Nathan Lambert nhận định đội ngũ Moonshot làm việc với sự tự do thực sự trong một môi trường bị giới hạn về GPU.
Vì sao quan trọng: Chip bị hạn chế, chứ không phải ý tưởng: sự khan hiếm đã tạo ra kỷ luật mà không có sự dư thừa GPU nào từng dạy cho các phòng thí nghiệm đối thủ.
Nathan Lambert, Interconnects AI ↗ · 21 thg 7, 202621/7/26 · ✓ Xác minh✓