Kimi K3 to najpotężniejszy otwarty model w historii, stworzony w warunkach niedoboru kart graficznych
Model firmy Moonshot z 2,8 biliona parametrów zajmuje trzecie miejsce w klasyfikacji ogólnej za Claude i GPT-5.6, a jego wagi zostaną opublikowane 27 lipca.
- Model Kimi K3 zajął 2. miejsce w rankingu Vals AI Index i 1. miejsce w zestawieniu Frontend Code Arena.
- Nowe rozwiązania Kimi Delta Attention i Attention Residuals obniżyły koszty obliczeniowe trenowania około 2,5 raza w porównaniu z Kimi K2.
- Analityk Nathan Lambert uważa, że zespół Moonshot pracuje z dużą swobodą w środowisku o ograniczonej dostępności kart graficznych.
Dlaczego to ważne: Racjonowano procesory, a nie pomysły: niedobór wymusił dyscyplinę, której żaden nadmiar kart graficznych nigdy nie nauczył konkurencyjnych laboratoriów.
Nathan Lambert, Interconnects AI ↗ · 21 lip 202621.07.26 · ✓ Sprawdzone✓