Thinking Machines ने 975 अरब पैरामीटर वाला मॉडल जारी किया, प्रतिद्वंद्वियों से पिछड़ने की बात मानी
Inkling प्रति टोकन अपने 975 अरब में से 41 अरब पैरामीटर सक्रिय करता है, जिसे 45 ट्रिलियन टेक्स्ट, इमेज, ऑडियो और वीडियो टोकन पर प्रशिक्षित किया गया है।
- पोस्ट-ट्रेनिंग बड़े पैमाने पर एसिंक्रोनस रीइन्फोर्समेंट लर्निंग पर निर्भर थी, जो 3 करोड़ से अधिक रोलआउट में फैली थी।
- Hugging Face पर फुल वेट्स मुफ़्त हैं, जबकि Tinker पर फाइन-ट्यूनिंग पर 50% की छूट है।
- एक छोटा संस्करण, Inkling-Small, कुल 276 अरब पैरामीटर का है जिसमें 12 अरब सक्रिय हैं।
क्यों मायने रखता है: 975 अरब पैरामीटर वाले मॉडल को मुफ़्त में देना, अगला मॉडल कौन प्रशिक्षित करेगा इस पर नियंत्रण खोने से कम खर्चीला है।
Thinking Machines Lab — Inkling launch post ↗ · 15 जुल॰ 202615/7/26 · ✓ सत्यापित✓