کمپنی Thinking Machines نے 975 ارب پیرامیٹرز کا ماڈل پیش کر دیا، حریفوں سے پیچھے ہونے کا اعتراف
ماڈل Inkling ہر ٹوکن پر اپنے 975 ارب میں سے 41 ارب پیرامیٹرز کو فعال کرتا ہے، اور اسے 45 ٹریلین ٹیکسٹ، امیج، آڈیو اور ویڈیو ٹوکنز پر ٹرین کیا گیا ہے۔
- پوسٹ ٹریننگ میں بڑے پیمانے پر غیر ہم آہنگ ری انفورسمنٹ لرننگ کا استعمال کیا گیا جو 30 ملین سے زیادہ رول آؤٹس پر محیط تھی۔
- اس کے مکمل ویٹس Hugging Face پر مفت دستیاب ہیں، جبکہ Tinker پر فائن ٹیوننگ پر 50 فیصد رعایت دی جا رہی ہے۔
- اس کے چھوٹے ورژن Inkling-Small کے کل 276 ارب پیرامیٹرز ہیں جن میں سے 12 ارب فعال رہتے ہیں۔
یہ کیوں اہم ہے: ایک 975 ارب پیرامیٹرز والے ماڈل کو مفت دینے کی قیمت اس نقصان سے کم ہے جو اگلا ماڈل بنانے والوں پر سے کنٹرول کھونے سے ہو سکتا ہے۔
Thinking Machines Lab — Inkling launch post ↗ · 15 جولائی، 202615/7/26 · ✓ جانچ شدہ✓