Mistral Large 4 bir trilyon parametreyle tanıtıldı
Kısaca
Mixture-of-Experts mimarisi kullanan çok modlu model, metinle birlikte görsel verileri işleyebiliyor ve Avrupa merkezli dağıtım seçeneğini öne çıkarıyor.
Ne oldu?
- Model her istekte 1,05 trilyon toplam parametrenin yalnızca 49 milyar etkin parametresini kullanıyor.
- Bir milyon tokenlık bağlam penceresi sunan model, Mistral'ın açık model çalışmalarını izleyen sürüm olarak duyuruldu.
Neden önemli?
OpenAI ve Google'a alternatif arayan geliştiriciler ile veri yerleşimi Avrupa'da olması gereken projeler için Mistral'ın yeni amiral gemisi değerlendirilmeye alınmalı.
1,05 trilyon parametre49 milyar etkin parametre1 milyon token bağlam penceresi

