Boştaki ekran kartlarını birleştirip açık dil modellerini birlikte eğitiyoruz. İlk dilimiz Türkçe. Sonuç açık lisansla, herkesin kullanımına.
Yapay zekâda şunu kimse tek başına tutmasın:
Eğitim kodunu ve gönüllü istemcisini Apache-2.0 ile açacağız.
Model ağırlıkları, herkesin indirip kendi makinesinde çalıştırabileceği biçimde yayınlanacak.
Neyle eğittiğimizi ve her kaynağın lisansını açıkça yazacağız.
Katkılar kayıt altında olacak; yönü birlikte belirleyeceğiz.
Kodu ve model ağırlıklarını Apache-2.0 ile yayınlayacağız. Eğitim verisinin kaynaklarını ve lisanslarını açıkça listeleyeceğiz.
LisansHer kare bir gönüllü ekran kartını temsil eden illüstrasyondur. Gerçek ağ henüz yok.
Taban modeli dondurup yalnızca küçük bir LoRA adaptörünü eğitiyoruz. Denememizde tepe bellek 5,2 GB oldu; 8 GB'lık bir dizüstü kartına sığdı.
Nasıl çalışırAlanlar gerçek boyut oranında (≈30:1)
Gönüllüler her adımda değil, 25 adımda bir senkronize olur. Simülasyonumuzda yaklaşık 25 kat az veri taşındı; bayt başına bitte fark %0,09 oldu.
ÖlçümlerimizHer adımda senkron: 25 senkron
Seyrek senkron: 1 senkron
25 adımlık bir pencere (illüstrasyon)
Türkçe dil modellemesi iyileşti, ama TurkishMMLU'da iyileşme görmedik. Hepsi küçük deney: tek koşu, tek tohum, gerçek ağ yok.
Yol haritasıMüşteri logomuz yok. Elimizde ölçümlerimiz var.
Adaptör üzerinde seyrek senkronizasyon, 4 sanal işçi. Simülasyon.
Seyrek ve her adımda senkron eğitim arasında, bayt başına bit: 1,2166 ve 1,2155.
Qwen3-0.6B'ye 20 dakikalık LoRA ile, 8 GB'lık tüketici ekran kartında.
TurkishMMLU %35,6 → %34,7, fark gürültü içinde. Henüz “model iyileşti” diyemiyoruz.
Küçük denemeler: tek koşu, tek tohum, gerçek ağ yok. Tüm tablolar Ölçümler sayfasında.
Küçük modelde seyrek senkronizasyon simülasyonu.
LoRA ile 8 GB'ta kısa sürekli ön eğitim.
Daha çok Türkçe veri, kıyas testleri.
Açık kaynak, imzalı güncelleme.
Gerçek ağda deneme, sonra ilk yayın.
Tarih taahhüdü vermiyoruz.
Halayda herkes komşusunun koluna girer; çemberin ne başı vardır ne sonu. Ağımız da böyle çalışacak.
Her gönüllü bir fener taşır: ekran kartınızın verdiği emek, bir ışık. Işık elden ele geçer, onu hiçbir tek el tutmaz.
Bu iş tek kişilik değil. Şu an en çok şunlara ihtiyacımız var:
E-posta adresinizi yalnızca Modelen duyuruları için kullanırız.
Gönüllü ol