GemmaTR (Türkçe LLM)

Proje Hakkında

GemmaTR, Google Gemma modelini Türkçe için ince ayarladığım projedir. Google Colab üzerinde Unsloth ve LoRA kullandım; 400.000 Türkçe Wikipedia örneği ve 50.000 hukuk, eğitim ve tarım odaklı soru-cevap içeren veri kümeleriyle 4 farklı model geliştirdim. Modelleri Hugging Face üzerinde açık kaynak olarak yayımladım.

Temel Özellikler

• 400.000 Türkçe Wikipedia + 50.000 soru-cevap veri seti ile ince ayar
• Google Colab üzerinde Unsloth ile model ince ayarı
• LoRA (Low-Rank Adaptation) tekniği ile verimli adaptasyon
• 4 farklı model geliştirme (hukuk, eğitim, tarım odaklı)
• Hugging Face platformunda açık kaynak yayın

Kazanımlar

• Büyük dil modeli fine-tuning süreçleri
• LoRA ve PEFT teknikleri
• Veri seti hazırlama ve temizleme