Eğitim
Talimat Ayarı (Instruction Tuning)
Modeli, talimat–ideal cevap çiftleriyle eğiterek yönergeleri takip eder hale getirme.
Talimat ayarı, ham metin tahmincisini bir asistana dönüştüren aşamadır. Model, insan tarafından yazılmış talimat ve örnek cevap çiftleriyle eğitilir; böylece 'şunu özetle' dendiğinde metni devam ettirmek yerine gerçekten özetler. Bugün kullandığınız tüm sohbet modelleri bu aşamadan geçmiştir.
İlgili Terimler
Ön Eğitim (Pre-Training)
Modelin dili sıfırdan öğrendiği, büyük ölçekli ilk eğitim aşaması.
İnce Ayar (Fine-Tuning)
Ön eğitimden geçmiş bir modeli, alana özgü veriyle eğitmeye devam etme.
RLHF (İnsan Geri Bildirimiyle Pekiştirmeli Öğrenme)
Model çıktılarını insan tercihlerine göre hizalayan eğitim yöntemi.
Anayasal Yapay Zekâ (Constitutional AI)
Modelin yazılı ilkelere göre kendi çıktısını eleştirip düzeltmesine dayanan eğitim yöntemi.