Fine-Tuning

Makine Öğrenmesi Bağlamı

Learning rate, dataset quality, catastrophic forgetting ve evaluation split tasarımın kritik parçalarıdır. Full fine-tuning tüm ağırlıkları, PEFT ise sınırlı parametreleri güncelleyebilir.

Genelleme ve Ölçüm Sınırı

Fine-tuning güncel bilgiyi güvenilir veri tabanı gibi modele yazmanın ideal yolu değildir; factual freshness için retrieval daha uygun olabilir.

İlişkili Makine Öğrenmesi Kavramları

• PEFT
• LoRA
• Instruction Tuning
• Retrieval-Augmented Generation