bugünün notları ✎

Teknoloji Notlarım

bölüm

Yapay Zekâ Terimleri

81 terim · model eğitimi

Açıklama EklemeAnnotationVeriye ek bağlamsal bilgi veya etiket eklenmesi süreci.Adam OptimizasyonuAdamUyarlanabilir öğrenme oranı kullanan yaygın optimizasyon algoritması.AdaptörAdapterDondurulmuş modele eklenen küçük eğitilebilir katmanlarla ince ayar yapma yöntemi.Ağırlık SönümüWeight DecayBüyük ağırlıkları cezalandıran düzenlileştirme tekniği (L2).Aktif ÖğrenmeActive LearningModelin en bilgilendirici örnekleri seçerek etiketlenmesini talep ettiği yöntem.Bilgi DamıtmaDistillationBüyük bir modelin bilgisinin küçük bir modele aktarılması süreci.BudamaPruningModelden önemsiz ağırlık/nöronların çıkarılarak küçültülmesi.Çapraz DoğrulamaCross-ValidationVeriyi birden fazla parçaya bölüp sırayla her parçayı test kümesi olarak kullanan güvenilir değerlendirme yöntemi.Çapraz EntropiCross EntropySınıflandırma görevlerinde yaygın kullanılan kayıp fonksiyonu türü.Dağıtık EğitimDistributed TrainingBir modelin birden fazla cihaz/makinede paralel eğitilmesi.DerlemCorpusDil modelleri için toplanmış büyük metin koleksiyonu.Destek Vektör MakinesiSVM (Support Vector Machine)Sınıflar arasındaki en iyi ayırıcı sınırı bulmaya çalışan klasik sınıflandırma/regresyon modeli.DevirEpochTüm eğitim verisinin bir kez baştan sona işlenmesi.Doğrudan Tercih OptimizasyonuDPO (Direct Preference Optimization)Ödül modeli kurmadan doğrudan tercih verisiyle model hizalama yöntemi.Doğrulanabilir Ödüllerle Pekiştirmeli ÖğrenmeRLVR (RL with Verifiable Rewards)Matematik, kod gibi doğruluğu otomatik doğrulanabilen görevlerde ödül modeli yerine kesin doğrulayıcı kullanan RL yöntemi; akıl yürütme modellerinin temelidir.Doğrusal / Lojistik RegresyonLinear / Logistic RegressionSürekli değer tahmini (doğrusal) ve ikili sınıflandırma (lojistik) için kullanılan en temel istatistiksel modeller.DropoutEğitim sırasında rastgele nöronları devre dışı bırakan düzenlileştirme tekniği.DüzenlileştirmeRegularizationAşırı öğrenmeyi azaltmak için modele uygulanan kısıtlama teknikleri.EğitimTrainingBir modelin veriden öğrenmesini sağlayan süreç.Eğitim / Doğrulama / Test KümesiTrain / Validation / Test SplitVerinin modeli eğitmek, hiperparametreleri ayarlamak ve nihai performansı tarafsız ölçmek için üç parçaya ayrılması.Erken DurdurmaEarly StoppingPerformans kötüleşmeye başladığında eğitimi durdurma tekniği.EtiketlemeLabelingVeriye doğru cevap/kategori bilgisinin eklenmesi süreci.Felaket UnutmaCatastrophic ForgettingModelin yeni görev öğrenirken önceki görevlerdeki bilgisini kaybetmesi.FSDP / ZeROParametre, gradyan ve optimizasyon durumunu cihazlar arasında parçalayarak çok büyük modellerin eğitimini mümkün kılan bellek verimli dağıtık eğitim teknikleri.Geri YayılımBackpropagationHatanın ağ katmanları boyunca geriye doğru yayılarak gradyanların hesaplanması.Gözetimli İnce AyarSFT (Supervised Fine-Tuning)Etiketli örnek çiftleriyle yapılan gözetimli ince ayar süreci.GradyanGradientKayıp fonksiyonunun parametrelere göre değişim yönü ve büyüklüğü.Gradyan ArtırmaGradient BoostingZayıf modelleri art arda eğiterek hatalarını düzeltmeye dayanan topluluk öğrenme yöntemi.Gradyan İnişiGradient DescentKaybı azaltmak için parametrelerin gradyan yönünde güncellenmesi yöntemi.Gradyan KırpmaGradient ClippingPatlayan gradyanları önlemek için gradyan büyüklüğüne üst sınır koyma.

tüm bölümler

Ana SayfaYZ HaberleriYZ TerimleriYZ Linkleri

konular

açık ağırlıklı modelanthropicapplebilimchatgptclaudecodexçingeminigooglegörsel üretimigrokkodlamametamicrosoftmusenvidiaopenaises ajanısiber güvenlikvideo üretimiyapay zekâ ajanlarıyapay zekâ güvenliğixai

takip et

YouTubeInstagramMMedium