GPT 3.5 OpenAI tarafından geliştirilen yapay zeka uygulamasının birinci versiyonuna ilişkin bir üst modeldir. GPT 4’ün çıkışından bu yana tekrar gündeme gelen ve özellikleri merak edilen GPT 3.5 Ocak 2022’de geliştirilmiştir.
GPT 3.5 Nedir?
GPT 3.5 modeli, GPT 3 (Generative Pre-Trained Transformer) modelinin ince ayarlı bir versiyonudur. Bu model ile birlikte, toksik çıktıların belli ölçüde azaltılması ve diyalogların güçlendirilmesi hedeflenmiştir. Bu model, her biri 1.3B, 6B ve 175B parametrelerine sahip 3 varyanta sahiptir.
3.5 modelleri, ek ince ayarlarla birlikte GPT 3 ile birebir eğitim öncesi data kümelerini kullanır. Bu ince ayar kademesi, bir evvelki modele ‘insan geri bildirimi ile pekiştirmeli öğrenme’ yahut RLHF isimli bir kavram ekler. ChatGPT, RLHF’yi bir kullanıcıya şu biçimde açıklıyor:
“İnsan üzere konuşmayı öğrenmek isteyen Rufus isminde bir robotunuz olduğunu hayal edin. Rufus’un sözleri ve cümleleri anlamasına yardımcı olan bir lisan modeli var.
Önce, Rufus kendi lisan modelini kullanarak bir şeyler söyleyecek. Örneğin, “Ben bir robotum” diyebilir.
Ardından, bir insan Rufus’un söylediklerini dinleyecek ve kulağa bir insanın söyleyeceği doğal bir cümle üzere gelip gelmediği konusunda ona geri bildirimde bulunacaktır. İnsan, “Bu pek hakikat değil, Rufus. Beşerler çoklukla ‘Ben bir robotum’ demezler. ‘Ben bir robotum’ yahut ‘Ben bir makineyim’ diyebilirler.”
Rufus bu geri bildirimi alıp lisan modelini güncellemek için kullanacak. Beşerden aldığı yeni bilgileri kullanarak cümleyi tekrar söylemeye çalışacaktır. Bu sefer “Ben bir robotum” diyebilir.
İnsan tekrar dinleyecek ve Rufus’a daha fazla geri bildirimde bulunacak. Bu süreç, Rufus bir beşere doğal gelen cümleler söyleyene kadar devam edecek.
Zamanla Rufus, insanlardan aldığı geri bildirimler sayesinde insan üzere konuşmayı öğrenecektir. İnsan geri bildirimi ile RL kullanılarak lisan modelleri bu biçimde geliştirilebilir.”
GPT 4’ün GPT 3.5’ten farkı nedir?
Popüler yapay zeka uygulamasının son versiyonu olan GPT 4’ü evvelkilerden ayıran yeni özellikler şunlardır:
Bitcoin (BTC), fiyattaki akümüle sürecini sürdürmeye devam ediyor, haftayı 28 bin 300 dolar düzeylerinde açan…
Altın, ABD'de güçlü istihdam bilgilerinin Fed'in faiz artış fiyatlamalarını artırmasıyla paha kaybetti. Yatırımcıların gözü Çarşamba…
Hanehalkı İşgücü Araştırması sonuçlarına nazaran; 15 ve daha üst yaştaki şahıslarda işsiz sayısı 2023 yılı…
Bitcoin için 29-30 bin dolar aralığı direnç olmaya devam ediyor
ABD'nin enflasyonu açıklayacağı kritik haftada, haftanın birinci süreç gününde altın ve dolar tarafındaki hareketlilik ne…