AI Bot Search

Genel olarak ChatGPT olarak adlandırılan Chat Generative Pre-Trained Transformer, OpenAI tarafından Kasım 2022'de başlatılan bir sohbet robotudur. hem denetimli hem de takviyeli öğrenme teknikleri.

ChatGPT, 30 Kasım 2022'de bir prototip olarak piyasaya sürüldü ve birçok bilgi alanında ayrıntılı yanıtları ve anlaşılır yanıtlarıyla kısa sürede dikkatleri üzerine çekti. Düzensiz olgusal doğruluğu, önemli bir dezavantaj olarak tanımlandı. ChatGPT'nin piyasaya sürülmesinden sonra, OpenAI'nin değeri 29 milyar dolardı.

Eğitim

ChatGPT, denetimli öğrenme ve takviyeli öğrenme kullanılarak GPT-3.5'e ek olarak ince ayarlandı. Her iki yaklaşım da modelin performansını iyileştirmek için insan eğitmenleri kullandı. Denetimli öğrenme durumunda, modele eğitmenlerin her iki tarafı da oynadığı konuşmalar sağlandı: kullanıcı ve yapay zeka asistanı. Pekiştirme adımında, insan eğitmenleri önce modelin önceki bir konuşmada oluşturduğu yanıtları sıraladı. Bu sıralamalar, Yakın Politika Optimizasyonunun (PPO) birkaç yinelemesi kullanılarak modelin daha da ince ayarlandığı 'ödül modelleri' oluşturmak için kullanıldı. Yakın Politika Optimizasyonu algoritmaları, bölge politikası optimizasyon algoritmalarına güvenmek için uygun maliyetli bir fayda sunar; hesaplama açısından pahalı işlemlerin çoğunu daha hızlı performansla ortadan kaldırırlar. Modeller, Azure süper bilgi işlem altyapılarında Microsoft ile işbirliği içinde eğitildi.

Ayrıca OpenAI, ChatGPT'yi daha fazla eğitmek ve ince ayar yapmak için kullanılabilecek ChatGPT kullanıcılarından veri toplamaya devam ediyor. Kullanıcıların, ChatGPT'den aldıkları yanıtlara olumlu veya olumsuz oy vermelerine izin verilir; olumlu veya olumsuz oylama üzerine, ek geri bildirim içeren bir metin alanını da doldurabilirler.