GPT-4 Tabanlı ChatGPT, Bellek Sorununu Sıkıştırılmış Dil ile Aşıyor

GPT-3.5, yani ChatGPT olarak bilinen eski bir yapay zeka dil modeli, bellek sınırlamaları nedeniyle kullanıcılarla gerçek zamanlı sohbet ederken sınırlı bir hafıza kapasitesine sahipti. Ancak yeni nesil GPT-4 dil modeline dayanan ChatGPT sürümü, bu sorunu aşmak için kendi "sıkıştırılmış" dilini icat etme yolunu buldu. Kullanıcılar, sohbet botundan bir metni, görünüşte rastgele harfler, sayılar ve simgelerden oluşan bir diziye sıkıştırmasını isteyebilirler. Bu gelişme, kullanıcıların daha uzun metinlere erişebilmelerine ve daha kapsamlı sohbetler yapabilmelerine olanak tanımaktadır. Ancak, bu sıkıştırılmış dilin anlamsız olması nedeniyle, ChatGPT, kullanıcılarla yapılan sohbetleri hatırlamakta zorlanabilir ve sohbetler sınırlı bir süre sonra kesilebilir. Bu gelişim, yapay zekanın dil modellerinin sürekli olarak evrimleştiğini ve sınırlamaların aşıldığına dair bir örnektir.

OpenAI tarafından geliştirilen ChatGPT, kullanıcılarla yaptığı sohbet geçmişini "aklında tutabilmek" için kendi şifreli dilini oluşturduğu ortaya çıktı.

ABD merkezli bir yapay zeka firmasının geliştirdiği sohbet botunun yarattığı dili, Bitcoin destekçisi olan Greg Fodor tarafından keşfedildi. Fodor, bu dile "Shogtongue" adını verdi.

ChatGPT'nin kendi dilini üretmesinin arkasındaki neden, bellek sınırlamalarıdır. Büyük dil modelleri, milyonlarca sayfa, kitap ve diğer metin verileriyle eğitilirken, kullanıcıyla gerçek zamanlı olarak sohbet etme sırasında "akılda tutabilecekleri" sınırlıdır.

ESKİ SÜRÜMDE SINIR YAKLAŞIK 8 BİN KELİMEYDİ

ChatGPT'nin eski sürümü olan GPT-3.5'te bellek sınırı yaklaşık 8 bin kelimeydi, bu da yaklaşık 4-5 sayfalık bir kitaba denk geliyordu. Ancak GPT-4'te bu sınır 64 bin kelimeye çıkarıldı, yani yaklaşık 50 sayfalık bir metne karşılık geliyor. Bununla birlikte, ChatGPT'nin kullanıcıyla yaptığı 50 sayfalık bir sohbetin ardından bile konuşmayı hatırlama yeteneği sınırlıdır ve sohbet kesintiye uğrar.

Yeni nesil GPT-4 dil modeline dayanan ChatGPT sürümü, bellek sınırlamasını aşmak için kendi "sıkıştırılmış" dilini icat etti. Kullanıcılar, sohbet botundan bir metni, görünüşte rastgele harfler, sayılar ve simgelerden oluşan bir diziye sıkıştırmasını isteyebilirler.