Google, son lansmanını yaptığı yapay zeka çözümü olan Gemini Pro'yu tanıttı. Şirket, büyük vaatlerde bulunsa da, ChatGPT'nin rakibiyle ilgili her şeyin çok da yolunda gitmediğini gösteren bazı detaylar ortaya çıktı.
Google, bir aydan kısa bir süre önce ciddi manada dikkat çeken bir demo videosuyla gündeme geldi. Ancak sonuç olarak bu video, yapay zeka dünyası arasında sahnelenmiş olmasına rağmen sert eleştirilere maruz kaldı.
Yeni bir araştırmaya göre Google şirketinin kullanıcılara sunduğu bu güçlü sohbet botunun aslında ideal olmadığını gösteren çarpıcı bulgular var. Gerçekten de Google'ın iddia ettiği gibi en güçlü ve en son dil modeli olarak tasarlanan bu yapay zekanın performansı, OpenAI'nin eski GPT 3.5 sürümüyle karşılaştırıldığında çok daha kötü denilebilir.
Bu durum, Google'ın en güçlü ve en son dil modelinin beklentilere cevap vermemesine rağmen piyasaya sürülmesi için aylarca süren bir çabanın ardından geldiğini gösteriyor. Hatırlatmak gerekirse ChatGPT'nin 3.5 sürümü sadece eski ve az yenilikçi değil, aynı zamanda ücretsizdir. Abonelik ücreti ödeyen kullanıcılar, GPT-4 ve 4V dil modellerine erişebilir ve çoğu kullanıcı en son OpenAI alternatifinden bu sayede en iyi şekilde faydalanıyor.
İlginizi çekebilir: Google, Play Store Anlaşması İçin 700 Milyon Dolar Ödeyecek
Google Yenilikçi ChatBot'u OpenAI'nin GPT 3.5'ine Karşı Zorlanıyor
Carnegie Mellon Üniversitesi'nde çalışan yazarların yaptığı bu araştırma, modelin çeşitli görevleri gerçekleştirmek için yazma dahil olmak üzere birçok komutu nasıl yerine getirdiğini gösterdi. İlginç bir şekilde, bu tür yazıların, rakip araçlar tarafından üretilen diğer yazılara göre kalite açısından aşağı olduğu kanıtlandı.
Bu tür bir sonuç, Google şirketinin liderliğine zarar verecek. Aynı zamanda Gemini Pro'yu yapay zeka dünyasının bir sonraki büyük olayı olarak pazarlamak için harcanan büyük paraya rağmen şirketi etkileyecek. Bahse konu olan OpenAI'nin en son sürümü GPT-4 ile karşılaştırıldığında, Gemini Pro'nun hem karşılaştırılabilir hem de daha düşük olduğu ortaya çıktı.
Konuyla ilgili görüşlerini almak için Google'a başvurulduğunda şirketin sözcüsü Google'ın kendi çalışmalarının Gemini Pro'nun GPT 3.5'ten daha iyi olduğunu kanıtladığını açıkladı. Dahası henüz piyasaya sürülmeyen Gemini Ultra'nın, OpenAI'nin şimdiye kadar sunduğu en iyi yapay zeka teklifinden, yani GPT-4'ten daha yüksek puanlar aldığını belirtti.
Bu duruma göre Google'ın iddialara karşı çıkmasına rağmen durum endişe verici olarak nitelendirilebilir. Elbette, bu konuda daha fazla sonuca varmak ve Gemini'nin Pro Modeli'nin ne kadar büyük olduğuna dair daha fazla bilgi almak için başka dış kuruluşların çalışmasına ihtiyaç var. Şu an için Google, çalışmadaki iddiaları reddetti. Bu da Google şirketinin iç araştırmalarına bağlı kalmaya kararlı olduğunu göstermektedir. Ayrıca, yazarın karşılaştırma için zayıf ölçütler kullandığını belirterek veri kirliliğinden kaynaklanan çatışmaları suçladılar.
Araştırmacılar, Gemini Pro, GPT-3.5 Turbo, Mixtral 8X7B ve GPT-4 Turbo dahil olmak üzere dört farklı büyük dil modelini test ettiler ve modelleri çeşitli sorular üzerinde çalıştırdılar. Ayrıca programlamanın beklentilerin altında kaldığını gördüler.
Doğruluk seviyeleri diğerlerine kıyasla düşüktü ve çoktan seçmeli sorularda yanlılık göstererek yanlış olmasına rağmen genellik D cevabı verdi. Şimdi akıllara gelen soru şu: Bu durum, teknoloji devi Google için ne anlama geliyor? Bu kesinlikle şirket için büyük bir darbe. Yapay zeka yarışında öne geçmeye çalışıyorlar, ancak bir şekilde bir şeyler ters gidiyor gibi görünüyor. Bu arada, en yenilikçi ve güçlü varyant olan Gemini Ultra'nın gelecek yıl piyasaya sürüleceği belirtiliyor. Bu da teknoloji devinin performans açısından yapay zeka yarışında geride olduğu anlamına geliyor.
Bu habere henüz yorum yazılmamış, haydi ilk yorumu siz bırakın!...