Bing AI'ya güvenilemez

xguru · 2023-02-15T11:03:02+09:00

Artık herkes Google Bard'ın reklamda yanlış yanıt verdiğini biliyor, ancak Bing AI da demoda tamamen yanlış yanıtlar verdi ve bunu kimse fark etmedi Evcil hayvanlar için elektrikli süpürgeler Pet Vacuums aratıldığında, bir ürünün dezavantajları arasında "emme gücü düşük, kablosu kısa ve gürültülü" olduğu yazıyor Kaynak olarak verilen HGTV makalesine baktım ama böyle bir içerik hiç yok. Hatta ilgili ürün "kablosuz". Yani "kablosu olmayan" taşınabilir bir süpürge Mexico Nightlife Bing'den Mexico City için 5 günlük bir gezi planı yapmasını istedim ve akşamları neler yapılabileceğini sordum Web üzerinden rezervasyon yapılabildiği söylenen barın bir web sitesi yok Gençler arasında popüler denilen gece kulübü için 2014/16'dan beri hiçbir yorum yok. Bu yerle ilgili her şey sanki yapay zeka tarafından uydurulmuş gibi Cazip olduğu söylenen bar, aslında Meksika'nın en eski gay barı. Google'da 500'den fazla yorumu olan bir yer olmasına rağmen, hâlâ puanlama/yorum yok diye yazılması da dikkat çekici Önerilen 5 mekândan yalnızca 1'i doğru Gap finansal tablo özeti Demodaki en büyük hata buydu ve hiç beklenmiyordu Brüt kâr marjı (Gross Margin) %37,4 olarak verilmiş ama bu düzeltilmemiş (Unadjusted) brüt kâr marjı. Değer düşüklüğü giderine göre düzeltilmiş brüt kâr marjı %38,7 Faaliyet kâr marjı %5,9 deniyor ama belgelerin hiçbir yerinde böyle bir sayı yok Seyreltilmiş EPS de $1.6/$1.75 olarak yazılmış ama belgede böyle rakamlar yok; doğru değerler $0.71/$0.77 2022 yönlendirmesinde net satış artışının düşük çift haneli olmasının beklendiği yazıyor, oysa beklenti orta tek haneli düşüş yönünde Ya ayrı bir belgeden alınmış ya da tamamen uydurulmuş veriler Gap ile Lululemon karşılaştırmasında da durum aynı Lululemon verilerindeki sayılar da kaynaklarla uyuşmuyor Sonuç Bing AI medyada ilgi çekmeyi başardı ama Google Bard'dan hiç de daha iyi değil Bing ekibinin bu ön demosunu yanlış verilerle kaydetmiş olmasına inanmak zor Üstelik bunun başarılı sayılması ve herkesin doğru düzgün kontrol etmeden Bing AI övgü trenine atlaması daha da şaşırtıcı Bing AI belgelerden doğru sayıları çıkaramıyor; kaynak gösterdiğini söylese de bilgileri kendinden emin şekilde kafasına göre oluşturuyor Doğru olgular isteyen insanların kullanmaması gereken, henüz hazır olmayan bir ürün

(dkb.blog)

11 puan yazan xguru 2023-02-15 | 7 yorum | WhatsApp'ta paylaş

Artık herkes Google Bard'ın reklamda yanlış yanıt verdiğini biliyor, ancak Bing AI da demoda tamamen yanlış yanıtlar verdi ve bunu kimse fark etmedi

Evcil hayvanlar için elektrikli süpürgeler

Pet Vacuums aratıldığında, bir ürünün dezavantajları arasında "emme gücü düşük, kablosu kısa ve gürültülü" olduğu yazıyor
Kaynak olarak verilen HGTV makalesine baktım ama böyle bir içerik hiç yok. Hatta ilgili ürün "kablosuz". Yani "kablosu olmayan" taşınabilir bir süpürge

Mexico Nightlife

Bing'den Mexico City için 5 günlük bir gezi planı yapmasını istedim ve akşamları neler yapılabileceğini sordum
Web üzerinden rezervasyon yapılabildiği söylenen barın bir web sitesi yok
Gençler arasında popüler denilen gece kulübü için 2014/16'dan beri hiçbir yorum yok. Bu yerle ilgili her şey sanki yapay zeka tarafından uydurulmuş gibi
Cazip olduğu söylenen bar, aslında Meksika'nın en eski gay barı. Google'da 500'den fazla yorumu olan bir yer olmasına rağmen, hâlâ puanlama/yorum yok diye yazılması da dikkat çekici
Önerilen 5 mekândan yalnızca 1'i doğru

Gap finansal tablo özeti

Demodaki en büyük hata buydu ve hiç beklenmiyordu
Brüt kâr marjı (Gross Margin) %37,4 olarak verilmiş ama bu düzeltilmemiş (Unadjusted) brüt kâr marjı. Değer düşüklüğü giderine göre düzeltilmiş brüt kâr marjı %38,7
Faaliyet kâr marjı %5,9 deniyor ama belgelerin hiçbir yerinde böyle bir sayı yok
Seyreltilmiş EPS de $1.6/$1.75 olarak yazılmış ama belgede böyle rakamlar yok; doğru değerler $0.71/$0.77
2022 yönlendirmesinde net satış artışının düşük çift haneli olmasının beklendiği yazıyor, oysa beklenti orta tek haneli düşüş yönünde
Ya ayrı bir belgeden alınmış ya da tamamen uydurulmuş veriler
Gap ile Lululemon karşılaştırmasında da durum aynı
Lululemon verilerindeki sayılar da kaynaklarla uyuşmuyor

Sonuç

Bing AI medyada ilgi çekmeyi başardı ama Google Bard'dan hiç de daha iyi değil
Bing ekibinin bu ön demosunu yanlış verilerle kaydetmiş olmasına inanmak zor
Üstelik bunun başarılı sayılması ve herkesin doğru düzgün kontrol etmeden Bing AI övgü trenine atlaması daha da şaşırtıcı
Bing AI belgelerden doğru sayıları çıkaramıyor; kaynak gösterdiğini söylese de bilgileri kendinden emin şekilde kafasına göre oluşturuyor
Doğru olgular isteyen insanların kullanmaması gereken, henüz hazır olmayan bir ürün

7 yorum

dbs0829 2023-02-15

Ben de derin öğrenme üzerine araştırmalarımı sürdürürken modellerde over-confidence sorununun epey büyük olduğunu düşünüyorum; burada da benzer bir sorun ortaya çıkıyor gibi görünüyor.

kherootz 2023-02-15

Kaynakları kafasına göre uydurması ChatGPT'de de ciddi bir sorundu, bu yüzden Bard'dan beklentim yüksekti ama..

xguru 2023-02-15

Sanırım bunu da ChatGPT web'in bulanık JPEG'i ile bağlantılı olarak değerlendirmek gerekiyor.

blueprajna 2023-02-15

Gerçekten insan gibi bir yapay zeka yapmışlar.

dante 2023-02-15

Bu durum chat GPT için de aynı. Uzmanlık bilginiz yoksa fark edemeyeceğiniz türden çok sayıda yanıt veriyor.

qyurila 2023-02-15

ChatGPT’nin farkı, OpenAI tarafının internete bağlı olmadığı sınırlamasını açıkça belirtmesi ve tasarımı gereği metindeki gibi sorulara sık sık yanıt vermeyi reddetmesidir.

jujumilk3 2023-02-15

Evet, bilmiyorsa bilmiyorum demeli; durmadan yalan söylüyor gibi görünüyor.