Hedef beyin bölgelerini en üst düzeyde etkinleştirecek şekilde evrimleşen yapay zeka videoları
(nevo-project.epfl.ch)- NEvo, görsel bölgelerin tepkilerini tahmin eden beynin dijital ikizini ödül modeli olarak kullanarak, belirli bir bölgenin tahmini aktivasyonunu en üst düzeye çıkaran videoları in silico ortamda evrimleştiriyor
- Nesne, ışıklandırma, hareket ve atmosferi genler gibi ifade ediyor; aday videoların üretimi, değerlendirilmesi, seçimi, çaprazlanması ve mutasyonunu birçok nesil boyunca tekrarlıyor
- Hesaplama maliyetini düşürmek için önce en güçlü durağan görüntüyü bulup ardından hareketi ayrı olarak araştırarak bunu 2 saniyelik videoya dönüştüren iki aşamalı bir yöntem kullanıyor
- Sentetik videolar, FFA’nın yüzlere, PPA’nın mekânlara, MT’nin harekete yönelik tepkisi gibi bilinen bölgeye özgü seçiciliklerle uyum gösterdi; elle hazırlanmış yerelleştirici videolardan ve en üst sıradaki doğal videolardan daha yüksek aktivasyon kaydetti
- V1’den aSTS’ye uzanan lateral görsel yol boyunca tercih edilen uyaranlar basit desenler ve hareketten insanlara, yüzlere ve sosyal etkileşimlere kayıyor; sosyal ve dinamik özellikler giderek güçleniyor
Dijital ikizi ödül olarak kullanan video evrimi
- Beynin kodlama modeli olan dijital ikiz eğitilerek rastgele bir videoya karşı her görsel bölgenin tepkisi tahmin ediliyor ve seçilen bölgenin tahmini tepkisi NEvo’nun ödülü olarak kullanılıyor
- Her video; nesne, ışıklandırma, hareket ve atmosfer gibi az sayıda gen ile tanımlanıyor
- Aday video grubu oluşturulduktan sonra dijital ikizle puanlar hesaplanıyor
- Yüksek puan alan adaylar korunup çaprazlanıyor ve mutasyona uğratılıyor
- Bu süreç birçok nesil tekrarlanarak tahmini aktivasyon yükseltiliyor
- Görüntü ve videoyu aynı anda aramanın maliyetinden kaçınmak için iki aşamalı arama yapılıyor
- Önce en güçlü tekil durağan görüntü bulunuyor
- Ardından hareket araştırılarak bu görüntü 2 saniyelik video hâlinde animasyonlaştırılıyor
- Kortikal yüzeydeki standart ilgi bölgeleri (ROI) ve yoğun searchlight bölgeleri için uyaranlar sentezleniyor
- PPA örneği 0,767 puanla doğal görüntülere kıyasla 100,0 yüzdelik dilime karşılık geliyor
rh_5searchlight örneği 1,124 puanla doğal görüntülere kıyasla 100,0 yüzdelik dilime karşılık geliyor
Bölgeye özgü seçicilik ve lateral görsel yoldaki değişim
- Her bölge için sentezlenen 2 saniyelik videolar, ilgili bölgenin tercih ettiği bilinen uyaranlarla örtüşüyor
- FFA yüzlere, PPA mekânlara, EBA bedenlere tepki veriyor
- MT hareketi, V1·V3A desenleri tercih ediyor
- pSTS·aSTS canlı sosyal sahnelere tepki veriyor
- NEvo videoları, bölgelerin genelinde elle hazırlanmış yerelleştirici videolardan ve en güçlü doğal videolardan daha yüksek aktivasyon oluşturuyor
- Tüm bölgelerde hareketli videolar, aynı videonun sabit ilk karesinden daha yüksek tepki göstererek dinamik uyaranlara yönelik tercih doğrulanıyor
- Searchlight V1’den aSTS yönüne taşındığında, sentezlenen uyaranlar ve otomatik oluşturulan kelime bulutları basit desenler ve hareketten insanlara, yüzlere ve sosyal etkileşimlere dönüşüyor
- Lateral görsel yol boyunca sosyal ve dinamik özelliklerin giderek arttığı bir eğim ortaya çıkıyor
- Soyut üst üste dizilmiş disklerden başlayan deneyde de bölgeye özgü tercih edilen özellikler ayrışıyor
- pSTS optimizasyonu, yüze benzeyen ve etkileşime giren karakterler üretiyor
- MT optimizasyonu saf hareket oluşturuyor
1 yorum
Hacker News yorumları
Artık yapay zekayla, izleyicinin beynindeki tüm düğmelere hassas biçimde basan kişiye özel bağımlılık videoları üretip insanları günlerce zombi gibi ekrana yapıştırmak mümkün. Umarım düzenlemeler, sosyal ağları böyle bir teknolojiyi dağıtmayı akıllarından bile geçiremeyecek kadar sıkıştırır.
GPT-4o’nun pohpohlama eğilimi ve yapay zeka psikozu krizi bunun fragmanı olmuş olabilir; ama o bile sadece basit bir etkileşim optimizasyonuydu.
Ancak üretilen videolar gerçek insanlarda MRI ile ölçüldüğünde dijital ikizle aynı beyin aktivasyon örüntülerini oluşturuyor mu, bunu doğruladıklarını bulamadım. Videodan beyin aktivasyonunu güvenilir biçimde tahmin eden bir modelin başlı başına mümkün olduğundan şüpheliyim.
Yöntem açısından V-JEPA2’yi fMRI verisine voksel bazında ridge regresyonla uydurmuşlar; bu da görsel tepkilerin her voksele bağımsız etki ettiğini varsayıyor. Voksel bazlı modeller istatistiksel çıkarım için iyi, ama beyin bağımsız bölgeler toplamı gibi çalışmadığından tahmin ve modelleme için zayıf. BOLD sinyali aşırı dağınık bir veri; tasarım, gerçeği yansıtmak için fazla basit görünüyor.
Gerçek, hatırlanan, sanal ve hayali duyusal girdiler beyin ve duyusal son işleme aşamalarında çok farklı ele alınır. Dijital ikiz yalnızca bazı verilere sahip olduğu için büyük olasılıkla yüzeysel örüntüleri yeniden üretir; yeterince tekrarlı maruz kalma olursa normalde birlikte ateşlenen devreler fark edilmesi zor biçimde yeniden kablolanabilir. Yine de makalenin kendisinin de bu sınırlamaları bilimsel ifadelerle büyük ölçüde kabul ediyor olması ilginç.
B. Dijital ikiz, büyük ölçekli beyin etkinliği örüntülerini yaklaşık olarak modelleyebilen, büyüyen bir beyin simülasyonu alanı; ancak gerçek beyni birebir simüle edecek düzeyde değil. Genellikle integrate-and-fire gibi yaklaşık nöron modelleri ile uyarıcı ve baskılayıcı popülasyonların dengesini kullanır; doğruluğu artırmak için de difüzyon görüntüleme ile deneğin beyaz madde akson bağlantılarını tahmin eder. Gerçek ameliyat öncesinde epileptik nöbet yayılımına cerrahinin etkisini modellemede de giderek daha fazla kullanılıyor. Bu konuda Theoretical Neuroscience podcast’inin The Virtual Brain bölümü iyi.
C. Doğrulama yalnızca kısmen yapılmış. NEVO, sinirsel tepkileri yalnızca dijital ikiz kodlama modelinin içinde optimize etti; bu dijital ikizin de kayda değer tahmin geçerliliği gösterdiği söyleniyor, ancak bu yukarıda bahsedilen Virtual Brain modelinden farklı. Çıktılar nörobiyolojik olarak makul görünüyor; fakat optimize edilen uyaranların gerçek hedef alanı aktive ettiğini gösteren bağımsız bir model ya da yeni fMRI sonucu yok. Çalışma mevcut fMRI verileriyle yapıldığı için tam doğrulama doğal olarak bir sonraki adım; bu makale de gereken araştırma fonunu sağlamaya yardımcı olabilir.
D. Ortalama olarak belirli beyin bölgelerini başlangıç düzeyinin üzerinde aktive eden statik uyaranlar uzun zamandır üretilebiliyordu. Uyaran-bölge çiftine göre bireysel farklılıklar değişir; fusiform yüz alanı (FFA) küçük olduğu için basit ilgi alanı yaklaşımı yerine kişiye özel yüz uyaranlarıyla bulunmalıdır, ama genel olarak konumu güvenilir biçimde saptanabilir. fMRI’daki yaklaşık 3×3×3 mm voksel ve uzamsal özkorelasyonu yüksek hemodinamik yanıt ya da EEG’deki yaklaşık 400 mm² alıcı alan gibi, beyin aktivitesi ölçümleri oldukça kabadır. Dijital ikiz bu çözünürlükte dinamikleri epey iyi modeller; bu düzeyde bilgi miktarı çok fazla olmadığından bunu videoyla otomatikleştirmek de aşırı büyük bir sıçrama değildir.
Denek birkaç saat boyunca tarayıcıda çeşitli videolar izledikten sonra model, verinin kendi temsilini oluşturuyor ve belirli bir bölgenin en güçlü tepki verdiği girdiyi bulmaya çalışıyor. Bir anlamda, uyaran sunup beyin tepkisini kaydederek insanı ve bilişin ne olduğunu anlamaya çalışan mevcut beyin araştırmalarını genelleştiriyor.
Distractatron'ın kendisi pek ilginç değil, ama dikkatin dağıldığı tam anı bulup içeriği iyileştirebiliyor. Ayrıntılar New York Times makalesinde ve New Yorker makalesinde yer alıyor
Teyzemin gaz ocağını açması gibi tehlikeli davranışlar yapabileceği korkusuyla bir yıldan uzun süre haftanın 7 günü sürekli tetikte kalmak zorundaydı ve beyninin tehlike izleme sistemi durmaksızın zorlandı. Bu araştırmanın bilimsel olduğunu kabul ediyorum, ancak sıkı biçimde kontrol edilmezse insanların beyinlerine Rowhammer benzeri saldırılar deneyecek şirketler mutlaka çıkacaktır
Geçmişe bakınca uyku azalması, hafif paranoya, ara sıra aşırı üretkenlik gibi hipomani atakları da olmuş olabilir. Yakın zamanda olduysa iyi toparlanmış olmasını dilerim; mani önleme ve tedavisinde kullanılan yeni nesil ilaçlar geçmişe göre ciddi ölçüde gelişti
Bununla birlikte 20 yıl içinde EEG kafa derisi elektrotlarının ötesine geçip, sinir elektrotları taşıyan implant çiplerle ağ üzerinden yapay zeka hesaplamasını birleştiren beyin güçlendirme mümkün olabilir. Başta beyin, zeka artırımı için arayüzü kullanacaktır; ama uzaktan müdahaleyle kontrol yönü tersine çevrilirse, kaygı duyulan beyin manipülasyonu gerçeğe dönüşebilir. Ancak bu araştırma o senaryodan ışık yılı uzaklıkta; tüm teknolojiye karşı değilseniz aralarında bağ kurmak zor
Süpernormal uyaran ve BLIT öyküsünü hatırlatıyor. V3A animasyonlarından biri çocukken gece uykuya dalmadan hemen önce gördüklerime belli belirsiz benziyor, ama o zamanlar daha çok bir çember gibiydi
Zihinsel engellilere bakım verilen ortamlarda parlak ışık ve başka uyaranlarla sakinleştirme ve kontrol uygulanıyor; otistik kişilerin de canlı renklerden güçlü biçimde uyarıldığını biliyorum. Geri kalan insanların da bu tür kontrol edici uyaranlara karşı savunmasız olmadığını garanti edemeyiz
Reklam amaçlı uzun süreli bellek oluşturmak için “travma” benzeri bir izlenim veren ReMind Long-term'i, süreli kampanyalar için de kulağa takılan şarkının görsel versiyonu gibi çalışan ReMind Short-term'i çıkarabilirler. Reklam şirketlerinin on binlerce sipariş verdiği ve bunların marketlere, asansörlere, benzin istasyonlarına, uçak içi eğlence sistemlerine ve kamusal reklam panolarına anında yerleştirildiği parlak bir gelecek
Bazı araştırmacılar, hangi noktada Fritz Haber'a dönüşmeye başladıklarını fark etmiyor
Reklamlardaki odak grupları, ortaya çıkan tercihleri arayan A/B testlerine dönüştü; yağ, tuz ve şeker araştırmaları da bağımlılığa yakın fast food'u doğurdu. Bu teknoloji bunun yalnızca bir sonraki mantıksal adımı