Web sitemi Google’ın yapay zeka özetlerinden nasıl hariç tutarım?

• Google, arama sonuçlarında yapay zeka tarafından oluşturulan özetleri (AI Overviews) kullanıma sundu ve bunlar çoğu zaman site içeriğini çekerek trafiği elinden alma etkisi yaratıyor
• Site sahipleri fiilen yalnızca snippet engelleme (max-snippet:0, nosnippet) ya da kısmi engelleme (data-nosnippet) gibi uç seçeneklere sahip; bu da onları adeta çıkışı olmayan bir ikileme sürüklüyor
• Kullanıcı tarafında ise Search Labs ayarını kapatma, URL parametreleri, tarayıcı eklentileri gibi sınırlı ve eksik kaçınma yolları bulunuyor
• AB ve Birleşik Krallık düzenleyicileri, şu anda Google AI Overviews’un rekabet karşıtı niteliğini ve yayıncılara verdiği zararı inceliyor; trafik paylaşımı ve adil bir opt-out gibi düzenlemeler değerlendiriliyor
• Şimdilik yayıncıların atabileceği tek gerçekçi adım max-snippet:0 olsa da bunun tıklanma oranını düşürme gibi ölümcül bir dezavantajı var; bu nedenle bunun Google’ın dark pattern benzeri tasarımı olduğu eleştirileri yapılıyor

---

Google AI Overviews sorunu

• Google kısa süre önce arama sonuçlarına yapay zekanın otomatik oluşturduğu AI özetlerini (SGE: Search Generative Experience) ekledi
• Bu özellik, web sitesi içeriklerini analiz edip kısa bir özetini doğrudan göstererek kullanıcı deneyimini iyileştirmeyi hedefliyor
• Ancak bunun sonucunda birçok web sitesi sahibi, kullanıcıların orijinal siteyi ziyaret etmeden yalnızca özet içeriği tükettiği bir sorunla karşı karşıya kalıyor
• Bu da sonuç olarak web sitelerinin organik trafiğinde düşüşe yol açıyor

Google AI özetlerinin etkisi

• AI özetleri, web sitesi sahiplerinin onayı olmadan içeriği otomatik olarak özetleyip arama sonuçlarının üst kısmında sunuyor
• Kullanıcılar yalnızca özeti görüp orijinal siteye tıklamama eğilimi gösteriyor
• Bunun sonucunda geleneksel SEO stratejilerinin etkisi zayıflıyor ve durum site sahiplerinin aleyhine işliyor

Web yöneticileri için yanıt verme yöntemleri

• 1. max-snippet:0
  • <meta name="robots" content="max-snippet:0">
  • Tüm snippet’leri ve AI özetlerini engelleyerek arama sonuçlarında yalnızca başlık + URL gösterilmesini sağlar
    • Bunun dezavantajı, tıklanma oranını (CTR) ciddi biçimde düşürebilmesidir
  • Şu an için en etkili yöntem olsa da kusursuz bir çözüm değildir
• 2. nosnippet
  • <meta name="robots" content="nosnippet">
  • max-snippet:0 ile aynı etkiyi yaratarak arama sonuçlarındaki açıklama veya özetin tamamen kaldırılmasını sağlar
    • Bunun sonucunda arama listeleri daha tekdüze hale gelebilir ve çekiciliğini kaybedebilir
  • AI özetlerini engeller, ancak arama görünürlüğünün azalmasına yol açabilir
• 3. data-nosnippet
  • <span data-nosnippet>…</span>
  • Belirli içerikleri seçici olarak hariç tutmanın bir yoludur
    • Ancak Google başka metinleri yine özet için kullanabileceğinden tam kontrol mümkün değildir
  • HTML öğelerine (span, div, section) uygulanabilir
• 4. Kullanıcı tarafındaki alternatifler (yalnızca kişisel hesapları etkiler)
  • Search Labs opt-out: Oturum açmış kullanıcılar “AI Overviews and more” seçeneğini devre dışı bırakabilir
    • Bu yalnızca kullanıcının hesabına uygulanır; web sitesinin başkalarına nasıl gösterildiğini etkilemez
  • URL değiştiricileri: Arama sorgusuna &udm=14, -AR, -noai eklemek
  • Tarayıcı eklentileri: Bye Bye Google AI gibi araçlar kullanılabilir
    • Google güncellemeleri sonrasında çalışmayabilirler
  • Reddit hilesi: Küfür ekleyerek AI özetini atlatma yöntemi öneriliyor
    • Pratik olmayan geçici bir çözüm
  • iOS’ta Google uygulamasında Gemini gösterimini kapatmak, Web sekmesini kullanmak ya da Safari, DuckDuckGo gibi alternatif tarayıcılara yönelmek mümkün
• 5. Düzenleyici umut: AB ve Birleşik Krallık soruşturmaları
  • AB
    • Independent Publishers Alliance, Movement for an Open Web, Foxglove Legal gibi kuruluşlar Avrupa Komisyonu’na antitröst şikayetinde bulundu
    • AI Overviews’un içerik kötüye kullanımı, trafik kaybı ve adil bir opt-out eksikliğine yol açtığını savunuyorlar
  • Birleşik Krallık
    • Rekabet ve Piyasalar Kurumu (CMA), AI özetlerinin rekabeti bastırıp bastırmadığını ve yayıncılara zarar verip vermediğini inceliyor
    • Zorunlu kaynak gösterimi, trafik paylaşımı ve Google’ın kendi hizmetlerini kayırmasının sınırlandırılması gibi seçenekler değerlendiriliyor

Sorunun özü

• Yayıncı ikilemi: Snippet’ler engellenmezse yapay zeka içeriği çekerek trafik kaybına yol açıyor; engellenirse de arama görünürlüğü düşüyor
• Kullanıcı kontrolünün yetersizliği: Alternatifler zahmetli, eksik ve tutarsız
• Dark pattern eleştirisi: Google’ın yapısal tasarımı, yayıncıları önemli bir şeyden vazgeçmeye zorlayan manipülatif bir tasarım olarak görülüyor
  • Bu, yayıncıları aleyhlerine olan seçeneklere zorlayan tipik bir dark pattern örneği

Sonuç

• Düzenleyiciler değişimi zorlayana kadar, yayıncıların elindeki tek seçenek max-snippet:0 gibi görünüyor; ancak bu da ciddi görünürlük kaybını beraberinde getiriyor
  • Web sitesi sahipleri AI özetlerini engellemek ile görünürlük kaybı arasında adaletsiz bir seçim yapmak zorunda kalıyor
• Google’ın politikası, çıkışı olmayan bir zorunlu tercih yapısı, yani tipik bir dark pattern olarak eleştiriliyor
• AB ve Birleşik Krallık düzenleyicilerinin ileride vereceği kararlar durumu değiştirebilecek tek umut olsa da, bu kısa vadede bir çözüm değil

[laeyoung]

Bununla ilgili olarak SEO çağının sonu mu? AI ajanları için pazarlama optimizasyonunun başlangıcı yazısına da birlikte göz atmanız iyi olur.

SEO ile ilgili Reddit'e bakınca, Google görünürlüğü aynı kalsa da Zero click nedeniyle gelen trafik ciddi ölçüde azaldığı için endişelerini dile getiren çok sayıda gönderi olduğunu görüyorum.

[crawler]

> Bunu adil bir özellik olarak mı görürdünüz, yoksa dark pattern mühendisliğinin klasik bir örneği olarak mı? Yorumlarda bize bildirin.

Gerçekten de metinde yorum bırakın deniyor ama sitede yorum özelliği yok gibi görünüyor.
Yapay zekayı engellemeye çalışan bir yazı yapay zekayla yazıldıysa, bu gerçekten oldukça çelişkili bir yazı.

[GN⁺]

Hacker News yorumu

• Son birkaç on yıldır her alana yayılan bir "portal/aracı" olgusunu gördüğümü düşünüyorum. Tüketici ile üretici arasına üçüncü bir katman girdiğinde her iki taraf için de işler kolaylaştı, ancak artık bu katmana bağımlı hale geldik. Amazon'dan sipariş verirken artık satıcıyla doğrudan iletişim kurmuyoruz, yemek siparişinde de ücreti doğrudan restorana ödemiyoruz. Web'de bilgi ararken de artık tek tek yazarların üslubu, gezinme yapısı, reklamları vb. ile uğraşmıyoruz. İçerik sahipleri açısından bakıldığında bu yapı, sayfa ziyaretlerini azaltarak reklam gelirine darbe vuruyor ve Amazon ya da yemek teslimat uygulamalarının aksine, Google özetlerinin yol açtığı reklam kaybı için bir telafi yok. Çevrimiçi içeriğin çoğu reklamla ayakta dururken Google için de reklam geliri hayati önemde; buna rağmen geleceği düşünerek bu evrimi zorunlu olarak itiyor gibi görünüyor. Google yalnızca gelecekte yerini korumaya odaklanmış gibi duruyor

  • Aslında bu değişimin iki taraf için de faydalı olduğu ifadesi dikkat çekici. Geçiş sürecinde taraflardan birinin zarar görmesi doğru, ama sonuçta tüketiciyle platformun elde ettiği kazancın daha büyük olduğunu düşünüyorum

• Yazılım ürünümün web sitesindeki telif hakkıyla korunan materyallerin Google ya da diğer yapay zekalar tarafından izinsiz biçimde kazınıp yeniden işlenmesinden rahatsızım. Ama engellersem, içeriğimin onların yapay zeka özetlerinde anılma ihtimali neredeyse kalmıyor

  • Bu şekilde engellemek, ürününüz ya da şirketinizle ilgili sonuçlarda yapay zeka özetinin 2. sıradaki değil başka bir bilgiyi referans almasına yol açabilir; bu da pratikte daha kötü olabilir. Örneğin "PayPal'dan nasıl para çekilir" aramasında ikinci sıradaki site "PayPal berbat" gibi olumsuz bir alan adıysa, resmi site özetten çıkarıldığında durum daha da can sıkıcı olur. Sonuç olarak yayıncıların buna izin vermesi daha iyi. Trafik kaybından endişe ediliyorsa, özette görünen "source" bağlantısı diğer tüm sonuçlardan önce gösteriliyor. Yanlış bilgi endişesi varsa doğruluk bildirimi ya da içerik düzeltmesiyle çözülebilir. Ayrıca Google'ın yapay zeka özetleri ve snippet'ler için ayrı ayrı opt-out imkanı vermesi gerekir; yapay zeka özetlerinden endişe ediliyorsa snippet'ler de aynı şekilde önemsenmesi gereken bir konu
  • İleride Google'ın, rakiplerimden daha olumlu tasvir edilmek istiyorsam para ödememi ya da haksız biçimde üretilmiş yanlış bilgileri sildirmek istiyorsam yine para ödememi söyleyen bir ileti gönderebileceğine dair bir kaygı var
  • Doğrudan bir şey satan web siteleri için yapay zeka özetlerinde görünmenin aslında arzu edilir olduğunu düşünüyorum

• Bu tür yapay zeka özetlerinin Google'ın gelecekteki gelirini kemirmeyeceğini anlamıyorum. Google, sitelere trafik yönlendirerek reklamdan para kazanıyor ama bu özet hizmetleriyle web sitelerini fiilen gereksiz hale getiriyor. O zaman ziyaretçisi olmayan siteleri kim üretmek ister

  • Google'ın yapay zeka özetlerine ürün/hizmet reklamı yerleştirme teknolojisi zaten var. Gerçek bir örnek olarak, "tatil" aramasında otellerin ve havayollarının ayrı ayrı anıldığı bir vaka araştırmada açıklanmıştı. Makalenin bağlantısı burada
  • Gelirin %99'u "buy macbook" ya da "book trip to dc" gibi satın alma niyeti açık arama sorgularında yoğunlaşıyor. Bilgilendirici sorgularda reklam geliri neredeyse yok
  • Gerçekten gelir üreten sorguların sayısı çok az; bunu, çoğu arama sorgusu için ortada hiç reklam teklifi olmamasından görebilirsiniz
  • Aslında Google, yerini ChatGPT gibi teknolojilerin alacağından daha çok korkuyor. Bu yüzden kullanıcının istediği bilgiyi anında vermek, konumunu korumanın en iyi yolu. Bence LLM'ler kusurlu ama muğlak sorular, bilgi sentezi, çeviri gibi alanlarda arama motorlarından çok daha iyi bir teknoloji. Belirli bir sayfayı bulmaktan ziyade bilgi edinmek istendiğinde LLM'ler ideale daha yakın. Önümüzdeki 10 yıl içinde arama motorlarının ortadan kalkması bana şaşırtıcı gelmez
  • Belki de Google bu değişimi istemeden uygulamaya koydu; çünkü gerçek şu ki LLM hizmetleri tarafından giderek daha fazla aşındırılıyor. Google'ın yapay zeka özetlerini reklamların üstüne koymuş olması bile ne kadar çaresiz hissettiğini gösteriyor

• Kişisel sitemde Apache ayarlarıyla indeksleme, snippet, çeviri ve görsel indekslemenin tamamını engelledim. Buna rağmen Internet Archive bunu görmezden gelip kazıdı ve defalarca silme talebinde bulunmama rağmen asla dikkate almadı. Şimdi Anubis ile ek scraping'i de engelliyorum. (Bu site 2000'de başlayan herkese açık bir günlük olduğu için, aranabilir olmasını istemiyorum)

  • Bir şeyi internette herkese açık bırakıp yedeklenmemesini istemeyi anlamıyorum. Alan adı bir gün kaybolsa bile ileride ona tekrar bakmak istediğinizde Internet Archive'da kalmış olması aslında sevindirici olur. İnternete koyduğunuz anda doğası gereği kamusaldır
  • Internet Archive'ın talebime hiç yanıt vermemesi asıl sinir bozucu olan şey. Yasadışı içeriklerde (iftira, devlet sırrı, belirli müstehcen içerikler vb.) silme istisnası olabilir ama bir şeyi kendi isteğinizle yayımladıysanız, bunun tarihsel kayıttan silinmesine izin verilmemesi genel ilke olmalı. Gerçekten kişisel bilgileri saklamak isteseydim giriş duvarının arkasına koyardım. Site hâlâ mevcut ve biri onu taramaya devam ediyor
  • Anlık görüntülerde bir "why?" alanı var. Aslında sitenizi Internet Archive dışında Common Crawl, Archive Team gibi yapılar da itmiş olabilir. Nedeni kontrol edip hedefi doğru tespit etmek gerekir
  • robots.txt ile Internet Archive'dan silme ya da hariç tutma talebinde bulunmayı deneyin. Bu politika birkaç kez değişti ama son yıllarda yeniden robots.txt kurallarına saygı göstermeye başladı. SSS'ye bakın

• Bir bakıma yayınlamak, bir şeyi kamuya açıp insanların onu belli bir özgürlükle kullanmasına izin vermektir. Bu özgürlük sitenize yarar da sağlayabilir, zarar da. Google gibi büyük platformlar her değiştiğinde içerik yayıncıları hep uyum sağladı. Yapay zeka özetleri de bu değişim akışının bir parçası

  • Bana göre bu biraz hak sahibi bir bakış açısı. Ben yazılımı lisans koşulları altında yayımladım. Sırf kamuya açık olması, herkesin onu her amaç için kullanabileceği anlamına gelmez
  • Benim varsayımım, içeriğimi telif hakkını elimde tutarak yayımladığım yönünde. Bunun, bir başkasına onu ticari olarak yeniden yayımlama özgürlüğü verdiğim anlamına gelmediğini düşünüyorum. Belki de gelecekte içeriği giriş duvarının arkasına saklamak gerekecek; web için acı bir gelecek olur
  • 1710 tarihli Anne Yasası'ndan (ilk telif hakkı yasası) bu yana, kamuya açık biçimde dağıtılan bilgilere de kurallar uygulanıyor
  • Yazılarımı insanların doğrudan okumasını isteyerek yayımlıyorum; Google'ın bunları özensizce yapay zeka özetine dönüştürmesi için değil. Google'ın kararları sonuçta Google'ın çıkarına hizmet ediyor
  • Yayıncılık, tüm hakların bütünüyle devredilmesi anlamına gelmemeli. Pek çok kişi kendisine benzeyen bir okur kitlesi oluşturmak için yazar. Araya bir aracı girdiğinde okurla yazar arasındaki bağ zarar görebilir. Özetlemek istiyorsam bunu kendi istediğim şekilde yapabilirim, ama çoğu yazar LLM özetleri istemiyor. Ayrıca LLM'ler çok önyargılı olabiliyor ve gerçekten önemli paragrafları kendi filtreleriyle çıkararak bambaşka özetler üretebiliyor. Fikirler için, görüşümün çarpıtılmış ve zayıflatılmış bir versiyonunun aktarılmasından daha yıkıcı çok az şey vardır

• Bu blog yazısında son cümlede "yorum bırakın" deniyor ama ortada bir yorum alanı görünmüyor; bu yüzden acaba yapay zekayla mı üretildi diye merak ediyorum

• Bu özelliğin Perplexity, OpenAI, Claude gibi servislerde de çalışıp çalışmadığını merak ediyorum

• Google, Perplexity gibi kaynakları açıkça alıntılasa herkes için daha iyi olurdu diye düşünüyorum. Orijinale bağlantı ve atıf verir, kullanıcı deneyimini de iyileştirirdi

  • Google alıntı yapıyor ama bunu neredeyse fark edilmeyen, "bağlantı" gibi duran tek karakterlik bir Unicode simgesiyle gösteriyor. Tıklayınca da doğrudan kaynak sayfaya gitmiyor; bunun yerine yan panel açılıyor ve çoğu zaman içinde birden çok kaynak yer alıyor. Teknik olarak bu alıntı sonuç sayfasındaki ilk bağlantı olsa da, benim sayfama ulaşmak için fiilen 2 kez tıklamak gerekiyor. Alıntılar daha görünür olsa, sayfa başlığı bağlantı metni olarak kullanılsa ve doğrudan giden bir link verilse iyi olurdu. Birden fazla alıntı varsa yan panel baştan açık olabilir ya da hepsi ana sayfada görünür şekilde sergilenebilir

• Bundan sonra uzmanlık alanım, şirket web sitelerinin LLM tarafından iyi özetlenmesini sağlama yolları olacak. Bu kadar ayrıntılı ve sadık yönlendirme içeriğine ihtiyaç var

• Bu yazının başlığını ve alan adını yapıştırdım ama sonuç farklı çıktı. Referans görsel