Ticari olmayan içeriklere öncelik veren arama motoru Marginalia

 (marginalia-search.com)
4 puan yazan GN⁺ 2025-01-28 | 1 yorum | WhatsApp'ta paylaş
  • Marginalia Search, ticari optimizasyonu daha az yapılmış web’i keşfetmeye ve eskiyip unutulmuş web sitelerini yeniden bulmaya odaklanan bir arama motorudur
  • Yalnızca arama değil, site gezintisi ve keşif için de yollar sunar; önceki sürüm de old-search.marginalia.nu üzerinden kullanılmaya devam eder
  • Proje açık kaynak olarak yayımlanmıştır; kendi dizini ve crawler’ı ile yapay zeka kullanmayan sade bir teknik yapıyı öne çıkarır
  • Kaynak kod AGPL lisansı ile yayımlanır; Git deposu ve Project Discord üzerinden proje materyallerine ve topluluğa erişilebilir
  • Kişisel veri toplamayan bir yaklaşımla GDPR’ye uyar; çerez kullanımı ve IP günlüklerinin saklanması da sınırlı şekilde yürütülür

Ticari olmayan web keşfine odaklanan arama motoru

  • Marginalia Search, ticari olmayan içeriklere öncelik veren bir arama motorudur
  • Eskiyip unutulmuş web sitelerini bulma özelliğini vurgular; arama ve keşif için araçları birlikte sunar
  • Önceki sürüm old-search.marginalia.nu adresinde kullanılmaya devam eder

Açık kaynak proje ve işletim kanalları

  • Proje açık kaynak olarak yayımlanmıştır
    • Kendi dizinini ve crawler yazılımını kullanır
    • Yapay zeka kullanmayan sade bir teknik yapıyı öne çıkarır
    • Lisansı AGPL’dir
  • İlgili bağlantılar

Gizlilik koruması ve günlük politikası

  • Temelde gizlilik korumasını hedefler
    • İzlemeyi filtreler
    • Üçüncü taraflarla veri paylaşmaz
    • IP’leri uzun süre saklamaz
  • Web sitesi, kişisel bilgi toplamayan bir yöntemle GDPR’ye uyar
  • Çerezler, hizmet işlevlerini sunma dışında bir amaçla kullanılmadığı için EU Cookie Directive’e uyar
  • IP adresi içeren erişim günlükleri en fazla 24 saat saklanır
  • Kaynak adresi kaldırılmış anonimleştirilmiş günlükler, hata teşhisine yardımcı olmak için daha uzun süre saklanabilir
  • İletişim adresi contact@marginalia-search.com’dur
  • IP konum bilgileri IP2Location LITE verilerini kullanır; lisansı CC-BY-SA 4.0’dır

İlgili okumalar

1 yorum

 
GN⁺ 2025-01-28
Hacker News yorumları

  • Kısa süre önce bu arama motoru ve sıralama algoritması hakkında bir deneme yazdım.
    İlk Marginalia, özgün makalede ele alınan ilginç bir PageRank türevi olan Personalized PageRank kullanıyordu; şu anda sayfa sıralamasının BM25 ile yapıldığını düşünüyorum.
    Personalized PageRank, Marginalia’nın benzerlik tabanlı sayfa sıralaması olan yeni özelliğinde de hâlâ kullanılıyor gibi; sanırım siteye zaten entegre edildi, ama eskiden yalnızca bir test sayfası (https://explore2.marginalia.nu/) vardı.
    Her hâlükârda geliştiricisine büyük saygı duyuyorum; Marginalia’nın nasıl önemli ölçüde büyüdüğünü ve blog yazılarını (https://www.marginalia.nu/log/) okumak ilginçti.
    İlgili yazı: https://www.marginalia.nu/log/26-personalized-pagerank/

    • Alan adı sıralamasında Personalized PageRank kullanılıyor, ama etkisi çok zayıf bir faktör.
      Daha çok dizin içinde sonuçların fiziksel sırasını etkiliyor; sorgu yürütme süresi sınırlı olduğundan daha yüksek sıralı sonuçların önce bulunmasını sağlamak gibi.
      Explore2 ve arama motoruna yerleşik web sitesi keşif aracı, gelen bağlantı vektörlerinin kosinüs benzerliğini kullanıyor.
      Bu teknik hakkında “Creepy Website Similarity” başlıklı bir yazı da yazdım :-) https://www.marginalia.nu/log/69-creepy-website-similarity/
    • Son deneme nerede?

  • Geliştiricisi benim. Kısa süre önce web sitesini search.marginalia.nu adresinden marginalia-search.com adresine taşıdım ve görsel olarak da biraz elden geçirdim.
    Kendi blogumun tuhaf bir alt alan adı olarak bırakmak için fazla iyi çalıştığını hissettim.
    Arama motorunun kendisi hâlâ aynı :-)

    • Son dönemde küçük web topluluklarında OpenAI ve benzerlerinin agresif taraması yüzünden biraz endişe var.
      Marginalia, dizine alınmış siteleri ne sıklıkla yeniden tarıyor?
    • Eski sürümdeki random düğmesi artık çalışmıyor gibi görünüyor. O özelliği kaldırdınız mı?
    • Daha kısa bir alan adı kullanmamanızın bir nedeni var mı? Yaptığınız şey gerçekten harika.

  • Bu projeyi sürekli takip etmeyenler için söyleyeyim: Bu, tek kişinin tutku projesi ve Google/Bing/DDG ile rekabet etme hedefi yok.
    Daha çok “küçük web”de ilginç şeyler bulmanın bir yolu.
    Denerken bunu akılda tutmak iyi olur.
    Bu arada geliştiricisi ben değilim.

    • O zamandan beri bir şey değişti mi bilmiyorum ama geliştiricisi 2023’te arama motorunu tam zamanlı geliştirmek için işinden ayrıldı: https://www.marginalia.nu/log/83_full_time/
      Bir tutku projesi olduğu doğru, ama yalnızca basit bir yan proje de değil.
    • Doğru. Ama belirli niş alanlarda, örneğin Linux ve açık kaynak yazılım ile tarih konularında, Marginalia çoğu zaman Google veya DDG’den çok daha iyi sonuçlar verdi.
      Ana akım arama motorlarında girdiyi aptallaştıran bir aşama var gibi; yabancı bir arama terimi girince bunu yazım hatası ya da yanlış hatırlama sanıp, aramadığım bir ifadeye dönüştürerek arka uca gönderiyorlar sanki.
      Ayrıca ana akım arama motorları, özgün ve otorite sahibi içerik yerine kurumsal medyayı öne çıkarmaya çalışıyor gibi görünüyor.
      Geliştiricisi sürekli “küçük web’de ilginç şeyler bulmak için” diyor, ama benim için sadece ilginç değil, gerçekten faydalı da oldu.
      Yine de neredeyse 3 yıl önce Kagi’ye geçtiğimden beri konu bazlı ayrı arama motorları gibi geçici çözümleri sürdürmeme gerek kalmadı.
      Tam açıklama olarak: Başkaları sık sık Google sonuçlarının iyi ya da Kagi sonuçlarının kötü olduğunu söyleyerek karşı çıkıyor; ama benim durumumda Google’ın basit sorgularda bile istikrarlı biçimde başarısız olduğuna dair 10 yılı aşan bir geçmiş var. Google size uyuyorsa ne güzel, ama benim için 10 yılı aşkın süredir güvenilir biçimde çalışmadığı için bıktım.

  • Özellikle yeni ekleyecek bir şeyim yok, ama bu projenin HN’ye her gelişini seviyorum.
    Sabır ve sevgiyle neler inşa edilebileceğini iyi gösteren bir proje.

    • Bir gün benzer bir şey denemek istediğimi düşünmüştüm, ama bu beklentilerimin ötesinde. Gerçekten çok iyi yapılmış; katkıda bulunmanın bir yolu varsa haber versen iyi olur.

  • Şu an itibarıyla DDG’de Marginalia bang araması olmamasına şaşırdım.
    <https://duckduckgo.com/bangs?q=marginalia>
    Öneri olarak gönderdim.

  • Yakın zamanda Google’da aradığım şeyleri, örneğin “celery”, “Wardian case”, “ferry from Italy to Greece” sorgularını tekrar aradım; hepsinde ilk sonuç epey makuldü.
    Bir denemeyi düşünüyorum.

  • Uzun zamandır web’de gördüğüm en ferah, kullanışlı ve sağlıklı şey.
    Teknik olarak da çok sağlam görünüyor, kullanım deneyimi de kusursuz.
    Beni internetin görkemli günlerine götürdüğün için gerçekten teşekkürler.

  • İlgi alanımdaki birkaç nispeten basit arama terimini, örneğin “attention is all you need paper”, “sip rfc”, “klatt speech synthesizer”, “crafting interpreters book”, “Scott Alexander Substack” girdim; beklediğim sonuçlar pek çıkmadı.
    Marginalia, bir şeyi öğrenmek istediğinizde fena değil gibi, ama belirli bir şeyi bulmak istediğinizde uygun değil.
    İnsanların Scott Alexander’ın Substack’i hakkında ne düşündüğünü okumak istiyorsanız iyi sonuçlar çıkar, ama bültenin kendisini bulmak istiyorsanız öyle değil.

    • Evet, gezinme amaçlı sorgularda başarı ve başarısızlık biraz karışık.
      Google’ın bu konuda zaten çok iyi olduğunu düşündüğüm için benim için büyük bir öncelik değil.
      Ben daha çok Google’ın iyi yapamadığı tarafa, belirli bir konu hakkında insanların ürettiği içerikleri bulmaya odaklandım.

  • Site işletmecisi açısından, bulunan backlink’leri herkese açık göstermesi özellikle hoşuma gitti
    Bu servis sayesinde farkında olmadığım birkaç backlink keşfettim

    • Kendi web sitemin backlink’lerine baktım ama gerçekten siteme link veren tek bir şey bile olmadığı için epey kafam karıştı

  • Önceki alan adı marginalia.nu döneminde zaten çokça tartışılmıştı
    Phrase matching in Marginalia Search - https://news.ycombinator.com/item?id=41696046 - Eylül 2024, 24 yorum
    Marginalia: 3 Years - https://news.ycombinator.com/item?id=39501061 - Şubat 2024, 44 yorum
    Interview with Viktor Lofgren from Marginalia Search - https://news.ycombinator.com/item?id=38470832 - Kasım 2023, 21 yorum
    Moving Marginalia to a new server - https://news.ycombinator.com/item?id=37800753 - Ekim 2023, 39 yorum
    Marginalia.nu API - https://news.ycombinator.com/item?id=35871186 - Mayıs 2023, 22 yorum
    Marginalia: DIY search engine that focuses on non-commercial content - https://news.ycombinator.com/item?id=35611923 - Nisan 2023, 193 yorum
    Marginalia Search has received an NLNet grant - https://news.ycombinator.com/item?id=34945541 - Şubat 2023, 17 yorum
    A Theoretical Justification (2021) - https://news.ycombinator.com/item?id=32586273 - Ağustos 2022, 22 yorum
    The Evolution of Marginalia's Crawling - https://news.ycombinator.com/item?id=32565052 - Ağustos 2022, 22 yorum
    Marginalia Goes Open Source - https://news.ycombinator.com/item?id=31536626 - Mayıs 2022, 72 yorum
    Uncertain Future for Marginalia Search - https://news.ycombinator.com/item?id=31200319 - Nisan 2022, 37 yorum
    Marginalia Search: 1 Year - https://news.ycombinator.com/item?id=30823481 - Mart 2022, 29 yorum
    Show HN: Marginalia – Exploration Mode - https://news.ycombinator.com/item?id=30047455 - Ocak 2022, 53 yorum
    A search engine that favors text-heavy sites and punishes modern web design - https://news.ycombinator.com/item?id=28550764 - Eylül 2021, 717 yorum
    https://news.ycombinator.com/user?id=marginalia_nu

    • Çok iyi. İlk yazıyı ben paylaşmıştım
      Bu projeyi seviyorum ve yakın gelecekte benzer bir proje denemek istiyorum