Nemo - Facebook'un veri keşif platformu

 (engineering.fb.com)
9 puan yazan xguru 2020-10-14 | 1 yorum | WhatsApp'ta paylaş
  • Büyük ölçekli organizasyonlar, kurum içi veri arama ve metadata motorlarını ayrı olarak inşa ediyor

→ Netflix(Metacat), Lyft(Amundsen), Linkedin(DataHub), Uber(Databook)

→ Hangi verilerin kim tarafından/ne zaman arandığı/oluşturulduğu gibi metadata'yı arayıp yeniden kullanımı kolaylaştıran bir platform

  • Hive, Scuba, Cubrick, çeşitli gösterge panelleri ve yapay zeka veri setlerini entegre ediyor

  • Sosyal grafik aramasında kullanılan Unicorn'dan yararlanıyor

  • spaCy kullanarak doğal dil sorgularını mümkün kılıyor: "Instagram'da WAU (haftalık aktif kullanıcı) sayısı kaç?"

İlgili okumalar

1 yorum

 
xguru 2020-10-14

Nemo açık kaynak olarak yayımlanmadı; diğer şirketlerin araçları ise açık kaynak olarak yayımlandı.

Lyft - Amundsen https://github.com/amundsen-io/amundsen

Netflix - Metacat https://github.com/Netflix/metacat

Linkedin - DataHub https://github.com/linkedin/datahub