10 puan yazan xguru 2022-04-13 | 4 yorum | WhatsApp'ta paylaş
  • Gerçek zamanlı uygulamalar geliştirirken karmaşıklığı ve maliyeti azaltmayı hedefleyerek tasarlandı
  • Akış verisini alıp SQL ile sürekli sorgular çalıştırır ve sonuçları dinamik olarak günceller
    • Sorgulama ve dönüştürme
    • Materialized View oluşturma
  • Kafka/Pulsar/Kinesis/Redpanda ve CDC kaynaklarından veri okur
    • PostgreSQL/MySQL CDC (Change Data Capture) desteği
  • Veriler, maliyeti azaltmak için S3 ve S3 uyumlu nesne depolamada saklanır
  • Postgres uyumlu SQL kullanır

4 yorum

 
galadbran 2022-04-13

Doğrudan ilgili bir soru değil ama büyük ölçekli olmayan küçük bare-metal sistemlerde CDC kurmak için iyi bir yöntem olarak ne önerirsiniz? Kafka tabanlı olan çok şey var ama öncelikle Kafka’nın kendisi zaten fazlasıyla ağır kalıyor…

 
xguru 2022-04-13

https://github.com/debezium/debezium gibi bir şey değil mi? (Ben de sadece adını biliyorum, kullanmış değilim.. )

 
galadbran 2022-04-13

Debezium, açık kaynak Postgresql CDC ile en çok bununla tanınıyor gibi görünüyor; Kafka tabanlı tabii ^^

 
kbumsik 2022-04-13

ksqlDB ya da Materialize benzeri bir şey mi?