Sail - Yapay zeka çağı için büyük veri işleme çerçevesi
(github.com/lakehq)- Akış işleme / toplu işleme / yüksek performanslı hesaplama (yapay zeka) iş yüklerini birleşik olarak işleyen bir çerçeve olmayı hedefliyor
- Şu anda Spark SQL ve Spark DataFrame API için drop-in yedek çözüm sunuyor (uyumlu)
- Tek bir makinede veya dağıtık yapılandırmada çalışabiliyor
- TPC-H benchmark'ına göre Spark'tan 4 kat daha hızlı, donanım maliyetini %94 azaltıyor ve kod değişikliği gerektirmiyor
- Python paketi olarak kullanılabiliyor:
pip install "pysail==0.2.0.dev0" - Teknoloji yığını
- Rust tabanlı motor, Apache Arrow ve Apache DataFusion üzerine inşa edilmiş
- Spark oturumu, Sail sunucusuyla iletişim kurmak için Spark Connect protokolünü kullanıyor
Henüz yorum yok.