10 yıldır sürücü arızası yaşamayan 71 TiB ZFS NAS

10 yıldır sürücü arızası yaşamayan 71 TiB ZFS NAS

• Donanım

  • 24 adet 4 TB sürücüden oluşan 71 TiB ZFS NAS
  • 10 yıl boyunca tek bir sürücü arızası bile yaşanmadı
  • Şu anda ikinci anakart ve güç kaynağı kullanılıyor

• Sürücü yönetimi

  • 4 TB HGST sürücüler 10 yıl boyunca yaklaşık 6000 saat kullanıldı
  • Sunucuyu kullanılmadığında kapalı tutmak, sürücü ömrünü uzatmaya yardımcı oluyor
  • Sunucuyu uzaktan açıp kapatmak için script kullanılıyor
  • Enerji tasarrufu ve sürücü ömrünü uzatmak için sunucu varsayılan olarak kapalı tutuluyor

• Anakart değişimi

  • Anakart arızası nedeniyle birkaç yıl önce değiştirildi
  • BIOS'a girilememesi ve önyükleme başarısızlığı gibi sorunlar yaşandı
  • eBay'den aynı anakart satın alınarak sorun çözüldü

• ZFS

  • ZFS, birden fazla işletim sisteminde sorunsuz çalışıyor
  • zpool scrub birkaç kez çalıştırıldı ancak sağlama toplamı hatası çıkmadı
  • ZFS, veri kaybını önlemede çok etkili

• Gürültü yönetimi

  • Varsayılan fan hızı çok yüksek olduğu için gürültü seviyesi fazla
  • Sıcaklığa göre fan hızını ayarlayan bir script yazıldı
  • Fan hızı ve gürültüyü kontrol etmek için PID denetleyicisi kullanılıyor

• Ağ

  • Başlangıçta gigabit ağ denetleyicisi kullanıldı
  • Infiniband karta geçildikten sonra 700 MB/s aktarım hızına ulaşıldı
  • Şu anda 10Gbit Ethernet kartı kullanılıyor

• Güç kaynağı

  • Önyükleme sırasında tüm sürücüler aynı anda spin-up yaptığı için 600W güç tüketiliyor
  • Güç kaynağı bazen önyükleme sırasında elektriği kesiyor

• UPS kullanımının bırakılması

  • UPS ek güç tükettiği için kullanımı bırakıldı
  • Güç sorunları nedeniyle sistem kaybı riski göze alındı

• Yedekleme

  • Önemli veriler üç kez yedekleniyor
  • Önemsiz veriler yedeklenmiyor
  • Donanım değişimi ve ZFS ile veri kaybı önleniyor

• Gelecek planları

  • Şimdilik ek depolama planı yok
  • Yedek anakart, CPU, bellek ve HBA kartı elde bulunuyor
  • Sürücü kapasiteleri arttığı için daha küçük bir form faktörüne geçme ihtimali var
  • Sistem bozulursa depolama hobisini bırakma ihtimali de bulunuyor

GN⁺ özeti

• Bu yazı, 10 yıl boyunca sürücü arızası olmadan çalıştırılan 71 TiB ZFS NAS deneyimini paylaşıyor
• Sunucuyu kullanılmadığında kapalı tutmak, sürücü ömrünü uzatmada büyük fayda sağlıyor
• ZFS, veri kaybını önlemede çok etkili ve fan hızı kontrolüyle gürültü azaltılabiliyor
• Ağ aktarım hızını artırmak için farklı ağ kartları kullanılmış
• Yedekleme stratejisi ve güç kaynağı yönetimiyle ilgili deneyimler de paylaşılıyor

[GN⁺]

Hacker News görüşleri

• Tartışma çoğunlukla ZFS ve BTRFS etrafında dönüyor, ancak bcachefs kullanan biri olup olmadığı merak ediliyor

  • bcachefs Linux çekirdeğine dahil ve uçtan uca checksum özelliğine sahip
  • Dosya sisteminin sorumluluğunu ciddiye alan bir yazarı var

• Sürücüler için bir rotasyon takvimi olup olmadığı soruluyor

  • Aynı modelden 24 sürücü kullanılıyor ve aynı partiden çıkmış gibi görünüyorlar
  • Benzer aşınma durumları nedeniyle aynı anda bozulma ihtimalleri daha yüksek
  • Güvenilir depolama zorlu bir iş

• Sürücüleri sürekli açık tutmanın, gücü periyodik olarak kesmekten daha az aşınmaya yol açabileceğine dair karşı görüşler duyulduğu belirtiliyor

  • ZFS NAS'ı sürekli açık tutup verileri düzenli olarak taramayı tercih ediyor
  • 10 yıl boyunca 4 sürücülü bir sistem çalıştırmış ve 2 sürücü arızalanmış, ancak bunlar enterprise sınıfı sürücüler değilmiş (WD Green)

• Büyük fanlar düşük RPM'de bile çok hava taşıyabilir ve enerji açısından verimlidir

  • Oxide Computer, 80mm fan kullanarak sessiz çalıştığını ve az güç tükettiğini vurguluyor
  • Diğer sunucularda fanların güç tüketimi toplam gücün %25'ine ulaşırken, bunlarda yaklaşık %1 düzeyinde

• Film koleksiyonu hakkında daha fazlasını duymak istiyor

  • Başlangıçta öğelerin nasıl seçildiği ve 10 yıldan uzun süredir koleksiyonda kalan öğelerle ilgileniyor

• Elektrik sorunları nedeniyle sistemi kaybetme riskinin alındığı söyleniyor

  • UPS, güç dengesizliklerinden kaynaklanan nadir arızaları önler
  • İnşaat çalışmaları veya yıldırım nedeniyle güç dalgalanmaları yaşanabilir
  • UPS, sunucu zarar görmeden önce kendisi arızalanarak koruma sağlar

• 24 sürücü performans avantajı sağlayabilir, ancak 6 yuvalı bir NAS ve 18TB diskler kullanmak; güç tüketimi, gürültü, alan, maliyet ve güvenilirlik açısından birçok avantaj sunar

• Sürücülerin çalıştığı ortamın ömür üzerinde büyük etkisi var

  • Ev ortamı, veri merkezi veya ofis alanına göre daha değişkendir
  • Sıcaklık ve nem dalgalanmaları ile tozun etkisi büyüktür
  • Temiz ve istikrarlı bir ortamda sürücü arızaları belirgin biçimde azalır

• Sürücüleri kapatmanın bir sır olmadığı, sadece şanslı olunduğu söyleniyor

  • 4TB HGST sürücüler 10 yılı aşkın süredir 7/24 kullanılıyor ve arıza yok
  • Başkaları aynı sürücülerle birden fazla kez RMA yaşamış

• Güç döngüsü değişikliklerinin riskli olduğu sürücüler de vardı

  • Herkes için her zaman iyi bir şey değil
  • Bazı SSD'lerin periyodik olarak güce ihtiyacı var
  • NAS'ın görev döngüsü bu gereksinimi büyük olasılıkla karşılar
  • Elektrik maliyeti ucuzladı
  • Backblaze'in sürücülerin açma/kapama ömrü istatistiklerini modelleyip modellemediği merak ediliyor