Hlavní navigace

Názor ke zprávičce Chyba v OpenZFS 2.2.0, můžete přijít o data od Izak - Prichazet o data je na ZFS normalni vec,...

  • Aktualita je stará, nové názory již nelze přidávat.
  • 27. 11. 2023 19:28

    Izak

    Prichazet o data je na ZFS normalni vec, nebot nema nastroje na opravu jako xfs_repair nebo fsck.ext4 ...

    Ale tohle je jeste vetsi problem, zde ani nastroj na opravu integrity nepomuze, nebot soubory jsou z pohledu FS zcela spravne, to ze jsou tam jina nahodna data je irelevantni - konsistence je pro nej OK.

    ZFS je vubec takovy divny, misto aby na pomalych discich delal deduplikaci procesem, tak ji dela inline a zere to silene RAM - ale proc to dela i na SSD discich ?
    Treba NetApp na spindle discich podporuje deduplikaci jen jako schedulovany preces, HPE 3par pro zmenu vubec ;-) - ale NetApp i napr. 3par podporuje inline deduplikaci a kompresi na SSD discich, a to bez toho, aby si vse drzel v RAM - jak to dela netusim, teda asi tusm a u 3par/primera je to i videt - nova data proste nededuplikuje ;-) nejak si je oznaci, ze jsou to nova nededup data a kazdych rekneme 10-20 minut pusti proces, ktery jen ty nove bloky zdeduplikuje - tim, ze je mapa hashu na SSD, tak ji nemusi nacitat do RAM, nebot je to dostatecne rychle.

    NetApp podobne bezel ina spindle disicich, tez porojizdel jen to, co se zmenilo, ale trvalo to mnohem dele - nebot v ramci provozu tomu dal nejnizsi moznou prioritu a tak se treba 1PB storage kde bezel hlavne vmware, takze kupa zmenenych bloku bezel klidne i 1-2 dny - tedy jsme to poustely bude jen pres vikend, nebo mensi netappy v utery a pres vikend - pak sjem presli na fullflash a tohle odpadlo - jo na spindle jsme kompresi nepouzivali - ta bezela zbytecne dlouho.

    Cili ZFS NetApp zkopiroval blbe, presneji, zkopiroval jej v dobe, kdy NetApp jeste nemel inline deduplikaci a oni ji vyresili pres RAM, pritom stacilo dat na hashe dedikovane SSD disky a delat to podobne - kdyz to NetApp doresil a vedeli, ze maji opravdu velke storage a tak by to sezralo kupu RAM - ne ze by byl problem ji tam dnes dodat ;-) - ale vyresili to salamounsky a hlavne rychle - zadne zpozdeni pri zapisech a pak pomalu dodelat na pozadi co nejakou dobu - takhle genialni vyvojari z ZFS nejsou, hklavne ze ukradli wafl FS od netappu, nebot netapp to tak dobre a do detailu popsal - ze z toho vznikl ZFS i BTRFS - NetApp dokonce Oracle udal, ze mu to ukradli, nebot ve zdrojacich byly odkazy v komentarich na stranky z netappu - jak to dopadlo jsme nezkoumal.