Posypał się ZFS

[w1t3c 0]

Hello,
Wczoraj pojawiło mi się coś takeigo

/dev/sdf disk in DEGRAGATED - too many errors state.
Po wymianie dysku wykonałem kolejno:

zpool offline tank /dev/sdf
zpool clear tank /dev/sdf
zpool status
zpool online tank /dev/sdf
zpool replace tank /dev/sdf

po wykonaniu powyższych sdf zaczął się resilverować

Po jakimś czasie chcąc sprawdzić jak się sprawy mają - odpaliłem zpool status -v i okazało się, że więcej dysków weszło w DEGRAGATED - too many errors state
Po upłynięciu jeszcze godziny jeszcze więcej dysków weszło w DEGRAGATED - too many errors state

Obecnie wygląda to tak:

user@backup4:/usersfs/user# zpool status -v
pool: tank
state: DEGRADED
status: One or more devices is currently being resilvered. The pool will
continue to function, possibly in a degraded state.
action: Wait for the resilver to complete.
scan: resilver in progress since Thu Jul 29 11:27:20 2021
4.14T scanned out of 42.5T at 61.1M/s, 182h40m to go
223G resilvered, 9.75% done
config:

NAME STATE READ WRITE CKSUM
tank DEGRADED 0 0 20
raidz3-0 DEGRADED 0 0 105
sdd DEGRADED 0 0 0 too many errors
sde DEGRADED 0 0 0 too many errors
replacing-2 DEGRADED 0 0 0
old UNAVAIL 0 0 0
sdf ONLINE 0 0 0 (resilvering)
sdg DEGRADED 0 0 0 too many errors
sdh DEGRADED 0 0 0 too many errors
sdi DEGRADED 42 0 0 too many errors (resilvering)
sdj DEGRADED 18 0 0 too many errors
sdk DEGRADED 81 0 0 too many errors (resilvering)
sdl DEGRADED 0 0 0 too many errors
sdm DEGRADED 0 0 0 too many errors
sdn FAULTED 14 0 0 too many errors
sdo DEGRADED 0 0 0 too many errors
sdp DEGRADED 0 0 0 too many errors
sdq DEGRADED 19 0 0 too many errors
sdr DEGRADED 0 0 0 too many errors
sds DEGRADED 0 0 0 too many errors
sdt DEGRADED 0 0 0 too many errors
sdu FAULTED 14 0 0 too many errors

I na końcu lista 15 plików z błędami.

Jakieś pomysły na to co poszło nie tak i jak wyprostować sytuację ?

[Mistral85 9]

Masz ZFS na dyskach SSD ? Jeśli tak, to to co się spotkało jest dość normalne. Resilver to dość wymagająca operacja i jeśli używasz dysków ssd tej samej marki/serii, to jest spora szansa, że podczas resislvera posypie się jeszcze jakiś dysk (z HDD też jest to ryzyko, ale o wiele mniejsze). Radziłbym poczekać na koniec tego procesu i wtedy ewentualnie kombinować coś dalej. Z tego co wiem ZFS jest dość odpornym systemem plików, szczególnie jeśli dasz odpowiednio dużą nadmiarowość jeśli chodzi o liczbę dysków. Status DEGRADED jest jeszcze ok. Przejmować się trzeba jak jest status FAULTED