ZFS 풀이 영구 재동기화 루프에 있으므로 장치를 분리/제거할 수 없습니다.

ZFS 풀이 영구 재동기화 루프에 있으므로 장치를 분리/제거할 수 없습니다.

내 풀:

❯ zpool status
pool: wdblack
state: ONLINE
status: One or more devices is currently being resilvered.  The pool will
continue to function, possibly in a degraded state.
action: Wait for the resilver to complete.
scan: resilver in progress since Mon Oct  5 13:35:14 2020
2.84T scanned at 586M/s, 852G issued at 172M/s, 9.52T total
66.5M resilvered, 8.74% done, 0 days 14:44:07 to go
remove: Removal of vdev 0 copied 5.99T in 15h17m, completed on Sat Jun  6 03:15:41 2020
29.5M memory used for removed device mappings
config:

NAME                                     STATE     READ WRITE CKSUM
wdblack                                  ONLINE       0     0     0
wwn-0x50014ee26390e982                 ONLINE       0     0    82
wwn-0x5000cca27ec99833-part1           ONLINE       0     0  264K  (resilvering)
ata-WDC_WD80EZAZ-11TDBA0_JEH52XAN      ONLINE       0     0     0
ata-GOODRAM_C100_FF180744082600124110  ONLINE       0     0     0
sdg                                    ONLINE       0     0     0

-part1은 일주일 동안 재동기화 루프에 있었습니다. 매번 저절로 시작됩니다.

ZFS 기능:

NAME     PROPERTY              VALUE                  SOURCE
wdblack  type                  filesystem             -
wdblack  creation              Sat Mar  9 10:54 2019  -
wdblack  used                  9.56T                  -
wdblack  available             10.5T                  -
wdblack  referenced            96K                    -
wdblack  compressratio         1.00x                  -
wdblack  mounted               yes                    -
wdblack  quota                 none                   default
wdblack  reservation           none                   default
wdblack  recordsize            128K                   local
wdblack  mountpoint            /home/agilob/disk      local
wdblack  sharenfs              off                    default
wdblack  checksum              on                     default
wdblack  compression           off                    default
wdblack  atime                 off                    local
wdblack  devices               on                     default
wdblack  exec                  on                     default
wdblack  setuid                on                     default
wdblack  readonly              off                    default
wdblack  zoned                 off                    default
wdblack  snapdir               hidden                 default
wdblack  aclinherit            restricted             default
wdblack  createtxg             1                      -
wdblack  canmount              on                     default
wdblack  xattr                 on                     default
wdblack  copies                1                      default
wdblack  version               5                      -
wdblack  utf8only              off                    -
wdblack  normalization         none                   -
wdblack  casesensitivity       sensitive              -
wdblack  vscan                 off                    default
wdblack  nbmand                off                    default
wdblack  sharesmb              off                    default
wdblack  refquota              none                   default
wdblack  refreservation        none                   default
wdblack  guid                  5626685650647801653    -
wdblack  primarycache          all                    default
wdblack  secondarycache        all                    default
wdblack  usedbysnapshots       0B                     -
wdblack  usedbydataset         96K                    -
wdblack  usedbychildren        9.56T                  -
wdblack  usedbyrefreservation  0B                     -
wdblack  logbias               latency                default
wdblack  objsetid              51                     -
wdblack  dedup                 off                    default
wdblack  mlslabel              none                   default
wdblack  sync                  standard               default
wdblack  dnodesize             legacy                 default
wdblack  refcompressratio      1.00x                  -
wdblack  written               96K                    -
wdblack  logicalused           9.56T                  -
wdblack  logicalreferenced     42K                    -
wdblack  volmode               default                default
wdblack  filesystem_limit      none                   default
wdblack  snapshot_limit        none                   default
wdblack  filesystem_count      none                   default
wdblack  snapshot_count        none                   default
wdblack  snapdev               hidden                 default
wdblack  acltype               off                    default
wdblack  context               none                   default
wdblack  fscontext             none                   default
wdblack  defcontext            none                   default
wdblack  rootcontext           none                   default
wdblack  relatime              off                    local
wdblack  redundant_metadata    all                    default
wdblack  overlay               off                    default
wdblack  encryption            off                    default
wdblack  keylocation           none                   default
wdblack  keyformat             none                   default
wdblack  pbkdf2iters           0                      default
wdblack  special_small_blocks  0                      default

재동기화하지 않은 장치라도 장치를 분리할 수 없습니다.

❯ sudo zpool detach wdblack /dev/sdg
cannot detach /dev/sdg: only applicable to mirror and replacing vdevs
❯ sudo zpool detach wdblack wwn-0x5000cca27ec99833-part1
cannot detach wwn-0x5000cca27ec99833-part1: only applicable to mirror and replacing vdevs

그러면 삭제할 수 없습니다

❯ sudo zpool remove wdblack wwn-0x5000cca27ec99833-part1
cannot remove wwn-0x5000cca27ec99833-part1: Pool busy; removal may already be in progress
❯ sudo zpool remove wdblack sdg
cannot remove sdg: invalid config; all top-level vdevs must have the same sector size and not be raidz.

제 기억이 맞다면 정리가 시작된 후에 재동기화가 시작되며 이는 변경할 수 없습니다.

❯ sudo zpool scrub -s wdblack
cannot cancel scrubbing wdblack: currently resilvering
❯ sudo zpool scrub wdblack
cannot scrub wdblack: currently resilvering

zpool status wdblack손상된 파일이 보고되지만 그 수는 "무작위로" 다양하며 일반적으로 7(가장 일반적)에서 3000000 이상까지이며 현재는errors: 259134 data errors, use '-v' for a list

내 풀의 모든 파일 수가 300000개를 넘었습니다!

이제 259k 이상의 오류가 보고되지만 sudo를 실행하면 zpool status wdblack -v259k 대신 7개의 파일만 인쇄됩니다.

이 글을 쓰는 시점에서 나는 Archlinux를 사용하고 있습니다.

Linux 5.8.12-arch1-1 #1 SMP PREEMPT Sat, 26 Sep 2020 21:42:58 +0000 x86_64 GNU/Linux
❯ zfs version
zfs-0.8.4-1
zfs-kmod-0.8.4-1

편집하다:

재동기화는 완료 즉시 시작됩니다.

Oct  6 2020 18:41:03.798523850 sysevent.fs.zfs.resilver_finish
version = 0x0
class = "sysevent.fs.zfs.resilver_finish"
pool = "wdblack"
pool_guid = 0x509d876228a22ecc
pool_state = 0x0
pool_context = 0x0
time = 0x5f7cac2f 0x2f9881ca 
eid = 0x27e4e

Oct  6 2020 18:41:03.798523850 sysevent.fs.zfs.history_event
version = 0x0
class = "sysevent.fs.zfs.history_event"
pool = "wdblack"
pool_guid = 0x509d876228a22ecc
pool_state = 0x0
pool_context = 0x0
history_hostname = "slave"
history_internal_str = "errors=159477"
history_internal_name = "starting deferred resilver"
history_txg = 0x7246f3
history_time = 0x5f7cac2f
time = 0x5f7cac2f 0x2f9881ca 
eid = 0x27e4f

Oct  6 2020 18:41:09.005195427 sysevent.fs.zfs.resilver_start
version = 0x0
class = "sysevent.fs.zfs.resilver_start"
pool = "wdblack"
pool_guid = 0x509d876228a22ecc
pool_state = 0x0
pool_context = 0x0
time = 0x5f7cac35 0x4f46a3
eid = 0x27e50

답변1

재동기화 주기가 완료되고 풀을 스크럽했을 때 이런 일이 한 번 일어났습니다. 오류는 발견되지 않지만 재동기화는 루프를 중지합니다. 그런 다음 드라이브를 제거하고 교체할 수 있었습니다.

고쳐 쓰다:

알았어 알았어 알았어 이것 좀 봐 마지막 댓글이 달린 지 3시간 후에 문제가 해결되었습니다. 5월 4일부터 진행되었으며 수정 사항이 포함된 0.8.5를 출시했습니다.https://github.com/openzfs/zfs/pull/10291

안타깝게도 이 수정 사항을 얻으려면 ZFS를 빌드해야 합니다.

또는 버전 0.8.5 패키지가 포함된 신뢰할 수 있는 소스를 찾으세요.

여기에서 ZFS 소스를 얻을 수 있습니다:https://github.com/openzfs/zfs/releases/tag/zfs-0.8.5

오늘은 당신의 행운의 날입니다! :)

관련 정보