ことの起こりは1か月前に遡り。初期構築時(4年近く前)から使っていたata3(ad6)のHDD、WD20EARSがお亡くなりに。どうやらコントローラ側が逝ったか刺さってしまったようで、アクセスランプ点きっぱなし。
Aug 8 09:53:41 yua kernel: ata3: port is not ready (timeout 15000ms) tfd = 00000080 Aug 8 09:53:42 yua kernel: ata3: hardware reset timeout Aug 8 09:53:42 yua kernel: unknown: TIMEOUT - FLUSHCACHE48 retrying (1 retry left) Aug 8 09:54:06 yua kernel: ata3: port is not ready (timeout 15000ms) tfd = 00000080 Aug 8 09:54:06 yua kernel: ata3: hardware reset timeout Aug 8 09:54:06 yua kernel: unknown: TIMEOUT - FLUSHCACHE48 retrying (0 retries left) Aug 8 09:54:31 yua kernel: ata3: port is not ready (timeout 15000ms) tfd = 00000080 Aug 8 09:54:31 yua kernel: ata3: hardware reset timeout Aug 8 09:54:31 yua kernel: unknown: FAILURE - FLUSHCACHE48 timed out
ここからRAIDZ1が縮退(DEGRADED)運転に入るが、夏コミや帰省のバタバタなどで対応は遅れる。初期構築時から使っているHDDは稼働3年半を超えたので、いっそ3TB×4に組み替えてしまおうか、などとも悩み始めてしまうが、結局は移行手順が煩雑になるので断念し、今回は2TB×4の現行維持でいくことで決定。9月に入ってようやく交換用HDDを購入。
ということで、9月7日の午後、HDD入れ換え作業を開始。録画鯖としての機能は止めずに実施するため、できれば再構築中に録画が発生しない日程で作業をしたいところだが、今期は録画予約の無い曜日が無いため無理な相談。強行軍とする。
交換作業自体は、約3年前の記録に沿って実施。ただ、前回はHDDのコントローラは生きていたが、今回はコントローラが刺さっていた(アクセスランプが付きっぱなし)点が違い、はたして新しいHDDを無事認識してくれるか心配だったが、新HDDをattachした時点でバスがリセットされたようで、すんなり回復。
余談だが、ごそごそと作業準備をしていく途中、なぜか今回購入した以外の未開封の2TB HDDも発見されてしまう。記憶を遡っていくと、しばらく前に「HDDのread errorが出た(回復可能errorでDEGRADEまでは至らず)ので交換用HDDを手配はしたけど、交換前に他の理由で再起動したらerrorが消えちゃったので放置したことがあったなぁ」などと思い出す。HDDのLOTも約2年前だったので、記憶は定かじゃないけどその頃の話。放置期間が長いのが気になったけど、今回は古いほう優先ということで発掘したHDDを使用。
交換後は自動的に再構築(resilvering)が始まり、あとは進捗状況を時折確認。…で、25%くらい進んだところでエラー発生。ちなみにこれが、初代TeraStationから始まる自宅RAID歴10年近く、延べ10回前後は実施している再構築で、初めての再構築中のエラー遭遇だったり。
Sep 7 18:57:23 yua kernel: ad4: FAILURE - READ_DMA48 status=51<READY,DSC,ERROR> error=40<UNCORRECTABLE> LBA=3098392832 Sep 7 18:57:26 yua kernel: ad4: FAILURE - READ_DMA48 status=51<READY,DSC,ERROR> error=40<UNCORRECTABLE> LBA=3098392832
状況を確認すると破損ファイルはエンコード済の動画ファイル(「いつか天魔の黒ウサギ」のどれかの回)1個で、まぁ消えても痛くはないファイルだし、エラーが1回出た後は処理は進んでいる様子。そもそも概ねバックアップは取ってあるので、リストアと再構築が面倒臭いのを除けばほぼ実害は無いのだが、なるべく面倒にはなりたくない…。
ちなみにこの頃、モバマスの響子ちゃんドリフェスの最後の追い込みで走りつつ、再構築の進捗も気にしつつで、心配事が同時進行状態。
(続く)