LinuxForum.Fans
Тема

[lvm]ошибки в конце зеркалирования

Автор: Fat-Zer 51 сообщений 5975 просмотров
19.06.2012 07:58 · отредактировано #259826

сабж:

text

goblin / # lvconvert -m 1 /dev/vg_data/photo /dev/sdc5 /dev/sdb7
  vg_data/photo: Converted: 0,0%
....
  vg_data/photo: Converted: 95,5%
  vg_data/photo: Converted: 95,6%
  /dev/sdc1: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 0: Ошибка ввода/вывода
  /dev/vg_data/video: read failed after 0 of 4096 at 2300290465792: Ошибка ввода/вывода
  /dev/vg_data/video: read failed after 0 of 4096 at 2300290523136: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 397284409344: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 397284466688: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 0: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 4096: Ошибка ввода/вывода
  /dev/vg_data/photo: read failed after 0 of 4096 at 42949607424: Ошибка ввода/вывода
  /dev/vg_data/photo: read failed after 0 of 4096 at 42949664768: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 0: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 2000398843904: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 2000398925824: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 4096: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 400073687040: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 400073768960: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 4096: Ошибка ввода/вывода
  Couldn't find device with uuid dBS0Yl-nHox-oeAs-JvLk-Qy68-mVtR-xTCnWx.
  Couldn't find device with uuid R9UuJ2-Ts6c-gw0U-tXTJ-0wxA-kaNR-jLQo3H.
  Couldn't find device with uuid xvYksu-os2O-9tr2-EKVR-DYUV-1Pdc-ftN7eB.
  Couldn't find device with uuid BgnwMp-5Rwr-qUtI-NnZu-ceFG-5CPA-WkA2X4.
  Couldn't find device with uuid DVIADp-U6d7-LoZT-KiLw-ZayO-e1SK-SPLnto.
  Cannot change VG vg_data while PVs are missing.
  Consider vgreduce --removemissing.
  ABORTING: Can't reread VG for vg_data/photo

инфа:

text

goblin / # lvscan
  /dev/vg_data/video: read failed after 0 of 4096 at 2300290465792: Ошибка ввода/вывода
  /dev/vg_data/video: read failed after 0 of 4096 at 2300290523136: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 397284409344: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 397284466688: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 0: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 4096: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 0: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 2000398843904: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 2000398925824: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 4096: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 400073687040: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 400073768960: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 0: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 4096: Ошибка ввода/вывода
  Couldn't find device with uuid dBS0Yl-nHox-oeAs-JvLk-Qy68-mVtR-xTCnWx.
  Couldn't find device with uuid R9UuJ2-Ts6c-gw0U-tXTJ-0wxA-kaNR-jLQo3H.
  Couldn't find device with uuid xvYksu-os2O-9tr2-EKVR-DYUV-1Pdc-ftN7eB.
  Couldn't find device with uuid BgnwMp-5Rwr-qUtI-NnZu-ceFG-5CPA-WkA2X4.
  Couldn't find device with uuid DVIADp-U6d7-LoZT-KiLw-ZayO-e1SK-SPLnto.
  ACTIVE            '/dev/vg_data/store' [700,00 GiB] inherit
  ACTIVE            '/dev/vg_data/video' [2,09 TiB] inherit
  ACTIVE            '/dev/vg_data/downloads' [370,00 GiB] inherit
  ACTIVE            '/dev/vg_data/photo' [40,00 GiB] inherit
  ACTIVE            '/dev/vg_main/not_native' [200,00 GiB] inherit
  ACTIVE            '/dev/vg_main/gentoo_home' [250,00 GiB] inherit
  ACTIVE            '/dev/vg_main/gentoo_usr' [20,00 GiB] inherit
  ACTIVE            '/dev/vg_main/gentoo_opt' [1,00 GiB] inherit
  ACTIVE            '/dev/vg_main/gentoo_var' [5,00 GiB] inherit
  ACTIVE            '/dev/vg_main/swap' [8,00 GiB] inherit
goblin / # pvscan
  /dev/vg_data/video: read failed after 0 of 4096 at 2300290465792: Ошибка ввода/вывода
  /dev/vg_data/video: read failed after 0 of 4096 at 2300290523136: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 397284409344: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 397284466688: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 0: Ошибка ввода/вывода
  /dev/vg_data/downloads: read failed after 0 of 4096 at 4096: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 0: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 2000398843904: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 2000398925824: Ошибка ввода/вывода
  /dev/sdc: read failed after 0 of 4096 at 4096: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc1: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc5: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc6: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 400079716352: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 400079773696: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 0: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 512 at 4096: Ошибка ввода/вывода
  /dev/sdc7: read failed after 0 of 2048 at 0: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 400073687040: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 400073768960: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 0: Ошибка ввода/вывода
  /dev/sdc8: read failed after 0 of 4096 at 4096: Ошибка ввода/вывода
  Couldn't find device with uuid dBS0Yl-nHox-oeAs-JvLk-Qy68-mVtR-xTCnWx.
  Couldn't find device with uuid R9UuJ2-Ts6c-gw0U-tXTJ-0wxA-kaNR-jLQo3H.
  Couldn't find device with uuid xvYksu-os2O-9tr2-EKVR-DYUV-1Pdc-ftN7eB.
  Couldn't find device with uuid BgnwMp-5Rwr-qUtI-NnZu-ceFG-5CPA-WkA2X4.
  Couldn't find device with uuid DVIADp-U6d7-LoZT-KiLw-ZayO-e1SK-SPLnto.
  PV /dev/sdd1        VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdd5        VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdd6        VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdd7        VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdd8        VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdb1        VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdb5        VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdb6        VG vg_data   lvm2 [279,44 GiB / 138,31 GiB free]
  PV /dev/sdb7        VG vg_data   lvm2 [279,44 GiB / 239,44 GiB free]
  PV unknown device   VG vg_data   lvm2 [372,56 GiB / 2,56 GiB free]
  PV unknown device   VG vg_data   lvm2 [372,56 GiB / 372,56 GiB free]
  PV unknown device   VG vg_data   lvm2 [372,56 GiB / 372,56 GiB free]
  PV unknown device   VG vg_data   lvm2 [372,56 GiB / 0    free]
  PV unknown device   VG vg_data   lvm2 [372,56 GiB / 0    free]
  PV /dev/sda7        VG vg_main   lvm2 [59,19 GiB / 0    free]
  PV /dev/sda8        VG vg_main   lvm2 [59,19 GiB / 0    free]
  PV /dev/sda9        VG vg_main   lvm2 [59,19 GiB / 0    free]
  PV /dev/sda10       VG vg_main   lvm2 [59,16 GiB / 0    free]
  PV /dev/sdb8        VG vg_main   lvm2 [279,44 GiB / 32,16 GiB free]
  PV /dev/sda6        VG vg_main   lvm2 [49,19 GiB / 49,19 GiB free]
  Total: 20 [4,83 TiB] / in use: 20 [4,83 TiB] / in no VG: 0 [0   ]

что это за ахтунг и что теперь делать?
с виду всё работает.... по крайней мере примонтированные разделы.

19.06.2012 08:08 #259827

поправка. данные не все. то что было в /store/downloads пропало.
чтение с диска не проходит.

text

goblin / # dd if=/dev/sdc1 of=/dev/null
dd: чтение «/dev/sdc1»: Ошибка ввода/вывода
16+0 записей считано
16+0 записей написано
 скопировано 8192 байта (8,2 kB), 0,00063261 c, 12,9 MB/c
dd: чтение «/dev/sdc5»: Ошибка ввода/вывода
0+0 записей считано
0+0 записей написано
 скопировано 0 байт (0 B), 0,000648152 c, 0,0 kB/c
goblin / # dd if=/dev/sdc6 of=/dev/null
dd: чтение «/dev/sdc6»: Ошибка ввода/вывода
0+0 записей считано
0+0 записей написано
 скопировано 0 байт (0 B), 0,00065739 c, 0,0 kB/c
goblin / # dd if=/dev/sdc7 of=/dev/null
dd: чтение «/dev/sdc7»: Ошибка ввода/вывода
16+0 записей считано
16+0 записей написано
 скопировано 8192 байта (8,2 kB), 0,000619396 c, 13,2 MB/c
goblin / # dd if=/dev/sdc8 of=/dev/null
dd: чтение «/dev/sdc8»: Ошибка ввода/вывода
16+0 записей считано
16+0 записей написано
 скопировано 8192 байта (8,2 kB), 0,000562193 c, 14,6 MB/c
19.06.2012 08:13 #259828

на том диске ещё кусок видео раздела - как он -пока не знаю...
диск не отвечает.

text
goblin / # smartctl -a /dev/sdc
smartctl 5.42 2011-10-20 r3458 [x86_64-linux-3.2.1-gentoo-r2-goblin-0.2] (local build)
Copyright (C) 2002-11 by Bruce Allen, http://smartmontools.sourceforge.net

Vendor:               /2:0:0:0
Product:
User Capacity:        600 332 565 813 390 450 bytes [600 PB]
Logical block size:   774843950 bytes
>> Terminate command early due to bad response to IEC mode page
A mandatory SMART command failed: exiting. To continue, add one or more '-T permissive' options.
goblin / # hdparm -i /dev/sdc


/dev/sdc:
 HDIO_DRIVE_CMD(identify) failed: Input/output error
 HDIO_GET_IDENTITY failed: No message of desired type
goblin / # hdparm -I /dev/sdc


/dev/sdc:
 HDIO_DRIVE_CMD(identify) failed: Input/output error

сейчас, наверное, буду репостить на других форумах.

19.06.2012 08:37 · отредактировано #259829

логи полные, со вчера на всякий пожарный, большие и бесполезные: https://raw.github.com/gist/2952292/1818d8b83c08c245cc5ea421bfd57adad9b5a796/tmpmsgs.txt
логи, убраны 100500 ошибок: https://gist.github.com/2952301

самое ценное из логов:

text
Jun 19 07:27:41 goblin kernel: [141590.752052] ata3.00: exception Emask 0x0 SAct 0x0 SErr 0x0 action 0x6 frozen
Jun 19 07:27:41 goblin kernel: [141590.752057] ata3.00: failed command: FLUSH CACHE EXT
Jun 19 07:27:41 goblin kernel: [141590.752064] ata3.00: cmd ea/00:00:00:00:00/00:00:00:00:00/a0 tag 0
Jun 19 07:27:41 goblin kernel: [141590.752066]          res 40/00:00:00:4f:c2/00:00:00:00:00/40 Emask 0x4 (timeout)
Jun 19 07:27:41 goblin kernel: [141590.752070] ata3.00: status: { DRDY }
Jun 19 07:27:41 goblin kernel: [141590.752077] ata3: hard resetting link
Jun 19 07:27:41 goblin kernel: [141590.752080] ata3: nv: skipping hardreset on occupied port
Jun 19 07:27:46 goblin kernel: [141596.255061] ata3: link is slow to respond, please be patient (ready=0)
Jun 19 07:27:51 goblin kernel: [141600.794065] ata3: SRST failed (errno=-16)
Jun 19 07:27:51 goblin kernel: [141600.794070] ata3: hard resetting link
Jun 19 07:27:51 goblin kernel: [141600.794073] ata3: nv: skipping hardreset on occupied port
Jun 19 07:27:56 goblin kernel: [141606.298014] ata3: link is slow to respond, please be patient (ready=0)
Jun 19 07:28:01 goblin kernel: [141610.837038] ata3: SRST failed (errno=-16)
Jun 19 07:28:01 goblin kernel: [141610.837043] ata3: hard resetting link
Jun 19 07:28:01 goblin kernel: [141610.837046] ata3: nv: skipping hardreset on occupied port
Jun 19 07:28:07 goblin kernel: [141616.341060] ata3: link is slow to respond, please be patient (ready=0)
Jun 19 07:28:36 goblin kernel: [141645.872016] ata3: SRST failed (errno=-16)
Jun 19 07:28:36 goblin kernel: [141645.872022] ata3: limiting SATA link speed to 1.5 Gbps
Jun 19 07:28:36 goblin kernel: [141645.872025] ata3: hard resetting link
Jun 19 07:28:36 goblin kernel: [141645.872027] ata3: nv: skipping hardreset on occupied port
Jun 19 07:28:41 goblin kernel: [141650.916039] ata3: SRST failed (errno=-16)
Jun 19 07:28:41 goblin kernel: [141650.916045] ata3: reset failed, giving up
Jun 19 07:28:41 goblin kernel: [141650.916048] ata3.00: disabled
Jun 19 07:28:41 goblin kernel: [141650.916055] ata3.00: device reported invalid CHS sector 0
Jun 19 07:28:41 goblin kernel: [141650.916066] ata3: EH complete
Jun 19 07:28:41 goblin kernel: [141650.916117] sd 2:0:0:0: [sdc] Unhandled error code
Jun 19 07:28:41 goblin kernel: [141650.916120] sd 2:0:0:0: [sdc]  Result: hostbyte=DID_BAD_TARGET driverbyte=DRIVER_OK
Jun 19 07:28:41 goblin kernel: [141650.916125] sd 2:0:0:0: [sdc] CDB: Read(10): 28 00 21
Jun 19 07:28:41 goblin kernel: [141650.916133] sd 2:0:0:0: [sdc] Unhandled error code
Jun 19 07:28:41 goblin kernel: [141650.916136] sd 2:0:0:0: [sdc]  Result: hostbyte=DID_BAD_TARGET driverbyte=DRIVER_OK
Jun 19 07:28:41 goblin lvm[3994]: Log device 253:10 has failed (D).
Jun 19 07:28:41 goblin lvm[3994]: Device failure in vg_data-photo.
Jun 19 07:28:41 goblin kernel: [141650.916141] sd 2:0:0:0: [sdc] CDB: Write(10): 2a 00 50 b5 68 00 00 00 16 00
Jun 19 07:28:41 goblin kernel: [141650.916150] end_request: I/O error, dev sdc, sector 1354065920
Jun 19 07:28:41 goblin kernel: [141650.916152]  43 cc c0 00 00 28 00
Jun 19 07:28:41 goblin kernel: [141650.916158] end_request: I/O error, dev sdc, sector 558091456
Jun 19 07:28:41 goblin kernel: [141650.916173] sd 2:0:0:0: [sdc] Unhandled error code
Jun 19 07:28:41 goblin kernel: [141650.916176] sd 2:0:0:0: [sdc]  Result: hostbyte=DID_BAD_TARGET driverbyte=DRIVER_OK
Jun 19 07:28:41 goblin kernel: [141650.916180] sd 2:0:0:0: [sdc] CDB: Read(10): 28 00 00 00 08 00 00 00 04 00
Jun 19 07:28:41 goblin kernel: [141650.916190] end_request: I/O error, dev sdc, sector 2048

собственно интересует, это ошибка в ядре или диск умер? если второе, то почему?
перезагружаться боюсь
сам диск: Seagate ST2000DL003

19.06.2012 09:19 #259833

А что показывает smartctl на тот или иной диск? Если там большое количество Relocated Sectors, то тогда да, диск накрывается. И его надо срочно менять. Кстати, не скажу как у сигейтов, но самсунги дают на свои диски 3-х (трех) летнюю гарантию. В течение которой дефектные диски меняются беспроблемно. Я на своих серверах почти все диски (без одного) уже поменял :-)

19.06.2012 09:26 · отредактировано #259836

диск новый, меньше года...просто он ни с того ни с сего встал.
с остальными тоже всё в порядке, в этом плане:
[console] # for D in /dev/sd[abd]; do smartctl -a $D; done |grep Reallocated
5 Reallocated_Sector_Ct 0x0033 100 100 005 Pre-fail Always - 0
196 Reallocated_Event_Count 0x0032 100 100 000 Old_age Always - 0
5 Reallocated_Sector_Ct 0x0033 100 100 010 Pre-fail Always - 0
196 Reallocated_Event_Count 0x0032 100 100 000 Old_age Always - 0
5 Reallocated_Sector_Ct 0x0033 200 200 140 Pre-fail Always - 0
196 Reallocated_Event_Count 0x0032 200 200 000 Old_age Always - 0
[/console]

ладно... была не была... перезагружаюсь...

19.06.2012 09:40 · отредактировано #259838

мда... диск мёртв...
нет! ещё дергается:

text
# smartctl -a /dev/sdc
smartctl 5.42 2011-10-20 r3458 [x86_64-linux-3.2.1-gentoo-r2-goblin-0.2] (local build)
Copyright (C) 2002-11 by Bruce Allen, http://smartmontools.sourceforge.net

=== START OF INFORMATION SECTION ===
Model Family:     Seagate Barracuda Green (Adv. Format)
Device Model:     ST2000DL003-9VT166
Serial Number:    6YD21HH8
LU WWN Device Id: 5 000c50 046df7ccd
Firmware Version: CC3C
User Capacity:    2 000 398 934 016 bytes [2,00 TB]
Sector Sizes:     512 bytes logical, 4096 bytes physical
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   8
ATA Standard is:  ATA-8-ACS revision 4
Local Time is:    Tue Jun 19 09:54:01 2012 MSK
SMART support is: Available - device has SMART capability.
SMART support is: Enabled


=== START OF READ SMART DATA SECTION ===
SMART overall-health self-assessment test result: PASSED


General SMART Values:
Offline data collection status:  (0x82) Offline data collection activity
                                        was completed without error.
                                        Auto Offline Data Collection: Enabled.
Self-test execution status:      (   0) The previous self-test routine completed
                                        without error or no self-test has ever
                                        been run.
Total time to complete Offline
data collection:                (  623) seconds.
Offline data collection
capabilities:                    (0x7b) SMART execute Offline immediate.
                                        Auto Offline data collection on/off support.
                                        Suspend Offline collection upon new
                                        command.
                                        Offline surface scan supported.
                                        Self-test supported.
                                        Conveyance Self-test supported.
                                        Selective Self-test supported.
SMART capabilities:            (0x0003) Saves SMART data before entering
                                        power-saving mode.
                                        Supports SMART auto save timer.
Error logging capability:        (0x01) Error logging supported.
                                        General Purpose Logging supported.
Short self-test routine
recommended polling time:        (   1) minutes.
Extended self-test routine
recommended polling time:        ( 255) minutes.
Conveyance self-test routine
recommended polling time:        (   2) minutes.
SCT capabilities:              (0x30b7) SCT Status supported.
                                        SCT Feature Control supported.
                                        SCT Data Table supported.


SMART Attributes Data Structure revision number: 10
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x000f   117   100   006    Pre-fail  Always       -       141672720
  3 Spin_Up_Time            0x0003   092   092   000    Pre-fail  Always       -       0
  4 Start_Stop_Count        0x0032   100   100   020    Old_age   Always       -       8
  5 Reallocated_Sector_Ct   0x0033   100   100   036    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x000f   100   253   030    Pre-fail  Always       -       667908
  9 Power_On_Hours          0x0032   097   097   000    Old_age   Always       -       3258
 10 Spin_Retry_Count        0x0013   100   100   097    Pre-fail  Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   020    Old_age   Always       -       14
183 Runtime_Bad_Block       0x0032   100   100   000    Old_age   Always       -       0
184 End-to-End_Error        0x0032   100   100   099    Old_age   Always       -       0
187 Reported_Uncorrect      0x0032   100   100   000    Old_age   Always       -       0
188 Command_Timeout         0x0032   100   100   000    Old_age   Always       -       0
189 High_Fly_Writes         0x003a   100   100   000    Old_age   Always       -       0
190 Airflow_Temperature_Cel 0x0022   056   046   045    Old_age   Always       -       44 (Min/Max 44/44)
191 G-Sense_Error_Rate      0x0032   100   100   000    Old_age   Always       -       0
192 Power-Off_Retract_Count 0x0032   100   100   000    Old_age   Always       -       8
193 Load_Cycle_Count        0x0032   100   100   000    Old_age   Always       -       14
194 Temperature_Celsius     0x0022   044   054   000    Old_age   Always       -       44 (0 23 0 0 0)
195 Hardware_ECC_Recovered  0x001a   036   023   000    Old_age   Always       -       141672720
197 Current_Pending_Sector  0x0012   100   100   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0010   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x003e   200   200   000    Old_age   Always       -       0
240 Head_Flying_Hours       0x0000   100   253   000    Old_age   Offline      -       226529460092993
241 Total_LBAs_Written      0x0000   100   253   000    Old_age   Offline      -       1501764594
242 Total_LBAs_Read         0x0000   100   253   000    Old_age   Offline      -       914718480


SMART Error Log Version: 1
No Errors Logged


SMART Self-test log structure revision number 1
No self-tests have been logged.  [To run self-tests, use: smartctl -t]


SMART Selective self-test log data structure revision number 1
 SPAN  MIN_LBA  MAX_LBA  CURRENT_TEST_STATUS
    1        0        0  Not_testing
    2        0        0  Not_testing
    3        0        0  Not_testing
    4        0        0  Not_testing
    5        0        0  Not_testing
Selective self-test flags (0x0):
  After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.
 # dd if=/dev/sdc of=/dev/null
^C368509+0 записей считано
368509+0 записей написано
 скопировано 188676608 байт (189 MB), 1,55148 c, 122 MB/c

пугает конечно огромный Raw_Read_Error_Rate...

19.06.2012 09:56 #259839
"Fat-Zer" написал:
мда... диск мёртв...
:'(

"Fat-Zer" написал:
диск новый, меньше года...

В данном случае это хорошая новость, т.к. гарантия - 1 год. :)

19.06.2012 10:06 · отредактировано #259840
"Fat-Zer" написал:
пугает конечно огромный Raw_Read_Error_Rate...

Для Seagate это, вроде, нормально.

"Fat-Zer" написал:
7 Seek_Error_Rate 0x000f 100 253 030 Pre-fail Always - 667908

Вот это, кажись, плохо..

19.06.2012 10:15 #259841

гм... не такой уж живой, как показалось:

text
goblin / # smartctl -a /dev/sdc |grep -i raw_read
  1 Raw_Read_Error_Rate     0x000f   117   100   006    Pre-fail  Always       -       142971208
goblin / # dd if=/dev/sdc of=/dev/null bs=4096
^C135933+0 записей считано
135932+0 записей написано
 скопировано 556777472 байта (557 MB), 3,8848 c, 143 MB/c

goblin / # smartctl -a /dev/sdc |grep -i raw_read
  1 Raw_Read_Error_Rate     0x000f   117   100   006    Pre-fail  Always       -       144064384
19.06.2012 10:54 #259850

Если raid, то диски - это расходный материал. Сделал 10й raid, прикупи на полку еще 2-3 диска. Накладно, но это правда жизни. :-)

19.06.2012 11:27 · отредактировано #259854
i2ks написал:
Если raid, то диски - это расходный материал. Сделал 10й raid, прикупи на полку еще 2-3 диска. Накладно, но это правда жизни. :-)

Прикупать при наличии зеркала не советую. Совет прикупать диски верен только для случая, когда зеркала нет. Аргументирую гарантией.
Гарантия начинает истекать не с момента установки диска в систему, не по часам его реальной работы, а с момента покупки. И истеткает календарными днями. В результате мы получим через год не один поломатый диск, а поломатый плюс негарантийный с полки. И когда поломается этот негарантийный диск - на что менять?
Тактика должна быть иной. Строим зеркало на всех дисках, что есть. Никакого запасу. Если какой либо диск из этого зеркала выходит из строя - извлекаем его из зеркала. Зеркало продолжает работать (вероятность выхода из строя второго диска зеркала в это время - мала), а мы спокойно меняем диск по гарантии, если она еще есть. Или покупаем новый диск (с новой гарантией). В любом случае гарантия на этот диск начинается сначала и на полный срок.
В результате у нас нет дополнительных затрат (если гарантия не протухнет, если диск какой не окажется слишком живучим) на поддержание здоровья storage нашего сервера в течение всей жизни этого сервера с зеркальными дисками. Ну а лет через 5-7 надо будет думать уже не о замене дисков, а об обновлении всего сервера.

19.06.2012 11:36 #259856
Fat-Zer написал:
гм... не такой уж живой, как показалось:

Ерунда. Вот smart диска, который был поставлен в сервер после майских праздников (часов мало наработано):

text
  1 Raw_Read_Error_Rate     0x000f   118   100   006    Pre-fail  Always       -       178158656
  5 Reallocated_Sector_Ct   0x0033   100   100   036    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x000f   100   253   030    Pre-fail  Always       -       715612
  9 Power_On_Hours          0x0032   099   099   000    Old_age   Always       -       926
195 Hardware_ECC_Recovered  0x001a   052   042   000    Old_age   Always       -       178158656

Так что если контроллер восстанавливает данные (последняя строка, 195) по контрольным суммам, то на первую можно забить. Эти ошибки умрут под контроллером и наружу не вылезут. Самая критичная строка - это строка 5. Если резервная зона диска исчерпается, то опаньки... Ошибки полезут наружу и набо будет или руками размечать сбойные сектора (гимор еще тот) или менять диск как класс.

19.06.2012 11:47 #259858
"Cruiser78" написал:
Гарантия начинает истекать не с момента установки диска в систему, не по часам его реальной работы, а с момента покупки. И истеткает календарными днями. В результате мы получим через год не один поломатый диск, а поломатый плюс негарантийный с полки. И когда поломается этот негарантийный диск - на что менять?
Тактика должна быть иной. Строим зеркало на всех дисках, что есть. Никакого запасу. Если какой либо диск из этого зеркала выходит из строя - извлекаем его из зеркала. Зеркало продолжает работать (вероятность выхода из строя второго диска зеркала в это время - мала), а мы спокойно меняем диск по гарантии, если она еще есть. Или покупаем новый диск (с новой гарантией). В любом случае гарантия на этот диск начинается сначала и на полный срок.
В результате у нас нет дополнительных затрат (если гарантия не протухнет, если диск какой не окажется слишком живучим) на поддержание здоровья storage нашего сервера в течение всей жизни этого сервера с зеркальными дисками. Ну а лет через 5-7 надо будет думать уже не о замене дисков, а об обновлении всего сервера.

А вы уверены то что найдете диск с PN схожим что вылетел в системы? я сомневаюсь в этом, хотя все зависит от производителя. В общем то что вы написали не подходит ни под одну продукционную систему в целом, если только для дома и не более того. Диски должны быть всегда в резерве. Или вы готовы платить в три дорога за доставку диска?

19.06.2012 11:56 #259861
"Cruiser78" написал:
Ерунда. Вот smart диска, который был поставлен в сервер после майских праздников (часов мало наработано):

фух... хорошо... тогда будем считать, что физических проблем нет...

теперь логические с lvm'ом:

text

goblin / # pvscan
  PV /dev/sdd1    VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdd5    VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdd6    VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdd7    VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdd8    VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdb1    VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdb5    VG vg_data   lvm2 [279,44 GiB / 0    free]
  PV /dev/sdb6    VG vg_data   lvm2 [279,44 GiB / 138,31 GiB free]
  PV /dev/sdb7    VG vg_data   lvm2 [279,44 GiB / 239,44 GiB free]
  PV /dev/sdc1    VG vg_data   lvm2 [372,56 GiB / 2,56 GiB free]
  PV /dev/sdc5    VG vg_data   lvm2 [372,56 GiB / 372,56 GiB free]
  PV /dev/sdc6    VG vg_data   lvm2 [372,56 GiB / 372,56 GiB free]
  PV /dev/sdc7    VG vg_data   lvm2 [372,56 GiB / 0    free]
  PV /dev/sdc8    VG vg_data   lvm2 [372,56 GiB / 0    free]
  PV /dev/sda7    VG vg_main   lvm2 [59,19 GiB / 0    free]
  PV /dev/sda8    VG vg_main   lvm2 [59,19 GiB / 0    free]
  PV /dev/sda9    VG vg_main   lvm2 [59,19 GiB / 0    free]
  PV /dev/sda10   VG vg_main   lvm2 [59,16 GiB / 0    free]
  PV /dev/sdb8    VG vg_main   lvm2 [279,44 GiB / 32,16 GiB free]
  PV /dev/sda6    VG vg_main   lvm2 [49,19 GiB / 49,19 GiB free]
  Total: 20 [4,83 TiB] / in use: 20 [4,83 TiB] / in no VG: 0 [0   ]
goblin / # lvscan
  ACTIVE            '/dev/vg_data/store' [700,00 GiB] inherit
  inactive          '/dev/vg_data/video' [2,09 TiB] inherit
  inactive          '/dev/vg_data/downloads' [370,00 GiB] inherit
  ACTIVE            '/dev/vg_data/photo' [40,00 GiB] inherit
  ACTIVE            '/dev/vg_main/not_native' [200,00 GiB] inherit
  ACTIVE            '/dev/vg_main/gentoo_home' [250,00 GiB] inherit
  ACTIVE            '/dev/vg_main/gentoo_usr' [20,00 GiB] inherit
  ACTIVE            '/dev/vg_main/gentoo_opt' [1,00 GiB] inherit
  ACTIVE            '/dev/vg_main/gentoo_var' [5,00 GiB] inherit
  ACTIVE            '/dev/vg_main/swap' [8,00 GiB] inherit
goblin / # lvdisplay -m vg_data/video
  --- Logical volume ---
  LV Name                /dev/vg_data/video
  VG Name                vg_data
  LV UUID                d5lP3v-1rZB-yLGv-H1XZ-SHwT-i0yH-Z9FTB2
  LV Write Access        read/write
  LV Status              NOT available
  LV Size                2,09 TiB
  Current LE             34277
  Segments               7
  Allocation             inherit
  Read ahead sectors     auto

  --- Segments ---
  Logical extent 0 to 4470:
    Type                linear
    Physical volume     /dev/sdd1
    Physical extents    0 to 4470


  Logical extent 4471 to 8941:
    Type                linear
    Physical volume     /dev/sdd5
    Physical extents    0 to 4470


  Logical extent 8942 to 13412:
    Type                linear
    Physical volume     /dev/sdd6
    Physical extents    0 to 4470


  Logical extent 13413 to 17883:
    Type                linear
    Physical volume     /dev/sdd7
    Physical extents    0 to 4470


  Logical extent 17884 to 22354:
    Type                linear
    Physical volume     /dev/sdd8
    Physical extents    0 to 4470


  Logical extent 22355 to 28315:
    Type                linear
    Physical volume     /dev/sdc8
    Physical extents    0 to 5960


  Logical extent 28316 to 34276:
    Type                linear
    Physical volume     /dev/sdc7
    Physical extents    0 to 5960
goblin / # lvchange -a y vg_data/video
  Refusing activation of partial LV video. Use --partial to override.
goblin / # vgck vg_data
  The volume group is missing 3 physical volumes.

интересуют, две последние строчки... wtf?

19.06.2012 12:21 #259864
"Fat-Zer" написал:
интересуют, две последние строчки... wtf?

А что не так ?

19.06.2012 12:24 · отредактировано #259865
"-=Serj=-" написал:
А что не так ?

какие 3 PV он считает, что не видит? почему?
почему он не хочет активировать vg_data/video, хотя он видит, все её PV?

19.06.2012 12:30 #259866

Fat-Zer, тьфу, сорри - полосу прокрутки не заметил ...

19.06.2012 12:45 #259868

А если глянуть [console]vgck -v[/console]

19.06.2012 12:59 #259872
"-=Serj=-" написал:
А если глянуть
vgck -v

ничего дельного...
[console]goblin / # vgck -v vg_data
Using volume group(s) on command line
Finding volume group "vg_data"
There are 3 physical volumes missing.
The volume group is missing 3 physical volumes.
[/console]

Войдите или зарегистрируйтесь, чтобы ответить.