xfs на lvm. Скорость работы 3 миб/сек.

Всем привет. САБЖ. Чтож могло случиться то?

sanches sanches # pvdisplay 
  --- Physical volume ---
  PV Name               /dev/sdd
  VG Name               media
  PV Size               931,51 GiB / not usable 1,71 MiB
  Allocatable           yes (but full)
  PE Size               4,00 MiB
  Total PE              238467
  Free PE               0
  Allocated PE          238467
  PV UUID               Rvuj3X-hkNP-Ot0a-rGRs-OphQ-jGqJ-SLcqNg
   
  --- Physical volume ---
  PV Name               /dev/sdc
  VG Name               media
  PV Size               1,82 TiB / not usable 5,09 MiB
  Allocatable           yes (but full)
  PE Size               4,00 MiB
  Total PE              476931
  Free PE               0
  Allocated PE          476931
  PV UUID               bcOUM0-tuY8-DOJ0-YOtn-2zxr-FhIv-d0IKCz
   
  --- Physical volume ---
  PV Name               /dev/sdf
  VG Name               media
  PV Size               279,46 GiB / not usable 4,15 MiB
  Allocatable           yes (but full)
  PE Size               4,00 MiB
  Total PE              71541
  Free PE               0
  Allocated PE          71541
  PV UUID               OFvJ6q-F5AC-5dlk-x6L1-XjEY-Jn2h-a7CP3d
   
  --- Physical volume ---
  PV Name               /dev/sde
  VG Name               media
  PV Size               1,82 TiB / not usable 5,09 MiB
  Allocatable           yes (but full)
  PE Size               4,00 MiB
  Total PE              476931
  Free PE               0
  Allocated PE          476931
  PV UUID  sanches sanches # vgdisplay 
  --- Volume group ---
  VG Name               media
  System ID             
  Format                lvm2
  Metadata Areas        4
  Metadata Sequence No  35
  VG Access             read/write
  VG Status             resizable
  MAX LV                0
  Cur LV                2
  Open LV               2
  Max PV                0
  Cur PV                4
  Act PV                4
  VG Size               4,82 TiB
  PE Size               4,00 MiB
  Total PE              1263870
  Alloc PE / Size       1263870 / 4,82 TiB
  Free  PE / Size       0 / 0   
  VG UUID               CldQ2n-ydec-8lfY-hzwI-lS0C-4IFd-s7ptPZ             FlCbBl-Uqe6-et8Y-HYZV-3mol-iLMA-VGeed2
sanches sanches # vgdisplay 
  --- Volume group ---
  VG Name               media
  System ID             
  Format                lvm2
  Metadata Areas        4
  Metadata Sequence No  35
  VG Access             read/write
  VG Status             resizable
  MAX LV                0
  Cur LV                2
  Open LV               2
  Max PV                0
  Cur PV                4
  Act PV                4
  VG Size               4,82 TiB
  PE Size               4,00 MiB
  Total PE              1263870
  Alloc PE / Size       1263870 / 4,82 TiB
  Free  PE / Size       0 / 0   
  VG UUID               CldQ2n-ydec-8lfY-hzwI-lS0C-4IFd-s7ptPZ
sanches sanches # lvdisplay 
  --- Logical volume ---
  LV Name                /dev/media/media
  VG Name                media
  LV UUID                jq945P-dVCa-k8if-pwqL-RBJ5-0ymu-iBjjt2
  LV Write Access        read/write
  LV Status              available
  # open                 1
  LV Size                4,74 TiB
  Current LE             1243390
  Segments               7
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           254:0
   
  --- Logical volume ---
  LV Name                /dev/media/home
  VG Name                media
  LV UUID                mcPS63-JYdX-p24T-HGZh-5rSG-10GU-4OCx2z
  LV Write Access        read/write
  LV Status              available
  # open                 1
  LV Size                80,00 GiB
  Current LE             20480
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           254:1
sanches sanches # df -h
Файловая система      Разм  Исп  Дост  Исп% смонтирована на
rootfs                143G   41G   95G  30% /
/dev/root             143G   41G   95G  30% /
rc-svcdir             1,0M  116K  908K  12% /lib64/rc/init.d
udev                   10M  296K  9,8M   3% /dev
shm                   2,0G  272K  2,0G   1% /dev/shm
/dev/mapper/media-home
                       79G  8,5G   67G  12% /home
/dev/mapper/media-media
                      4,8T  3,5T  1,3T  74% /media
tmpfs                 2,0G  1,2G  840M  58% /tmp
tmpfs                  10M     0   10M   0% /var/lock
tmpfs                  10M   84K   10M   1% /var/run
sanches sanches # df -i
Файловая система      Iнодов   IИспол  IСвоб IИсп% смонтирована на
rootfs               9494528  672665 8821863    8% /
/dev/root            9494528  672665 8821863    8% /
rc-svcdir             507060      88  506972    1% /lib64/rc/init.d
udev                  507060     998  506062    1% /dev
shm                   507060       4  507056    1% /dev/shm
/dev/mapper/media-home
                     5242880   40577 5202303    1% /home
/dev/mapper/media-media
                     5092925440   58803 5092866637    1% /media
tmpfs                 507060   60364  446696   12% /tmp
tmpfs                 507060       2  507058    1% /var/lock
tmpfs                 507060      39  507021    1% /var/run
sanches sanches # uname -a
Linux sanches 2.6.36-gentoo-r5 #4 SMP Sun Mar 13 16:49:38 KRAT 2011 x86_64 Intel(R) Core(TM)2 Duo CPU E7500 @ 2.93GHz GenuineIntel GNU/Linux

.

Снова случилось страшное?

Я собирал lvm с указанием

Я собирал lvm с указанием размера сектора 4к. В той то теме все сложнее было, тут я целиком диски под lvm отдал. Только тут два диска 2тб с 4к сектором, и два винта обычные.

А что произошло? Работало и

А что произошло?
Работало и перестало?
Или с самого начала плохо?

Нет, сначала всё отлично

Нет, сначала всё отлично работало. Потом кстати какой то сбой был, половинну данных потерялось, остались только папки в которые нельзя было войти, и странным образом всё востановилось. Может после этого.

А что было перед сбоем

А что было перед сбоем (питание, обновление и т.д.)?
Где логи непосредственно перед сбоем, сразу после, теперь?
Что говорит смарт, фсцк?
Почему вас пытать надо?...
Про телепатов, наверное, слышали уже? :)

Перед сбоем подключал винт

Перед сбоем подключал винт через USB 2ТБ, чтоб один мой освободить и подключить его заного к lvm только с 4к сектором. Винт этот от usb отрубался сам, перезагружал съемник он заного находился, и всю окей было. А потом когда ещё данные не перенес обратно, такая фигня произошла, данные не читались. Перезагрузился в livecd, посмотрел, всё окей. Включил комп, всё окей. Перенес данные к себе на винт и всё. И только пару дней назад заметил что скорость записи ужасно маленькая. Скорость чтения не ахти так-же. Около 8 миб.

sanches sanches # xfs_check /dev/media/media 
/usr/bin/xfs_check: line 28:  3399 Убито              xfs_db$DBOPTS -F -i -p xfs_check -c "check$OPTS" $1

a smart?

a smart? hdparm?

smartctl --all /dev/sdc:

smartctl --all /dev/sdc: http://paste.pocoo.org/show/361248/
smartctl --all /dev/sdd: http://paste.pocoo.org/show/361249/
smartctl --all /dev/sde: http://paste.pocoo.org/show/361250/
smartctl --all /dev/sdf: http://paste.pocoo.org/show/361251/

hdparm -tT /dev/sdc: http://paste.pocoo.org/show/361252/
hdparm -tT /dev/sdd: http://paste.pocoo.org/show/361253/
hdparm -tT /dev/sde: http://paste.pocoo.org/show/361254/
hdparm -tT /dev/sdf: http://paste.pocoo.org/show/361255/

:)

Неужели сам не видишь, что sdd и sdf пора менять?

Если честно, не понимаю я эти

Если честно, не понимаю я эти смарт параметры. Точнее где там написано сколько сейчас и сколько должно быть.
И винт sdd кстати новенький, года нет.

UDMA_CRC_Error_Count

UDMA_CRC_Error_Count

Не грусти, товарищ! Всё хорошо, beautiful good!

+Reallocated_Sector_Ct на 2х

+Reallocated_Sector_Ct на 2х винтах, на одном совсем большой... хотя на одном из может и из-за UDMA_CRC_Error_Count, но врядли.

sdd вроде как живик еще.

sdd вроде как живчик еще.

Я вот тоже так думаю,

Я вот тоже так думаю, посмотрев вики и смарт на него, параметры не такие уж и страшные.

за переназначенными секторами

за переназначенными секторами надо наблюдать - растёт количество или нет. Ну и шлейфы посмотреть/поменять там где UDMA CRC Error

Всем опять привет. Выкинул из

Всем опять привет. Выкинул из массива умирающий диск, сейчас стоят три 2 ТБ, один WD второй Seagate. Скорость была временно нормальная, теперь опять ужас какой то. И чтение и запись ужасно маленькие. При создании pv указывал что у меня сектор 4к. Помогите решить проблему пожалуйста.

sanches sanches # pvdisplay 
  --- Physical volume ---
  PV Name               /dev/sdd
  VG Name               media
  PV Size               1,82 TiB / not usable 5,09 MiB
  Allocatable           yes (but full)
  PE Size               4,00 MiB
  Total PE              476931
  Free PE               0
  Allocated PE          476931
  PV UUID               bcOUM0-tuY8-DOJ0-YOtn-2zxr-FhIv-d0IKCz
   
  --- Physical volume ---
  PV Name               /dev/sdc
  VG Name               media
  PV Size               1,82 TiB / not usable 5,09 MiB
  Allocatable           yes (but full)
  PE Size               4,00 MiB
  Total PE              476931
  Free PE               0
  Allocated PE          476931
  PV UUID               FlCbBl-Uqe6-et8Y-HYZV-3mol-iLMA-VGeed2
   
  --- Physical volume ---
  PV Name               /dev/sdb
  VG Name               media
  PV Size               1,82 TiB / not usable 5,09 MiB
  Allocatable           yes (but full)
  PE Size               4,00 MiB
  Total PE              476931
  Free PE               0
  Allocated PE          476931
  PV UUID               TmiAq6-l9xz-Bzvz-yedI-rDbQ-e5c7-fIYkXr
   
sanches sanches # vgdisplay 
  --- Volume group ---
  VG Name               media
  System ID             
  Format                lvm2
  Metadata Areas        3
  Metadata Sequence No  52
  VG Access             read/write
  VG Status             resizable
  MAX LV                0
  Cur LV                1
  Open LV               1
  Max PV                0
  Cur PV                3
  Act PV                3
  VG Size               5,46 TiB
  PE Size               4,00 MiB
  Total PE              1430793
  Alloc PE / Size       1430793 / 5,46 TiB
  Free  PE / Size       0 / 0   
  VG UUID               CldQ2n-ydec-8lfY-hzwI-lS0C-4IFd-s7ptPZ
   
sanches sanches # lvdisplay 
  --- Logical volume ---
  LV Name                /dev/media/media
  VG Name                media
  LV UUID                jq945P-dVCa-k8if-pwqL-RBJ5-0ymu-iBjjt2
  LV Write Access        read/write
  LV Status              available
  # open                 1
  LV Size                5,46 TiB
  Current LE             1430793
  Segments               6
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           254:0

Сейчас в MC качаю фильмы на другой винт, скорость выше 4 МиБ не повышается.
fstab

sanches sanches # cat /etc/fstab 
/dev/sda5                       /boot           ext2    noauto,noatime                                          1 2
/dev/sda7                       /               ext4    noatime                                                 0 1
/dev/sda6                       none            swap    sw,pri=1                                                0 0

/dev/media/media                /media          xfs     rw,inode64                                              0 1

tmpfs                           /tmp            tmpfs   defaults,nodev,nosuid,mode=1777                         0 0
tmpfs                           /var/lock       tmpfs   defaults,nodev,nosuid,noexec,mode=1777,size=10m         0 0
shm                             /dev/shm        tmpfs   nodev,nosuid,noexec                                     0 0

Поставил внешний sil 3114,

Поставил внешний sil 3114, скорость такая-же =(

Смени систему , если глюки

Смени систему , если глюки пропадут - виновата гентоо
Поставь виндовс ( тоже на WLM) - если глюки пропадут, виновт линукс.
Смени железо, если пропадут - виновато железо.
Если ничего не помогло - смени карму.

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

ну спасибо огромное.

ну спасибо огромное.

Вы уверены, что проблемы в

Вы уверены, что проблемы в функционировании драйверов ФС или LVM?

Я где-то месяца 3 назад купил новый винчестер WD20EARS - 2TB, у него размер сектора 4 кб, advanced format, подключил, сделал разметку с выравниванием границ раздела, чтобы было кратно 8, потестировал запись сначала просто на раздел dd if=/dev/zero of=/dev/sde1 bs=1M count=1000 было порядка 125-120 мб/сек, затем создал фс и потестировал запись на нее, скорость немного упала, но была приличной, затем перенес на него часть данных с остальных винтов, примерно когда был заполнен терабайт скорость начала падаь и упала до 2-3 мб/сек.

Провел тестирвоание чтением, чтение тоже сильно упало, дл 40 мб/сек, до этого было в пределах 110-120 мб/сек.

Думал сначало тоже проблема с фс, провел опять запись напрямую на винт, благо копия данных была, скорость была очень низкой, каюсь тестил и в винде hddtune, скорость записи низка, и все время прыгает.

Подключил к другом компьютеру с другим SATA контроллером, там запись идет на нормальной скорости, правда постепенно идет падение скорости записи, от первых 100 гигов 120 мб/сек и на последних в районе 50 мб/сек.

Так что виной низкой скорости записи является контроллер жестких дисков, в моей манеринской плате, тестировал разне sata шлейфа и разнае каналы, но так заставить его работать на нормальной скорости не получилось, было правда на одном канале более-менее нормальное значение скорости записи, но недолго, вилимо не могут "договорится" SATA контроллер и винт.

Так он у меня и лежит.

Может и у вас тоже что-то такое же, попробуйте на другой материнской плате с другим SATA контроллем.

Да, уже задумываюсь на i5 или

Да, уже задумываюсь на i5 или i3 хотя бы перейти, посмотреть как оно там будет себя вести.

Esli u was stolko diskow, to

Esli u was stolko diskow, to lucse postawit prilicnyj kontroller (ot 3ware ili qlogic, naprimer).

как я понимаю такой: Promise

как я понимаю такой: Promise FastTrak TX4310 не совсем быст? Дороже мне нет смысла брать, это домашний комп, на нём свалка hd фильмов.
Или LSI 1068, на запись медленный, но мне главное в основном чтение большое.

У меня один раз уже

У меня один раз уже наблюдалось такая скорость винтов hdparm -tT показывал 3мбит, это был mdraid1, зеркало. Но в моем случае все было банально просто - бед блоки, фаловая система тоже была не проверена тщательно. Может стоит до конца проверить ее? и не убивать самому.

У меня xfs не может

У меня xfs не может провериться... Оперативы не хватает на 6 тб диск.
По крайней мере один раз пытался проверить, не хватило.
Сейчас заного поставлю на проверку.
Фиг, xfs вылетает:

sanches ~ # xfs_check /dev/media/media
/usr/sbin/xfs_check: line 31: 18676 Убито              xfs_db$DBOPTS -F -i -p xfs_check -c "check$OPTS" $1

Самое то интересное в том, что hdparm показывает нормальную скорость, чтение от 100 до 80 миб.
То есть, такое чувство что lvm диск использует не по 4к на сектор.

Ну тогда понятно, дело не в

Ну тогда понятно, дело не в оперативе, а в том что скорее всего файловая система у тебя битая. Хотя я точно сказать не берусь, не знаю толком xfs ))) Для проверки структур и метаданных много памяти не используется... Создавай заного файловую систему

Ип....ец... У меня 5 ТБ уже

Ип....ец... У меня 5 ТБ уже забито...
Подскажите, реально ли это из-за битой фс? А то не так давно я её заного создавал.

Тут я тебя точно подсказать

Тут я тебя точно подсказать не могу, но и не поверю что 6 Тер нельзя было бы проверить чеколкой, долго - может быть, но что бы вылетало - нужны серъезные аргументы

Настройки просмотра комментариев

Выберите нужный метод показа комментариев и нажмите "Сохранить установки".