forum.opennet.ru - "Debian web server нагрузка HDD 100%" (5)

форумы

помощь

поиск

регистрация

майллист

вход/выход

слежка

"Debian web server нагрузка HDD 100%"

Форум WEB технологии (Apache, http-серверы)
Вариант для распечатки		Пред. тема \| След. тема
Изначальное сообщение		[ Отслеживать ]

"Debian web server нагрузка HDD 100%"	+/–
Сообщение от Striker11 (ok) on 07-Июн-11, 22:02
Вчера начались проблемы, сервер начал глючить с небольшой периодичностью 30-60 сек зависает на 2-3 секунды. До этого год все работало нормально. Установил утилиту iotop http://feyhoa.org.ua/archives/707 которая показала что зависания идут из-за нагрузки на HDD в 100%, а так же при использовании панели управления ISPmanager загрузка файловой системы доходит до 100%. Скриншот: http://hostingkartinok.com/image/01201106/6a1b9c82ee0c64b0b1... На сервере аппаратный RAID 1 Заранее благодарен да любую помощь.
Ответить \| Правка \| Cообщить модератору

Оглавление

Debian web server нагрузка HDD 100%, Aquarius, 23:36 , 07-Июн-11, (1)
Debian web server нагрузка HDD 100%, andreyka459, 00:08 , 08-Июн-11, (2)

Debian web server нагрузка HDD 100%, Striker11, 00:24 , 08-Июн-11, (3)

Debian web server нагрузка HDD 100%, Aquarius, 16:32 , 08-Июн-11, (4)

Debian web server нагрузка HDD 100%, Striker11, 09:57 , 09-Июн-11, (5)

Сообщения по теме [Сортировка по времени | RSS]

1. "Debian web server нагрузка HDD 100%" +/–

Сообщение от Aquarius (ok) on 07-Июн-11, 23:36

> Вчера начались проблемы, сервер начал глючить с небольшой периодичностью 30-60 сек зависает
> на 2-3 секунды. До этого год все работало нормально. Установил утилиту
> iotop http://feyhoa.org.ua/archives/707 которая показала что зависания идут из-за нагрузки
> на HDD в 100%, а так же при использовании панели управления
> ISPmanager загрузка файловой системы доходит до 100%.
> Скриншот:
> http://hostingkartinok.com/image/01201106/6a1b9c82ee0c64b0b1...
> На сервере аппаратный RAID 1
> Заранее благодарен да любую помощь.
состояние массива, опции монтирования, файловые системы, свободное место, заполненность памяти, свопа, состояние и настройки кэша?
P.S. а это ничего, что судя по основному потребителю io, RAID вовсе не аппаратный и, к тому же, деградировавший?
P.P.S. об этом ты должен был догадаться сам или самостоятельно, или, воспользовавшись поиском

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

2. "Debian web server нагрузка HDD 100%" +/–

Сообщение от andreyka459 (??) on 08-Июн-11, 00:08

> Вчера начались проблемы, сервер начал глючить с небольшой периодичностью 30-60 сек зависает
> на 2-3 секунды. До этого год все работало нормально. Установил утилиту
> iotop http://feyhoa.org.ua/archives/707 которая показала что зависания идут из-за нагрузки
> на HDD в 100%, а так же при использовании панели управления
> ISPmanager загрузка файловой системы доходит до 100%.
> Скриншот:
> http://hostingkartinok.com/image/01201106/6a1b9c82ee0c64b0b1...
> На сервере аппаратный RAID 1
> Заранее благодарен да любую помощь.
может наоборот? винт кончается, зависает на 2-3сек. оттого и загрузка 100%?
SMART смотрели?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

3. "Debian web server нагрузка HDD 100%" +/–

Сообщение от Striker11 (ok) on 08-Июн-11, 00:24

Собираю инфу как могу, RAID контроллер встроенный на нем 2х150 и 2х1000 в 0 рейде
(Root filesystem)    Linux Native Filesystem (ext3)    LVM VG mapper, LV pdc_hehhaefje1    занято 7%
/var/www    Linux Native Filesystem (ext3)    /dev/dm-4    занято 60%
То есть место не занято и нагрузки на проц нету, даже наоборот и как видно на скриншоте чтение запись уходит в ноль но нагрузка полная.
СМАРТ выключен если доберусь до сервака включу
Параметры монтирования из fstab
# /etc/fstab: static file system information.
#
# <file system> <mount point>   <type>  <options>       <dump>  <pass>
proc            /proc           proc    defaults        0       0
/dev/mapper/pdc_hehhaefje1 /               ext3    errors=remount-ro,grpquota,usrquota 0       1
/dev/mapper/pdc_hehhaefje5 none            swap    sw              0       0
/dev/hdb        /media/cdrom0   udf,iso9660 user,noauto     0       0
/dev/dm-4  /var/www  ext3  defaults,grpquota,usrquota  0  0
fdisk -l выдает
Disk /dev/sda: 1000.2 GB, 1000204886016 bytes
255 heads, 63 sectors/track, 121601 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x0001cae0
   Device Boot      Start         End      Blocks   Id  System
/dev/sda1   *           1      121594   976695297    5  Extended
/dev/sda5               1      121594   976695296   83  Linux
Disk /dev/sdb: 150.0 GB, 150039945216 bytes
255 heads, 63 sectors/track, 18241 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x000c9496
   Device Boot      Start         End      Blocks   Id  System
/dev/sdb1   *           1       17488   140472328+  83  Linux
/dev/sdb2           17489       18233     5984212+   5  Extended
/dev/sdb5           17489       18233     5984181   82  Linux swap / Solaris
Disk /dev/sdc: 1000.2 GB, 1000204886016 bytes
255 heads, 63 sectors/track, 121601 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x0001cae0
   Device Boot      Start         End      Blocks   Id  System
/dev/sdc1               1      121594   976695297    5  Extended
/dev/sdc5               1      121594   976695296   83  Linux
Disk /dev/sdd: 150.0 GB, 150039945216 bytes
255 heads, 63 sectors/track, 18241 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x000c9496
   Device Boot      Start         End      Blocks   Id  System
/dev/sdd1   *           1       17488   140472328+  83  Linux
/dev/sdd2           17489       18233     5984212+   5  Extended
/dev/sdd5           17489       18233     5984181   82  Linux swap / Solaris
Disk /dev/dm-0: 149.9 GB, 149972779008 bytes
255 heads, 63 sectors/track, 18233 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x000c9496
     Device Boot      Start         End      Blocks   Id  System
/dev/dm-0p1   *           1       17488   140472328+  83  Linux
/dev/dm-0p2           17489       18233     5984212+   5  Extended
/dev/dm-0p5           17489       18233     5984181   82  Linux swap / Solaris
Disk /dev/dm-1: 143.8 GB, 143843664384 bytes
255 heads, 63 sectors/track, 17487 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x00000000
Disk /dev/dm-1 doesn't contain a valid partition table
Disk /dev/dm-2: 6127 MB, 6127801344 bytes
255 heads, 63 sectors/track, 744 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x00000000
Disk /dev/dm-2 doesn't contain a valid partition table
Disk /dev/dm-3: 1000.1 GB, 1000137752576 bytes
255 heads, 63 sectors/track, 121593 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x0001cae0
     Device Boot      Start         End      Blocks   Id  System
/dev/dm-3p1   *           1      121594   976695297    5  Extended
/dev/dm-3p5               1      121594   976695296   83  Linux
Disk /dev/dm-4: 1000.1 GB, 1000135983104 bytes
255 heads, 63 sectors/track, 121592 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x00000000
Disk /dev/dm-4 doesn't contain a valid partition table
Если подскажете команды как получить больше информации о состоянии веников буду благодарен, а пока пойду читать маны.

Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

4. "Debian web server нагрузка HDD 100%" +/–

Сообщение от Aquarius (ok) on 08-Июн-11, 16:32

>[оверквотинг удален]
> /dev/dm-3p5
>    1      121594
>  976695296   83  Linux
> Disk /dev/dm-4: 1000.1 GB, 1000135983104 bytes
> 255 heads, 63 sectors/track, 121592 cylinders
> Units = cylinders of 16065 * 512 = 8225280 bytes
> Disk identifier: 0x00000000
> Disk /dev/dm-4 doesn't contain a valid partition table
> Если подскажете команды как получить больше информации о состоянии веников буду благодарен,
> а пока пойду читать маны.
перечитайте мое сообщение

Ответить | Правка | ^ к родителю #3 | Наверх | Cообщить модератору

5. "Debian web server нагрузка HDD 100%" +/–

Сообщение от Striker11 (ok) on 09-Июн-11, 09:57

Итог сей басни таков что, слабым местом оказались веники на софтовом рейде. Но даже не рейд подвел, а сами диски не выдержали количество запросов. Временное решение проблемы: на серваке оказалось полное логироание апатчем (отключено полностью) что снизило нагрузку + кеширование.
В скором времени покупается аппаратный рейд и адекватные диски под него.
Спасибо за подсказку на узкое место в I/O.

Ответить | Правка | ^ к родителю #4 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру

1. "Debian web server нагрузка HDD 100%"	+/–
Сообщение от Aquarius (ok) on 07-Июн-11, 23:36
> Вчера начались проблемы, сервер начал глючить с небольшой периодичностью 30-60 сек зависает > на 2-3 секунды. До этого год все работало нормально. Установил утилиту > iotop http://feyhoa.org.ua/archives/707 которая показала что зависания идут из-за нагрузки > на HDD в 100%, а так же при использовании панели управления > ISPmanager загрузка файловой системы доходит до 100%. > Скриншот: > http://hostingkartinok.com/image/01201106/6a1b9c82ee0c64b0b1... > На сервере аппаратный RAID 1 > Заранее благодарен да любую помощь. состояние массива, опции монтирования, файловые системы, свободное место, заполненность памяти, свопа, состояние и настройки кэша? P.S. а это ничего, что судя по основному потребителю io, RAID вовсе не аппаратный и, к тому же, деградировавший? P.P.S. об этом ты должен был догадаться сам или самостоятельно, или, воспользовавшись поиском
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору

2. "Debian web server нагрузка HDD 100%"	+/–
Сообщение от andreyka459 (??) on 08-Июн-11, 00:08
> Вчера начались проблемы, сервер начал глючить с небольшой периодичностью 30-60 сек зависает > на 2-3 секунды. До этого год все работало нормально. Установил утилиту > iotop http://feyhoa.org.ua/archives/707 которая показала что зависания идут из-за нагрузки > на HDD в 100%, а так же при использовании панели управления > ISPmanager загрузка файловой системы доходит до 100%. > Скриншот: > http://hostingkartinok.com/image/01201106/6a1b9c82ee0c64b0b1... > На сервере аппаратный RAID 1 > Заранее благодарен да любую помощь. может наоборот? винт кончается, зависает на 2-3сек. оттого и загрузка 100%? SMART смотрели?
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	3. "Debian web server нагрузка HDD 100%"	+/–
	Сообщение от Striker11 (ok) on 08-Июн-11, 00:24
	Собираю инфу как могу, RAID контроллер встроенный на нем 2х150 и 2х1000 в 0 рейде (Root filesystem) Linux Native Filesystem (ext3) LVM VG mapper, LV pdc_hehhaefje1 занято 7% /var/www Linux Native Filesystem (ext3) /dev/dm-4 занято 60% То есть место не занято и нагрузки на проц нету, даже наоборот и как видно на скриншоте чтение запись уходит в ноль но нагрузка полная. СМАРТ выключен если доберусь до сервака включу Параметры монтирования из fstab # /etc/fstab: static file system information. # # <file system> <mount point> <type> <options> <dump> <pass> proc /proc proc defaults 0 0 /dev/mapper/pdc_hehhaefje1 / ext3 errors=remount-ro,grpquota,usrquota 0 1 /dev/mapper/pdc_hehhaefje5 none swap sw 0 0 /dev/hdb /media/cdrom0 udf,iso9660 user,noauto 0 0 /dev/dm-4 /var/www ext3 defaults,grpquota,usrquota 0 0 fdisk -l выдает Disk /dev/sda: 1000.2 GB, 1000204886016 bytes 255 heads, 63 sectors/track, 121601 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x0001cae0 Device Boot Start End Blocks Id System /dev/sda1 * 1 121594 976695297 5 Extended /dev/sda5 1 121594 976695296 83 Linux Disk /dev/sdb: 150.0 GB, 150039945216 bytes 255 heads, 63 sectors/track, 18241 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x000c9496 Device Boot Start End Blocks Id System /dev/sdb1 * 1 17488 140472328+ 83 Linux /dev/sdb2 17489 18233 5984212+ 5 Extended /dev/sdb5 17489 18233 5984181 82 Linux swap / Solaris Disk /dev/sdc: 1000.2 GB, 1000204886016 bytes 255 heads, 63 sectors/track, 121601 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x0001cae0 Device Boot Start End Blocks Id System /dev/sdc1 1 121594 976695297 5 Extended /dev/sdc5 1 121594 976695296 83 Linux Disk /dev/sdd: 150.0 GB, 150039945216 bytes 255 heads, 63 sectors/track, 18241 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x000c9496 Device Boot Start End Blocks Id System /dev/sdd1 * 1 17488 140472328+ 83 Linux /dev/sdd2 17489 18233 5984212+ 5 Extended /dev/sdd5 17489 18233 5984181 82 Linux swap / Solaris Disk /dev/dm-0: 149.9 GB, 149972779008 bytes 255 heads, 63 sectors/track, 18233 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x000c9496 Device Boot Start End Blocks Id System /dev/dm-0p1 * 1 17488 140472328+ 83 Linux /dev/dm-0p2 17489 18233 5984212+ 5 Extended /dev/dm-0p5 17489 18233 5984181 82 Linux swap / Solaris Disk /dev/dm-1: 143.8 GB, 143843664384 bytes 255 heads, 63 sectors/track, 17487 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x00000000 Disk /dev/dm-1 doesn't contain a valid partition table Disk /dev/dm-2: 6127 MB, 6127801344 bytes 255 heads, 63 sectors/track, 744 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x00000000 Disk /dev/dm-2 doesn't contain a valid partition table Disk /dev/dm-3: 1000.1 GB, 1000137752576 bytes 255 heads, 63 sectors/track, 121593 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x0001cae0 Device Boot Start End Blocks Id System /dev/dm-3p1 * 1 121594 976695297 5 Extended /dev/dm-3p5 1 121594 976695296 83 Linux Disk /dev/dm-4: 1000.1 GB, 1000135983104 bytes 255 heads, 63 sectors/track, 121592 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x00000000 Disk /dev/dm-4 doesn't contain a valid partition table Если подскажете команды как получить больше информации о состоянии веников буду благодарен, а пока пойду читать маны.
	Ответить \| Правка \| ^ к родителю #2 \| Наверх \| Cообщить модератору


	4. "Debian web server нагрузка HDD 100%"	+/–
	Сообщение от Aquarius (ok) on 08-Июн-11, 16:32
	>[оверквотинг удален] > /dev/dm-3p5 > 1 121594 > 976695296 83 Linux > Disk /dev/dm-4: 1000.1 GB, 1000135983104 bytes > 255 heads, 63 sectors/track, 121592 cylinders > Units = cylinders of 16065 * 512 = 8225280 bytes > Disk identifier: 0x00000000 > Disk /dev/dm-4 doesn't contain a valid partition table > Если подскажете команды как получить больше информации о состоянии веников буду благодарен, > а пока пойду читать маны. перечитайте мое сообщение
	Ответить \| Правка \| ^ к родителю #3 \| Наверх \| Cообщить модератору


	5. "Debian web server нагрузка HDD 100%"	+/–
	Сообщение от Striker11 (ok) on 09-Июн-11, 09:57
	Итог сей басни таков что, слабым местом оказались веники на софтовом рейде. Но даже не рейд подвел, а сами диски не выдержали количество запросов. Временное решение проблемы: на серваке оказалось полное логироание апатчем (отключено полностью) что снизило нагрузку + кеширование. В скором времени покупается аппаратный рейд и адекватные диски под него. Спасибо за подсказку на узкое место в I/O.
	Ответить \| Правка \| ^ к родителю #4 \| Наверх \| Cообщить модератору