forum.opennet.ru - "В MD/RAID6 в Linux выявлена проблема, которая мож..." (46)

форумы

помощь

поиск

регистрация

майллист

вход/выход

слежка

"В MD/RAID6 в Linux выявлена проблема, которая мож..."

Форум Разговоры, обсуждение новостей
Вариант для распечатки		Пред. тема \| След. тема
Изначальное сообщение		[ Отслеживать ]

"В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
Сообщение от opennews (ok) on 19-Авг-14, 23:02
Нейл Браун (Neil Brown), основной разработчик пакета mdadm и подсистемы для обеспечения работы программных RAID-массивов в Linux, предупредил (https://lkml.org/lkml/2014/8/18/17) о выявлении серьёзной ошибки в md/raid6, которая при определённых условиях может привести к потере данных в хранилище RAID6. Проблема проявляется начиная с ядра Linux 2.6.32. В качестве факторов проявления ошибки называется сочетание двойной деградации массива (выход из строя двух дисков), восстановления одного или обоих сбойных дисков и записи блока в массив. Проблема не проявляется при штатной работе RAID6, при восстановлении в результате выхода из строя одного диска и при отсутствии диска для восстановления в случае двойной деградации. В качестве обходного пути для избежания проявления проблемы можно удалить запасные диски горячего восстановления (hot spare), что не даст автоматически запустить процесс восстановления и исключит возникновение условий, которые могут привести к потере хранимых данных. URL: https://lkml.org/lkml/2014/8/18/17 Новость: http://www.opennet.dev/opennews/art.shtml?num=40412
Ответить \| Правка \| Cообщить модератору

Оглавление

В MD/RAID6 в Linux выявлена проблема, которая может привест..., kerneliq, 23:02 , 19-Авг-14, (1) –1

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Аноним, 23:18 , 19-Авг-14, (2) +20
В MD/RAID6 в Linux выявлена проблема, которая может привест..., anonymous, 09:09 , 20-Авг-14, (17) +1

В MD/RAID6 в Linux выявлена проблема, которая мож..., Адекват, 06:54 , 20-Авг-14, (11) –8

В MD/RAID6 в Linux выявлена проблема, которая мож..., тигар, 07:46 , 20-Авг-14, (14) –1

Инсталлятор Debian 8 Jessie перешёл на стадию бета-тестирова..., Аноним, 08:54 , 20-Авг-14, (15) +4

Инсталлятор Debian 8 Jessie перешёл на стадию бета-тестирова..., Аноним, 10:03 , 20-Авг-14, (25) +8

В MD/RAID6 в Linux выявлена проблема, которая мож..., Аноним, 08:55 , 20-Авг-14, (16) +3
В MD/RAID6 в Linux выявлена проблема, которая мож..., sdog, 09:36 , 20-Авг-14, (21)

В MD/RAID6 в Linux выявлена проблема, которая мож..., netc, 09:47 , 20-Авг-14, (23) –1

В MD/RAID6 в Linux выявлена проблема, которая мож..., Аноним, 10:05 , 20-Авг-14, (26)

В MD/RAID6 в Linux выявлена проблема, которая мож..., ананим, 16:52 , 20-Авг-14, (40) +1

В MD/RAID6 в Linux выявлена проблема, которая мож..., sdog, 10:32 , 20-Авг-14, (28)
В MD/RAID6 в Linux выявлена проблема, которая мож..., ананим, 16:48 , 20-Авг-14, (39)

В MD/RAID6 в Linux выявлена проблема, которая мож..., абыр, 17:14 , 20-Авг-14, (42)
В MD/RAID6 в Linux выявлена проблема, которая мож..., абыр, 17:23 , 20-Авг-14, (43)

В MD/RAID6 в Linux выявлена проблема, которая мож..., ананим, 17:34 , 20-Авг-14, (45)

В MD/RAID6 в Linux выявлена проблема, которая мож..., ананим, 17:47 , 20-Авг-14, (46)
В MD/RAID6 в Linux выявлена проблема, которая мож..., абыр, 18:07 , 20-Авг-14, (47) +1

В MD/RAID6 в Linux выявлена проблема, которая мож..., ананим, 18:17 , 20-Авг-14, (48)

В MD/RAID6 в Linux выявлена проблема, которая мож..., Аноним, 10:30 , 20-Авг-14, (27)

В MD/RAID6 в Linux выявлена проблема, которая мож..., Аноним, 16:47 , 20-Авг-14, (38)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., kay, 09:25 , 20-Авг-14, (18) –1

В MD/RAID6 в Linux выявлена проблема, которая может привест..., пох, 11:34 , 20-Авг-14, (31) –2

В MD/RAID6 в Linux выявлена проблема, которая может привест..., ананим, 17:01 , 20-Авг-14, (41)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Аноним, 09:30 , 20-Авг-14, (19) –4

В MD/RAID6 в Linux выявлена проблема, которая может привест..., commiethebeastie, 09:33 , 20-Авг-14, (20)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., user, 12:15 , 20-Авг-14, (33) –3

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Xasd, 09:56 , 20-Авг-14, (24)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., pkdr, 09:44 , 20-Авг-14, (22) +1

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Аноним, 11:10 , 20-Авг-14, (29)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Адекват, 11:29 , 20-Авг-14, (30) –10

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Аноним, 14:08 , 20-Авг-14, (34) +7

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Аноним, 15:43 , 20-Авг-14, (35) –1

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Глас Божий, 22:02 , 20-Авг-14, (51) –1

В MD/RAID6 в Linux выявлена проблема, которая может привест..., ананим, 17:24 , 20-Авг-14, (44)
В MD/RAID6 в Linux выявлена проблема, которая может привест..., Аноним, 18:49 , 20-Авг-14, (49)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., karapuz2, 11:53 , 20-Авг-14, (32)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Аноним, 15:45 , 20-Авг-14, (36)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., karapuz2, 16:08 , 20-Авг-14, (37)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., anonymous, 21:07 , 20-Авг-14, (50) +1
В MD/RAID6 в Linux выявлена проблема, которая может привест..., Онаним, 14:13 , 21-Авг-14, (52) +1

В MD/RAID6 в Linux выявлена проблема, которая может привест..., karapuz2, 15:59 , 21-Авг-14, (55)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Онаним, 16:22 , 21-Авг-14, (56)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., iZEN, 14:24 , 21-Авг-14, (53)

В MD/RAID6 в Linux выявлена проблема, которая может привест..., Аноним, 15:29 , 21-Авг-14, (54)

Сообщения по теме [Сортировка по времени | RSS]

1. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." –1 +/–

Сообщение от kerneliq (ok) on 19-Авг-14, 23:02

Патчи то когда будут?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

2. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +20 +/–

Сообщение от Аноним (??) on 19-Авг-14, 23:18

RAID полетел, потерялись

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

17. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +1 +/–

Сообщение от anonymous (??) on 20-Авг-14, 09:09

по ссылке сразу

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

11. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." –8 +/–

Сообщение от Адекват (ok) on 20-Авг-14, 06:54

mdadm сам по себе может привести к потере данных, потому что у него нет проверки битых секторов при создании массива, как и нет средств мониторинга появления битых секторов.
Будете так базу копировать гигов на 80-90, а потом выясниться что она бьется где-нить в середине.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

14. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." –1 +/–

Сообщение от тигар (ok) on 20-Авг-14, 07:46

даже в линаксе при этом диск(-и) вылетит(-ят) из массива, при софтрейде

Ответить | Правка | ^ к родителю #11 | Наверх | Cообщить модератору

15. "Инсталлятор Debian 8 Jessie перешёл на стадию бета-тестирова..." +4 +/–

Сообщение от Аноним (??) on 20-Авг-14, 08:54

В где?

Ответить | Правка | ^ к родителю #14 | Наверх | Cообщить модератору

25. "Инсталлятор Debian 8 Jessie перешёл на стадию бета-тестирова..." +8 +/–

Сообщение от Аноним (??) on 20-Авг-14, 10:03

в даже

Ответить | Правка | ^ к родителю #15 | Наверх | Cообщить модератору

16. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +3 +/–

Сообщение от Аноним (??) on 20-Авг-14, 08:55

прцедура синхронизации сразу после создания мд-массива - это по твоему что?

Ответить | Правка | ^ к родителю #11 | Наверх | Cообщить модератору

21. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от sdog (ok) on 20-Авг-14, 09:36

неасилил доки?
почитай публицистику
http://neil.brown.name/blog/20100519043730

Ответить | Правка | ^ к родителю #11 | Наверх | Cообщить модератору

23. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." –1 +/–

Сообщение от netc (??) on 20-Авг-14, 09:47

не осилил прочитать, бегло просмотрел.
если не сложно - можете в двух словах сказать какой вывод по поводу bad blocks и mdadm ?

Ответить | Правка | ^ к родителю #21 | Наверх | Cообщить модератору

26. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от Аноним (??) on 20-Авг-14, 10:05

> не осилил прочитать, бегло просмотрел.
> если не сложно - можете в двух словах сказать какой вывод по
> поводу bad blocks и mdadm ?
Видимо, чтение контрольных сумм после записи или типа того. Что-то убивающее производительность и прикручиваемое с боку скотчем, в общем.

Ответить | Правка | ^ к родителю #23 | Наверх | Cообщить модератору

40. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +1 +/–

Сообщение от ананим on 20-Авг-14, 16:52

Писец, а не комментарий.
На тему — лaмeрствo, как уверенность в работе аппаратного рэйда. Типа «чёрный ящик сам разберётся».
Вон ниже расписал «что и как» в 39.

Ответить | Правка | ^ к родителю #26 | Наверх | Cообщить модератору

28. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от sdog (ok) on 20-Авг-14, 10:32

The bad block list is simply a list of blocks - one list for each device - which are to be treated as 'bad'

Ответить | Правка | ^ к родителю #23 | Наверх | Cообщить модератору

39. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от ананим on 20-Авг-14, 16:48

не слушайте весь вышеперечисленный бред. это всё лaмeрюги, потому что не знают, что это уже лет 20 не актуально:
1) мониторинг бэдов на пользовательском уровне закончился примерно с появлением IDE-дисков — https://ru.wikipedia.org/wiki/S.M.A.R.T.
>S.M.A.R.T. производит наблюдение за основными характеристиками накопителя, каждая из которых получает оценку. Характеристики можно разбить на две группы:
>   1. параметры, отражающие процесс естественного старения жёсткого диска (число оборотов шпинделя, число перемещений головок, количество циклов включения-выключения);
>   2. текущие параметры накопителя (высота головок над поверхностью диска, число переназначенных секторов, время поиска дорожки и количество ошибок поиска).
и далее:
> Reallocated Sectors Count - Число операций переназначения секторов. Когда диск обнаруживает ошибку чтения/записи, он помечает сектор «переназначенным» и переносит данные в специально отведённую резервную область. Вот почему на современных жёстких дисках нельзя увидеть bad-блоки — все они спрятаны в переназначенных секторах.
https://en.wikipedia.org/wiki/Smartctl
> Smartmontools (S.M.A.R.T. Monitoring Tools) is a set of utility programs (smartctl and smartd) to control and monitor computer storage systems using the Self-Monitoring, Analysis and Reporting Technology (S.M.A.R.T.) system built into most modern (P)ATA, Serial ATA and SCSI hard drives.
Smartmontools displays early warning signs of hard drive problems detected by S.M.A.R.T., often giving notice of impending failure while it is still possible to back data up.[
2) проверкой (вернее управлением и получением информации) бэдов занимаются утилиты из состава smartmontools. Как именно? См. тут — http://www.smartmontools.org/browser/trunk/www/badblockhowto... Но на заметку:
> Modern storage devices tend to handle the simple cases automatically, for example by writing a disk sector that was read with difficulty to another area on the media. Even though such a remapping can be done by a disk drive transparently, there is still a lingering worry about media deterioration and the disk running out of spare sectors to remap.
Всё что вам нужно (да и вообще — всё что вы можете) — это мониторить диски (включая аппаратные рэйды! см. ниже), периодически запускать само-тестирование, анализировать эту инфу и не допускать последующего перераспределения бэд-блоков.
Тоже касается и аппаратных(!!!) рэйдов — «увидеть» диск из рэйда можно например так:
smartctl -a -d megaraid,2 /dev/sda # второй диск из рэйда аппаратного «мегарэйда» ☺
> This interface will also work for Dell PERC controllers.  It is possible to set RAID device name as /dev/bus/N, where N is a SCSI bus number.
или так:
smartctl -a -d aacraid,0,0,66 /dev/sda
в общем см. man smartctl
Других вариантов (уже ☺) просто нет. Ну вот закончились они.
Хотя badblocks (из e2fsprogs) всё ещё присутсвует. Но это на уровне файловой системы (!!! если это вам о чём-то говорит — man badblocks:
> For this reason, it is strongly recommended that users not run badblocks directly, but rather use the -c option of the e2fsck and mke2fs programs
и т.д. В общем запускать на смонтированной фс это будет только лaмeр, а на несмонтированной — это уже точно не нагруженный сервер.

Ответить | Правка | ^ к родителю #23 | Наверх | Cообщить модератору

42. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от абыр (ok) on 20-Авг-14, 17:14

Небольшое уточнение, при ошибке чтения происходит не переназначение, а увеличение счетчика Current_Pending_Sector. При записи в проблемный сектор либо произойдет переназначение и увеличится Reallocated_Sector_Ct (если конечно сектор безнадежно испорчен и не поддается перезаписи), счетчик же Current_Pending_Sector естественно будет уменьшен.

Ответить | Правка | ^ к родителю #39 | Наверх | Cообщить модератору

43. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от абыр (ok) on 20-Авг-14, 17:23

Дополнение нумер два. Ликусовый raid получив ошибку чтения с диска, восстанавливает содержимое нечитаемого блока используя другие диски массива, после чего пытается перезаписать проблемные сектора и если запись происходит без ошибок, пишет в лог сообщение типа "read error corrected (N sectors at XXX on sdX)" и продолжает работать как ни в чем не бывало.
Так что если в логах появляются подобные сообщения, то стоит проверить состояние хардов.

Ответить | Правка | ^ к родителю #39 | Наверх | Cообщить модератору

45. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от ананим on 20-Авг-14, 17:34

Дополнение 2) противоречит дополнению 1).
Не? Не заметно?
Поясняю — диску пoфиг какой рэйд (аппаратный, программный, вообще не рэйд) пытается писать в проблемную область. Вот он "не в курсе дела" во что его вставили.
Он просто перераспределяет (если ещё есть куда. Мониторить надо, аднака).
А сабж про то, что заведомо битые данные начинают синхронизироваться на весь рэйд в случае наличия хот спаре.

Ответить | Правка | ^ к родителю #43 | Наверх | Cообщить модератору

46. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от ананим on 20-Авг-14, 17:47

ну т.е. что я хотел сказать — одним ""read error corrected" не стоит ограничиваться.
зыж
и вообще:
> 05.09.2013 23:53  Вышел mdadm 3.3, инструментарий для управления программным RAID в Linux
>    Поддержка ведения лога сбойных секторов;
>    Поддержка горячей замены устройств, например "mdadm /dev/mdX --replace /dev/foo --with /dev/bar".
http://www.opennet.dev/opennews/art.shtml?num=37837
Так что…

Ответить | Правка | ^ к родителю #45 | Наверх | Cообщить модератору

47. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +1 +/–

Сообщение от абыр (ok) on 20-Авг-14, 18:07

>Дополнение 2) противоречит дополнению 1).
> Не? Не заметно?
Нет, не заметно. Учитесь читать.

Ответить | Правка | ^ к родителю #45 | Наверх | Cообщить модератору

48. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от ананим on 20-Авг-14, 18:17

Вот это как раз к вам и относится ☺ — при записи никаких "read error corrected (N sectors at XXX on sdX)" не будет. Не каждая операция записи происходит после чтения этого же проблемного места. Перераспределение в этом случае произойдёт "молча".

Ответить | Правка | ^ к родителю #47 | Наверх | Cообщить модератору

27. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от Аноним (??) on 20-Авг-14, 10:30

> как и нет средств мониторинга появления битых секторов.
Шта?
cat /sys/block/md2/md/mismatch_cnt
0

Ответить | Правка | ^ к родителю #11 | Наверх | Cообщить модератору

38. "В  MD/RAID6 в Linux выявлена проблема, которая мож..." +/–

Сообщение от Аноним (??) on 20-Авг-14, 16:47

Это далеко не всегда указывает на битые сектора.

Ответить | Правка | ^ к родителю #27 | Наверх | Cообщить модератору

18. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." –1 +/–

Сообщение от kay (ok) on 20-Авг-14, 09:25

В оригинале патч на raid5.c. Или raid5 модуль подключается автоматически при деградации?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

31. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." –2 +/–

Сообщение от пох on 20-Авг-14, 11:34

"raid5 модуль" - одно название. Код в большей части - общий.
Проблема, что характерно, есть и в более ранних версиях чем 2.6.32 (она вообще врожденная) - т.е. статья п...т, автор ниасилил прочитать кусок английского текста.
P.S. "все еще пользуетесь linux md ? Тогда толстенькая полярная лисичка давно идет к вам." Впрочем, и не только тогда. Интересно, сколько "железных" raid'ов содержат внутри код, скопипижженный из линукса и с этим же багом? (вспоминая недобрые старые времена, когда человеку с математическим образованием вздумалось проверить, откуда взялись полиномы, используемые линуксным raid6)

Ответить | Правка | ^ к родителю #18 | Наверх | Cообщить модератору

41. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от ананим on 20-Авг-14, 17:01

> P.S. "все еще пользуетесь linux md ? Тогда толстенькая полярная лисичка давно идет к вам."
аппаратные рэйды состоят из тех же винтов со смарт-инфой если что.
не, намёк ещё не понял?
тогда объясню — полярный лис идёт к тому, кто нифига не понимая как это всё работает, думает что за него «думает» аппаратный рэйд.
подробности в #39.
ps:
частично «думалку» порешали с контрольными суммами в zfs, btrfs, ext4, xfs,…
но проблему рассуждающих о рэйдах идиoтoв это как видно не снимает

Ответить | Правка | ^ к родителю #31 | Наверх | Cообщить модератору

19. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." –4 +/–

Сообщение от Аноним (??) on 20-Авг-14, 09:30

RAID - решетo, все бэкапимся на BD болванки!
http://aulix.com/backup2dvd

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

20. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от commiethebeastie (ok) on 20-Авг-14, 09:33

net framework и winrar лень ставить :(

Ответить | Правка | ^ к родителю #19 | Наверх | Cообщить модератору

33. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." –3 +/–

Сообщение от user (??) on 20-Авг-14, 12:15

rar необязательно, можно 7zip
прога сама все ставит на сервер (Debian или Ubuntu)
достаточно указать опцию -install_server

Ответить | Правка | ^ к родителю #20 | Наверх | Cообщить модератору

24. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от Xasd (ok) on 20-Авг-14, 09:56

> RAID - решетo, все бэкапимся на BD болванки!
>
> http://aulix.com/backup2dvd
и не забыть проверить файлы антивирусом (Бабушкина) -- http://lurkmore.to/%D0%90%D0%BB%D0&...

Ответить | Правка | ^ к родителю #19 | Наверх | Cообщить модератору

22. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +1 +/–

Сообщение от pkdr (ok) on 20-Авг-14, 09:44

> RAID - решетo, все бэкапимся на BD болванки!
Месье в курсе различий между raid и backup?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

29. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от Аноним (??) on 20-Авг-14, 11:10

>> RAID - решетo, все бэкапимся на BD болванки!
> Месье в курсе различий между raid и backup?
Ага. RAID не отменяет необходимость бэкапов. Особенно в реализации для ниeбрoдов, не потянувших RAID10.

Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

30. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." –10 +/–

Сообщение от Адекват (ok) on 20-Авг-14, 11:29

> Не потянувших RAID10.
Если не нищебродить, то почему бы не купить сразу аппаратный raid, на нормальном сервере и с виндой лицензионной ?
Софтовые рейды хороши тем что их можно собрать из г*вна, и они будут сносно работать, выполняя свою основную функцию.

Ответить | Правка | ^ к родителю #29 | Наверх | Cообщить модератору

34. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +7 +/–

Сообщение от Аноним (??) on 20-Авг-14, 14:08

У вас вот в этом месте логическое несоответствие:
>нормальном сервере и с виндой

Ответить | Правка | ^ к родителю #30 | Наверх | Cообщить модератору

35. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." –1 +/–

Сообщение от Аноним (??) on 20-Авг-14, 15:43

> У вас вот в этом месте логическое несоответствие:
>>нормальном сервере и с виндой
Ачо, аппаратный рэйд исключает что-либо окромя шиндошс?

Ответить | Правка | ^ к родителю #34 | Наверх | Cообщить модератору

51. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." –1 +/–

Сообщение от Глас Божий on 20-Авг-14, 22:02

Аппаратный рейд только шиндошс-одмины и покупают, у них другого нет.

Ответить | Правка | ^ к родителю #35 | Наверх | Cообщить модератору

44. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от ананим on 20-Авг-14, 17:24

>> Не потянувших RAID10.
> Если не нищeбрoдить, то почему бы не купить сразу аппаратный raid, на нормальном сервере и с виндой лицензионной ?
Потому что а) аппаратный рэйд ничем не лучше в этом плане софтверного (см. выше #39), 2) "винда лицензионный" способствует вот такому невежеству, как у вас и, б) с учётом вышесказанного, вас разводят как лохов на "малиновый пинджнак".

Ответить | Правка | ^ к родителю #30 | Наверх | Cообщить модератору

49. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от Аноним (??) on 20-Авг-14, 18:49

Назови хоть один аппаратный контроллер, который тянет миллион iops. Mdraid тянет. На современных SSD актуально.

Ответить | Правка | ^ к родителю #30 | Наверх | Cообщить модератору

32. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от karapuz2 (ok) on 20-Авг-14, 11:53

RAID10 - отказоустойчивость 1 диск
RAID6 - отказоустойчивость 2 диска
Типа "ненищеброды" используют raid60
У меня недавно деградировал raid50 на 44ТБ, работающий до этого 4 года, после перестроения, буквально через час, в ТОЙ ЖЕ отказоустойчивой группе выпал второй диск. Ребята чуть не обосрались, повезло. После этого было принято решение все потихоньку перенести на raid60 в новую стойку, остановив систему. Дорого обходятся непродуманные решения: дешевые сигейты (экономили на спичках видимо) и взятый с потолка необоснованный raid5 (хотя контроллер держал raid6!)

Ответить | Правка | ^ к родителю #29 | Наверх | Cообщить модератору

36. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от Аноним (??) on 20-Авг-14, 15:45

> RAID10 - отказоустойчивость 1 диск
> RAID6 - отказоустойчивость 2 диска
> Типа "ненищeбрoды" используют raid60
> У меня недавно деградировал raid50 на 44ТБ, работающий до этого 4 года,
> после перестроения, буквально через час, в ТОЙ ЖЕ отказоустойчивой группе выпал
> второй диск. Ребята чуть не обосрaлись, повезло. После этого было принято
> решение все потихоньку перенести на raid60 в новую стойку, остановив систему.
> Дорого обходятся непродуманные решения: дешевые сигейты (экономили на спичках видимо)
> и взятый с потолка необоснованный raid5 (хотя контроллер держал raid6!)
Ага-ага. А перфоманс RAID5/6 хоть ссколько-нить дотягивает до человеческого RAID10? Неужто?

Ответить | Правка | ^ к родителю #32 | Наверх | Cообщить модератору

37. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от karapuz2 (ok) on 20-Авг-14, 16:08

А кто говорил про перфоманс, речь про отказоустойчивость. Понятно, что запись на raid6 будет медленней, чем raid10. Чтение у radi6 нормальное, да и кеши на чтение работают эффективно. Конечно, надо смотреть требования. И есть raid60, что тоже поможет.

Ответить | Правка | ^ к родителю #36 | Наверх | Cообщить модератору

50. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +1 +/–

Сообщение от anonymous (??) on 20-Авг-14, 21:07

> RAID10 - отказоустойчивость 1 диск
> RAID6 - отказоустойчивость 2 диска
> Типа  используют raid60
> У меня недавно деградировал raid50 на 44ТБ, работающий до этого 4 года,
> после перестроения, буквально через час, в ТОЙ ЖЕ отказоустойчивой группе выпал
> второй диск. Ребята чуть не  повезло. После этого было принято
> решение все потихоньку перенести на raid60 в новую стойку, остановив систему.
> Дорого обходятся непродуманные решения: дешевые сигейты (экономили на спичках видимо)
> и взятый с потолка необоснованный raid5 (хотя контроллер держал raid6!)
В целом, это не очень удивительно.
Если диски работали примерно одинаковое время, время наработки на отказ и собственно отказа пришлось на более-менее одно и то же время, + бОльшая нагрузка во время ребилда массива часто приводит к вылетам дисков, уже подходивших к критической черте.

Ответить | Правка | ^ к родителю #32 | Наверх | Cообщить модератору

52. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +1 +/–

Сообщение от Онаним on 21-Авг-14, 14:13

> RAID10 - отказоустойчивость 1 диск
Вас обманули (
RAID10 - отказоустойчивость 1-2 диска, в зависимости от того, в одной зеркальной группе они находятся или в разных.

Ответить | Правка | ^ к родителю #32 | Наверх | Cообщить модератору

55. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от karapuz2 (ok) on 21-Авг-14, 15:59

> RAID10 - отказоустойчивость 1-2 диска, в зависимости от того, в одной зеркальной
Отказоустойчивость по самому узкому месту определяется, в данном случае берем одну зеркальную группу.
Допустим, я приду в серверную (или пушной зверек придет:) ), где стоят RAID10 и RAID60 и рандомно выдеру 2 диска из стойки. На каком массиве это можно сделать, а на каком нельзя? Вот и вся суть.

Ответить | Правка | ^ к родителю #52 | Наверх | Cообщить модератору

56. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от Онаним on 21-Авг-14, 16:22

Суть в песок. И не надо передергивать! У полярной лисы с методом Монте-Карло все в порядке. Это и имелось в виду под "1-2 диска", но если Вам так будет угодно, то напишу 1,5 диска.

Ответить | Правка | ^ к родителю #55 | Наверх | Cообщить модератору

53. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от iZEN (ok) on 21-Авг-14, 14:24

RAID-Z3 решает, господа.
Что насчёт новых технологий систем хранения в Linux? Чего-то не слышно про Btrfs, как она ведёт себя в конфигурации RAID-6+HotSpare?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

54. "В  MD/RAID6 в Linux выявлена проблема, которая может привест..." +/–

Сообщение от Аноним (??) on 21-Авг-14, 15:29

Никак не ведет, рейды с четностью там до сих пор не готовы.

Ответить | Правка | ^ к родителю #53 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру

1. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	–1 +/–
Сообщение от kerneliq (ok) on 19-Авг-14, 23:02
Патчи то когда будут?
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	2. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	+20 +/–
	Сообщение от Аноним (??) on 19-Авг-14, 23:18
	RAID полетел, потерялись
	Ответить \| Правка \| ^ к родителю #1 \| Наверх \| Cообщить модератору


	17. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	+1 +/–
	Сообщение от anonymous (??) on 20-Авг-14, 09:09
	по ссылке сразу
	Ответить \| Правка \| ^ к родителю #1 \| Наверх \| Cообщить модератору

11. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	–8 +/–
Сообщение от Адекват (ok) on 20-Авг-14, 06:54
mdadm сам по себе может привести к потере данных, потому что у него нет проверки битых секторов при создании массива, как и нет средств мониторинга появления битых секторов. Будете так базу копировать гигов на 80-90, а потом выясниться что она бьется где-нить в середине.
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	14. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	–1 +/–
	Сообщение от тигар (ok) on 20-Авг-14, 07:46
	даже в линаксе при этом диск(-и) вылетит(-ят) из массива, при софтрейде
	Ответить \| Правка \| ^ к родителю #11 \| Наверх \| Cообщить модератору


	15. "Инсталлятор Debian 8 Jessie перешёл на стадию бета-тестирова..."	+4 +/–
	Сообщение от Аноним (??) on 20-Авг-14, 08:54
	В где?
	Ответить \| Правка \| ^ к родителю #14 \| Наверх \| Cообщить модератору


	25. "Инсталлятор Debian 8 Jessie перешёл на стадию бета-тестирова..."	+8 +/–
	Сообщение от Аноним (??) on 20-Авг-14, 10:03
	в даже
	Ответить \| Правка \| ^ к родителю #15 \| Наверх \| Cообщить модератору


	16. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+3 +/–
	Сообщение от Аноним (??) on 20-Авг-14, 08:55
	прцедура синхронизации сразу после создания мд-массива - это по твоему что?
	Ответить \| Правка \| ^ к родителю #11 \| Наверх \| Cообщить модератору


	21. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от sdog (ok) on 20-Авг-14, 09:36
	неасилил доки? почитай публицистику http://neil.brown.name/blog/20100519043730
	Ответить \| Правка \| ^ к родителю #11 \| Наверх \| Cообщить модератору


	23. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	–1 +/–
	Сообщение от netc (??) on 20-Авг-14, 09:47
	не осилил прочитать, бегло просмотрел. если не сложно - можете в двух словах сказать какой вывод по поводу bad blocks и mdadm ?
	Ответить \| Правка \| ^ к родителю #21 \| Наверх \| Cообщить модератору


	26. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от Аноним (??) on 20-Авг-14, 10:05
	> не осилил прочитать, бегло просмотрел. > если не сложно - можете в двух словах сказать какой вывод по > поводу bad blocks и mdadm ? Видимо, чтение контрольных сумм после записи или типа того. Что-то убивающее производительность и прикручиваемое с боку скотчем, в общем.
	Ответить \| Правка \| ^ к родителю #23 \| Наверх \| Cообщить модератору


	40. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+1 +/–
	Сообщение от ананим on 20-Авг-14, 16:52
	Писец, а не комментарий. На тему — лaмeрствo, как уверенность в работе аппаратного рэйда. Типа «чёрный ящик сам разберётся». Вон ниже расписал «что и как» в 39.
	Ответить \| Правка \| ^ к родителю #26 \| Наверх \| Cообщить модератору


	28. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от sdog (ok) on 20-Авг-14, 10:32
	The bad block list is simply a list of blocks - one list for each device - which are to be treated as 'bad'
	Ответить \| Правка \| ^ к родителю #23 \| Наверх \| Cообщить модератору


	39. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от ананим on 20-Авг-14, 16:48
	не слушайте весь вышеперечисленный бред. это всё лaмeрюги, потому что не знают, что это уже лет 20 не актуально: 1) мониторинг бэдов на пользовательском уровне закончился примерно с появлением IDE-дисков — https://ru.wikipedia.org/wiki/S.M.A.R.T. >S.M.A.R.T. производит наблюдение за основными характеристиками накопителя, каждая из которых получает оценку. Характеристики можно разбить на две группы: > 1. параметры, отражающие процесс естественного старения жёсткого диска (число оборотов шпинделя, число перемещений головок, количество циклов включения-выключения); > 2. текущие параметры накопителя (высота головок над поверхностью диска, число переназначенных секторов, время поиска дорожки и количество ошибок поиска). и далее: > Reallocated Sectors Count - Число операций переназначения секторов. Когда диск обнаруживает ошибку чтения/записи, он помечает сектор «переназначенным» и переносит данные в специально отведённую резервную область. Вот почему на современных жёстких дисках нельзя увидеть bad-блоки — все они спрятаны в переназначенных секторах. https://en.wikipedia.org/wiki/Smartctl > Smartmontools (S.M.A.R.T. Monitoring Tools) is a set of utility programs (smartctl and smartd) to control and monitor computer storage systems using the Self-Monitoring, Analysis and Reporting Technology (S.M.A.R.T.) system built into most modern (P)ATA, Serial ATA and SCSI hard drives. Smartmontools displays early warning signs of hard drive problems detected by S.M.A.R.T., often giving notice of impending failure while it is still possible to back data up.[ 2) проверкой (вернее управлением и получением информации) бэдов занимаются утилиты из состава smartmontools. Как именно? См. тут — http://www.smartmontools.org/browser/trunk/www/badblockhowto... Но на заметку: > Modern storage devices tend to handle the simple cases automatically, for example by writing a disk sector that was read with difficulty to another area on the media. Even though such a remapping can be done by a disk drive transparently, there is still a lingering worry about media deterioration and the disk running out of spare sectors to remap. Всё что вам нужно (да и вообще — всё что вы можете) — это мониторить диски (включая аппаратные рэйды! см. ниже), периодически запускать само-тестирование, анализировать эту инфу и не допускать последующего перераспределения бэд-блоков. Тоже касается и аппаратных(!!!) рэйдов — «увидеть» диск из рэйда можно например так: smartctl -a -d megaraid,2 /dev/sda # второй диск из рэйда аппаратного «мегарэйда» ☺ > This interface will also work for Dell PERC controllers. It is possible to set RAID device name as /dev/bus/N, where N is a SCSI bus number. или так: smartctl -a -d aacraid,0,0,66 /dev/sda в общем см. man smartctl Других вариантов (уже ☺) просто нет. Ну вот закончились они. Хотя badblocks (из e2fsprogs) всё ещё присутсвует. Но это на уровне файловой системы (!!! если это вам о чём-то говорит — man badblocks: > For this reason, it is strongly recommended that users not run badblocks directly, but rather use the -c option of the e2fsck and mke2fs programs и т.д. В общем запускать на смонтированной фс это будет только лaмeр, а на несмонтированной — это уже точно не нагруженный сервер.
	Ответить \| Правка \| ^ к родителю #23 \| Наверх \| Cообщить модератору


	42. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от абыр (ok) on 20-Авг-14, 17:14
	Небольшое уточнение, при ошибке чтения происходит не переназначение, а увеличение счетчика Current_Pending_Sector. При записи в проблемный сектор либо произойдет переназначение и увеличится Reallocated_Sector_Ct (если конечно сектор безнадежно испорчен и не поддается перезаписи), счетчик же Current_Pending_Sector естественно будет уменьшен.
	Ответить \| Правка \| ^ к родителю #39 \| Наверх \| Cообщить модератору


	43. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от абыр (ok) on 20-Авг-14, 17:23
	Дополнение нумер два. Ликусовый raid получив ошибку чтения с диска, восстанавливает содержимое нечитаемого блока используя другие диски массива, после чего пытается перезаписать проблемные сектора и если запись происходит без ошибок, пишет в лог сообщение типа "read error corrected (N sectors at XXX on sdX)" и продолжает работать как ни в чем не бывало. Так что если в логах появляются подобные сообщения, то стоит проверить состояние хардов.
	Ответить \| Правка \| ^ к родителю #39 \| Наверх \| Cообщить модератору


	45. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от ананим on 20-Авг-14, 17:34
	Дополнение 2) противоречит дополнению 1). Не? Не заметно? Поясняю — диску пoфиг какой рэйд (аппаратный, программный, вообще не рэйд) пытается писать в проблемную область. Вот он "не в курсе дела" во что его вставили. Он просто перераспределяет (если ещё есть куда. Мониторить надо, аднака). А сабж про то, что заведомо битые данные начинают синхронизироваться на весь рэйд в случае наличия хот спаре.
	Ответить \| Правка \| ^ к родителю #43 \| Наверх \| Cообщить модератору


	46. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от ананим on 20-Авг-14, 17:47
	ну т.е. что я хотел сказать — одним ""read error corrected" не стоит ограничиваться. зыж и вообще: > 05.09.2013 23:53 Вышел mdadm 3.3, инструментарий для управления программным RAID в Linux > Поддержка ведения лога сбойных секторов; > Поддержка горячей замены устройств, например "mdadm /dev/mdX --replace /dev/foo --with /dev/bar". http://www.opennet.dev/opennews/art.shtml?num=37837 Так что…
	Ответить \| Правка \| ^ к родителю #45 \| Наверх \| Cообщить модератору


	47. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+1 +/–
	Сообщение от абыр (ok) on 20-Авг-14, 18:07
	>Дополнение 2) противоречит дополнению 1). > Не? Не заметно? Нет, не заметно. Учитесь читать.
	Ответить \| Правка \| ^ к родителю #45 \| Наверх \| Cообщить модератору


	48. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от ананим on 20-Авг-14, 18:17
	Вот это как раз к вам и относится ☺ — при записи никаких "read error corrected (N sectors at XXX on sdX)" не будет. Не каждая операция записи происходит после чтения этого же проблемного места. Перераспределение в этом случае произойдёт "молча".
	Ответить \| Правка \| ^ к родителю #47 \| Наверх \| Cообщить модератору


	27. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от Аноним (??) on 20-Авг-14, 10:30
	> как и нет средств мониторинга появления битых секторов. Шта? cat /sys/block/md2/md/mismatch_cnt 0
	Ответить \| Правка \| ^ к родителю #11 \| Наверх \| Cообщить модератору


	38. "В MD/RAID6 в Linux выявлена проблема, которая мож..."	+/–
	Сообщение от Аноним (??) on 20-Авг-14, 16:47
	Это далеко не всегда указывает на битые сектора.
	Ответить \| Правка \| ^ к родителю #27 \| Наверх \| Cообщить модератору

18. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	–1 +/–
Сообщение от kay (ok) on 20-Авг-14, 09:25
В оригинале патч на raid5.c. Или raid5 модуль подключается автоматически при деградации?
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	31. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	–2 +/–
	Сообщение от пох on 20-Авг-14, 11:34
	"raid5 модуль" - одно название. Код в большей части - общий. Проблема, что характерно, есть и в более ранних версиях чем 2.6.32 (она вообще врожденная) - т.е. статья п...т, автор ниасилил прочитать кусок английского текста. P.S. "все еще пользуетесь linux md ? Тогда толстенькая полярная лисичка давно идет к вам." Впрочем, и не только тогда. Интересно, сколько "железных" raid'ов содержат внутри код, скопипижженный из линукса и с этим же багом? (вспоминая недобрые старые времена, когда человеку с математическим образованием вздумалось проверить, откуда взялись полиномы, используемые линуксным raid6)
	Ответить \| Правка \| ^ к родителю #18 \| Наверх \| Cообщить модератору


	41. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	+/–
	Сообщение от ананим on 20-Авг-14, 17:01
	> P.S. "все еще пользуетесь linux md ? Тогда толстенькая полярная лисичка давно идет к вам." аппаратные рэйды состоят из тех же винтов со смарт-инфой если что. не, намёк ещё не понял? тогда объясню — полярный лис идёт к тому, кто нифига не понимая как это всё работает, думает что за него «думает» аппаратный рэйд. подробности в #39. ps: частично «думалку» порешали с контрольными суммами в zfs, btrfs, ext4, xfs,… но проблему рассуждающих о рэйдах идиoтoв это как видно не снимает
	Ответить \| Правка \| ^ к родителю #31 \| Наверх \| Cообщить модератору

19. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	–4 +/–
Сообщение от Аноним (??) on 20-Авг-14, 09:30
RAID - решетo, все бэкапимся на BD болванки! http://aulix.com/backup2dvd
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	20. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	+/–
	Сообщение от commiethebeastie (ok) on 20-Авг-14, 09:33
	net framework и winrar лень ставить :(
	Ответить \| Правка \| ^ к родителю #19 \| Наверх \| Cообщить модератору


	33. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	–3 +/–
	Сообщение от user (??) on 20-Авг-14, 12:15
	rar необязательно, можно 7zip прога сама все ставит на сервер (Debian или Ubuntu) достаточно указать опцию -install_server
	Ответить \| Правка \| ^ к родителю #20 \| Наверх \| Cообщить модератору


	24. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	+/–
	Сообщение от Xasd (ok) on 20-Авг-14, 09:56
	> RAID - решетo, все бэкапимся на BD болванки! > > http://aulix.com/backup2dvd и не забыть проверить файлы антивирусом (Бабушкина) -- http://lurkmore.to/%D0%90%D0%BB%D0&...
	Ответить \| Правка \| ^ к родителю #19 \| Наверх \| Cообщить модератору

22. "В MD/RAID6 в Linux выявлена проблема, которая может привест..."	+1 +/–
Сообщение от pkdr (ok) on 20-Авг-14, 09:44
> RAID - решетo, все бэкапимся на BD болванки! Месье в курсе различий между raid и backup?
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору