The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"В Btrfs реализована поддержка дедупликации в offline-режиме"
Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Изначальное сообщение [ Отслеживать ]

"В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от opennews (??) on 14-Сен-13, 20:49 
Представлен (http://lkml.indiana.edu/hypermail/linux/kernel/1309.1/02981....) очередной набор изменений для файловой системы  Btrfs, предлагаемый для включения в состав ядра Linux 3.12. Одной из наиболее интересных новых возможностей является поддержка "оффлайновой" дедупликации, при которой дедупликация не происходит непосредственно в момент записи данных. Вместо этого предоставлен программный интерфейс, который позволяет внешним утилитам произвести дедупликацию в тот момент когда они этого пожелают, предоставив ядру наборы экстентов, претендующих на дупликацию. Далее ядро проверит, что данные действительно дублируются и при обнаружении совпадения произведет дедупликацию.


Кроме этого отмечается множество исправлений ошибок и целая серия оптимизаций производительности, наиболее заметной из которых является построение при необходимости дерева UUID'ов для подраздела, что заметно ускоряет работу операций send и receive при наличии большого количества снапшотов или подразделов в файловой системе.

URL: http://lkml.indiana.edu/hypermail/linux/kernel/1309.1/02981....
Новость: http://www.opennet.dev/opennews/art.shtml?num=37911

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения по теме [Сортировка по времени | RSS]


2. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +1 +/
Сообщение от Аноним (??) on 14-Сен-13, 21:09 
стоит ли установить, если полностью устраивает ext4?

fsck появилось?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

4. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +12 +/
Сообщение от ВовкаОсиист (ok) on 14-Сен-13, 21:10 
- нет
- нет
Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

6. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +9 +/
Сообщение от pavlinux (ok) on 14-Сен-13, 21:43 
> стоит ли установить, если полностью устраивает ext4?

Работает - не трожь!

Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

9. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от all_glory_to_the_hypnotoad (ok) on 14-Сен-13, 21:57 
конечно, нет.
Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

14. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +1 +/
Сообщение от Аноним (??) on 14-Сен-13, 22:58 
> стоит ли установить, если полностью устраивает ext4?

Смотря что понимать под устраивает. Грохни рекурсивно диру с фотками за последний год, и попробуй рассказать как оно тебе нравится. Ну вот на btrfs на снапшот можно отмотать, если результат не понравился. А на EXT4 - вот извините.

> fsck появилось?

Да он уж давно есть, просто сырой.

Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

21. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от pavlinux (ok) on 15-Сен-13, 00:00 
> Грохни рекурсивно диру с фотками за последний год, и попробуй рассказать как оно тебе нравится.

Ну я думаю вы поняли, для людей с каким IQ нужны ФС со снапшотами. :)  

Ответить | Правка | ^ к родителю #14 | Наверх | Cообщить модератору

34. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +5 +/
Сообщение от anonymous (??) on 15-Сен-13, 10:57 
>Ну я думаю вы поняли, для людей с каким IQ нужны ФС со снапшотами.

С таким IQ, который позволяет предусмотреть решение проблемы до её появляения - я надеюсь Вы это имели в виду.

Ответить | Правка | ^ к родителю #21 | Наверх | Cообщить модератору

38. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от pavlinux (ok) on 15-Сен-13, 14:38 
>>Ну я думаю вы поняли, для людей с каким IQ нужны ФС со снапшотами.
> С таким IQ, который позволяет предусмотреть решение проблемы до её появляения

Они самые, которые на тракторах по городу ездят. Мало ли чо, вдруг внезапно асфальт кончится.

Ответить | Правка | ^ к родителю #34 | Наверх | Cообщить модератору

53. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 16-Сен-13, 04:42 
> Они самые, которые на тракторах по городу ездят. Мало ли чо, вдруг
> внезапно асфальт кончится.

Ну не на тракторах, а внедорожниках. Зато как посмотришь потом на ДТП, а там пластиково-фольгяная одноразовая блестючая поделка - всмятку, несколько отбивных в комплекте. А тракторист-внедорошник - ну бампер ему поправят после этого в сервиснике при помощи кувалдометра и он дальше поедет.

Ответить | Правка | ^ к родителю #38 | Наверх | Cообщить модератору

60. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 17-Сен-13, 01:46 
Модным хипстерам западло на уродливых джипах ездить, им изящные контуры подавай.
Ответить | Правка | ^ к родителю #53 | Наверх | Cообщить модератору

67. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +1 +/
Сообщение от pavlinux (ok) on 17-Сен-13, 03:12 
>> Они самые, которые на тракторах по городу ездят. Мало ли чо, вдруг
>> внезапно асфальт кончится.
> Ну не на тракторах, а внедорожниках. Зато как посмотришь потом на ДТП,
> а там пластиково-фольгяная одноразовая блестючая поделка - всмятку, несколько отбивных
> в комплекте. А тракторист-внедорошник - ну бампер ему поправят после этого
> в сервиснике при помощи кувалдометра и он дальше поедет.

Угу, летал у нас тут недавно один брабус, - Калину задел и полетел дальше
с сальтами и кульбитами, итого два жмурика в брабусе.

Ответить | Правка | ^ к родителю #53 | Наверх | Cообщить модератору

76. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Андрей (??) on 01-Мрт-15, 12:09 
И потом эти люди ставят «двойку» нашему УАЗ-патриоту?
Ответить | Правка | ^ к родителю #67 | Наверх | Cообщить модератору

43. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 16-Сен-13, 03:56 
> Ну я думаю вы поняли, для людей с каким IQ нужны ФС со снапшотами. :)

Каркуша, не ошибается только тот кто ничего не делает. Так что нефиг тут каркать. Хотя может быть ты у нас такой уникум который никогда не стирал ничего лишнего, конечно.

Ответить | Правка | ^ к родителю #21 | Наверх | Cообщить модератору

62. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 17-Сен-13, 01:48 
> Каркуша, не ошибается только тот кто ничего не делает.

pavlinux никогда не ошибается! :)

Ответить | Правка | ^ к родителю #43 | Наверх | Cообщить модератору

68. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от pavlinux (ok) on 17-Сен-13, 03:14 
>> Каркуша, не ошибается только тот кто ничего не делает.
> pavlinux никогда не ошибается! :)

Своевременно отсортированная и систематизированная информация автоматически становить больше не нужной (с) :)

Ответить | Правка | ^ к родителю #62 | Наверх | Cообщить модератору

61. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Аноним (??) on 17-Сен-13, 01:47 
> Ну я думаю вы поняли, для людей с каким IQ нужны ФС со снапшотами. :)

Ээ... с любым?

Ответить | Правка | ^ к родителю #21 | Наверх | Cообщить модератору

26. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –4 +/
Сообщение от Аноним (??) on 15-Сен-13, 01:20 
Этож нужно все время держать активный снепшот, что убивает производительность на раз?
А дедупликация интересна.
Ответить | Правка | ^ к родителю #14 | Наверх | Cообщить модератору

30. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +3 +/
Сообщение от линуксовед on 15-Сен-13, 04:20 
Проснитесь!

Снапшоты на zfs и btrfs не влияют на производительность!

Ответить | Правка | ^ к родителю #26 | Наверх | Cообщить модератору

31. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +4 +/
Сообщение от Аноним (??) on 15-Сен-13, 09:57 
Ну что за манера взять и включить свет в темной комнате.
Ответить | Правка | ^ к родителю #30 | Наверх | Cообщить модератору

36. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 15-Сен-13, 13:33 
Только потому, что они постоянно работают в COW режиме, т е уже повлияло? Но получить профит от этого можно только вручную создав снепшот, и если это произойдет в нужный момент?
Там не пишутся изменения в журнал в хронологическом порядке так чтобы можно было просто откатить какое-то изменение, может быть специальной утилитой?
Ответить | Правка | ^ к родителю #30 | Наверх | Cообщить модератору

37. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от all_glory_to_the_hypnotoad (ok) on 15-Сен-13, 13:55 
> может быть специальной утилитой?

может, amanda называется

Ответить | Правка | ^ к родителю #36 | Наверх | Cообщить модератору

52. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 16-Сен-13, 04:39 
> может, amanda называется

Спору нет, можно в магазин за продуктами ездить и на бульдозере, если делать не...й. Но вообще-то это не самое удобное и оптимальное решение, если что.

Капитан намекает что снапшоты и бэкапы не заменяют друг друга. А вполне себе дополняют.

Ответить | Правка | ^ к родителю #37 | Наверх | Cообщить модератору

51. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 16-Сен-13, 04:37 
> повлияло? Но получить профит от этого можно только вручную создав снепшот,
> и если это произойдет в нужный момент?

CoW ФС по своей сути - один большой журнал. В первом приближении. Новая запись не разрушает старые данные, поэтому потенциально существует как старое так и новое состояние. Это и позволяет фокусы с множественными снапшотами и прочим практически нахаляву: для этого всегда все уже есть, снапшот лишь весьма формальная пометка что "а вот это состояние мы будем считать валидным".

> Там не пишутся изменения в журнал в хронологическом порядке так чтобы можно
> было просто откатить какое-то изменение, может быть специальной утилитой?

Оно по сути один большой журнал. Откатиться на временные снапшоты - можно. Некоторое время. Если их не убивать - логично что файловая система постепенно забьется разными версиями состояний и место на дисках таки кончится. Поэтому если автоснапшот не пометили как постоянный - через некоторое время его таки подотрет сборщик мусора. Но по факту - это такое скользящее окно по шкале времени, в его пределах можно отматывать куда и как угодно. Можно навсегда сохранить некое состояние. Если места под снапшот и отличия от него не жалко.

Ответить | Правка | ^ к родителю #36 | Наверх | Cообщить модератору

72. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от pavlinux (ok) on 18-Сен-13, 04:06 
> поэтому потенциально существует как старое так и новое состояние.

И чё мне это даст?

dd if=/dev/zero of=/boot/vmlinuz, ну вот так случайно вышло, у меня IQ как у выше существующих анонимов.  

Где взять vmlinuz, если не существует его полной копии? А остальные 25.000.000 файлов?

---

Tux3, NILFS - вот эти похожи на истину.

Ответить | Правка | ^ к родителю #51 | Наверх | Cообщить модератору

44. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 16-Сен-13, 04:01 
> Этож нужно все время держать активный снепшот, что убивает производительность на раз?

CoW работает совершенно иначе: снапшоты просто часть дизайна. Условно-халявная, в том плане что на производительность не влияет. В CoW новая запись не разрушает старое состояние файла а дописывается где-то сбоку, ну и метаданные правятся чтобы новое состояние файла компоновалось с учетом этого нового "выноска". Потому и Copy-On-Write. Работает оно так - не убивая старое состояние. Сабж например автоматически каждые 30 секунд оформляет автоснапшот. При крахе оно просто возвращается на самый свежий автоснапшот. Ну и все, рекавери закончено: ФС в логически корректном состоянии, продолбано только то что не успело записаться до конца и не попало в снапшот.

Ответить | Правка | ^ к родителю #26 | Наверх | Cообщить модератору

71. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от pavlinux (ok) on 18-Сен-13, 03:59 
Вы прям в какой-то сказке живете.
Инженеры трахаются, мучаются, - как бы делать ФС с защитой от сбоев, да так, что бы
"Опа, переключился и всё заработало, стало как и было", но при этом размер диска
не сокращался по экспоненте и скорость не просела до 1/10 от номинала.
А оказывается анонимы всё знают и умеют!
Ответить | Правка | ^ к родителю #44 | Наверх | Cообщить модератору

63. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 17-Сен-13, 01:48 
> Этож нужно все время держать активный снепшот, что убивает производительность на раз?

Вы путаете с LVM.

Ответить | Правка | ^ к родителю #26 | Наверх | Cообщить модератору

23. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Xasd (ok) on 15-Сен-13, 00:14 
> fsck появилось?

роль fsck для btrfs совсем-не-плохо выполняет утилита true (ну ты понел: ln -s true /usr/bin/fsck.btrfs)

а ежеле нужно исправить ошибки -- то тогда команда:
        btrfs check /dev/sda
    ну и
        btrfs restore ... ...

Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

56. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от PnD (??) on 16-Сен-13, 12:25 
  Таки не понял, за что гражданину минусов вписали. В OpenSUSE лежит в /usr/sbin/fsck.btrfs, внутри - заглушка (не true, но суть - та же).
  "check" у меня по крайней мере нет, есть scrub аналогично zfs. Возможно, в последних сборках?
  [глубокомысленно] Наверное, за орфографию...
Ответить | Правка | ^ к родителю #23 | Наверх | Cообщить модератору

73. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Xasd (ok) on 18-Сен-13, 20:10 
> "check" у меня по крайней мере нет, есть scrub аналогично zfs. Возможно, в последних сборках?

у меня на двух разных компьютерах (разные операционный системы): на одном компьютере есть "btrfs check" и "btrfs restore", а на другом нет.

думаю -- да, зависит от версии btrfs :)

scrub -- работает в режиме замонтированной файловой системы. а "btrfs check" првоеряет сугубо РАЗмонтированную файловую систему (то есть по сути -- fsck, но долгий).

Ответить | Правка | ^ к родителю #56 | Наверх | Cообщить модератору

24. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –2 +/
Сообщение от AnonuS on 15-Сен-13, 00:52 
> стоит ли установить...

Да! После 14 февраля.

Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

42. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Tav (ok) on 16-Сен-13, 02:01 
>  стоит ли установить, если полностью устраивает ext4?

Только если интересует COW и связанные с ним возможности.

Для меня полезным пока оказалось следующее:

  "cp --reflink" — можно моментально и без затрат места сделать копию большого файла, например образа виртуальной машины, реальное копирование блоков происходит только при их изменении.

  Снимки + send/receive — очень удобно делать резервную копию на внешний носитель: ФС сама знает, что изменилось относительно последнего снимка, и передает только это. По затратам места, как инкрементный бэкап, но полное состояние на время каждой очередной копии прозрачно доступно на целевой ФС в виде каталога-снимка. Любой старый снимок (резервную копию) можно удалить и освободится ровно то место, которое занималось блоками, присутствовавшими только в этом снимке. Кроме того, такая резервная копия отражает состояние всей ФС строго в один момент времени, когда при обычном резервном копировании легко получить противоречивое состояние.

> fsck появилось?

Да, в составе btrfs-progs.

Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

3. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –2 +/
Сообщение от ВовкаОсиист (ok) on 14-Сен-13, 21:10 
Лучше бы фсцк запилили нормальный. Пользоваться не возможно, вернулся обратно на ext4
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

7. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от pavlinux (ok) on 14-Сен-13, 21:44 
> Лучше бы фсцк запилили нормальный. Пользоваться не возможно, вернулся обратно на ext4

Ну на XFS есть fsck и чё?! Юзаю раз в год.  

Ответить | Правка | ^ к родителю #3 | Наверх | Cообщить модератору

12. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от all_glory_to_the_hypnotoad (ok) on 14-Сен-13, 22:36 
с xfs всё нормально. Юзаю... а хз уже сколько, около десятка лет
Ответить | Правка | ^ к родителю #7 | Наверх | Cообщить модератору

50. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Аноним (??) on 16-Сен-13, 04:29 
> с xfs всё нормально. Юзаю... а хз уже сколько, около десятка лет

До примерно 2.6.28 это была реально ссыкотная штука, затиравшая файлы нулями при малейшем крахе. Из благих побуждений. Впрочем от этого не легче - на#$нуться на такое поведение не сильно приятно.

Ответить | Правка | ^ к родителю #12 | Наверх | Cообщить модератору

64. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 17-Сен-13, 01:51 
> До примерно 2.6.28 это была реально ссыкотная штука, затиравшая файлы нулями при
> малейшем крахе. Из благих побуждений. Впрочем от этого не легче -
> на#$нуться на такое поведение не сильно приятно.

Да и сейчас в общем-то затирает. Наверное, просто вся система крашиться реже стала?

Ответить | Правка | ^ к родителю #50 | Наверх | Cообщить модератору

39. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от arisu (ok) on 15-Сен-13, 20:55 
> не возможно

это просто у тебя руки из задницы: ключи утилитам ты ведь точно так же задаёшь, как и на русском пишешь — наобум.

Ответить | Правка | ^ к родителю #3 | Наверх | Cообщить модератору

49. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +2 +/
Сообщение от Аноним (??) on 16-Сен-13, 04:27 
> Лучше бы фсцк запилили нормальный.

Вообще-то запиливают. В btrfs-utils. Если у тебя какие-то конкретные претензии - вперед, баги катать. Это там ща важно и актуально.

Ответить | Правка | ^ к родителю #3 | Наверх | Cообщить модератору

5. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 14-Сен-13, 21:31 
Я на десктопе пользую, нравится. Когда то тупило оно страшно, проблем была куча, например при удалении множества файлов. Теперь, сказка. Особенно радует сжатие, которое ускоряет чтение/запись так как сокращается объем данных сливаемых на диск. Но, надежность конечно пока не очень, тем не менее для десктопа уже пойдет, если безперебойник на нем есть :)
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

8. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +1 +/
Сообщение от pavlinux (ok) on 14-Сен-13, 21:45 
> Теперь, сказка.
> Особенно радует
> надежность конечно пока не очень

Бенчмарки, тесты, результаты, сравнения - в студию!  

Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

15. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 14-Сен-13, 23:04 
> Бенчмарки, тесты, результаты, сравнения - в студию!

Какой нетерпеливый, блин. Погодь, ща выкатят какойнить 3.12 RC и фороникс тебе сделает. Ну ок, для более старых ядер типа 3.11 можешь уже посмотреть. В целом нормально вполне смотрится. Правда на SSD всем надирает зад F2FS, что как бы предсказуемо.

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

65. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Аноним (??) on 17-Сен-13, 01:53 
> Погодь, ща выкатят какойнить 3.12 RC и фороникс тебе сделает.

Знаем-знаем. "Вот какие-то оторванные от реальности циферки, из которых видно, что при определенной фазе луны, теплое легче мягкого"

Ответить | Правка | ^ к родителю #15 | Наверх | Cообщить модератору

55. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Аноним (??) on 16-Сен-13, 09:28 
при генерации мелких файлов ext4 по-прежнему уделывает всех
Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

35. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 15-Сен-13, 11:04 
делал 7 раз хардресет при записи, полет нормальный.
Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

41. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Куяврик on 16-Сен-13, 00:42 
когда в OS/2 4.5 Aurora запилили JFS особо горячие головы тестировали, вытаскивая шлейфы из IDE винтов ))))
Ответить | Правка | ^ к родителю #35 | Наверх | Cообщить модератору

45. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Аноним (??) on 16-Сен-13, 04:17 
> шлейфы из IDE винтов ))))

Бедный бсдшный некрофаг, никак не может привыкнуть к шинам с горячим подключениям. Отпусти ручник, чувак! В USB и SATA горячее подключение и отключение - штатные возможности интерфейса. Так что миллионы юзерей давно уже тестируют все что попало таким манером. Ну забыл размаунтить перед выдергиванием шнура. Бывает. А JFS, кстати, под линух есть. Ну да, работает. Вроде не дохнет, как впрочем и остальные, если у админа руки не из ж...ы. Но скоростью не страдает особо. В общем ничем таким особым не примечательная ФС по меркам линухов. Имеет смысл только на дохлых конфигах, т.к. очень мало грузит проц. Наверное единственное ощутимое достоинство.

Ответить | Правка | ^ к родителю #41 | Наверх | Cообщить модератору

10. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –3 +/
Сообщение от Tzong (ok) on 14-Сен-13, 22:08 
Зачем же нужна дедупликация в постпроцессе, когда все проприетарные конкуренты предлагают поточную (inline) дедупликацию?..
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

13. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +3 +/
Сообщение от Docent (??) on 14-Сен-13, 22:42 
inline жрет огромное количество ресурсов, а offline можно выполнять в свободное от работы время и занимая небольшое количество памяти
Ответить | Правка | ^ к родителю #10 | Наверх | Cообщить модератору

16. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +3 +/
Сообщение от Аноним (??) on 14-Сен-13, 23:10 
> Зачем же нужна дедупликация в постпроцессе,

Затем что можно ее например пнуть в период наименьшей нагрузки. В целом как ты понимаешь место в случае VM и тому подобной бнопни оно сэкономит. При том возможно без адского потребления ресурсов. Правда пока сделано не сильно оптимально, но сама идея вывесить такой программный интерфейс - очень хороша.

> когда все проприетарные конкуренты предлагают поточную (inline) дедупликацию?..

Осталось только уточнить сколько проца и оперативы все это жрет в результате.

Ответить | Правка | ^ к родителю #10 | Наверх | Cообщить модератору

32. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +2 +/
Сообщение от Аноним (??) on 15-Сен-13, 10:01 
> когда все проприетарные конкуренты

огласите весь список

Ответить | Правка | ^ к родителю #10 | Наверх | Cообщить модератору

18. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 14-Сен-13, 23:38 
Проведу паралель зачем вам fsck на ZFS ?
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

46. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +1 +/
Сообщение от Аноним (??) on 16-Сен-13, 04:20 
> Проведу паралель зачем вам fsck на ZFS ?

Затем что иногда хардкорная починка реально порушенных структур может все-таки пригодиться. Даже если они теоретически и не должны разрушаться, бэд сектора и прочие подляны могут внести корректировку в идеальный план. Вообще, диски зачастую отказывают не так как ожидает ФС, контроллер RAID и прочая. По поводу чего оптимизм это хорошо, но реализм - лучше.

Ответить | Правка | ^ к родителю #18 | Наверх | Cообщить модератору

58. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Аноним (??) on 16-Сен-13, 20:08 
zpool scrub
Ответить | Правка | ^ к родителю #46 | Наверх | Cообщить модератору

19. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Lazy_Kent (ok) on 14-Сен-13, 23:40 
В openSUSE вбросили тему сделать Btrfs системой по умолчанию для релиза 13.1 в ноябре (извращенцы).
Здравомыслие победило. http://lists.opensuse.org/opensuse-factory/2013-09/msg00029....
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

25. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –3 +/
Сообщение от AnonuS on 15-Сен-13, 00:56 
> В openSUSE вбросили тему сделать Btrfs системой по умолчанию для релиза 13.1
> в ноябре (извращенцы).
> Здравомыслие победило. http://lists.opensuse.org/opensuse-factory/2013-09/msg00029....

Конечно победило, 14 февраля ведь ещё не настало...

Как там дела с RC1, выйдет в срок ?

Ответить | Правка | ^ к родителю #19 | Наверх | Cообщить модератору

27. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Lazy_Kent (ok) on 15-Сен-13, 01:46 
> Как там дела с RC1, выйдет в срок ?

В этом релизе (13.1) должно всё выйти в срок. На данный момент нет критических косяков (не считая того, что swap отвалился: http://lists.opensuse.org/opensuse-factory/2013-09/msg00323....).
Но до RC1 ещё будет Beta 1 (19 сентября).
Система уже вполне рабочая. Пользуюсь ежедневно (Factory).

Ответить | Правка | ^ к родителю #25 | Наверх | Cообщить модератору

28. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от AnonuS on 15-Сен-13, 02:14 
> В этом релизе (13.1) должно всё выйти в срок. На данный момент
> нет критических косяков (не считая того, что swap отвалился: http://lists.opensuse.org/opensuse-factory/2013-09/msg00323....).
> Но до RC1 ещё будет Beta 1 (19 сентября).
> Система уже вполне рабочая. Пользуюсь ежедневно (Factory).

Да, тоже с удивлением ( в хорошем смысле этого слова :-) ) отмечаю стабильность работы. При установке были проблемы ( Milestone 4 ), а теперь всё просто работает и обновления накатываются без проблем. Релиз обещает быть удачным, по крайней мере очень хочется на это надеяться.

Ответить | Правка | ^ к родителю #27 | Наверх | Cообщить модератору

20. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 14-Сен-13, 23:49 
Идея может и хороша, но пихать это в дистрибутив файловой системой по умолчанию я бы не стал. Это реально если заняться ничем то да
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

22. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –4 +/
Сообщение от Фтщтнь on 15-Сен-13, 00:05 
Когда этот труп уже насиловать перестанут?
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

29. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +3 +/
Сообщение от angra (ok) on 15-Сен-13, 03:52 
Слово труп предполагает мертвый объект, который в прошлом хотя бы недолго был живым. К тому, что еще не родилось, его применять не стоит.
Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

33. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Аноним (??) on 15-Сен-13, 10:03 
> Слово труп предполагает мертвый объект, который в прошлом хотя бы недолго был
> живым. К тому, что еще не родилось, его применять не стоит.

Когда этот выкидыш уже насиловать перестанут?

Ответить | Правка | ^ к родителю #29 | Наверх | Cообщить модератору

47. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +2 +/
Сообщение от Аноним (??) on 16-Сен-13, 04:22 
> Когда этот выкидыш уже насиловать перестанут?

Какой еще выикдыш? Оно в майнлайне и как раз достигает кондиции. Нет, баги там конечно еще давят, но как видите, уже руки доходят и до довольно навороченных плюшек, оптимизаций и прочая. Т.е. в первом приближении основная работа заканчивается - начинается полировка и юстировка. Это хорошо - могучая будет штука.

Ответить | Правка | ^ к родителю #33 | Наверх | Cообщить модератору

40. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Xaionaro (ok) on 15-Сен-13, 21:56 
Это очень перспективный и живой проект.
Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

48. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 16-Сен-13, 04:24 
> Это очень перспективный и живой проект.

Ну так языком на форуме пиндеть - это же не лог коммитов в кернель читать. Если б они были в курсе того что там творится - они бы не рискнули про "трупы" вякать. Потому что там в одном этом закоулке коммитов больше чем в половине их фетиша.

Ответить | Правка | ^ к родителю #40 | Наверх | Cообщить модератору

57. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от XoRe (ok) on 16-Сен-13, 15:44 
Что-то реализация идеи напоминает дефрагментацию под win.
Теперь можно написать кучу программ типа "SpeedUP your PC!", которые будут дергать функции сканирования и дедупликации btrfs раздела.
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

59. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Аноним (??) on 16-Сен-13, 22:43 
Думаю в состав утилит включат стандартную дедупу. Просто будет не онлайн, а офлайн дедуп. На том история и закончится.
Ответить | Правка | ^ к родителю #57 | Наверх | Cообщить модератору

69. "В Btrfs реализована поддержка дедупликации в offline-режиме"  –1 +/
Сообщение от Аноним (??) on 18-Сен-13, 02:25 
а там уже починили уязвимость, из-за которой, если записать на диск пару десятков тысяч килобайтовых файлов, фс встаёт колом и жалуется на отсутствие места несмотря на почти пустой диск?
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

70. "В Btrfs реализована поддержка дедупликации в offline-режиме"  +/
Сообщение от Аноним (??) on 18-Сен-13, 02:37 
гм... for i in `seq 100000`; dd if=/dev/urandom of=$i bs=1024 count=1; done повесил файловую систему к херам на 65428 файле. Хорошо это не рутовая фс.

Я надеюсь, у хостера, который держит сайт разработчиков, будет эта самая btrfs на диске, чтобы любой кулхацкер, нашедший дыру в очередном пхп-скрипте, мог повесить весь сервер к чертям :)

Ответить | Правка | ^ к родителю #69 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру