https://www.opennet.me/openforum/vsluhforumID3/110311.html Разработчики платформы для организации совместной разработки GitLab <br>сообщили (https://twitter.com/gitlabstatus) о частичной (https://docs.google.com/document/d/1GCK53YDcBWQveod9kfzW-VCxIABGiryG7_z_6jHdVik/pub) утере содержимого СУБД, обслуживающей инфраструктуру проекта. До окончания разбирательства сайт GitLab.com временно выведен из строя. В процессе внесения оптимизаций, в ответ на обрушившуюся на проект DoS-атаку, администраторы случайно удалили актуальное содержимое СУБД. Утверждается, что непосредственно git-репозитории с кодом и wiki не пострадали, проблема затронула только сопутствующие данные, такие как merge-запросы, учётные записи разработчиков и обсуждения проблем. В настоящее время производится попытка восстановления данных из резервной копии, об актуальности которой не сообщается.<br><br><br><br>URL: https://news.ycombinator.com/item?id=13537052<br>Новость: http://www.opennet.ru/opennews/art.shtml?num=45957<br> https://www.opennet.me/openforum/vsluhforumID3/110311.html#115 Mon, 13 Feb 2017 07:40:49 GMT Андрейка, а иметь всю эту архитектуру, полиси, и т.д<br>действительно дешевле чем раз в 6 лет потерять последние 6 часов данных<br>и сутки простоя?<br><br>Или у вас это не считали?<br> https://www.opennet.me/openforum/vsluhforumID3/110311.html#114 Mon, 06 Feb 2017 21:28:58 GMT Гонору у вас конечно много, с этим не поспоришь, но ~где пруфы~ дайте ссылку что почитать конкретнее же?<br> https://www.opennet.me/openforum/vsluhforumID3/110311.html#113 Mon, 06 Feb 2017 11:35:13 GMT &gt; вы заблуждаетесь...в смысле - надежных платных тоже не бывает.<br>&gt; не бывает. Бывает гарантия выплаты $nnn если "нишмагла". Обычно, увы, куда меньшая, <br>&gt; чем потери бизнеса.<br><br>Вы из какого-то 20 века что ли? Гарантия восстановления данных заключается не в том, что вам кто-то что-то заплатит. Нет. А в том, что технически решение:<br>а) проверяет готовый бэкап<br>б) реплицируется, в том числе в write only storage (т.е. без возможности "случайно" удалить реплику, если мастер грохнулся)<br><br>&gt; главное - что бэкапать. У вас очень мало данных и много лишних <br>&gt; денег, отсюда и наивная вера в полиси (мелкий банчок, чтoле?).<br><br>Ну "мало" или "много" понятия относительные. 15-20Тб в СУБД (postgres), ну и так, по мелочи еще 50Тб наберется менее критических данных<br><br><br>&gt; "отдельный сервер" должен вмещать в себя полку в 30-50 терабайт (не так <br>&gt; много на сегодняшний день, все любят всякую бигдату). Инкрементально, ага. Ваши <br>&gt; действия? (нет, денег на отдельный бэкапный FC-свитч не дадут... уп-с, кажется, <br>&gt; я уже слегка с https://www.opennet.me/openforum/vsluhforumID3/110311.html#112 Sat, 04 Feb 2017 22:47:17 GMT минусуют видимо те, кто тоже на работе так лажает.<br> https://www.opennet.me/openforum/vsluhforumID3/110311.html#111 Sat, 04 Feb 2017 16:29:40 GMT &gt; Давно засунул себе в bashrc автораскраску PS1 в зависимости от md5sum от hostname/username.<br><br>и как это помогает, когда у вас 50+ серверов?<br> https://www.opennet.me/openforum/vsluhforumID3/110311.html#110 Fri, 03 Feb 2017 14:30:33 GMT &gt; У гитлаба бизнес - в продаже gitlab ee, а gitlab.com - это <br>&gt; так... демостенд, там и платных-то функций нет.<br><br>ну так вот инвестор на деньги и попал - он не с платных функций живет, а с цены акций, а они от таких подарков, собаки, падают.<br> https://www.opennet.me/openforum/vsluhforumID3/110311.html#109 Fri, 03 Feb 2017 14:28:14 GMT &gt; И безотносительно nixos, надо правильно мыслить. Не репликацию постгрес, а сервер с <br>&gt; репликой. Даже с Puppet должен быть соответствующий шаблон. Нужна ещё одна <br>&gt; реплика? Ок, вот новая нода класса postgres-repl.<br><br>и в датацентре сами собой воздвигаются новые стойки, из воздуха в них запрыгивают полки с дисками и головы с lvm'ами... эх, программисты... когда ж до вас дойдет, что у девопсов немного другой мир, совсем не такой как в вашей тестовой виртуалочке?<br><br>Ну и вот образовался у тебя "cервер с репликой", а реплики-то в нем и нет. Данные еще перелить надо, не перегрузив сеть, дисковый io уцелевшей полки и постгрезовую голову. А нагрузка растет, а часики тикают... А ты такой - "опа, заметил что надо руками стирать data, у самого постгреза что-то медленно получается - не, никаких консолей, быстренько создаем новый шаблон, быстренько тестим его на виртуалочке, и быстренько деплоим". Как раз к этому времени либо и так все устаканится, либо, что вероятнее, гораздо раньше все ляжет.<br><br><br> https://www.opennet.me/openforum/vsluhforumID3/110311.html#108 Fri, 03 Feb 2017 14:19:49 GMT &gt; mv data old-data<br>&gt; mkdir data<br><br>надо б на досуге посмотреть результат этого действа на живом постгрезе - полагаю, будет весьма феерично, хотя до бэкапа может дело и не дойдет.<br><br>Ну и если поторопиться сделать после этого rm -r old-data - можно остаться ровно у того же разбитого корыта (а если не поторопиться - места на две копии не хватит, скорее всего)<br><br> https://www.opennet.me/openforum/vsluhforumID3/110311.html#107 Fri, 03 Feb 2017 06:52:41 GMT &gt; С ключом -cr гзип рекурсивно всё сжал и вывалил в stdout.<br><br>Понял. Весьма удивлён изобретательности человека. Так отстрелить себе ногу -- это ещё додуматься надо. :)<br><br>