https://www.opennet.me/openforum/vsluhforumID13/652.html Добрый день.<br><br>Необходимо организовать видеопортал. Одно из условий реализации - видео должно корвертироваться и хранится на backend'е, дабы не загружать сам вебсервер.<br><br>Какие есть обкатаные схемы реализации подобной задачи?<br> https://www.opennet.me/openforum/vsluhforumID13/652.html#27 Thu, 06 May 2010 13:23:44 GMT <br>&gt;[оверквотинг удален]<br>&gt;&gt;приоритетом. <br>&gt;<br>&gt;вот я тоже так делаю, только nginx тут не при чём. backend <br>&gt;будет исключительно кодировать, с высоким приоритетом. пока. <br>&gt;&gt;В-третьих, я бы вынесла сервера баз данных на две отдельные машины <br>&gt;<br>&gt;обязательно, но 3м этапом <br>&gt;&gt;В-четвертых, я бы отделила фронт-энд для балансировки нагрузки от веб-серверов. <br>&gt;<br>&gt;есть подробная статья,. тут же http://www.opennet.ru/docs/RUS/webcluster/ <br><br>не понравилось. Имхо, если Linux, стоит использовать стандартный для этой цели LVS<br><br>&gt;&gt;- Между двумя бэкэндами организуется HA-кластер (например, RedHat Cluster Suite)<br>&gt;<br>&gt;вот это лишнее (см. пред. пункт). К тому же неохота разводить зоопарк <br>&gt;операционных систем (повторюсь - юзаю генту) <br><br>Насчет Gentoo не знаю, но RHCS есть, например, под Debian(хотя и старый), и, конечно, под CentOS. Про Gentoo: не обжайтесь, но, по-моему, она и серверные задачи не совместимы (если хотите порты, используйте FreeBSD), так как by design отсуствуют стабильные релизы, и Вы в любой момент пр https://www.opennet.me/openforum/vsluhforumID13/652.html#26 Thu, 06 May 2010 12:11:42 GMT &gt;<br>&gt;&gt;т.о. вы предлагаете и www-запросы и кодирование выполнять на одном дорогом физическом <br>&gt;&gt;сервере? а если с ним что случиться? в моём варианте, я <br>&gt;&gt;просто меняю упавший сервер (который стоит куда меньше), заливаю бэкап и <br>&gt;&gt;всё продолжает работать <br>&gt;<br>&gt;Нет, я бы вообще сделала по-другому в принципе, при нормальном бюджете: <br>&gt;<br>&gt;Во-первых, нужно разделять HA и балансировку нагрузки, это в принципе разные вещи <br>&gt;<br><br>угу )<br>&gt;Во-вторых, я бы кодировала на бэкэндах(где Nginx и лежит статика) с низким <br>&gt;приоритетом. <br><br>вот я тоже так делаю, только nginx тут не при чём. backend будет исключительно кодировать, с высоким приоритетом. пока.<br>&gt;В-третьих, я бы вынесла сервера баз данных на две отдельные машины <br><br>обязательно, но 3м этапом<br>&gt;В-четвертых, я бы отделила фронт-энд для балансировки нагрузки от веб-серверов. <br><br>есть подробная статья,. тут же http://www.opennet.ru/docs/RUS/webcluster/<br>&gt;<br>&gt;Бэкэнды лучше бы оставить(имхо) обычными традиционными железками, а для баз данных, управляющего <br>&gt;ПО, и балан https://www.opennet.me/openforum/vsluhforumID13/652.html#25 Thu, 06 May 2010 11:41:59 GMT <br>&gt;ЗЫ а балансировку можно делать, например (но не только) с помощью LVS <br><br>Хотя lvs сам по себе тоже обладает функционалом HA (не только балансировки): может выкидывать из балансировки не отвечающие бэкэнды<br><br><br> https://www.opennet.me/openforum/vsluhforumID13/652.html#24 Thu, 06 May 2010 11:24:14 GMT &gt;[оверквотинг удален]<br>&gt;использовать drbd <br>&gt;<br>&gt;Но вообще, лучше взять четырехпортовый DAS с SAS интерфейсом, и прицепить к <br>&gt;нему все четыре железки. <br>&gt;<br>&gt;Бэкэнды лучше сделать более дорогими, а два сервера под виртуализацию использовать что-то <br>&gt;значительно более простое (но лучше с ECC памятью) <br>&gt;<br>&gt;По DAS, в зависимости от Вашего бюджета, я бы смотрела на любой <br>&gt;двухголовый Infortrend, так как дешево и сердито :) <br><br>Да, и при виртуализации, сервер баз данных может быть и один (все равно будет перезапущен при падении той железки, на которой находится)<br> https://www.opennet.me/openforum/vsluhforumID13/652.html#23 Thu, 06 May 2010 11:19:36 GMT &gt;[оверквотинг удален]<br>&gt;использовать drbd <br>&gt;<br>&gt;Но вообще, лучше взять четырехпортовый DAS с SAS интерфейсом, и прицепить к <br>&gt;нему все четыре железки. <br>&gt;<br>&gt;Бэкэнды лучше сделать более дорогими, а два сервера под виртуализацию использовать что-то <br>&gt;значительно более простое (но лучше с ECC памятью) <br>&gt;<br>&gt;По DAS, в зависимости от Вашего бюджета, я бы смотрела на любой <br>&gt;двухголовый Infortrend, так как дешево и сердито :) <br><br>ЗЫ а балансировку можно делать, например (но не только) с помощью LVS<br><br> https://www.opennet.me/openforum/vsluhforumID13/652.html#22 Thu, 06 May 2010 11:16:42 GMT <br>&gt;т.о. вы предлагаете и www-запросы и кодирование выполнять на одном дорогом физическом <br>&gt;сервере? а если с ним что случиться? в моём варианте, я <br>&gt;просто меняю упавший сервер (который стоит куда меньше), заливаю бэкап и <br>&gt;всё продолжает работать <br><br>Нет, я бы вообще сделала по-другому в принципе, при нормальном бюджете: <br><br>Во-первых, нужно разделять HA и балансировку нагрузки, это в принципе разные вещи<br>Во-вторых, я бы кодировала на бэкэндах(где Nginx и лежит статика) с низким приоритетом. <br>В-третьих, я бы вынесла сервера баз данных на две отдельные машины<br>В-четвертых, я бы отделила фронт-энд для балансировки нагрузки от веб-серверов.<br><br>Бэкэнды лучше бы оставить(имхо) обычными традиционными железками, а для баз данных, управляющего ПО, и балансировщика нагрузки использовать две железки с какой-нибудь системой виртуализации (если базы данных не очень сильно нагруженные, обычно на таких задачах основная нагрузка на бэкэнд)<br><br>- Между двумя бэкэндами организуется HA-кластер (например, RedHat Cluster Sui https://www.opennet.me/openforum/vsluhforumID13/652.html#21 Thu, 06 May 2010 11:07:04 GMT &gt;&gt;линк по сабжу <br>&gt;&gt;http://www.intuitive.sk/fflib/post/how-to-make-youtube-with-fflib-net.aspx <br>&gt;<br>&gt;ужс, зачем дотнеты? Не вчитывалась внимательно... <br><br>там суть не в дотнетах, а в описании самого принципа (см. картинку ))<br> https://www.opennet.me/openforum/vsluhforumID13/652.html#20 Thu, 06 May 2010 11:03:49 GMT &gt;[оверквотинг удален]<br>&gt;<br>&gt;Единственное, что может ухудшиться, это количество переключений контекста, но оно все равно <br>&gt;составляет доли процента от общего времени, да и кодировать Вы будете <br>&gt;не в 100-200 потоков, а в 1-2, так что этим можно <br>&gt;пренебречь. <br>&gt;<br>&gt;&gt;перенеся процесс на отдельный физ.сервер я избавляюсь от лишних головняков, получаю стабильность. <br>&gt;&gt;В будущем, планирую ставить ещё сервера кодирования с возможностью кодировать 1 <br>&gt;&gt;ролик на нескольких машинах одновременно. Софт под эту задачу написан на <br>&gt;&gt;70% <br><br>т.о. вы предлагаете и www-запросы, и кодирование выполнять на одном дорогом физическом сервере? а если с ним что случиться? в моём варианте, я просто меняю упавший сервер (который стоит куда меньше), заливаю бэкап и всё продолжает работать<br><br>виртуализация, бесспорно, вещь хорошая, но в моём случае она только добавляет ряд хлопот и снижает стабильность<br> https://www.opennet.me/openforum/vsluhforumID13/652.html#19 Thu, 06 May 2010 11:03:16 GMT &gt;линк по сабжу <br>&gt;http://www.intuitive.sk/fflib/post/how-to-make-youtube-with-fflib-net.aspx <br><br>ужс, зачем дотнеты? Не вчитывалась внимательно... <br>