The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"Twitter заявил о скором открытии кода системы Storm"
Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Изначальное сообщение [ Отслеживать ]

"Twitter заявил о скором открытии кода системы Storm"  +/
Сообщение от opennews (??) on 06-Авг-11, 14:09 
Разработчики сервиса Twitter заявили (http://engineering.twitter.com/2011/08/storm-is-coming-more-...) о решении открыть исходные тексты системы Storm, используемой для анализа больших потоков данных. Код планируется открыть 19 сентября во время проведения конференции Strange Loop. Задержка с открытием кода объясняется необходимостью приведения в порядок документации и подготовке серии руководств для быстрого внедрения системы.


Storm представляет собой распределенную и отказоустойчивую систему обработки неструктурированных постоянно обновляемых потоков данных (обработка сложных событий - Complex Event Processing (http://en.wikipedia.org/wiki/Complex_Event_Processing)). Функциональность Storm сравнивается с платформой Hadoop, при этом ключевым отличием является то, что данные обрабатываются в реальном режиме времени. В качестве примера использования Storm приводится анализ непрерывных потоков данных, таких как миллионы лент в Twitter.

В отличие от традицион...

URL: http://engineering.twitter.com/2011/08/storm-is-coming-more-...
Новость: http://www.opennet.dev/opennews/art.shtml?num=31414

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения по теме [Сортировка по времени | RSS]


1. "Twitter заявил о скором открытии кода системы Storm"  –8 +/
Сообщение от Аноним (??) on 06-Авг-11, 14:09 
> ZeroMQ

Эрлангисты в пролёте.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

2. "Twitter заявил о скором открытии кода системы Storm"  –1 +/
Сообщение от all_glory_to_the_hypnotoad (ok) on 06-Авг-11, 14:32 
чем в пролёте?
Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

9. "Twitter заявил о скором открытии кода системы Storm"  +/
Сообщение от Crazy Alex (ok) on 07-Авг-11, 02:00 
Собственно, если у них реальное время, параллельная обработка в кластере, Closure (т.е. функциональный язык), ZeroMQ и автоматическое обновление кода - то действительно остаётся только удивляться, почему не Erlang - это для него просто классические условия из учебника.
Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

12. "(offtopic) Erlang miniconf"  +/
Сообщение от Michael Shigorin email(ok) on 07-Авг-11, 16:11 
> Собственно, если у них реальное время, параллельная обработка в кластере, Closure (т.е.
> функциональный язык), ZeroMQ и автоматическое обновление кода - то действительно остаётся
> только удивляться, почему не Erlang - это для него просто классические
> условия из учебника.

BTW интересно кому пообщаться с разработчиками Erlang?  Около осенней конференции OSDN (октябрь, Киев) может получиться, если вдруг многим.

Ответить | Правка | ^ к родителю #9 | Наверх | Cообщить модератору

13. "(offtopic) Erlang miniconf"  +/
Сообщение от Crazy Alex (ok) on 07-Авг-11, 22:28 
мне интересно было бы
Ответить | Правка | ^ к родителю #12 | Наверх | Cообщить модератору

14. "(offtopic) Erlang miniconf"  +/
Сообщение от Michael Shigorin email(ok) on 08-Авг-11, 01:24 
> мне интересно было бы

Общаемся с коллегами, надеюсь скоро уж анонсировать конференцию.

Ответить | Правка | ^ к родителю #13 | Наверх | Cообщить модератору

20. "(offtopic) Erlang miniconf confirmed (Kiev, Oct 2, 2011)"  +/
Сообщение от Michael Shigorin email(ok) on 21-Сен-11, 19:33 
Мужики из Erlang Solutions сделают два доклада 1 октября на конференции OSDN:
http://conference.osdn.org.ua/ru/report/list/
и проведут бесплатный четырёхчасовой ознакомительный семинар на следующий день:
http://conference.osdn.org.ua/ru/about/
Ответить | Правка | ^ к родителю #13 | Наверх | Cообщить модератору

15. "Twitter заявил о скором открытии кода системы Storm"  +/
Сообщение от Sw00p aka Jerom on 08-Авг-11, 01:29 
вся прелесть эрлангистов в том что и рас плюнуть написать библиотечку

пс: зря вы недооцениваете эрланг

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

17. "Twitter заявил о скором открытии кода системы Storm"  +1 +/
Сообщение от Аноним (??) on 08-Авг-11, 13:00 
Что-то не могу отгуглить какой мат.бэкграунд использовался. Верифицировали ли на предмет отсутствия гонок и дедлоков?
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру