URL: https://www.opennet.me/cgi-bin/openforum/vsluhboard.cgi
Форум: vsluhforumID3
Нить номер: 79575
[ Назад ]

Исходное сообщение
"Twitter заявил о скором открытии кода системы Storm"

Отправлено opennews , 06-Авг-11 14:09 
Разработчики сервиса Twitter заявили (http://engineering.twitter.com/2011/08/storm-is-coming-more-... о решении открыть исходные тексты системы Storm, используемой для анализа больших потоков данных. Код планируется открыть 19 сентября во время проведения конференции Strange Loop. Задержка с открытием кода объясняется необходимостью приведения в порядок документации и подготовке серии руководств для быстрого внедрения системы.


Storm представляет собой распределенную и отказоустойчивую систему обработки неструктурированных постоянно обновляемых потоков данных (обработка сложных событий - Complex Event Processing (http://en.wikipedia.org/wiki/Complex_Event_Processing)). Функциональность Storm сравнивается с платформой Hadoop, при этом ключевым отличием является то, что данные обрабатываются в реальном режиме времени. В качестве примера использования Storm приводится анализ непрерывных потоков данных, таких как миллионы лент в Twitter.

В отличие от традицион...

URL: http://engineering.twitter.com/2011/08/storm-is-coming-more-...
Новость: http://www.opennet.me/opennews/art.shtml?num=31414


Содержание

Сообщения в этом обсуждении
"Twitter заявил о скором открытии кода системы Storm"
Отправлено Аноним , 06-Авг-11 14:09 
> ZeroMQ

Эрлангисты в пролёте.


"Twitter заявил о скором открытии кода системы Storm"
Отправлено all_glory_to_the_hypnotoad , 06-Авг-11 14:32 
чем в пролёте?

"Twitter заявил о скором открытии кода системы Storm"
Отправлено Crazy Alex , 07-Авг-11 02:00 
Собственно, если у них реальное время, параллельная обработка в кластере, Closure (т.е. функциональный язык), ZeroMQ и автоматическое обновление кода - то действительно остаётся только удивляться, почему не Erlang - это для него просто классические условия из учебника.

"(offtopic) Erlang miniconf"
Отправлено Michael Shigorin , 07-Авг-11 16:11 
> Собственно, если у них реальное время, параллельная обработка в кластере, Closure (т.е.
> функциональный язык), ZeroMQ и автоматическое обновление кода - то действительно остаётся
> только удивляться, почему не Erlang - это для него просто классические
> условия из учебника.

BTW интересно кому пообщаться с разработчиками Erlang?  Около осенней конференции OSDN (октябрь, Киев) может получиться, если вдруг многим.


"(offtopic) Erlang miniconf"
Отправлено Crazy Alex , 07-Авг-11 22:28 
мне интересно было бы

"(offtopic) Erlang miniconf"
Отправлено Michael Shigorin , 08-Авг-11 01:24 
> мне интересно было бы

Общаемся с коллегами, надеюсь скоро уж анонсировать конференцию.


"(offtopic) Erlang miniconf confirmed (Kiev, Oct 2, 2011)"
Отправлено Michael Shigorin , 21-Сен-11 19:33 
Мужики из Erlang Solutions сделают два доклада 1 октября на конференции OSDN:
http://conference.osdn.org.ua/ru/report/list/
и проведут бесплатный четырёхчасовой ознакомительный семинар на следующий день:
http://conference.osdn.org.ua/ru/about/

"Twitter заявил о скором открытии кода системы Storm"
Отправлено Sw00p aka Jerom , 08-Авг-11 01:29 
вся прелесть эрлангистов в том что и рас плюнуть написать библиотечку

пс: зря вы недооцениваете эрланг


"Twitter заявил о скором открытии кода системы Storm"
Отправлено Аноним , 08-Авг-11 13:00 
Что-то не могу отгуглить какой мат.бэкграунд использовался. Верифицировали ли на предмет отсутствия гонок и дедлоков?