forum.opennet.ru - "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." (22)

форумы

помощь

поиск

регистрация

майллист

вход/выход

слежка

"Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."

Форум Разговоры, обсуждение новостей
Вариант для распечатки		Пред. тема \| След. тема
Изначальное сообщение		[ Отслеживать ]

"Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
Сообщение от opennews (??) on 08-Июл-15, 16:24
Анонсирован (http://www.postgresql.org/about/news/1596/) первый публичный релиз открытой СУБД PipelineDB (http://www.pipelinedb.com/), предоставляющей средства для непрерывной обработки потока данных. PipelineDB основан на кодовой базе PostgreSQL 9.4 и полностью совместим с данной СУБД. Код проекта распространяется (https://github.com/pipelinedb/pipelinedb) через GitHub. Из дополнительных возможностей PipelineDB отмечается поддержка выполнения непрерывных SQL-запросов, вероятностные структуры данных, возможность слияния непрерывно наполняемых таблиц. Основным элементом для непрерывной обработки данных выступает специальный тип представлений - CONTINUOUS VIEW, отличающийся от обычных представлений возможностью использования потоков в качестве источника данных для SELECT-запросов. По мере поступления новых данных в потоке, выдаваемый представлением вывод непрерывно обновляется. В качестве примеров областей применения непрерывных запросов можно отметить отслеживание в реальном времени активности в логах и оценка выполнения периодического опроса датчиков. URL: http://www.postgresql.org/about/news/1596/ Новость: http://www.opennet.dev/opennews/art.shtml?num=42582
Ответить \| Правка \| Cообщить модератору

Оглавление

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 16:24 , 08-Июл-15, (1) –8

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 16:52 , 08-Июл-15, (2) +5

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 12:16 , 09-Июл-15, (15)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., rob pike, 06:54 , 10-Июл-15, (16)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., anonymous, 17:53 , 08-Июл-15, (3)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 18:06 , 08-Июл-15, (4) +4

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Crazy Alex, 18:48 , 08-Июл-15, (6) +4

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., rob pike, 06:55 , 10-Июл-15, (17)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Crazy Alex, 18:47 , 08-Июл-15, (5)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 19:21 , 08-Июл-15, (7) +4

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 22:07 , 08-Июл-15, (10)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., rob pike, 07:00 , 10-Июл-15, (18)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 21:38 , 08-Июл-15, (8) –1

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 22:38 , 08-Июл-15, (11) +1

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 18:43 , 10-Июл-15, (20) –1

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., rob pike, 23:23 , 10-Июл-15, (22)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., rob pike, 07:01 , 10-Июл-15, (19)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 22:07 , 08-Июл-15, (9) –2

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 22:39 , 08-Июл-15, (12) +1

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Старшина Кириллов, 23:14 , 08-Июл-15, (13) +1

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 03:44 , 09-Июл-15, (14)

Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..., Аноним, 15:06 , 21-Июл-15, (23)

Сообщения по теме [Сортировка по времени | RSS]

1. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." –8 +/–

Сообщение от Аноним (??) on 08-Июл-15, 16:24

> В качестве примеров областей применения непрерывных запросов можно отметить отслеживание в реальном времени активности в логах и оценка выполнения периодического опроса датчиков.
SQL головного мозга.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

2. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +5 +/–

Сообщение от Аноним (??) on 08-Июл-15, 16:52

Терпимее надо быть. Для простых случаев - вполне нормально, взял кучу датчиков и сделал select average(temp), min(temp), max(temp) from ..., вместо написания полной программы сбора и обработки на чем-то низкоуровневом.

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

15. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от Аноним (??) on 09-Июл-15, 12:16

select min() ведь не вернёт результат, пока поток данных не закончится.

Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

16. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от rob pike on 10-Июл-15, 06:54

Откройте для себя window functions. Начните с lag.

Ответить | Правка | ^ к родителю #15 | Наверх | Cообщить модератору

3. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от anonymous (??) on 08-Июл-15, 17:53

Вот реальный SQL головного мозга: https://osquery.io/

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

4. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +4 +/–

Сообщение от Аноним (??) on 08-Июл-15, 18:06

Лучше SQL головного мозга, чем NoSQL пустого черепа.

Ответить | Правка | ^ к родителю #3 | Наверх | Cообщить модератору

6. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +4 +/–

Сообщение от Crazy Alex (ok) on 08-Июл-15, 18:48

Проблема с пустым черепом таки не в том, что там NoSQL

Ответить | Правка | ^ к родителю #4 | Наверх | Cообщить модератору

17. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от rob pike on 10-Июл-15, 06:55

Но с NoSQL проблем становится уже две.

Ответить | Правка | ^ к родителю #6 | Наверх | Cообщить модератору

5. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от Crazy Alex (ok) on 08-Июл-15, 18:47

Реализация - странная, идея - хорошая. Унификация интерфейса - это хорошо и правильно.

Ответить | Правка | ^ к родителю #3 | Наверх | Cообщить модератору

7. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +4 +/–

Сообщение от Аноним (??) on 08-Июл-15, 19:21

А ты не сравнивай логи на своей домашней генточке и тысячу-полторы сообщений в секунду со всей сети. И почитай заодно значение слова «пример».

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

10. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от Аноним (??) on 08-Июл-15, 22:07

Я все правильно прочитал: "Пример SQL`я головного мозга". Но здесь наверно можно еще вылечить, а то я вот видел как люди SQL-серверы юзают для всего подряд: в качестве эдакого RabbitMQ, в качестве Redis. В этом примере вот rrdtool.

Ответить | Правка | ^ к родителю #7 | Наверх | Cообщить модератору

18. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от rob pike on 10-Июл-15, 07:00

Ну если, как с PgQ, получается сильно лучше кролика - так почему бы нет.

Ответить | Правка | ^ к родителю #10 | Наверх | Cообщить модератору

8. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." –1 +/–

Сообщение от Аноним (??) on 08-Июл-15, 21:38

Реквестую добавление фичи непостредственно в апстрим постгреса.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

11. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +1 +/–

Сообщение от Аноним (??) on 08-Июл-15, 22:38

Какой фичи? Триггеров на INSERT? Они и так там есть.

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

20. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." –1 +/–

Сообщение от Аноним (??) on 10-Июл-15, 18:43

> Какой фичи? Триггеров на INSERT? Они и так там есть.
..... а в нормальных СУБД были 35 лет назад.....

Ответить | Правка | ^ к родителю #11 | Наверх | Cообщить модератору

22. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от rob pike on 10-Июл-15, 23:23

> In the early 1980s, Ingres competed head-to-head with Oracle. The two products were widely regarded as the leading hardware-independent relational database implementations; they had comparable functionality, performance, market share, and pricing, and many commentators considered Ingres to be a (perhaps marginally) superior product. From around 1985, however, Ingres steadily lost market share. One reason was Oracle's aggressive marketing

Ответить | Правка | ^ к родителю #20 | Наверх | Cообщить модератору

19. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от rob pike on 10-Июл-15, 07:01

Это не надо в апстрим, это надо на CPAN, то есть http://pgxn.org

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

9. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." –2 +/–

Сообщение от Аноним (??) on 08-Июл-15, 22:07

Нафоркали и ничего не работает в upstream ...

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

12. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +1 +/–

Сообщение от Аноним (??) on 08-Июл-15, 22:39

> Нафоркали и ничего не работает в upstream ...
Когда ничего не работает - попробуйте выключить и включить компьютер.

Ответить | Правка | ^ к родителю #9 | Наверх | Cообщить модератору

13. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +1 +/–

Сообщение от Старшина Кириллов on 08-Июл-15, 23:14

Можешь виндоус переустановить для профилактики?

Ответить | Правка | ^ к родителю #12 | Наверх | Cообщить модератору

14. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от Аноним (??) on 09-Июл-15, 03:44

Попробуй.

Ответить | Правка | ^ к родителю #13 | Наверх | Cообщить модератору

23. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..." +/–

Сообщение от Аноним (??) on 21-Июл-15, 15:06

Как работает select top 1 * from ... order by name если данные постоянно наполняются? Вот их больше и больше, и топ 1 меняется со временем. Вобщем не хватает примеров и подробностей.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру

1. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	–8 +/–
Сообщение от Аноним (??) on 08-Июл-15, 16:24
> В качестве примеров областей применения непрерывных запросов можно отметить отслеживание в реальном времени активности в логах и оценка выполнения периодического опроса датчиков. SQL головного мозга.
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	2. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+5 +/–
	Сообщение от Аноним (??) on 08-Июл-15, 16:52
	Терпимее надо быть. Для простых случаев - вполне нормально, взял кучу датчиков и сделал select average(temp), min(temp), max(temp) from ..., вместо написания полной программы сбора и обработки на чем-то низкоуровневом.
	Ответить \| Правка \| ^ к родителю #1 \| Наверх \| Cообщить модератору


	15. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от Аноним (??) on 09-Июл-15, 12:16
	select min() ведь не вернёт результат, пока поток данных не закончится.
	Ответить \| Правка \| ^ к родителю #2 \| Наверх \| Cообщить модератору


	16. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от rob pike on 10-Июл-15, 06:54
	Откройте для себя window functions. Начните с lag.
	Ответить \| Правка \| ^ к родителю #15 \| Наверх \| Cообщить модератору


	3. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от anonymous (??) on 08-Июл-15, 17:53
	Вот реальный SQL головного мозга: https://osquery.io/
	Ответить \| Правка \| ^ к родителю #1 \| Наверх \| Cообщить модератору


	4. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+4 +/–
	Сообщение от Аноним (??) on 08-Июл-15, 18:06
	Лучше SQL головного мозга, чем NoSQL пустого черепа.
	Ответить \| Правка \| ^ к родителю #3 \| Наверх \| Cообщить модератору


	6. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+4 +/–
	Сообщение от Crazy Alex (ok) on 08-Июл-15, 18:48
	Проблема с пустым черепом таки не в том, что там NoSQL
	Ответить \| Правка \| ^ к родителю #4 \| Наверх \| Cообщить модератору


	17. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от rob pike on 10-Июл-15, 06:55
	Но с NoSQL проблем становится уже две.
	Ответить \| Правка \| ^ к родителю #6 \| Наверх \| Cообщить модератору


	5. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от Crazy Alex (ok) on 08-Июл-15, 18:47
	Реализация - странная, идея - хорошая. Унификация интерфейса - это хорошо и правильно.
	Ответить \| Правка \| ^ к родителю #3 \| Наверх \| Cообщить модератору


	7. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+4 +/–
	Сообщение от Аноним (??) on 08-Июл-15, 19:21
	А ты не сравнивай логи на своей домашней генточке и тысячу-полторы сообщений в секунду со всей сети. И почитай заодно значение слова «пример».
	Ответить \| Правка \| ^ к родителю #1 \| Наверх \| Cообщить модератору


	10. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от Аноним (??) on 08-Июл-15, 22:07
	Я все правильно прочитал: "Пример SQL`я головного мозга". Но здесь наверно можно еще вылечить, а то я вот видел как люди SQL-серверы юзают для всего подряд: в качестве эдакого RabbitMQ, в качестве Redis. В этом примере вот rrdtool.
	Ответить \| Правка \| ^ к родителю #7 \| Наверх \| Cообщить модератору


	18. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от rob pike on 10-Июл-15, 07:00
	Ну если, как с PgQ, получается сильно лучше кролика - так почему бы нет.
	Ответить \| Правка \| ^ к родителю #10 \| Наверх \| Cообщить модератору

8. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	–1 +/–
Сообщение от Аноним (??) on 08-Июл-15, 21:38
Реквестую добавление фичи непостредственно в апстрим постгреса.
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	11. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+1 +/–
	Сообщение от Аноним (??) on 08-Июл-15, 22:38
	Какой фичи? Триггеров на INSERT? Они и так там есть.
	Ответить \| Правка \| ^ к родителю #8 \| Наверх \| Cообщить модератору


	20. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	–1 +/–
	Сообщение от Аноним (??) on 10-Июл-15, 18:43
	> Какой фичи? Триггеров на INSERT? Они и так там есть. ..... а в нормальных СУБД были 35 лет назад.....
	Ответить \| Правка \| ^ к родителю #11 \| Наверх \| Cообщить модератору


	22. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от rob pike on 10-Июл-15, 23:23
	> In the early 1980s, Ingres competed head-to-head with Oracle. The two products were widely regarded as the leading hardware-independent relational database implementations; they had comparable functionality, performance, market share, and pricing, and many commentators considered Ingres to be a (perhaps marginally) superior product. From around 1985, however, Ingres steadily lost market share. One reason was Oracle's aggressive marketing
	Ответить \| Правка \| ^ к родителю #20 \| Наверх \| Cообщить модератору


	19. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от rob pike on 10-Июл-15, 07:01
	Это не надо в апстрим, это надо на CPAN, то есть http://pgxn.org
	Ответить \| Правка \| ^ к родителю #8 \| Наверх \| Cообщить модератору

9. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	–2 +/–
Сообщение от Аноним (??) on 08-Июл-15, 22:07
Нафоркали и ничего не работает в upstream ...
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	12. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+1 +/–
	Сообщение от Аноним (??) on 08-Июл-15, 22:39
	> Нафоркали и ничего не работает в upstream ... Когда ничего не работает - попробуйте выключить и включить компьютер.
	Ответить \| Правка \| ^ к родителю #9 \| Наверх \| Cообщить модератору


	13. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+1 +/–
	Сообщение от Старшина Кириллов on 08-Июл-15, 23:14
	Можешь виндоус переустановить для профилактики?
	Ответить \| Правка \| ^ к родителю #12 \| Наверх \| Cообщить модератору


	14. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
	Сообщение от Аноним (??) on 09-Июл-15, 03:44
	Попробуй.
	Ответить \| Правка \| ^ к родителю #13 \| Наверх \| Cообщить модератору

23. "Первый выпуск PipelineDB, СУБД для непрерывной обработки пот..."	+/–
Сообщение от Аноним (??) on 21-Июл-15, 15:06
Как работает select top 1 * from ... order by name если данные постоянно наполняются? Вот их больше и больше, и топ 1 меняется со временем. Вобщем не хватает примеров и подробностей.
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору