Вариант для распечатки		Пред. тема | След. тема
Форум Разговоры, обсуждение новостей
Изначальное сообщение		[ Отслеживать ]

"Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
Сообщение от opennews (ok) on 15-Май-17, 21:51
Компания MapD Technologies объявила (http://www.prnewswire.com/news-releases/mapd-technologies-op...) об открытии исходных текстов СУБД MapD Core (https://www.mapd.com/products/core/), обеспечивающей создание хранилища  в оперативной памяти (IMDB - in-memory database). СУБД поддерживает SQL и оптимизирована для решения задач по анализу и визуализации данных. Код написан на языках C++ и Go, и распространяется (https://github.com/mapd/mapd-core) под лицензией Apache 2.0. Особенностью MapD Core является задействование GPU (поддерживается NVIDIA CUDA) для ускорения анализа данных. Отмечается, что обработка данных на стороне GPU позволяет за миллисекунды выполнять запросы, охватывающие миллиарды строк, что на порядок быстрее, чем можно добиться от самых быстрых решений на основе CPU. Например, на системе с несколькими современными видеокартами можно добиться пропускной способности при работе с видеопамятью на уровне 6 TB/sec, что более чем в  40 раз быстрее, чем при работе с памятью на обычном сервере. Если размер хранимых данных сопоставим с суммарным размером видеопамяти (VRAM) всех GPU, то  данные хранятся (https://www.mapd.com/faq/) только в видеопамяти. В противном случае видеопамять всех имеющихся GPU используется как низкоуровневый кэш, в котором поддерживается набор столбцов, наиболее часто востребованных в запросах, а для обработки сложных запросов применяется комбинированная схема, в которой параллельно используются CPU и GPU. Для экономии памяти данные хранятся в сжатом виде. Общий размер хранилища может многократно превышать размер видеопамяти и ограничен лишь возможностями по наращиванию ОЗУ. Но подобный комбинированный подход медленнее, поэтому для достижения наивысшей производительности рекомендуется, чтобы все данные вмещались в видеопамять. Для сохранения состояния БД между перезапусками возможно поддержание актуального архива данных на SSD-накопителях. Запросы оформляются на обычном SQL. Поддерживается создание фильтров, группировка, агрегирование данных, слияния запросов (join). Каждый SQL-запрос компилируется с использованием JIT-компилятора  в форму, пригодную для выполнения на GPU NVIDIA, а также в вид машинных инструкций для CPU. Такой подход, основанный на идее компиляции SQL в готовый к исполнению обработчик, позволяет обойтись без интерпретаторов и планировщиков запросов. При обработке данных применяется массовое распараллеливание операций, что позволяет добиться максимальной производительности  без необходимости использования индексов (перебор огромным числом параллельно выполняемых потоков выполняется быстрее, чем при использовании индексов). Для подсоединения к СУБД поддерживаются интерфейсы JDBC, ODBC, Apache Thrift, Kafka и Sqoop. MapD также предоставляет встроенный движок отрисовки, позволяющий  визуализировать результаты выполнения запросов   в виде PNG-изображений на стороне СУБД (для визуализации на стороне клиента требуется передача больших объёмов данных по сети).  В случае необходимости создания больших хранилищ или для обеспечения отказоустойчивости предоставляются средства для развёртывания распределённых конфигураций. При этом движок визуализации, компоненты для создании кластерных конфигураций, а также драйверы  ODBC и LDAP остаются закрытыми и доступны только в коммерческой редакции MapD Analytics Platform Enterprise Edition. URL: https://www.mapd.com/blog/2017/05/08/mapd-open-sources-gpu-p.../ Новость: http://www.opennet.dev/opennews/art.shtml?num=46553
Ответить | Правка | Cообщить модератору

Сообщения по теме

[Сортировка по времени | RSS]

1. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+7 +/–
Сообщение от A.Stahl (ok) on 15-Май-17, 21:51
Фигня! Хочу чтобы БД хранила данные в буфере клавиатуры! Сколько там в 8042? Байт 16 точно есть.
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	2. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–2 +/–
	Сообщение от Аноним (??) on 15-Май-17, 21:59
	NVIDIA GEFORCE GTX 1080 поставляется с 64Гб видеопамяти.
	Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

	4. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от RazrFalcon (ok) on 15-Май-17, 22:09
	Даже не близко.
	Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

	6. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от kachsheev (ok) on 15-Май-17, 22:15
	> 64 Гб. Пруф модели будет? На ямаркете есть только с 11264 Мб.
	Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

	11. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от PSV on 15-Май-17, 22:52
	"Заправь плечи" у титанаХ этой линейки куда как меньше.
	Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

	31. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+2 +/–
	Сообщение от Это я on 16-Май-17, 08:57
	при этом в задачи памяти типа gddr не входит контроль и обеспечение целостности данных.
	Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

	44. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от Аноним (??) on 16-Май-17, 16:45
	nvidia говорит что опционально включаемо начиная с fermi на tesla 20x говорит что кэш и регистры автоматически ecc
	Ответить | Правка | ^ к родителю #31 | Наверх | Cообщить модератору

	17. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+1 +/–
	Сообщение от all_glory_to_the_hypnotoad (ok) on 16-Май-17, 01:18
	Бывают разные, даже с процессором и около 64к памяти.
	Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

	43. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от Аноним (??) on 16-Май-17, 16:28
	Есть радеоны с терабайтным SSD на борту. Луркай Radeon Pro SSG. Ссылка: http://www.amd.com/Documents/Radeon-Pro-SSG-Technical-Brief.pdf
	Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

3. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
Сообщение от Аноним (??) on 15-Май-17, 22:07
> СУБД MapD Core, использующей GPU для хранения и обработки данных, поддерживает SQL Всякие куды, шейдеры, вулканы теперь не нужны. Теперь пикселя считает база! Ждем ААА игры на SQL!
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

5. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+13 +/–
Сообщение от Crazy Alex (ok) on 15-Май-17, 22:12
Ну и откуда петросяновщина? Вроде ж уже все в курсе, что "видеокарты" - это такие мощные параллельные считалки чего попало?
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	9. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+6 +/–
	Сообщение от Аноним (??) on 15-Май-17, 22:37
	Увидели знакомые слова "СУБД" и "GPU" в непривычной связке, шаблон порвало, вот и начали "хохмить" (а по факту демонстрировать свою неосведомленность; по уровню комментариев видно, что их авторы не удосужились ну хотя бы прочитать статью "CUDA" в википедии).
	Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

	14. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–2 +/–
	Сообщение от EHLO on 16-Май-17, 00:14
	> Ну и откуда петросяновщина? Вроде ж уже все в курсе, что "видеокарты" > - это такие малонужные асики, которые умеют немного майнить и запускать иоба, но их покупку нужно как-то обосновать руководству/родителям.
	Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

	15. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от Аноним (??) on 16-Май-17, 00:28
	видяха не асик
	Ответить | Правка | ^ к родителю #14 | Наверх | Cообщить модератору

	37. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+1 +/–
	Сообщение от ano (??) on 16-Май-17, 11:01
	пруф?
	Ответить | Правка | ^ к родителю #15 | Наверх | Cообщить модератору

	41. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
	Сообщение от bircoph (ok) on 16-Май-17, 14:58
	> пруф? - электровоз — не самолёт - пруф?
	Ответить | Правка | ^ к родителю #37 | Наверх | Cообщить модератору

	48. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+1 +/–
	Сообщение от ano (??) on 16-Май-17, 20:20
	электровоз от самолета можно визуально отличить. ты без рентгена и не имея исходников фирмвари, которой прошиваются видяхи умеешь отличить асик или нет?! да ты супермен!
	Ответить | Правка | ^ к родителю #41 | Наверх | Cообщить модератору

	52. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
	Сообщение от Ordu (ok) on 17-Май-17, 08:57
	Да ладно... Ты не можешь визуально отличить асик от видеокарты?
	Ответить | Правка | ^ к родителю #48 | Наверх | Cообщить модератору

	59. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от ano (??) on 18-Май-17, 23:01
	тёплое от мягкого... а ну ка, умник, скажи что где изображено? http://i.imgur.com/B5rPveu.png где ASIC где GPU - а где CPU, если что?!
	Ответить | Правка | ^ к родителю #52 | Наверх | Cообщить модератору

	61. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от Ordu (ok) on 19-Май-17, 00:15
	> тёплое от мягкого... > а ну ка, умник, скажи что где изображено? > http://i.imgur.com/B5rPveu.png > где ASIC где GPU - а где CPU, если что?! Микросхемы какие-то. Среди них нет видеокарты.
	Ответить | Правка | ^ к родителю #59 | Наверх | Cообщить модератору

	62. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от Аноним (??) on 20-Май-17, 20:17
	Подсказка: У асика нет VGA разьема
	Ответить | Правка | ^ к родителю #59 | Наверх | Cообщить модератору

	53. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
	Сообщение от Ordu (ok) on 17-Май-17, 08:58
	> электровоз от самолета можно визуально отличить. > ты без рентгена и не имея исходников фирмвари, которой прошиваются видяхи умеешь > отличить асик или нет?! > да ты супермен! А материнскую плату от клавиатуры ты можешь отличить визуально?
	Ответить | Правка | ^ к родителю #48 | Наверх | Cообщить модератору

	18. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от all_glory_to_the_hypnotoad (ok) on 16-Май-17, 01:22
	>  Вроде ж уже все в курсе, что "видеокарты" - это такие мощные параллельные считалки чего попало? На самом деле нет, не чего попало. И таки да, всем известно что на GPGPU (а не любое GPU) можно эффективно считать только ограниченный круг задач.
	Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

	21. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+2 +/–
	Сообщение от Crazy Alex (ok) on 16-Май-17, 03:20
	Понятно, что я преувеличил слегка для простоты, но то, что выше - совсем уж ярый гон.
	Ответить | Правка | ^ к родителю #18 | Наверх | Cообщить модератору

	30. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+2 +/–
	Сообщение от ыы on 16-Май-17, 08:35
	> Ну и откуда петросяновщина? Вроде ж уже все в курсе, что "видеокарты" > - это такие мощные параллельные считалки чего попало? Невежество в данном вопросе колоссальное у людей думающих что мощные параллельные считалки чего попало (на самом деле далеко не чего попало) будут хорошо работать реализуя например бизнес-логику реляционных баз данных. То что сказано в новости- узкий круг специфичных задач...
	Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

	33. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+1 +/–
	Сообщение от Аноним (??) on 16-Май-17, 09:38
	В новости нигде и не сказано, что эту штуку позиционируют как конкурента "СУБД общего назначения". Да, это нишевый инструмент. И что? Из-за чего бурление? Из-за того, что ребята написали интересную штуковину да ещё и открыли код?
	Ответить | Правка | ^ к родителю #30 | Наверх | Cообщить модератору

7. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–2 +/–
Сообщение от Аноним (??) on 15-Май-17, 22:17
Правильно ! Да здравствуют БД на GPU и графика на CPU !
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	13. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+2 +/–
	Сообщение от EHLO on 16-Май-17, 00:06
	>Правильно ! Да здравствуют БД на GPU и графика на CPU ! и фреймбуффер на SSD
	Ответить | Правка | ^ к родителю #7 | Наверх | Cообщить модератору

16. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+1 +/–
Сообщение от ыы on 16-Май-17, 00:36
срочно выкидываем все стойки с блэйдами и ставим писюки набитые видюшками...
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	19. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от all_glory_to_the_hypnotoad (ok) on 16-Май-17, 01:24
	Так уже давно делают, см. из чего сделаны разные кластера из торNNN.
	Ответить | Правка | ^ к родителю #16 | Наверх | Cообщить модератору

	22. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–3 +/–
	Сообщение от Crazy Alex (ok) on 16-Май-17, 03:24
	Вот, теперь твой черёд капитаном Очевидность поработать... Могу тоже прицепиться - туда не совсем писюки пихают и не совсем с видюшками (а таки с GPGPU)... но, опять же, в сравнении с явным невежеством товарища выше - не принципиально.
	Ответить | Правка | ^ к родителю #19 | Наверх | Cообщить модератору

	26. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от ыы on 16-Май-17, 08:15
	да, явное невежество товарищей не понимающих разницы между вычислительным кластером и инфраструктурой для баз данных - на лицо :)
	Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

	27. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
	Сообщение от ыы on 16-Май-17, 08:18
	> Так уже давно делают, см. из чего сделаны разные кластера из торNNN. и на скольки изэтих кластеров работают базы данных????
	Ответить | Правка | ^ к родителю #19 | Наверх | Cообщить модератору

20. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
Сообщение от АнонимХ (ok) on 16-Май-17, 02:40
Ну чего , парни ищут инвестиции, порадоваться за них надо. вон какую презентацию налабали,даже на русский перевели, не иначе, на сколковский гранд рассчитывают. Интересно, кроме синтетики, это вообще можно применить для хоть каких-то данных
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	45. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от Анона on 16-Май-17, 16:52
	Неа, более того, тот же ClickHouse для задач аналитики на CPU уделывает этого немасштабируемого монстра, ведь ему не требуется железо за котлету денег и скейлится на многие задачи он горизонтально и почти линейно.
	Ответить | Правка | ^ к родителю #20 | Наверх | Cообщить модератору

23. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
Сообщение от Аноним (??) on 16-Май-17, 04:53
Звучит, конечно, как фантастика. Ребята не юзают ни индесов, ни оптимизаторы и на каждый запрос тупо перебирают всю базу. Понятное дело, что сложную логику на gpu сложно реализовывать, но для практического использования этот метод не подойдет. Если сейчас размер бд ограничивается памятью видеокарт, то его можно применять только в очень узких задачах (в статье написано, что можно использовать базы большие, чем память видеокарт, но, если для любого запроса нужно все данные пропускать через память карточки, то более традиционные in-memory бд с оптмизациями будут намного выигрышнее). Хотя перспективы, конечно, большие.
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	24. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
	Сообщение от лютый жабист__ on 16-Май-17, 05:35
	>Ребята не юзают ни индесов, ни оптимизаторы и на каждый запрос тупо перебирают всю базу Таких изобретателей квадратноколёсых велосипедов полно. Тоже встречал деятелей, которые полгода на си писали бизнеслогику (ну анси си же быстрый!11111) на самодельных структурах, подозреваю, что на банальных array-ях. Потом (мне) было очень смешно, когда первая попавшаяся графовая субд написанная на "тормозной жабе" порвала эту поделку как Тузика.
	Ответить | Правка | ^ к родителю #23 | Наверх | Cообщить модератору

	28. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+2 +/–
	Сообщение от Аноним (??) on 16-Май-17, 08:26
	Опять ты свои байки рассказываешь :) >когда первая попавшаяся графовая субд Что за БД? Сколько в нее угрохали сил и времени? Тоже полгода потратили? Не верю.
	Ответить | Правка | ^ к родителю #24 | Наверх | Cообщить модератору

	38. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
	Сообщение от лютый жабист__ on 16-Май-17, 12:51
	>Что за БД? Сколько в нее угрохали сил и времени? Читать глазами, а не Ж не пробовал? Вместо велосипеда на си взяли готовую субд (название не вижу смысла писать) и оно оказалось быстрее в тысячи раз. Уверен, что на не локалхостовых проектах MapD сольёт банальной ну например Кассандре.
	Ответить | Правка | ^ к родителю #28 | Наверх | Cообщить модератору

	46. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+3 +/–
	Сообщение от Аноним84701 (ok) on 16-Май-17, 17:00
	> Уверен, что на не локалхостовых проектах MapD сольёт банальной ну например Кассандре. Отличная отмазка. Если что, то проект "недостаточно нелокалхостен", да? > и оно оказалось быстрее в тысячи раз. Ну, тут конечно не тысяча, а только четверь, зато вполне конкретно, а не "название не вижу смысла писать" ... https://www.reddit.com/r/programming/comments/2svijo/command.../ > Command-line tools can be 235x faster than your Hadoop cluster И что теперь? Выкидываем все хадопы или все же задумываемся о рукопопии? Хотя да, если продолжать традиции опеннета: Быстрее в 235 раз, Карл! хадоп == жабка, юникстулс == си, 235х ... обтекайте. :)
	Ответить | Правка | ^ к родителю #38 | Наверх | Cообщить модератору

	47. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+2 +/–
	Сообщение от angra (ok) on 16-Май-17, 18:35
	> хадоп == жабка, юникстулс == си, > 235х ... обтекайте. :) Там еще веселее, основную работу делает код на awk, так что это awk в 235 раз быстрее жабы :)
	Ответить | Правка | ^ к родителю #46 | Наверх | Cообщить модератору

	51. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
	Сообщение от лютый жабист__ on 17-Май-17, 06:15
	1ГБ тестовых данных для распределенных вычислений, это мощно! Типичный кульсисоп локалхоста опоносил Хадуп. Другие кульсисопы бездумно разносят помои дальше по инету... А караван идёт себе дальше... Кстати, Хадуп был моден 10 лет назад, щас рулит Spark.
	Ответить | Правка | ^ к родителю #46 | Наверх | Cообщить модератору

Часть нити удалена модератором

	60. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от Led (ok) on 18-Май-17, 23:21
	.
	Ответить | Правка | ^ к родителю #59 | Наверх | Cообщить модератору

25. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
Сообщение от economist on 16-Май-17, 08:13
А вот встроенный движок отрисовки диаграмм в PNG - зачётно. Сколько приходится городить костылей в бизнес приложения из-за этого. GnuPlot, MatPlotlib, RRDTools, GoogleChart и еще с десяток - так или иначе приходится изучать и лепить... в 80% случаев ради десятка простых диаграмм. Хочу в SQLite такую штуку. А в целом у современных компьютеров, продающихся в розницу - 50% цены это видюха. Грех не задействовать это добро. Вот в LibreOffice - включенный OpenCL реально помогает в расчетах больших таблиц, ускорение расчета в 4-8 раз.
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	29. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от ыы on 16-Май-17, 08:30
	> А вот встроенный движок отрисовки диаграмм в PNG - зачётно. Сколько приходится ненужная чушь > городить костылей в бизнес приложения из-за этого. GnuPlot, MatPlotlib, RRDTools, GoogleChart > и еще с десяток - так или иначе приходится изучать и > лепить... в 80% случаев ради десятка простых диаграмм. Хочу в SQLite > такую штуку. Возьмите готовый BI или его бесплатный аналог и не мучайтесь. > А в целом у современных компьютеров, продающихся в розницу - 50% цены > это видюха. Грех не задействовать это добро. Вот в LibreOffice - > включенный OpenCL реально помогает в расчетах больших таблиц, ускорение расчета в > 4-8 раз. Задействовать то можно.. но чтоб оно было прозрачно и без необходимости переустанавливать инфраструктуру.
	Ответить | Правка | ^ к родителю #25 | Наверх | Cообщить модератору

32. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
Сообщение от Аноним (??) on 16-Май-17, 09:00
Вроде постгрес уже давно обещали видюхами ускорять, правда я забросил следить за этим делом
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

34. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+1 +/–
Сообщение от Аноним (??) on 16-Май-17, 09:39
CUDA - проприетарщина, поэтому опенсорсу толку от этого ноль.
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	35. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
	Сообщение от Аноним (??) on 16-Май-17, 09:48
	Практически всё железо проприетарщина. Но Вы же сюда не с "Паскалины" пишет.
	Ответить | Правка | ^ к родителю #34 | Наверх | Cообщить модератору

36. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
Сообщение от Sen on 16-Май-17, 09:56
Хорошо, для анализа видео/аудио информации самое оно! Можно писать систему наблюдения и безопасности на ней.
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

39. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
Сообщение от adolfus (ok) on 16-Май-17, 14:17
А что, GPU уже научились работать с целочисленными данными, битовыми и символьными строками wchаr/wstring? Или о каких данных идет речь?
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	40. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–2 +/–
	Сообщение от Crazy Alex (ok) on 16-Май-17, 14:28
	О тех, с которыми они работать умеют, вестимо. Из того, что я видел - та же финансовая статистика во float ложится отлично, для аналитики там куча однообразных расчётов, так что CPU-bound выходит, а объёмы хоть и приличные, но довольно предсказуемые, из оперативки заливать в "горячий кэш" на видеокарте - вполне реально.
	Ответить | Правка | ^ к родителю #39 | Наверх | Cообщить модератору

	58. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
	Сообщение от Hubbitus (ok) on 18-Май-17, 22:46
	Полагаю это может быть полезно для алгоритмов Machine Learning. Где скорее важно работать не с текстом, а с всевозможными алгоритмами, использующими его векторизацию тем или иным способом. Например TF-IDF, Word2Vec и другие. И мы получаем какраз представление текста как разреженного вектора float высокой размерности (легко размерность может быть до миллиона, если текст не слишком короткий). А тут уже, скажем для алгоритмов кластеризации, где нужно считать расстояния между разреженными векторами GPU какраз должно быть, теоретически, весьма эффективно.
	Ответить | Правка | ^ к родителю #39 | Наверх | Cообщить модератору

42. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+1 +/–
Сообщение от Аноним (??) on 16-Май-17, 15:47
а как там у видеокарт с памятью в плане коррекции ошибок? где то читал там память в этом смысле даже хуже чем обычная, важна скорость и ошибки там не исправляются.
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

	49. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от Аноним (??) on 16-Май-17, 22:14
	вы часто сталкивались с проблемами решаемыми коррекцией ошибок памяти?
	Ответить | Правка | ^ к родителю #42 | Наверх | Cообщить модератору

	50. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
	Сообщение от mixaly4 on 17-Май-17, 00:54
	Одно время занимался отладкой в специфичном ядре этой самой корекции. Вродебы польза есть.
	Ответить | Правка | ^ к родителю #49 | Наверх | Cообщить модератору

55. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	–1 +/–
Сообщение от Вареник on 17-Май-17, 17:37
Идя хорошая. Рано или поздно комп начнет строиться вокруг пула процессоров (GPU), а не ЦП. ЦП уже сейчас работает как IO периферия для GPU.
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

63. "Открыт код СУБД MapD Core, использующей GPU для хранения и о..."	+/–
Сообщение от Al (??) on 22-Май-17, 06:50
круто! а про перебор данных для обучения нейросетей только я подумал? там таких объемов что в память влезает может хватить вполне
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема