forum.opennet.ru - "Яндекс начал формирование коллекции своих открытых проектов" (54)

форумы

помощь

поиск

регистрация

майллист

вход/выход

слежка

"Яндекс начал формирование коллекции своих открытых проектов"

Форум Разговоры, обсуждение новостей
Вариант для распечатки		Пред. тема \| След. тема
Изначальное сообщение		[ Отслеживать ]

"Яндекс начал формирование коллекции своих открытых проектов"	+/–
Сообщение от opennews on 11-Ноя-10, 23:25
Компания Яндекс, с целью привлечения внимания к своим открытым проектам, начала (http://clubs.ya.ru/company/replies.xml?item_no=30753) наполнение в сервисе GitHub группы репозиториев Yandex-OpenSource (https://github.com/yandex-opensource). По утверждению представителя Яндекс, в компании развивается много открытых приложений, библиотек и готовых решений, которые как правило остаются в тени и особо не афишируются. Теперь, подобные проекты будут постепенно переноситься в репозитории GitHub и их можно будет окинуть взглядом через группу Yandex-OpenSource (https://github.com/yandex-opensource). В настоящее время в GitHub перенесены следующие проекты: - PIRE (https://github.com/dprokoptsev/pire) (Perl Incompatible Regular Expressions) - библиотека с реализацией регулярных выражений, оптимизированных для выполнения большого числа проверок для огромных объемов текста. Код PIRE был разработан для поискового робота и отличается очень высокой производительностью. Библиотека также пре... URL: http://clubs.ya.ru/company/replies.xml?item_no=30753 Новость: http://www.opennet.dev/opennews/art.shtml?num=28625
Ответить \| Правка \| Cообщить модератору

Оглавление

Яндекс начал формирование коллекции своих открытых проектов, klalafuda, 23:25 , 11-Ноя-10, (1) +3

Яндекс начал формирование коллекции своих открытых проектов, pavlinux, 03:20 , 12-Ноя-10, (10) +1

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 03:42 , 12-Ноя-10, (11) +2

Яндекс начал формирование коллекции своих открытых проектов, pavlinux, 04:32 , 12-Ноя-10, (16) –3

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 09:20 , 12-Ноя-10, (20)

Яндекс начал формирование коллекции своих открытых проектов, pavlinux, 13:40 , 12-Ноя-10, (40) –1

Яндекс начал формирование коллекции своих открытых проектов, invented, 14:53 , 12-Ноя-10, (45) +2
Яндекс начал формирование коллекции своих открытых проектов, Аноним, 22:40 , 12-Ноя-10, (61)

Яндекс начал формирование коллекции своих открытых проектов, none_first, 12:08 , 12-Ноя-10, (33)

Яндекс начал формирование коллекции своих открытых проектов, pavlinux, 13:43 , 12-Ноя-10, (41) –1

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 19:54 , 12-Ноя-10, (57)

Яндекс начал формирование коллекции своих открытых проектов, BobbieZi, 15:49 , 12-Ноя-10, (48)
Яндекс начал формирование коллекции своих открытых проектов, Аноним, 17:22 , 12-Ноя-10, (49)

Яндекс начал формирование коллекции своих открытых проектов, butcher, 10:01 , 12-Ноя-10, (27) +1
Яндекс начал формирование коллекции своих открытых проектов, davenger, 15:16 , 12-Ноя-10, (47)

Яндекс начал формирование коллекции своих открытых проектов, Anonus, 23:42 , 11-Ноя-10, (2)

Яндекс начал формирование коллекции своих открытых проектов, Alex, 12:32 , 12-Ноя-10, (36) –1

Яндекс начал формирование коллекции своих открытых проектов, Nas_tradamus, 12:47 , 12-Ноя-10, (37)
Яндекс начал формирование коллекции своих открытых проектов, Аноним, 19:52 , 12-Ноя-10, (56)

Яндекс начал формирование коллекции своих открытых проектов, XoRe, 00:03 , 13-Ноя-10, (62)

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 00:36 , 13-Ноя-10, (63)

Яндекс начал формирование коллекции своих открытых проектов, XoRe, 00:37 , 13-Ноя-10, (64)

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 03:13 , 13-Ноя-10, (65)

Яндекс начал формирование коллекции своих открытых проектов, XoRe, 02:42 , 18-Ноя-10, (74)

Яндекс начал формирование коллекции своих открытых проектов, invented, 23:48 , 11-Ноя-10, (3) –1

Яндекс начал формирование коллекции своих открытых проектов, Толстый_, 00:00 , 12-Ноя-10, (4) –1

Яндекс начал формирование коллекции своих открытых проектов, brzm, 00:02 , 12-Ноя-10, (5)

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 00:12 , 12-Ноя-10, (6) –1
Яндекс начал формирование коллекции своих открытых проектов, Анонимъ, 11:35 , 12-Ноя-10, (32)

Яндекс начал формирование коллекции своих открытых проектов, brzm, 13:41 , 13-Ноя-10, (70)

Яндекс начал формирование коллекции своих открытых проектов, Kataklysm, 00:45 , 12-Ноя-10, (7)
Яндекс начал формирование коллекции своих открытых проектов, 8288ано8288ним, 02:52 , 12-Ноя-10, (8)

Яндекс начал формирование коллекции своих открытых проектов, тигар, 09:50 , 12-Ноя-10, (22)

Яндекс начал формирование коллекции своих открытых проектов, анон, 11:03 , 12-Ноя-10, (29)

Яндекс начал формирование коллекции своих открытых проектов, тигар, 11:09 , 12-Ноя-10, (30)

Яндекс начал формирование коллекции своих открытых проектов, AMDmi3, 19:21 , 12-Ноя-10, (52)

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 03:14 , 13-Ноя-10, (66)

Яндекс начал формирование коллекции своих открытых проектов, ананим, 03:59 , 12-Ноя-10, (15)

Яндекс начал формирование коллекции своих открытых проектов, Nas_tradamus, 12:28 , 12-Ноя-10, (35)

Яндекс начал формирование коллекции своих открытых проектов, BoOgie, 09:52 , 12-Ноя-10, (24)

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 20:10 , 12-Ноя-10, (58)

Яндекс начал формирование коллекции своих открытых проектов, ДяДя, 09:54 , 12-Ноя-10, (25) +3

Яндекс начал формирование коллекции своих открытых проектов, User294, 19:34 , 12-Ноя-10, (53) –6
Яндекс начал формирование коллекции своих открытых проектов, Аноним, 03:15 , 13-Ноя-10, (67)

Яндекс начал формирование коллекции своих открытых проектов, Анонимъ, 13:47 , 12-Ноя-10, (42) +2

Яндекс начал формирование коллекции своих открытых проектов, invented, 14:58 , 12-Ноя-10, (46)

Яндекс начал формирование коллекции своих открытых проектов, alikd, 18:12 , 12-Ноя-10, (50) +1

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 19:50 , 12-Ноя-10, (54)
Яндекс начал формирование коллекции своих открытых проектов, Dvorkin, 20:16 , 12-Ноя-10, (59)

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 22:26 , 13-Ноя-10, (71)

Яндекс начал формирование коллекции своих открытых проектов, Аноним, 04:50 , 14-Ноя-10, (72)

Яндекс начал формирование коллекции своих открытых проектов, sy, 15:54 , 15-Ноя-10, (73)

Яндекс начал формирование коллекции своих открытых проектов, xv, 18:59 , 12-Ноя-10, (51)
Яндекс начал формирование коллекции своих открытых проектов, Аноним, 11:15 , 13-Ноя-10, (69)

Сообщения по теме [Сортировка по времени | RSS]

1. "Яндекс начал формирование коллекции своих открытых проектов" +3 +/–

Сообщение от klalafuda on 11-Ноя-10, 23:25

Интересно было бы PIRE поковырять. Но откуда ж на все время взять.. :(

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

10. "Яндекс начал формирование коллекции своих открытых проектов" +1 +/–

Сообщение от pavlinux (ok) on 12-Ноя-10, 03:20

У тя диск такой есть? Чтоб читал со скоростью 756,32 МБ/сек?

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

11. "Яндекс начал формирование коллекции своих открытых проектов" +2 +/–

Сообщение от Аноним (??) on 12-Ноя-10, 03:42

ZFS стрип на 3 обычных SATA дисков с lzjb компрессией на текстовых данных столько примерно и даёт.

Ответить | Правка | ^ к родителю #10 | Наверх | Cообщить модератору

16. "Яндекс начал формирование коллекции своих открытых проектов" –3 +/–

Сообщение от pavlinux (ok) on 12-Ноя-10, 04:32

> ZFS стрип на 3 обычных SATA дисков с lzjb компрессией на текстовых
> данных столько примерно и даёт.
Куда он даёт!!!
SATA на блинах, пусть даже на 10.000 rpm ну максимум 120Мб/с,
да хрен сними, пускай будет даже 200 Мб/с. :)
Ну и допустим, что есть у тебя идеальное, которого не может быть,
распаралеливание 3-х потоков по 200Мб/с. это всего 600Мб/с.
Так что пальцы тут не надо гнуть - ZFS-стрип,  lzjb, ..., FreeBSD забыл дописать. :)
SAS/SASII via FiberChanel - тогда поговорим.
Ну ладно, так уж и быть RAID из SSD

Ответить | Правка | ^ к родителю #11 | Наверх | Cообщить модератору

20. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 12-Ноя-10, 09:20

Вы еще забыли компрессию текстовых данных. Логи так вообще раз в 10 ужимаются как минимум, итого получаем 1200 Мб/с с одного диска

Ответить | Правка | ^ к родителю #16 | Наверх | Cообщить модератору

40. "Яндекс начал формирование коллекции своих открытых проектов" –1 +/–

Сообщение от pavlinux (ok) on 12-Ноя-10, 13:40

> Вы еще забыли компрессию текстовых данных. Логи так вообще раз в 10
> ужимаются как минимум, итого получаем 1200 Мб/с с одного диска
Блин, ну вы выжимали такие скорости?
Именно от, ну например, cat file | sed -e 'blah-blah-blah'.
А то Яндых напишет, а доступ к файлу будет занимать 2 секунды,
зато когда откроет, закэширует что можно и пустит в канал,
тогда да, выходим на терабайт в сек, а при повторном обращении к
кэшу, улетим до двух терабаб.


Ответить | Правка | ^ к родителю #20 | Наверх | Cообщить модератору

45. "Яндекс начал формирование коллекции своих открытых проектов" +2 +/–

Сообщение от invented on 12-Ноя-10, 14:53

pavlinux, ты ограничен в воображении, серьезно.
Те скорости которые описаны - это скорости прогона в оперативной памяти.
С какой скоростью, и главное откуда! ты запихаешь данные в оперативку, это сугубо твое личное дело.

Ответить | Правка | ^ к родителю #40 | Наверх | Cообщить модератору

61. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 12-Ноя-10, 22:40

> Именно от, ну например, cat file | sed -e 'blah-blah-blah'.
Да, именно оттуда.

Ответить | Правка | ^ к родителю #40 | Наверх | Cообщить модератору

33. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от none_first (ok) on 12-Ноя-10, 12:08

http://ru.wikipedia.org/wiki/RAID
RAID 0 - не?

Ответить | Правка | ^ к родителю #16 | Наверх | Cообщить модератору

41. "Яндекс начал формирование коллекции своих открытых проектов" –1 +/–

Сообщение от pavlinux (ok) on 12-Ноя-10, 13:43

> http://ru.wikipedia.org/wiki/RAID
> RAID 0 - не?
Оно. Только увеличение скорости не пропорционально увеличению количества дисков.

Ответить | Правка | ^ к родителю #33 | Наверх | Cообщить модератору

57. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 12-Ноя-10, 19:54

> Оно. Только увеличение скорости не пропорционально увеличению количества дисков.
На нормальных системах пропорциональное, пока контроллер и шина справляются.

Ответить | Правка | ^ к родителю #41 | Наверх | Cообщить модератору

48. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от BobbieZi on 12-Ноя-10, 15:49

(не) уважаемый. 24 SSD от самсунга в RAID0 дают  более 2 гигабайт в секунду.
учите матчасть.
З.Ы. учитывая, что вы - фома неверующий, рекомендую поискать в инете соответствующую видюху, где наглядно это показано.
З.З.Ы. Сссыль в студию? - гуглите сами.

Ответить | Правка | ^ к родителю #16 | Наверх | Cообщить модератору

49. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 12-Ноя-10, 17:22

> SATA на блинах, пусть даже на 10.000 rpm ну максимум 120Мб/с,
> да хрен сними, пускай будет даже 200 Мб/с. :)
> Ну и допустим, что есть у тебя идеальное, которого не может быть,
> распаралеливание 3-х потоков по 200Мб/с. это всего 600Мб/с.
Да, 120 MB/s один диск, три ~350.
> Так что пальцы тут не надо гнуть - ZFS-стрип,  lzjb, ...,
> FreeBSD забыл дописать. :)
Разумеется FreeBSD, еще б я серьёзные вещи на ляликсе поднимал :))
Так вот - читай внимательнее, умник. После декомпрессии 350MB/s с дисков превращаются во вполне себе 700-750MB/s поток (при этом cpu загружен на 20% максимум). Если бы мне его надо было погрепать, pire бы идеально подошел.
> SAS/SASII via FiberChanel - тогда поговорим.
> Ну ладно, так уж и быть RAID из SSD
SSD не всегда быстрее по пропускной способности. У них просто seek'ов нет.

Ответить | Правка | ^ к родителю #16 | Наверх | Cообщить модератору

27. "Яндекс начал формирование коллекции своих открытых проектов" +1 +/–

Сообщение от butcher (ok) on 12-Ноя-10, 10:01

А что, данные теперь можно только с дисков читать?

Ответить | Правка | ^ к родителю #10 | Наверх | Cообщить модератору

47. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от davenger on 12-Ноя-10, 15:16

В тексте очепятка: тестовый файл не 500Гб, а 500Мб, тест mmap()-ит этот файл и прогоняется по нему несколько раз. За первый прогон файл оказывается закешированным в памяти и после этого скорость не зависит от дисков, только от частоты скорости процессора и (в меньшей степени) пропускной способности памяти. Вот тогда достигается 750Мб/c.

Ответить | Правка | ^ к родителю #10 | Наверх | Cообщить модератору

2. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Anonus on 11-Ноя-10, 23:42

Молодцы Яндекс! Всегда в них верил.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

36. "Яндекс начал формирование коллекции своих открытых проектов" –1 +/–

Сообщение от Alex (??) on 12-Ноя-10, 12:32

Да, mirror.yandex.ru и почта у них рулят в рунете. Недавно перевёл на Яндекс свой E-mail, с mail.ru, просто чёрное и белое. Надо было сразу на Яндексе создавать.

Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

37. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Nas_tradamus (ok) on 12-Ноя-10, 12:47

> Да, mirror.yandex.ru и почта у них рулят в рунете. Недавно перевёл на
> Яндекс свой E-mail, с mail.ru, просто чёрное и белое. Надо было
> сразу на Яндексе создавать.
Я это понял еще 6 лет назад.
Сейчас мало что изменилось у mail.ru (у меня там есть доп. рабочий ящик ради уведомлений по смс).

Ответить | Правка | ^ к родителю #36 | Наверх | Cообщить модератору

56. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 12-Ноя-10, 19:52

> Да, mirror.yandex.ru
Это да, главное тем что по IPv6 доступно.
> и почта у них рулят в рунете
Ну халявная почта в принципе не может рулить, но для нищебродов свозможно.

Ответить | Правка | ^ к родителю #36 | Наверх | Cообщить модератору

62. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от XoRe (ok) on 13-Ноя-10, 00:03

> Ну халявная почта в принципе не может рулить, но для нищебродов свозможно.
Это для пользователей халявная.
А для яндекса/мейла/гугля - очень даже не халявная.
Они вкладывают в почту/антиспам/антивирус/хранилище/итд столько денег, сколько не вкладывает другая компания для своей "платной корпоративной почты".

Ответить | Правка | ^ к родителю #56 | Наверх | Cообщить модератору

63. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 13-Ноя-10, 00:36

Сказать-то что хотел?

Ответить | Правка | ^ к родителю #62 | Наверх | Cообщить модератору

64. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от XoRe (ok) on 13-Ноя-10, 00:37

> Сказать-то что хотел?
Бред говорите - так, понятно?)

Ответить | Правка | ^ к родителю #63 | Наверх | Cообщить модератору

65. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 13-Ноя-10, 03:13

Нет, не понятно. Сколько бы они в нее не вкладывали, она остаётся обычной халявной почтой, ничем не рулящей и от остальных не отличающейся.

Ответить | Правка | ^ к родителю #64 | Наверх | Cообщить модератору

74. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от XoRe (ok) on 18-Ноя-10, 02:42

> Нет, не понятно. Сколько бы они в нее не вкладывали, она остаётся
> обычной халявной почтой, ничем не рулящей и от остальных не отличающейся.
Много вы платите за почтовый ящик на корпоративном почтовом сервере?)
Та же халявная почта.

Ответить | Правка | ^ к родителю #65 | Наверх | Cообщить модератору

3. "Яндекс начал формирование коллекции своих открытых проектов" –1 +/–

Сообщение от invented on 11-Ноя-10, 23:48

PIRE супер! Рвет гугловый RE2 в несколько раз на простых регулярках.
Еще бы питоновские биндинги...

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

4. "Яндекс начал формирование коллекции своих открытых проектов" –1 +/–

Сообщение от Толстый_ on 12-Ноя-10, 00:00

Ну а что мешает написать самому? :) Я уже подумываю о биндингах к D.

Ответить | Правка | ^ к родителю #3 | Наверх | Cообщить модератору

5. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от brzm on 12-Ноя-10, 00:02

Хочется увидеть их замечательную систему мониторинга, про которую они так хорошо рассказали на Highload++. Хотя бы концепт: идея отличная.
Обещали выложить.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

6. "Яндекс начал формирование коллекции своих открытых проектов" –1 +/–

Сообщение от Аноним (??) on 12-Ноя-10, 00:12

а не zabbix ли там???Если да, то чего его ждать... zabbix.com.

Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

32. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Анонимъ on 12-Ноя-10, 11:35

> Хочется увидеть их замечательную систему мониторинга, про которую они так хорошо
> рассказали на Highload++. Хотя бы концепт: идея отличная.
ахаха. эта замечательная система мониторинга называется Zabbix.
см. http://download.yandex.ru/company/experience/rit2008/highloa... .

Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

70. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от brzm on 13-Ноя-10, 13:41

Ванильный Zabbix это не система мониторинга, а сервер сбора и вывода информации, которым единственное что можно поглядеть это красивые графики нагрузки на камень, и увидеть что все плохо уже когда все плохо, т.н. пороговый мониторинг. Даже для того, чтобы мониторить более-менее сложную систему нужно воротить UserParameters.
У яндекса был доклад о технике предупреждения аварии, фактически это будет просто набор скриптов, который по минимальной раскалибровке системы говорит "пороговому" Zabbix'у о том, что скоро придёт пушистый серверный зверёк. Так вот эти самые скрипты с фееричной техникой а-ля предупреждение землетресений и хотелось бы увидеть.

Ответить | Правка | ^ к родителю #32 | Наверх | Cообщить модератору

7. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Kataklysm (ok) on 12-Ноя-10, 00:45

Заббикс у них стоит.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

8. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от 8288ано8288ним on 12-Ноя-10, 02:52

Ба, pire уже в портах фри.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

22. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от тигар (ok) on 12-Ноя-10, 09:50

> Ба, pire уже в портах фри.
Дима (amdmi3@), а ты часом не 1 из девелоперов?:)

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

29. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от анон on 12-Ноя-10, 11:03

Правда уже в портах: http://www.freshports.org/devel/pire/

Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

30. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от тигар (ok) on 12-Ноя-10, 11:09

> Правда уже в портах: http://www.freshports.org/devel/pire/
там не написано учавствовал ли Дима в этом проекте. порт сделать не сильно и сложно.

Ответить | Правка | ^ к родителю #29 | Наверх | Cообщить модератору

52. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от AMDmi3 (??) on 12-Ноя-10, 19:21

Нет, но это писали ребята из моего отдела.

Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

66. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 13-Ноя-10, 03:14

> Нет, но это писали ребята из моего отдела.
Вы работаете в Яндексе?

Ответить | Правка | ^ к родителю #52 | Наверх | Cообщить модератору

15. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от ананим on 12-Ноя-10, 03:59

был приятно удивлен поддержкой маемо.
мне не стыдно за наш поисковик.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

35. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Nas_tradamus (ok) on 12-Ноя-10, 12:28

В чем поддержка Maemo?
Они вон выложили яндекс-карты, а потом выпилили. :(

Ответить | Правка | ^ к родителю #15 | Наверх | Cообщить модератору

24. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от BoOgie (ok) on 12-Ноя-10, 09:52

В преддверии внедрения "некошерного" Exchange'a в компании (увы и ах) особенно заинтересовало SMTP-proxy взамен того сервера-монстра что вырос из постфикса =)

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

58. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 12-Ноя-10, 20:10

> В преддверии внедрения "некошерного" Exchange'a в компании (увы и ах) особенно заинтересовало
> SMTP-proxy взамен того сервера-монстра что вырос из постфикса =)
Монстра?! Уж что-то, а postfix никак не монстр - очень легковесный и гибкий MTA с понятным у удобным конфигом. У меня он на всех машинах стоит, в т.ч. на роутере с 16MB памяти и замечательно работает.

Ответить | Правка | ^ к родителю #24 | Наверх | Cообщить модератору

25. "Яндекс начал формирование коллекции своих открытых проектов" +3 +/–

Сообщение от ДяДя on 12-Ноя-10, 09:54

Теперь-то мне понятно что в АГС 17 и АГС 30 мочит нормальные сайты.
Какая, .... , разница сколько мегабайт в секунду ????

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

53. "Яндекс начал формирование коллекции своих открытых проектов" –6 +/–

Сообщение от User294 (ok) on 12-Ноя-10, 19:34

> Какая, .... , разница сколько мегабайт в секунду ????
Вам может и никакой, а я видел вполне колоритные примеры где PCRE показал себя с лучшей стороны :). Особенно прикольно выглядит например в ирц сети на Unreal IRCD. Когда кто-то сильно умный из иркопов влупляет сложное правило для антиспама, а потом ... потом вся сетка с кучей серверов прикольно встает раком. Выглядит незабываемо - одной командой нагибается уйма машин :)

Ответить | Правка | ^ к родителю #25 | Наверх | Cообщить модератору

67. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 13-Ноя-10, 03:15

> Теперь-то мне понятно что в АГС 17 и АГС 30 мочит нормальные
> сайты.
> Какая, .... , разница сколько мегабайт в секунду ????
Ха-ха, очередной разорённый сеошник? Поделом.

Ответить | Правка | ^ к родителю #25 | Наверх | Cообщить модератору

42. "Яндекс начал формирование коллекции своих открытых проектов" +2 +/–

Сообщение от Анонимъ on 12-Ноя-10, 13:47

у меня друг недавно тут был на собеседовании в Яндекс (в головном офисе, что на улице Льва Толстого, что в районе м. Парк культуры). друг - Oracle DBA со стажем работы 4 года в телекоме, OCP, все дела.
короче собеседование мой друган прошёл, но ему в результате предложили зарплату 60 тысяч (а он на тот момент уже получал 75, но решил посмотреть какие сейчас (по завершению кризиса) есть предложение на рынке и походить по собеседованиям).
на вопрос "А чего так мало?" ему ответили c предыханием что-то вроде "Зато вы будете раотать в Яндекс!". вообщем друган в итоге устроился в Альфа-банк. пока всем доволен (:

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

46. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от invented on 12-Ноя-10, 14:58

>[оверквотинг удален]
> офисе, что на улице Льва Толстого, что в районе м. Парк
> культуры). друг - Oracle DBA со стажем работы 4 года в
> телекоме, OCP, все дела.
> короче собеседование мой друган прошёл, но ему в результате предложили зарплату 60
> тысяч (а он на тот момент уже получал 75, но решил
> посмотреть какие сейчас (по завершению кризиса) есть предложение на рынке и
> походить по собеседованиям).
> на вопрос "А чего так мало?" ему ответили c предыханием что-то вроде
> "Зато вы будете раотать в Яндекс!". вообщем друган в итоге устроился
> в Альфа-банк. пока всем доволен (:
Чтобы получать больше, надо наверное и знать что-нибудь побольше чем Oracle DBA, не?
Насколько мне известно, в Яндексе нужны многоплановые специалисты. И если Альфабанк готов выкидывать больше 75к за один Oracle это их дело.

Ответить | Правка | ^ к родителю #42 | Наверх | Cообщить модератору

50. "Яндекс начал формирование коллекции своих открытых проектов" +1 +/–

Сообщение от alikd on 12-Ноя-10, 18:12

работник яндекса детектед )
Oracle DBA со стажем 4 года и 60тыщ по-момоему несовместимые вещи. Да и по мнению рынка тоже. (hh.ru и т.п.)

Ответить | Правка | ^ к родителю #46 | Наверх | Cообщить модератору

54. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 12-Ноя-10, 19:50

> работник яндекса детектед )
> Oracle DBA со стажем 4 года и 60тыщ по-момоему несовместимые вещи. Да
> и по мнению рынка тоже. (hh.ru и т.п.)
Что значит несовместимые? Как раз совместимые, и hh.ru как раз с этим согласен. А если кроме оракла человек действительно ничего не знает, то 60 это уже непомерно много, 40 максимум. Да и не думаю что в Яндексе oracle используют, все-таки компания серьёзная.

Ответить | Правка | ^ к родителю #50 | Наверх | Cообщить модератору

59. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Dvorkin (ok) on 12-Ноя-10, 20:16

жостско ты их. :) и да, мне в стародавние начала 200х предлагали в майлру без всяких Oracle DBA на бОльшие деньги

Ответить | Правка | ^ к родителю #50 | Наверх | Cообщить модератору

71. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 13-Ноя-10, 22:26

Ваш друг вас наобманул. Для начала не бывает DBA с опытом работы 4 года и зарплатой всего в 75 тысяч. Ну и да, в яндексе все DBA получают значительно больше. Работал там 2 года, теперь уехал в США.

Ответить | Правка | ^ к родителю #42 | Наверх | Cообщить модератору

72. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 14-Ноя-10, 04:50

Бывает. За последние 5 лет люди поняли что на управляющие должности имеет смысл брать людей хоть немного шарящих в IT, если бизнес на это IT завязан - а им уже маркетоидную лапшу на уши не навешаешь. И базу будут выбирать по объективным критериям, а значит поделиям oracle ничего не светит. И уж тем более не светит тем, кто называет себя DBA, потому что DBA с опытом работы 4 года - значит админил две таблички в рогах и копытах, а потом больше бабла захотел. Если человеку платят больше 50круб, это DBA у него стоит где-то ближе к концу немаленького списка умений.

Ответить | Правка | ^ к родителю #71 | Наверх | Cообщить модератору

73. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от sy (??) on 15-Ноя-10, 15:54

Скорее всего истина где-то рядом. DBA DBA рознь, не зависимо от опыта работы. Как и БД БД рознь.

Ответить | Правка | ^ к родителю #72 | Наверх | Cообщить модератору

51. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от xv (??) on 12-Ноя-10, 18:59

А Phantom, про который рассказывали на YaC-2010, видимо, так и не допилили. Обещали ведь, что прикрутят поддержку FastCGI и откроют.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

69. "Яндекс начал формирование коллекции своих открытых проектов" +/–

Сообщение от Аноним (??) on 13-Ноя-10, 11:15

Xiva (is name) only USSR :)

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру

1. "Яндекс начал формирование коллекции своих открытых проектов"	+3 +/–
Сообщение от klalafuda on 11-Ноя-10, 23:25
Интересно было бы PIRE поковырять. Но откуда ж на все время взять.. :(
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	10. "Яндекс начал формирование коллекции своих открытых проектов"	+1 +/–
	Сообщение от pavlinux (ok) on 12-Ноя-10, 03:20
	У тя диск такой есть? Чтоб читал со скоростью 756,32 МБ/сек?
	Ответить \| Правка \| ^ к родителю #1 \| Наверх \| Cообщить модератору


	11. "Яндекс начал формирование коллекции своих открытых проектов"	+2 +/–
	Сообщение от Аноним (??) on 12-Ноя-10, 03:42
	ZFS стрип на 3 обычных SATA дисков с lzjb компрессией на текстовых данных столько примерно и даёт.
	Ответить \| Правка \| ^ к родителю #10 \| Наверх \| Cообщить модератору


	16. "Яндекс начал формирование коллекции своих открытых проектов"	–3 +/–
	Сообщение от pavlinux (ok) on 12-Ноя-10, 04:32
	> ZFS стрип на 3 обычных SATA дисков с lzjb компрессией на текстовых > данных столько примерно и даёт. Куда он даёт!!! SATA на блинах, пусть даже на 10.000 rpm ну максимум 120Мб/с, да хрен сними, пускай будет даже 200 Мб/с. :) Ну и допустим, что есть у тебя идеальное, которого не может быть, распаралеливание 3-х потоков по 200Мб/с. это всего 600Мб/с. Так что пальцы тут не надо гнуть - ZFS-стрип, lzjb, ..., FreeBSD забыл дописать. :) SAS/SASII via FiberChanel - тогда поговорим. Ну ладно, так уж и быть RAID из SSD
	Ответить \| Правка \| ^ к родителю #11 \| Наверх \| Cообщить модератору


	20. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от Аноним (??) on 12-Ноя-10, 09:20
	Вы еще забыли компрессию текстовых данных. Логи так вообще раз в 10 ужимаются как минимум, итого получаем 1200 Мб/с с одного диска
	Ответить \| Правка \| ^ к родителю #16 \| Наверх \| Cообщить модератору


	40. "Яндекс начал формирование коллекции своих открытых проектов"	–1 +/–
	Сообщение от pavlinux (ok) on 12-Ноя-10, 13:40
	> Вы еще забыли компрессию текстовых данных. Логи так вообще раз в 10 > ужимаются как минимум, итого получаем 1200 Мб/с с одного диска Блин, ну вы выжимали такие скорости? Именно от, ну например, cat file \| sed -e 'blah-blah-blah'. А то Яндых напишет, а доступ к файлу будет занимать 2 секунды, зато когда откроет, закэширует что можно и пустит в канал, тогда да, выходим на терабайт в сек, а при повторном обращении к кэшу, улетим до двух терабаб.
	Ответить \| Правка \| ^ к родителю #20 \| Наверх \| Cообщить модератору


	45. "Яндекс начал формирование коллекции своих открытых проектов"	+2 +/–
	Сообщение от invented on 12-Ноя-10, 14:53
	pavlinux, ты ограничен в воображении, серьезно. Те скорости которые описаны - это скорости прогона в оперативной памяти. С какой скоростью, и главное откуда! ты запихаешь данные в оперативку, это сугубо твое личное дело.
	Ответить \| Правка \| ^ к родителю #40 \| Наверх \| Cообщить модератору


	61. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от Аноним (??) on 12-Ноя-10, 22:40
	> Именно от, ну например, cat file \| sed -e 'blah-blah-blah'. Да, именно оттуда.
	Ответить \| Правка \| ^ к родителю #40 \| Наверх \| Cообщить модератору


	33. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от none_first (ok) on 12-Ноя-10, 12:08
	http://ru.wikipedia.org/wiki/RAID RAID 0 - не?
	Ответить \| Правка \| ^ к родителю #16 \| Наверх \| Cообщить модератору


	41. "Яндекс начал формирование коллекции своих открытых проектов"	–1 +/–
	Сообщение от pavlinux (ok) on 12-Ноя-10, 13:43
	> http://ru.wikipedia.org/wiki/RAID > RAID 0 - не? Оно. Только увеличение скорости не пропорционально увеличению количества дисков.
	Ответить \| Правка \| ^ к родителю #33 \| Наверх \| Cообщить модератору


	57. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от Аноним (??) on 12-Ноя-10, 19:54
	> Оно. Только увеличение скорости не пропорционально увеличению количества дисков. На нормальных системах пропорциональное, пока контроллер и шина справляются.
	Ответить \| Правка \| ^ к родителю #41 \| Наверх \| Cообщить модератору


	48. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от BobbieZi on 12-Ноя-10, 15:49
	(не) уважаемый. 24 SSD от самсунга в RAID0 дают более 2 гигабайт в секунду. учите матчасть. З.Ы. учитывая, что вы - фома неверующий, рекомендую поискать в инете соответствующую видюху, где наглядно это показано. З.З.Ы. Сссыль в студию? - гуглите сами.
	Ответить \| Правка \| ^ к родителю #16 \| Наверх \| Cообщить модератору


	49. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от Аноним (??) on 12-Ноя-10, 17:22
	> SATA на блинах, пусть даже на 10.000 rpm ну максимум 120Мб/с, > да хрен сними, пускай будет даже 200 Мб/с. :) > Ну и допустим, что есть у тебя идеальное, которого не может быть, > распаралеливание 3-х потоков по 200Мб/с. это всего 600Мб/с. Да, 120 MB/s один диск, три ~350. > Так что пальцы тут не надо гнуть - ZFS-стрип, lzjb, ..., > FreeBSD забыл дописать. :) Разумеется FreeBSD, еще б я серьёзные вещи на ляликсе поднимал :)) Так вот - читай внимательнее, умник. После декомпрессии 350MB/s с дисков превращаются во вполне себе 700-750MB/s поток (при этом cpu загружен на 20% максимум). Если бы мне его надо было погрепать, pire бы идеально подошел. > SAS/SASII via FiberChanel - тогда поговорим. > Ну ладно, так уж и быть RAID из SSD SSD не всегда быстрее по пропускной способности. У них просто seek'ов нет.
	Ответить \| Правка \| ^ к родителю #16 \| Наверх \| Cообщить модератору


	27. "Яндекс начал формирование коллекции своих открытых проектов"	+1 +/–
	Сообщение от butcher (ok) on 12-Ноя-10, 10:01
	А что, данные теперь можно только с дисков читать?
	Ответить \| Правка \| ^ к родителю #10 \| Наверх \| Cообщить модератору


	47. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от davenger on 12-Ноя-10, 15:16
	В тексте очепятка: тестовый файл не 500Гб, а 500Мб, тест mmap()-ит этот файл и прогоняется по нему несколько раз. За первый прогон файл оказывается закешированным в памяти и после этого скорость не зависит от дисков, только от частоты скорости процессора и (в меньшей степени) пропускной способности памяти. Вот тогда достигается 750Мб/c.
	Ответить \| Правка \| ^ к родителю #10 \| Наверх \| Cообщить модератору

2. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
Сообщение от Anonus on 11-Ноя-10, 23:42
Молодцы Яндекс! Всегда в них верил.
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	36. "Яндекс начал формирование коллекции своих открытых проектов"	–1 +/–
	Сообщение от Alex (??) on 12-Ноя-10, 12:32
	Да, mirror.yandex.ru и почта у них рулят в рунете. Недавно перевёл на Яндекс свой E-mail, с mail.ru, просто чёрное и белое. Надо было сразу на Яндексе создавать.
	Ответить \| Правка \| ^ к родителю #2 \| Наверх \| Cообщить модератору


	37. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от Nas_tradamus (ok) on 12-Ноя-10, 12:47
	> Да, mirror.yandex.ru и почта у них рулят в рунете. Недавно перевёл на > Яндекс свой E-mail, с mail.ru, просто чёрное и белое. Надо было > сразу на Яндексе создавать. Я это понял еще 6 лет назад. Сейчас мало что изменилось у mail.ru (у меня там есть доп. рабочий ящик ради уведомлений по смс).
	Ответить \| Правка \| ^ к родителю #36 \| Наверх \| Cообщить модератору


	56. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от Аноним (??) on 12-Ноя-10, 19:52
	> Да, mirror.yandex.ru Это да, главное тем что по IPv6 доступно. > и почта у них рулят в рунете Ну халявная почта в принципе не может рулить, но для нищебродов свозможно.
	Ответить \| Правка \| ^ к родителю #36 \| Наверх \| Cообщить модератору


	62. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от XoRe (ok) on 13-Ноя-10, 00:03
	> Ну халявная почта в принципе не может рулить, но для нищебродов свозможно. Это для пользователей халявная. А для яндекса/мейла/гугля - очень даже не халявная. Они вкладывают в почту/антиспам/антивирус/хранилище/итд столько денег, сколько не вкладывает другая компания для своей "платной корпоративной почты".
	Ответить \| Правка \| ^ к родителю #56 \| Наверх \| Cообщить модератору


	63. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от Аноним (??) on 13-Ноя-10, 00:36
	Сказать-то что хотел?
	Ответить \| Правка \| ^ к родителю #62 \| Наверх \| Cообщить модератору


	64. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от XoRe (ok) on 13-Ноя-10, 00:37
	> Сказать-то что хотел? Бред говорите - так, понятно?)
	Ответить \| Правка \| ^ к родителю #63 \| Наверх \| Cообщить модератору


	65. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от Аноним (??) on 13-Ноя-10, 03:13
	Нет, не понятно. Сколько бы они в нее не вкладывали, она остаётся обычной халявной почтой, ничем не рулящей и от остальных не отличающейся.
	Ответить \| Правка \| ^ к родителю #64 \| Наверх \| Cообщить модератору


	74. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от XoRe (ok) on 18-Ноя-10, 02:42
	> Нет, не понятно. Сколько бы они в нее не вкладывали, она остаётся > обычной халявной почтой, ничем не рулящей и от остальных не отличающейся. Много вы платите за почтовый ящик на корпоративном почтовом сервере?) Та же халявная почта.
	Ответить \| Правка \| ^ к родителю #65 \| Наверх \| Cообщить модератору

3. "Яндекс начал формирование коллекции своих открытых проектов"	–1 +/–
Сообщение от invented on 11-Ноя-10, 23:48
PIRE супер! Рвет гугловый RE2 в несколько раз на простых регулярках. Еще бы питоновские биндинги...
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	4. "Яндекс начал формирование коллекции своих открытых проектов"	–1 +/–
	Сообщение от Толстый_ on 12-Ноя-10, 00:00
	Ну а что мешает написать самому? :) Я уже подумываю о биндингах к D.
	Ответить \| Правка \| ^ к родителю #3 \| Наверх \| Cообщить модератору

5. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
Сообщение от brzm on 12-Ноя-10, 00:02
Хочется увидеть их замечательную систему мониторинга, про которую они так хорошо рассказали на Highload++. Хотя бы концепт: идея отличная. Обещали выложить.
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	6. "Яндекс начал формирование коллекции своих открытых проектов"	–1 +/–
	Сообщение от Аноним (??) on 12-Ноя-10, 00:12
	а не zabbix ли там???Если да, то чего его ждать... zabbix.com.
	Ответить \| Правка \| ^ к родителю #5 \| Наверх \| Cообщить модератору


	32. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от Анонимъ on 12-Ноя-10, 11:35
	> Хочется увидеть их замечательную систему мониторинга, про которую они так хорошо > рассказали на Highload++. Хотя бы концепт: идея отличная. ахаха. эта замечательная система мониторинга называется Zabbix. см. http://download.yandex.ru/company/experience/rit2008/highloa... .
	Ответить \| Правка \| ^ к родителю #5 \| Наверх \| Cообщить модератору


	70. "Яндекс начал формирование коллекции своих открытых проектов"	+/–
	Сообщение от brzm on 13-Ноя-10, 13:41
	Ванильный Zabbix это не система мониторинга, а сервер сбора и вывода информации, которым единственное что можно поглядеть это красивые графики нагрузки на камень, и увидеть что все плохо уже когда все плохо, т.н. пороговый мониторинг. Даже для того, чтобы мониторить более-менее сложную систему нужно воротить UserParameters. У яндекса был доклад о технике предупреждения аварии, фактически это будет просто набор скриптов, который по минимальной раскалибровке системы говорит "пороговому" Zabbix'у о том, что скоро придёт пушистый серверный зверёк. Так вот эти самые скрипты с фееричной техникой а-ля предупреждение землетресений и хотелось бы увидеть.
	Ответить \| Правка \| ^ к родителю #32 \| Наверх \| Cообщить модератору