forum.opennet.ru

"Эксперимент по повышению эффективности работы утилиты cat"

Форум Разговоры, обсуждение новостей
Версия для распечатки	Пред. тема \| След. тема

Исходное сообщение

[ Отслеживать ]

Подсказка: Второй уровень иерархии тем в форуме реализован через вкладку "Показ ключевых тем".

. "Эксперимент по повышению эффективности работы утилиты cat"	+3 +/–
Сообщение от all_glory_to_the_hypnotoad (ok), 20-Июл-22, 15:16
В скриптах с cat-ом не перемывают гигабайты. Оптимизация для скриптов это снижение задержки прогрева при запуске, но она и так скорее всего мизерная. Даже если перемалывать гигабайты, то наверняка в типичных сценариях проблема будет с пайпами и с кешом (cat будет вымывать файловый кеш)
Ответить \| Правка \| Наверх \| Cообщить модератору

Оглавление

Эксперимент по повышению эффективности работы утилиты cat, opennews, 18-Июл-22, 20:49 [смотреть все]

Не мучайте кошку , zram, 18-Июл-22, 20:49 (1) //
- Тут история скорее про лоток, Иисус, 18-Июл-22, 20:50 (2) //
  - Скорее, про то что кошку оказывается можно напоить пургеном , Аноним, 19-Июл-22, 09:49 (60)
- Ага, как будто нечем заняться Был бы котом, наверное, слизал бы себе яйца до та, Аноним, 18-Июл-22, 20:54 (5) //
  - Сat в скриптах же активно используется, а не просмотра файлов, и её оптимизация , _kp, 20-Июл-22, 02:18 (111) //
    - То есть выводит всего пару строк текста, но часто, и на каждый такой чих инициал, n00by, 20-Июл-22, 05:54 (117)
    - ага скриптописателей много еще не умерло, которые проповедуют UUOC, а хипстор, тигар.логиниться.лень, 20-Июл-22, 12:56 (121)
    - В скриптах с cat-ом не перемывают гигабайты Оптимизация для скриптов это снижен , all_glory_to_the_hypnotoad, 20-Июл-22, 15:16 (125)
      - Странные тенденции Замечено, что некоторые из узкоспециальных coreutils работают, ммнюмнюмус, 28-Июл-22, 15:40 (137)
- Ей же яйца лижут , Аноним, 18-Июл-22, 23:46 (24) //
  - Похоже что онаНу вот, уже почти кошка Осталось только начать свои лизать а не ч, Бывалый смузихлёб, 19-Июл-22, 06:30 (44)
  - А у нее вроде таки нет яиц Хоть я в биографию сильно и не лез Это иркоп фринод, Аноним, 19-Июл-22, 09:47 (59)
- Полезное дело человек делает, вам жалко чтоли Иногда интересно поиграться, а ес, Товарисч, 19-Июл-22, 17:13 (100)
Линуксу, с его реализацией переключения контекстов, ничего не поможет , Аноним, 18-Июл-22, 20:51 (3) //
- Ты сделал ошибку в слове линукс Поправил Не благодари, кубрик, 18-Июл-22, 20:59 (6) //
  - Да, да, расскажи мне про то как ядра писать , Аноним, 18-Июл-22, 21:29 (12) //
    - Вы забыли скромно вывалить свой срам, так что и рассказывать Вам может кто угодн, Michael Shigorin, 18-Июл-22, 23:53 (26)
      - Я человек простой , Аноним, 19-Июл-22, 00:24 (31)
    - AnonBSDnulOS , Аноним, 21-Июл-22, 03:02 (126)
- Чем оно хуже в сравнении с FreeBSD, MacOS или Windows , topin89, 18-Июл-22, 21:09 (8)
- Сразу видно человека не разбирающегося в теме, Аноним, 18-Июл-22, 23:18 (22)
- Как и всем прочим Иди возрождай Singularity, слёзно выпросив её у мелкомягких, , Аноним, 19-Июл-22, 09:00 (51)
- Ващет команда Linux была сильно иного мнения и поэтому они сделали дофейхоа очен, Аноним, 19-Июл-22, 09:54 (61)
- Боюсь, что нужно быть конкретнее Чудовищный оверхед от переключения контекстов, Аноним, 19-Июл-22, 21:39 (109)
Какое ещё исследование, почему нет патчей , L29Ah, 18-Июл-22, 21:17 (10)
Почему это не сделано 10 лет назад , Аноним, 18-Июл-22, 21:24 (11) //
- Потому что это линукс , Аноним, 18-Июл-22, 21:29 (14)
- Потому что кодеров уровня Ариадны на этом глобусе очень ограниченное количество , Аноним, 19-Июл-22, 09:56 (62) //
  - Что сложного вызвать определённую функцию вместо другой , Аноним, 19-Июл-22, 11:27 (72) //
    - Сложно до исследования или после Постфактум все умные Почти, кроме отрицающих, Аноним, 19-Июл-22, 12:18 (78)
      - Сразу после написания соответствующих системных вызовов, очевидно, поскольку их , Аноним, 19-Июл-22, 13:41 (89)
        
        Покажешь слепым какой из системных вызовов написан именно для cat и cp , Аноним, 20-Июл-22, 12:10 (118)
    - Просто - быть умным задним числом Сложно - быть первым, сделать исследования, п, Аноним, 19-Июл-22, 14:19 (94)
    - Почему эксперты с opennet и просто знающие люди это не сделали Это же так прост, Аноним, 19-Июл-22, 14:31 (98)
- Потому что 10 лет назад никому в голову не пришло сделать cat для 4 гигабайт , n00by, 19-Июл-22, 10:44 (68)
Здравствуй, новая уязвимость , beck, 18-Июл-22, 21:41 (15) //
- Где тут НОВАЯ уязвимость Просто буфер будет гоняться сразу в ядре, но ядро туда, Аноним, 18-Июл-22, 21:49 (16)
- Ну да, на квоты же явно забили , Аноним, 18-Июл-22, 23:48 (25)
- splice очень старый вызов, лет 20 ему, а sendfile и того древнее В каком месте , Здрасьте, 19-Июл-22, 07:49 (47)
- Я что-то не понимаю как эксплойтировать копирование данных между дескрипторами , Аноним, 19-Июл-22, 09:57 (63)
- Сразу видно человека не разбирающегося в теме , anonymous, 19-Июл-22, 18:16 (101)
- Ты файлы файлы УЖЕ открыл, вот они, дескрипторы то В чём уязвимость , Аноним, 21-Июл-22, 03:06 (127)
А что, так можно было Осталось остальные базовые утилиты дотянуть , InuYasha, 18-Июл-22, 21:58 (17) //
- Начать можно с замеров времени инициализации libc Но кому это надо Там вон гиг, n00by, 19-Июл-22, 10:57 (70)
Может кота ещё на ио-урину переписать , Онаним, 19-Июл-22, 00:04 (27) //
- Надо на Zig переписать , Аноним, 19-Июл-22, 01:19 (34)
Забыли только рассказать, что и у sendfile есть ряд проблем, которые легко выл, Онаним, 19-Июл-22, 00:08 (28) //
- Приведи примеры Капча 66666, pashev.ru, 19-Июл-22, 12:41 (81) //
  - Начнём с того, что оно требует sendpage на принимающей стороне, если это FS А та, Онаним, 19-Июл-22, 14:08 (92)
Во, точно, я знаю Надо для cat отдельный модуль ядра, который read-write будет , Онаним, 19-Июл-22, 00:11 (29) //
- Так для этого и предназначен splice Правда, приходится делать два splice через p, funny.falcon, 19-Июл-22, 01:51 (36) //
  - Ехал splice через pipe, и я о том же Копирование между дескрипторами в принципе , Онаним, 19-Июл-22, 09:16 (54) //
    - Я бы для начала разобрался, почему sendfile оказался медленнее splice pipe , Аноним, 19-Июл-22, 14:02 (90)
      - Так разберись , Аноним, 19-Июл-22, 14:21 (95)
  - так я уже запутался, мне из stdio в unix socket нужно, чем воспользоваться sen, ламерок, 20-Июл-22, 14:17 (124)
А io_uring сюда прикрутить можно , Аноним, 19-Июл-22, 00:23 (30)
Анон ты чем сейчас занят Где комментарий Единственный способ ускорить сишное , аноним228, 19-Июл-22, 05:36 (42) //
- Учитывая открытия этого гендорного чуда, нас будет ждать очередное аут оф мемори, Аноним, 19-Июл-22, 07:33 (46) //
  - что не так с открытием и почему тебе не фиолетово, что там за чудо за клавиатуро, Аноним, 19-Июл-22, 11:34 (74)
- я как только увидел заголовок, сразу подумал, что cat на Rust переписали , onanim, 19-Июл-22, 09:06 (52) //
  - Мозила переписывала-переписывала FF - недопереписала , Аноним, 19-Июл-22, 12:23 (79)
  - У всех проблем одно начало Сидела женщина, скучала,Качала ножкою своей,И вдруг, Аноним, 19-Июл-22, 13:14 (87)
Автором Audacious ещё был нормальный мужик William Pitcock, а не г мик Ariadne C, Аноним, 19-Июл-22, 08:21 (48) //
- Сравни фото https www last fm ru user nenolodhttps blog chainguard dev conte, Аноним, 19-Июл-22, 08:27 (49) //
  - Я об этом писал наверху, захейтили или не поверили, хз , Аноним, 19-Июл-22, 09:13 (53)
Вау Спустя столько лет лунуксоиды решили прекратить быдлокодить и вспомнили об , Аноним, 19-Июл-22, 08:43 (50)
какое-то сильное преувеличение об авторстве audacious это ж был просто форк xmm, Аноним, 19-Июл-22, 09:23 (55)
Вроде уже переписали на Rust https github com sharkdp bat, Аноним, 19-Июл-22, 09:35 (56) //
- Это вообще отдельная херь не имеющая отношения к сабжу , Аноним, 19-Июл-22, 10:06 (65) //
  - Вот бы кто cat на Project Verona написал 8230 , Аноним, 19-Июл-22, 10:15 (66) //
    - Я даже не знаю что такое Project Verona Поэтому на меня можете не смотреть, м, Аноним, 19-Июл-22, 11:35 (75)
  - Пожалуй да, bat больше похож на less , Аноним, 19-Июл-22, 11:17 (71)
- должно быть rat , онаним, 19-Июл-22, 11:38 (77)
Ctrl C kill теперь не будет работать , Аноним, 19-Июл-22, 10:39 (67) //
- кстати, интересно часто случайно делаю cat бинарника на медленном ssh, Аноним, 19-Июл-22, 11:35 (76)
sed не помешало бы оптимизировать , Аноним, 19-Июл-22, 10:51 (69)
А практическая польза от cat с 4 Гб вообще есть Вообще для копирования использу, Аноним, 19-Июл-22, 13:37 (88) //
- Ведущие собаководы для копирования используют dd, Аноним, 19-Июл-22, 14:03 (91) //
  - Ну сделай им cp --reflink Хотя с таких собаководов станется и 2-терабайтный обр, Аноним, 19-Июл-22, 14:25 (97) //
    - Ведущие собаководы используют ln, Аноним, 19-Июл-22, 18:36 (104)
      - Маленький нюансик в том что вон те 2 терабайтных образа ведут себя как независим, Аноним, 20-Июл-22, 02:55 (113)
        
        Маленький нюансик начался с твоего cp --reflink , который возможен в пределах о, Аноним, 20-Июл-22, 12:25 (119)
        усёр294, как там бтрфс, уже продакшн-реди и второй вопрос - почему ты перестал , тигар.логиниться.лень, 20-Июл-22, 13:02 (122)
- Если просто копировать, то конечно, да, но если по пути пропустить в конвейерную, _kp, 20-Июл-22, 02:23 (112)
- просто в cp реализовано system cat file1 file2 , Ламерок, 20-Июл-22, 05:47 (115)
- cat - от concatenate, т е служит для склейки файлов Что там можно склеивать из, n00by, 20-Июл-22, 05:52 (116) //
  - А Ариадну эту пробовал спросить , Аноним, 23-Июл-22, 16:36 (134) //
    - Так исходный вопрос не мой Я так понял, что он риторический и обращён к местным, n00by, 24-Июл-22, 07:09 (136)
Вот сейчас перепишут cp и в нём появятся дыры когда простой юзер будет рута полу, Аноним, 19-Июл-22, 17:05 (99)
https mazzo li posts fast-pipes html How fast are Linux pipes anyway , Аноним, 19-Июл-22, 21:12 (107)
а что делать если sendfile вернул меньше чем нужно отправить данных , Ламерок, 20-Июл-22, 05:46 (114) //
- Посылать повторно, пока не вернется сколько надо или больше , Аноним, 20-Июл-22, 12:29 (120) //
  - вот хз в мане этот случай не описан, как например в read write, поэтому испросил, ламерок, 20-Июл-22, 14:14 (123) //
    - Вы всё врёти RETURN VALUE If the transfer was successful, the number , Аноним, 21-Июл-22, 03:14 (128)

Форумы | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру