https://slinkov.ru/openforum/vsluhforumID8/6042.html используется Fedora 5<br>стоит Apache порядка 10 виртуал хостов<br>в некоторое время сервер стал жутко тормозить<br>LA 15-20<br>Стал разбираться что тормозит, определил основных кандидатов<br>Apache, Sendmail, Mysql<br>написал демона который раз в минуту чекает процессы и записывает и ttime<br>также чекает LA<br><br>Построил графики sum(ttime) от hour(time) и avg(LA) от hour(time) - они совершенно разные,<br>топ avg(LA) описывает реальную картинку, LA максимально в пик загрузки сервера, а пик sum(ttime) попадает на ночь, при этом днем все ништяк.<br>Решил оптимизировать все.<br>Дал больше памяти mysql, поставил nginx фронтендом к апач<br>Все равно жуткие тормоза.<br><br>Решил что это все же Apache, написал скрипт воссоздания нагрузки.<br>Он берет инфу из лога nginx и в 20 процессов с локалхоста грузит эти urlы.<br>Запустил его ночью<br>При этом LA вырос до таких же значений что и в пик днем, но при это сайты грузились нормально, службы работали, в то время как днем при таком же LA бвл просто ПЦ.<br><br>Как еще можно диагнозтировать - что же создает https://slinkov.ru/openforum/vsluhforumID8/6042.html#7 Sun, 08 Feb 2009 15:39:56 GMT &gt;&gt;проблема решена. <br>&gt;<br>&gt;что же там было, и как решил? <br><br>верхняя строчка top<br>61% WA<br>это Wait input output operation<br><br>разрослись почтовые ящики, при получении письма sendmail дописывал в огромные файлы жрал весь ресурс винта, из за этого вставали все процессы - ждали запись или чтение файла.<br> https://slinkov.ru/openforum/vsluhforumID8/6042.html#6 Sun, 08 Feb 2009 15:10:25 GMT &gt;проблема решена. <br><br>что же там было, и как решил?<br> https://slinkov.ru/openforum/vsluhforumID8/6042.html#5 Mon, 20 Oct 2008 15:38:41 GMT проблема решена.<br> https://slinkov.ru/openforum/vsluhforumID8/6042.html#4 Mon, 20 Oct 2008 10:33:40 GMT ответ кроется в wa 80-90%<br>как я понимаю это iowait, т.е куча процессов ждет завершение I/O операции.<br>вопрос как узнать - какие процессы, и почему не могут прочитать или записать.<br> https://slinkov.ru/openforum/vsluhforumID8/6042.html#3 Fri, 17 Oct 2008 13:32:28 GMT netstat -s<br>Tcp:<br> 49996 active connections openings<br> 75719 passive connection openings<br> 787 failed connection attempts<br> 7917 connection resets received<br> 29 connections established<br> 2181883 segments received<br> 2146656 segments send out<br> 30663 segments retransmited<br> 9 bad segments received.<br> 21484 resets sent<br>нет ли тут чего нить подозрительного?<br> https://slinkov.ru/openforum/vsluhforumID8/6042.html#2 Fri, 17 Oct 2008 13:22:22 GMT &gt;в момент пиковой загрузки попробуйте mytop'ом посмотреть - может особо зловонный запрос <br>&gt;залочил собой какую-нить таблицу и его собратья стоят за ним в <br>&gt;очереди? <br><br>а что я должен наблюдать? стандартная картина 10 висящих httpd, и пара perl скриптов, переодически скачет.<br>&gt;а причин к описанным симптомам может быть очень много, в <br>&gt;частности - ошибки релизации работы с кешем при одновременном доступе... <br><br>кэш имеется ввиду кэш apache и nginx? или кэш реализованный в движке сайтов?<br><br>у меня есть некоторые идеи которые я не знаю как проверить,<br>1) ограничение на количество сокетов, - может просто процессы стоят в ожидании свободного сокета<br>2) ограничение на колличество открытых файлов<br>3) какие-то ограничения mysql на число коннектов<br>Вот статы, может Вы что-то увидите<br>==================<br>mysqladmin status<br>Uptime: 60970 Threads: 2 Questions: 322707 Slow queries: 303 Opens: 637 Flush tables: 1 Open tables: 256 Queries per second avg: 5.293<br>====================<br>top - 17:19:58 up 1 day, 1:59, https://slinkov.ru/openforum/vsluhforumID8/6042.html#1 Fri, 17 Oct 2008 12:44:37 GMT &gt;[оверквотинг удален]<br>&gt;Решил что это все же Apache, написал скрипт воссоздания нагрузки. <br>&gt;Он берет инфу из лога nginx и в 20 процессов с локалхоста <br>&gt;грузит эти urlы. <br>&gt;Запустил его ночью <br>&gt;При этом LA вырос до таких же значений что и в пик <br>&gt;днем, но при это сайты грузились нормально, службы работали, в то <br>&gt;время как днем при таком же LA бвл просто ПЦ. <br>&gt;<br>&gt;Как еще можно диагнозтировать - что же создает такой ПЦ, где я <br>&gt;лажаю в своих рассуждениях. <br><br>в момент пиковой загрузки попробуйте mytop'ом посмотреть - может особо зловонный запрос залочил собой какую-нить таблицу и его собратья стоят за ним в очереди? а причин к описанным симптомам может быть очень много, в частности - ошибки релизации работы с кешем при одновременном доступе...<br>