it-swarm-ru.tech

Как уменьшить использование памяти на веб-сервере Unix

В настоящее время я использую Joyent Accelerator для размещения своих веб-приложений, и он работает нормально, однако мне нужно сократить расходы, поэтому я понижаю свой текущий план, и это накладывает некоторые новые ограничения памяти (256M rss, 512M swap). Вчера я не был слишком далеко над ними, но после перезапуска Apache несколько раз сегодня у меня теперь 411M rss, 721M swap (prstat -Z -s cpu).

Поиск в Server Fault только дает мне много способов и специальных инструментов для мониторинга сервера, но не дает советов о том, как уменьшить/оптимизировать его использование памяти. Я также видел этот вопрос , но я не думаю, что это хорошо для этой конкретной (или я могу сказать универсальной?) Ситуации.

Сервер работает под управлением ОС Solaris, и я использую Apache + MySQL + PHP стек).

Мне интересно знать шаги, которые можно предпринять, чтобы устранить эту проблему и решить проблемы. Тем не менее, у меня также не хватает времени, чтобы уменьшить след памяти и понизить план до того, как закончится текущий, так что все, что может творить чудеса и спасать день, также приветствуется :)

36
lima

Спасибо всем за ваши ответы ! Следуя вашим предложениям, я смог сократить использование памяти до 195M SWAP и 108M RSS, не касаясь своего кода (я определенно оптимизирую его в ближайшее время, но это должен был помочь мне быстро избавиться от неприятностей).

Вот список вещей, которые я сделал:

Избавился от подстановочного знака, используемого в записях VirtualHost. Вместо *: 80 и *: 443 я использовал реальный IP-адрес своего сервера.

Изменен предварительный форпок Apache MPM. Это значения, которые я использовал в итоге:

 StartServers 1 
 MinSpareServers 1 
 MaxSpareServers 5 
 ServerLimit 16 
 MaxClients 16 
 MaxRequestsPerChild 0 
 ListenBacklog 100 

Это ни в коем случае не магические числа. Я провел некоторое время, пробуя разные значения и комбинации, а затем проверяя их на предмет реального использования моего сервера, и каждый должен делать то же самое в своей среде. Для справки, мой сервер получает около 2 млн. Пвс/месяц, обслуживая как динамические страницы, так и ресурсы с регулярной скоростью - без эффекта digg. Намерение, опять же, было уменьшить объем памяти, а не улучшить производительность или HA.

Ссылка:

Отключил KeepAlive Apache. Установив для KeepAliveTimeout более низкое значение (в моем случае 2), можно ожидать, что меньше серверных процессов просто ожидает соединения с незанятыми клиентами, которые могут не запрашивать больше контента.

Ссылка: http://httpd.Apache.org/docs/2.0/mod/core.html#keepalivetimeout

Удален неиспользуемый модуль MySQL. Я добавил skip-innodb в MySQL my.cnf. Массовое сокращение потребления памяти.


Есть также несколько замечательных хороших предложений, которые я не мог сделать лично:

  • Удалить PHP модулей, которые вам не нужны. PHP на моем сервере есть большинство модов уже скомпилировано, я, наверное, попробую свой собственный минимальный PHP на других VPS.
  • Переключитесь на nginx с помощью php-fastcgi. Это еще один хороший совет, который я попробую в ближайшее время, но сейчас я не могу рисковать временем простоя.
23
lima

Я нашел эта статья о конфигурации нехватки памяти для Apache и MySQL

Быть очень полезным при планировании изменений конфигурации, необходимых для конфигураций с низким объемом памяти. Я настроил их для моей собственной ситуации, но они должны дать вам инструменты, необходимые для наилучшего соответствия вашей среде

6
Kevin Kuphal

Вам нужно будет ограничить количество запущенных процессов сервера Apache, и, будучи настолько близким к этому пределу, как вы, вы не сможете обрабатывать очень пиковый трафик. Наличие веб-сервера, который максимально загружен при обычном использовании, обычно является плохой идеей (tm), поскольку веб-трафик в большинстве случаев приятен и низок до тех пор, пока вас не коснут, не выкопают, не выкрутятся, или что-то подобное.

Основными проблемами является количество процессов Apache, которые выполняются в любой точке - при условии, что здесь уже есть prefork, поскольку я только развернул PHP приложения и PHP) не является потокобезопасным. У меня нет опыта измерения рабочего MPM. Некоторые элементы находятся в общей памяти, а некоторые - в памяти каждого процесса.

Вы можете уменьшить общий объем памяти, не используя общие модули, которые вам не нужны. По сути, Apache настроен на большинство хостов, чтобы делать практически все под солнцем. Если вы не используете mod_userdir, то закомментируйте его в своей конфигурации Apache. Просто будьте осторожны, сколько вы удалите, потому что некоторые вещи, которые вам могут понадобиться, или их зависимости не интуитивно понятны! Все модули должны быть документированы на веб-сайте Apache.org. След от процесса труднее получить меньше; большинство конфигураций Apache в наши дни поставляются только с четырьмя основными скомпилированными модулями. Помимо этих четырех модулей, большая часть использования памяти происходит из-за утечек или приложений RAM это не сборщик мусора, поэтому Вы можете установить минимальное количество запросов, обрабатываемых каждым процессом.

Вы действительно хотите сохранить использование памяти в RAM) и не переходить в swap. Swap означает I/O. I/O медленный и будет загружать ваш процессор через крышу, поскольку процессы блокируют, ожидая, что что-то будет вытащено из обмена.

4
Karl Katzke

Поскольку вы уже достигли своей цели, вот несколько дополнительных:

Так как вы удалили все ненужные модули php, вы можете сделать то же самое для Apache. По умолчанию (в зависимости от установки) Apache загружает довольно много дополнительных модулей, и большинство из них на самом деле не требуются для повседневного использования. Например, есть множество модулей аутентификации, которые всегда загружаются. deflate обычно не требуется, если вы не пытаетесь ограничить использование полосы пропускания. Автоиндекс и статусы тоже сомнительны.

И еще одно, что вы можете ограничить объем памяти, доступной для php в php.ini: memory_limit = xxxM

2
rasjani

Для Apache удалите модули, которые вы не используете, поскольку они просто используют дополнительную память. Для MySQL удалите innodb/bbdb, если вы их не используете, и удалите PHP модули, которые вам не нужны.

Затем вы должны настроить Apache MaxClients в зависимости от размера одного процесса и объема памяти, который вы хотите предоставить Apache. То же самое касается максимальных соединений на MySQL (я рекомендую отличный MySQL Tuning Primer Script.

Если у вас есть контроль над приложением PHP), убедитесь, что оно не использует слишком много памяти (например, в переменных, особенно в статических).

Если вы хотите пойти дальше, вы можете заменить Apache + mod_php на установку nginx + fcgi, что, вероятно, приведет к дальнейшему сокращению памяти.

И последнее: вы действительно не хотите менять веб-сервер. Немного, чтобы удалить ненужные вещи, но регулярная перестановка на веб-сервере приведет к не отвечающему веб-сайту.

2
yhager

Сервер работает под управлением ОС Solaris, и я использую Apache + MySQL + PHP стек).

У меня нет опыта работы с Solaris, но лучше всего не использовать Apache/mod_php.

  • Переключитесь на nginx с помощью php-fastcgi.
  • Перекомпилируйте php, чтобы использовать минимальное количество плагинов.
  • Избавьтесь от ненужных процессов, таких как ntpd (используйте ntpdate), ftp (используйте scp) и т.д ...
0
Unknown

Конечно, вы можете ограничить число процессов, которые может разворачивать Apache, однако это будет работать только как жесткое ограничение использования вашей памяти. С точки зрения более низкого уровня вы можете использовать plimit , чтобы ограничить ресурсы, доступные процессу. Я считаю, что это применимо к родительским и дочерним процессам.

Однако с точки зрения конфигурации веб-сервера все сводится к тому, как на самом деле работает ваш код! Но имейте в виду, что такие мелочи, как использование файлов .htaccess, требуют больше ресурсов, чем использование центральных файлов конфигурации Apache (поскольку они читаются каждый раз, когда поступает запрос, что приводит к большим накладным расходам), что имеет значение на больших веб-сайтах.

0
Coops

Одна вещь, которая может помочь росту памяти с течением времени, - установить меньшую активность активности httpd, но я бы тщательно это проверил на случай, если вашему приложению нужны более длительные процессы.

0
D.F.