«Разработка и оптимизация высоконагруженного проекта»
0 likes725 views
Документ описывает процесс разработки и оптимизации высоконагруженного проекта новостного сайта с учетом требований к системе и архитектуре. Основное внимание уделяется использованию кэширования, профилированию, а также мониторингу состояния системы для повышения эффективности работы. Включены рекомендации по настройке серверов, проверке конфигурации и анализу узких мест в производительности.
![В начале выполнения страницы
xhprof_enable(XHPROF_FLAGS_CPU + XHPROF_FLAGS_MEMORY);
$GLOBALS["time_start"] = microtime(true);](https://image.slidesharecdn.com/c-140711044859-phpapp01/85/-13-320.jpg)
![В конце выполнения страницы
$time = microtime(true) - $GLOBALS["time_start"];
$xhprof_data = xhprof_disable();
$xhprofRootDirUtils = "/var/www/xhprof-0.9.4/xhprof_lib/utils/";
include_once $xhprofRootDirUtils . "xhprof_lib.php";
include_once $xhprofRootDirUtils . "xhprof_runs.php";
if ($time > 10) {
$xhprof_runs = new XHProfRuns_Default();
$prof_file_name = "time_" . intval($time) . "s_" .
preg_replace('/[^A-Za-z0-9_-]/', '_',
$_SERVER["REQUEST_URI"]);
$xhprof_runs->save_run($xhprof_data, $prof_file_name);
}](https://image.slidesharecdn.com/c-140711044859-phpapp01/85/-14-320.jpg)
«Разработка и оптимизация высоконагруженного проекта»
- 2. Популярная Механика • www.popmech.ru • Новостной сайт • До 450 тысяч просмотров в сутки • До 1000 просмотров в минуту
- 3. Перед началом разработки • Собрать все требования и информацию • Сформировать видение системы
- 4. Подготовка окружения • dev и demo сервера • Везде одинаковое окружение • Выкладка кода только через VCS • Обязательно использовать IDE
- 5. Выбор архитектуры • Apache • nginx + php-fpm • memcached • сессии перенести в memcached или redis
- 6. Кеширование • Не всегда можно использовать стандартный механизм автокеширования • Нужно кешировать не только HTML вывод • Кешировать вспомогательные данные
- 7. Кеширование
- 8. Кеширование на nginx fastcgi_temp_path /tmp/nginx/fastcgi_cache 1 2; fastcgi_cache one; fastcgi_cache_valid 200 301 302 304 5m; fastcgi_cache_key "$request_method|$host|$request_uri"; fastcgi_ignore_headers "Cache-Control" "Expires"; fastcgi_no_cache $cookie_USER_AUTHORIZED; fastcgi_cache_bypass $cookie_USER_AUTHORIZED;
- 9. Cтатика • Кеширование статики на клиенте • Отдельная страница 404 • Отключить логи location ~* ^.+.(ico|gif|jpeg|png...)$ { root /var/www/public_html; access_log off; expires max; error_page 404 = /404.html; }
- 10. Перед выкладкой • Проверить конфигурацию инструментами Битрикса • Отключить модуль веб-аналитики
- 11. Поиск узких мест • лог 50x ошибок error_page 500 502 503 504 /50x.html; location = /50x.html { access_log /var/log/nginx/50x.error.log error50x; root /var/www/public_html; } • логи медленных запросов PHP и mysql slowlog = /var/log/nginx/fpm-slow.log request_slowlog_timeout = 10s • логи ошибок PHP display_errors = Off; log_errors = On; error_log
- 12. Профилирование c XHProf • Почти не создает нагрузки в продакшене • Можно быстро найти корень проблемы • Подключение auto_prepend_file = "/var/www/auto_prepend.php" auto_append_file = "/var/www/auto_append.php" • либо через dbconn.php и событие OnAfterEpilog
- 13. В начале выполнения страницы xhprof_enable(XHPROF_FLAGS_CPU + XHPROF_FLAGS_MEMORY); $GLOBALS["time_start"] = microtime(true);
- 14. В конце выполнения страницы $time = microtime(true) - $GLOBALS["time_start"]; $xhprof_data = xhprof_disable(); $xhprofRootDirUtils = "/var/www/xhprof-0.9.4/xhprof_lib/utils/"; include_once $xhprofRootDirUtils . "xhprof_lib.php"; include_once $xhprofRootDirUtils . "xhprof_runs.php"; if ($time > 10) { $xhprof_runs = new XHProfRuns_Default(); $prof_file_name = "time_" . intval($time) . "s_" . preg_replace('/[^A-Za-z0-9_-]/', '_', $_SERVER["REQUEST_URI"]); $xhprof_runs->save_run($xhprof_data, $prof_file_name); }
- 18. Что еще оптимизировать? • Подобрать время запуска фоновых задач • Тяжелые задания запускать когда посещаемость минимальная
- 20. Выводы • Все отслеживаем и записываем • Постоянный мониторинг состояния системы • Кеширование на нескольких уровнях • Связь сисадмин - разработчик