Улучшение производительности Node.js‑сервиса при высокой нагрузке

Условие

Существует Node.js‑приложение, которое:

1. Принимает запросы от клиентской части;
2. Выполняет серверный рендеринг страниц (SSR);
3. Записывает информацию о запросах в консоль; отдельный агент на машине собирает эти сообщения и передаёт их в систему логирования;
4. При обработке запросов обращается к другим бекенд‑сервисам, собирает полученные данные и отдает их клиенту. Проблема проявляется при большом количестве запросов в секунду: начинается ограничение пропускной способности (throttling). Причина – перегрузка функции console.log(), которая работает синхронно и может блокировать поток выполнения. Требуется предложить способы оптимизации работы сервиса, чтобы избавиться от узкого места, связанного с логированием, и обеспечить стабильную работу под высокой нагрузкой.

Ответ

Сократите объём логов, уберите тяжёлую сериализацию из горячего пути и организуйте ограниченный буфер с контролем backpressure. Синхронность stdout зависит от среды.

Сначала подтвердите узкое место профилем CPU, event-loop lag и скоростью потребления логов агентом. console.log не всегда синхронен: поведение stdout зависит от ОС и назначения потока.

Отключите debug-логи на потоке запросов, применяйте sampling к повторяющимся событиям, не сериализуйте целиком большие объекты. Передавайте структурированные записи через ограниченный буфер и отдельно контролируйте его заполнение. Учитывайте backpressure и скорость агента; бесконечная очередь лишь заменит задержки нехваткой памяти.

Проверьте p95/p99 SSR после изменения. Оборачивание console.log в Promise само по себе не переносит работу с основного потока. Для обязательных аудиторских событий нужна отдельная политика надёжной доставки, а не молчаливое отбрасывание.

Источник: nodejs.org.