Лучшие инструменты мониторинга производительности приложений (APM)
Что такое инструменты мониторинга производительности приложений (APM)?
Руководство покупателя по инструментам мониторинга производительности приложений (APM)
Содержание
- Почему стоит использовать инструменты мониторинга производительности приложений: основные преимущества, которые следует учитывать.
- Кто использует инструменты мониторинга производительности приложений?
- Особенности инструментов мониторинга производительности приложений
- Важные моменты, которые следует учитывать при выборе инструментов мониторинга производительности приложений.
- Программное обеспечение, связанное с инструментами мониторинга производительности приложений.
Инструменты мониторинга производительности приложений (APM) позволяют командам отслеживать поведение работающего программного обеспечения в производственной среде: какие запросы выполняются медленно, какие завершаются с ошибкой, где тратится время внутри транзакции и как меняется состояние приложения. В отличие от мониторинга инфраструктуры, который сообщает о занятости сервера, APM сообщает, что конкретный запрос к базе данных в конкретной конечной точке занимает три секунды, что является уровнем детализации, позволяющим устранить проблему.
Обычно мониторинг осуществляется с помощью агента, загруженного в процесс приложения, который фиксирует время и контекст выполнения запросов по мере их прохождения через код, обращения к базе данных и вызовы внешних сервисов. В результате получается трассировка, показывающая полный путь запроса с указанием продолжительности каждого шага. Вокруг трассировок располагаются метрики — агрегированные данные, описывающие пропускную способность, распределение задержек и частоту ошибок, а также журналы, содержащие подробную информацию о каждом отдельном событии. Все эти три компонента вместе составляют то, что большинство поставщиков сейчас называют наблюдаемостью.
Эта категория претерпела изменения под влиянием распределенных архитектур и стоимости. Когда приложение представляло собой один процесс на одном сервере, его понимание было вполне осуществимым. Когда запрос проходит через десяток сервисов, отслеживание его выполнения — единственный способ узнать, куда ушло время. В то же время объем телеметрии вырос настолько быстро, что плата за сбор данных стала серьезной статьей бюджета, а управление собираемыми данными стало частью эксплуатации этих инструментов, а не второстепенным вопросом.
Почему стоит использовать инструменты мониторинга производительности приложений: основные преимущества, которые следует учитывать.
Дело в том, что поведение в процессе производства отличается от тестирования, и без инструментов мониторинга команды диагностируют проблемы, полагаясь на догадки.
Выявление истинной причины замедления работы
Когда пользователи сообщают о замедлении работы чего-либо, возможные причины могут быть самыми разными: код приложения, запросы к базе данных, внешние сервисы и инфраструктура. Трассировка показывает, куда ушло время, вместо того чтобы исключать гипотезы по одной, что является разницей между устранением проблемы за час и за неделю.
Выявление проблем до того, как о них сообщат пользователи.
Оповещения о пороговых значениях частоты ошибок и задержки выявляют ухудшение качества, затрагивая при этом лишь небольшую часть запросов. Обнаружение проблемы посредством мониторинга, а не на основе жалобы клиента, изменяет как время отклика, так и впечатление, которое она производит на пользователей.
Понимание реального пользовательского опыта
Данные, полученные на стороне сервера, не отражают того, что пользователи действительно испытывают, включая состояние сети, отрисовку браузера и производительность устройства. Мониторинг реальных пользователей показывает, что качество работы значительно хуже, чем показывают данные на стороне сервера.
Доказательства эффективности работы
Оптимизация без измерений нацелена на то, что подозревает разработчик. Данные профилирования позволяют определить, где действительно тратится время, а это, как правило, не то место, которое ожидалось. Это делает работу над производительностью эффективной, а не спекулятивной.
Уверенность во время развертывания
Сравнение частоты ошибок и задержки до и после релиза позволяет быстро выявлять регрессии и принимать решения об откате на основе имеющихся данных. Для команд, часто осуществляющих развертывание, именно эта обратная связь делает такую частоту безопасной.
Кто использует инструменты мониторинга производительности приложений?
Целевая аудитория включает инженерные специальности и, все чаще, бизнес-функции, на которые влияет производительность.
Разработчики приложений
Разработчики используют APM для диагностики проблем в своих сервисах, понимания поведения в производственной среде и проверки изменений производительности. Их требование заключается в том, чтобы трассировка указывала на конкретную строку кода или запрос, а не на общую область, и чтобы агент не замедлял работу приложения.
Инженеры по обеспечению надежности и эксплуатации объектов
Группы обеспечения надежности отслеживают общее состояние системы, управляют оповещениями и руководят реагированием на инциденты. Их постоянная проблема — качество оповещений: слишком много оповещений вызывает усталость, слишком мало пропускает реальные ухудшения, и настройка этого параметра — это постоянная работа, а не задача, требующая предварительной подготовки.
Команды платформы и DevOps
Эти команды развертывают и поддерживают инфраструктуру мониторинга, управляют внедрением агентов и все чаще контролируют затраты на телеметрию. Управление объемом данных стало важной частью их работы по мере роста цен на обработку входящих данных.
Инженерное лидерство
Менеджеры отслеживают тенденции надежности, частоту инцидентов и улучшение производительности. Они также распоряжаются бюджетом, поэтому их больше всего волнует соотношение объема телеметрических данных и затрат.
Заинтересованные стороны в отношении продукта и бизнеса
Команды разработчиков продукта уделяют большое внимание тому, как производительность влияет на конверсию и вовлеченность, поскольку медленно загружаемые страницы заметно снижают и то, и другое. Связывание технических показателей с бизнес-результатами превращает APM из статьи инженерных затрат в общую задачу.
Различные типы инструментов мониторинга производительности приложений
Данная категория включает в себя несколько подходов, которые в значительной степени пересекаются.
-
Полнофункциональные платформы мониторинга: объединяют трассировку, метрики, журналы, мониторинг реальных пользователей и мониторинг инфраструктуры в одном продукте с возможностью корреляции между ними. Удобные и комплексные решения с ценообразованием, масштабируемым в зависимости от объема данных и способным расти быстрее, чем ожидалось.
-
Продукты APM с узкой специализацией: позволяют сосредоточиться на трассировке приложений и диагностике на уровне кода, не охватывая при этом весь спектр мониторинга. Зачастую они проще и дешевле, что подходит командам, у которых анализ логов и мониторинг инфраструктуры уже обеспечены другими функциями.
-
Открытые и саморазмещаемые стеки: собраны из компонентов трассировки, метрик и визуализации с открытым исходным кодом, с открытыми стандартами инструментирования, что снижает зависимость от поставщика. Отсутствие лицензионных платежей, реальные операционные затраты и растущая жизнеспособность по мере развития стандартизированного инструментирования.
-
Отслеживание ошибок и мониторинг исключений: более узкоспециализированные инструменты, ориентированные на сбор, группировку и оповещение об ошибках приложения с трассировкой стека и контекстом. Более дешевые и часто достаточные для небольших приложений, где ошибки важнее, чем распределение задержек.
Особенности инструментов мониторинга производительности приложений
Набор возможностей в целом схож у разных поставщиков. Различия проявляются в охвате инструментов мониторинга, полезности трассировки и контроле затрат.
Стандартные функции
Распределенная трассировка
Отслеживание запроса между сервисами с указанием времени для каждого участка, демонстрирующее места накопления задержки. Стратегия выборки здесь имеет значение, поскольку захват каждого трассировочного фрагмента обходится дорого, а захват слишком малого количества фрагментов пропускает редкие медленные запросы, которые имеют наибольшее значение.
Диагностика на уровне кода
Присвоение времени внутри сервиса конкретным методам, запросам и внешним вызовам. Глубина детализации зависит от языка программирования и среды выполнения, поэтому уточняйте поддержку для вашего конкретного стека, а не для общего списка.
Метрики и панели мониторинга
Пропускная способность, процентили задержки, частота ошибок и потребление ресурсов.sage Со временем. Именно процентили, а не средние значения, выявляют проблемы, видимые пользователю, поскольку средние значения полностью скрывают медленный «хвост».
Отслеживание ошибок
Фиксация исключений с помощью трассировки стека, группировка похожих ошибок и отслеживание их возникновения во времени и в разных версиях. Качество группировки определяет, является ли список ошибок требующим принятия мер или же он слишком обширен.
Мониторинг реального пользователя
Измерение производительности в реальных браузерах и мобильных приложениях, включая скорость загрузки страниц и скорость отклика при взаимодействии. Это позволяет получить данные, недоступные для синтетических и серверных измерений.
Предупреждение
Пороговые и основанные на аномалиях оповещения направляются в системы дежурства. Интеграция с инструментами управления инцидентами определяет, дойдут ли оповещения до того, кто действительно несет ответственность.
Основные характеристики, на которые следует обратить внимание
Контроль затрат и управление объемом данных
Ценообразование на основе объема принимаемых данных означает, что объем телеметрии определяет стоимость, и этот объем растет с увеличением трафика, количества сервисов и активности пользователей. Обратите внимание на контроль выборки, уровни удержания пользователей, привязку к каждой команде и возможность отбрасывания малоценных данных до их приема. Определите, как будет выглядеть стоимость при объеме данных, в три раза превышающем текущий, поскольку неожиданные и значительные счета в этой категории встречаются часто.
Работа по оснащению измерительными приборами и поддержке стандартов.
Автоматическая инструментация для ваших языков программирования и фреймворков существенно снижает затраты на внедрение по сравнению с ручной инструментацией. Поддержка открытых стандартов инструментации заслуживает приоритетного внимания, поскольку это означает, что телеметрия, создаваемая вашими командами, не привязана к одному поставщику, и переход на новый стандарт позже не потребует повторной инструментации всего.
Корреляция между типами сигналов
Практическая ценность заключается в быстром переключении между медленной трассировкой, журналами конкретного запроса и состоянием инфраструктуры в данный момент. Продукты, в которых эти данные действительно связаны, устраняют инциденты быстрее, чем те, в которых они представляют собой отдельные представления, требующие ручной корреляции по временной метке.
Накладные расходы на производительность агента
Инструментарий потребляет вычислительные ресурсы и память в отслеживаемом приложении. Накладные расходы обычно незначительны, а иногда и существенны, особенно при включенном агрессивном профилировании. Измеряйте его при реальной нагрузке во время оценки, а не принимайте заявленное значение.
Важные моменты, которые следует учитывать при выборе инструментов мониторинга производительности приложений.
Решения, имеющие решающее значение, касаются динамики затрат и того, сможет ли организация действовать в соответствии с наблюдаемыми изменениями.
Прогнозирование затрат по мере роста
Это наиболее распространенная причина сожалений в данной категории. Модели ценообразования, основанные на количестве хостов, объеме данных или пользовательских метриках, ведут себя совершенно по-разному по мере развития архитектуры, а переход к большему количеству сервисов с большим количеством инструментов мониторинга быстро увеличивает объем данных. Смоделируйте затраты, исходя из реалистичного будущего состояния, и подтвердите, какие механизмы контроля существуют для ограничения расходов до их возникновения, а не после.
Способность действовать на основе полученных результатов
Мониторинг выявляет проблемы, но не решает их. Организации, не имеющие возможности реагировать на обнаруженные проблемы, накапливают панели мониторинга и оповещения, на которые никто не реагирует, что хуже, чем отсутствие мониторинга, поскольку создает видимость контроля. Прежде чем инвестировать в прозрачность, определите, кто отвечает за работу по повышению производительности.
Разработка системы оповещений и обеспечение устойчивости системы круглосуточной готовности
Неправильно настроенная система оповещений — это самый быстрый путь к игнорированию предупреждений и истощению инженеров. Настраивайте оповещения на основе симптомов, которые испытывают пользователи, а не на основе каждой внутренней метрики, регулярно проверяйте качество оповещений и удаляйте те, на которые никто не реагирует. Это постоянная дисциплина, а не настройка, и ни один продукт её не предоставляет.
Присоединение и перенос поставщика
Собственные агенты, пользовательские инструменты мониторинга и панели мониторинга, созданные на языке запросов поставщика, создают реальные издержки на переход. Использование открытых стандартов мониторинга, где это возможно, сохраняет возможность перехода, что важно в категории, где изменения цен привели к миграции.
Программное обеспечение, связанное с инструментами мониторинга производительности приложений.
APM — это лишь часть более широкого набора инструментов для управления операциями.
Платформы для анализа логов
Программное обеспечение для анализа журналов хранит и осуществляет поиск в подробных записях, объясняющих отдельные события. Следы показывают, куда ушло время; журналы часто объясняют, почему, и эти два подхода дополняют друг друга, а не являются альтернативами.
Мониторинг сети и инфраструктуры
Программное обеспечение для мониторинга сети и более широкие платформы мониторинга охватывают уровни, расположенные ниже уровня приложения. Многие кажущиеся проблемы в приложении возникают на более низких уровнях, поэтому сопоставление данных между этими уровнями предотвращает ошибочные исследования.
Платформы AIOps
Платформы AIOps применяют корреляцию и обнаружение аномалий в оперативных данных для уменьшения количества оповещений и выявления вероятных причин. Ценность таких платформ во многом зависит от качества данных и от реалистичных ожиданий относительно результатов автоматической корреляции.
Инструменты управления инцидентами
Программное обеспечение для управления инцидентами обрабатывает графики дежурств, эскалацию и анализ инцидентов после их завершения. Обнаружение и реагирование — это отдельные задачи, и продукты APM, как правило, решают первую гораздо лучше, чем вторую.
Инструменты разработки и DevOps
Платформы DevOps , системы отслеживания ошибок и инструменты тестирования программного обеспечения находятся на более ранних этапах разработки. Интеграция результатов анализа в производственный процесс — это то, что замыкает цикл между обнаружением проблемы и её устранением.
Воспроизведение сессий и цифровая аналитика
Инструменты воспроизведения сессий и платформы цифровой аналитики показывают, что делали и что испытывали пользователи. Сочетание измерения производительности с записью затронутой сессии часто позволяет объяснить влияние, которое одни только метрики недооценивают.