Отслеживаем работу InvariMatch на серверах

Как только мы стали поставлять нашу систему распознавания и поиска видео клиентам, возникла необходимость отслеживать стабильность ее работы. Не видя параметров системы, сложно понять, что с ней происходит, а о характере неисправностей приходится догадываться только по внешним признакам. Это неудобно и не позволяет быстро понять причину и устранить проблему. Поэтому мы почти сразу решили поставить систему мониторинга.

У одного из наших первых клиентов уже был подключен Zabbix, поэтому мы остановились именно на нем. 6 октября 2017 года мы перенесли все технические параметры InvariMatch туда, чтобы системный администратор мог следить за ними в режиме реального времени и оперативно получать данные о сбоях.

Zabbix — это готовая система, которая подходит для мониторинга состояния сервисов на множестве компьютеров. Она показывает параметры системы в виде графиков.

Для мониторинга InvariVision мы с самого начала использовали графики — так легче воспринимать данные и анализировать изменения в работе системы. Для хранения данных Zabbix использует MySQL, PostgreSQL, SQLite или Oracle Database и поддерживает несколько видов мониторинга.

Благодаря Zabbix, которая отображает параметры работы системы в виде графиков, мы видим количество роликов, которые были просканированы и добавлены в систему за последний час, сколько совпадений найдено, сколько заявок сейчас обрабатывает система, сколько находится в очереди и другие параметры. Это позволяет нам следить за производительностью InvariMatch, видеть неисправности в ее работе, анализировать полученные данные и на основе этого совершенствовать нашу технологию.

Через некоторое время после подключения Zabbix, возникла необходимость собирать данные по каждой ошибке в отдельности и следить за их повторяемостью. В феврале 2018 года мы разделили графики ошибок в системе на три части и сделали шаблоны для быстрого добавления параметров на новые сервисы.

Zabbix позволил нам получать полные данные о работе системы на клиентских серверах и компьютерах. Например, если мы видим падение нагрузки в системе, это может означать сбой на стороне клиента или проведение каких-либо наладочных работ. Благодаря этому мы можем оперативно устранять проблемы в работе системы.

Zabbix существует на рынке уже около 20 лет. За это время появилось много аналогов, но необходимости в том, чтобы переходить на другую систему мониторинга пока нет. Zabbix отлично справляется со своими задачами и сильно помогает нам в работе.