— В Минпромторге РФ ставят целью довести долю российской радиоэлектроники с 27% до 70% к 2030 году. Как идет перестройка телекоммуникационной отрасли? Влияет ли экономическая и санкционная ситуация на работу ЕЦУС?
— Перед нами стоит аналогичная задача, и стратегически компания движется в том же направлении, что и вся отрасль, — в сторону импортозамещения. Нельзя сказать, что на работу центра сильно повлияла санкционная ситуация: технические службы справляются, системы мониторинга и управления сетью будут планомерно модифицироваться. Так что мы идем по пути импортозамещения, но все OSS-cистемы ЕЦУС сейчас работают исправно.
— Единый центр управления сервисами (ЕЦУС) в структуре «МегаФона» появился 2013 году. Какова его роль в обеспечении бесперебойной работы техники?
— Основные задачи центра заключаются в мониторинге, выявлении и обработке аварийных ситуаций. Центр работает уже десять лет в режиме 24/7 — здесь ведется круглосуточный мониторинг состояния опорной, транспортной и других сетей, а также ИТ-структур компании «МегаФон». Мы видим свою социальную роль в том, чтобы обеспечивать непрерывной и качественной связью каждого абонента. Также ЕЦУС отвечает за предоставление им технической поддержки и ежемесячно «обрабатывает» порядка 25 тыс. обращений.
Хотя центр единый, он располагается на двух площадках — в Санкт-Петербурге и Самаре. Такая структура позволяет при любой нештатной ситуации передать нагрузку из одного центра в другой. В общей сложности на мониторинге у центра находятся более 500 тыс. элементов сети, и их число постоянно увеличивается. В частности, более 30 тыс. являются объектами мониторинга внешних заказчиков.
Круглосуточные дежурные смены имеют свою специализацию: одни сотрудники занимаются мониторингом ИT-оборудования и биллинговых сервисов, другие мониторят базовые станции и системы жизнеобеспечения крупных сетевых элементов, третьи следят за оборудованием транспортной сети. Отдельная группа сотрудников контролирует крупные коммутаторы опорной сети, и еще одна — работоспособность междугородней и международной связи, роуминга. Все это позволяет поддерживать высокий уровень компетентности каждой группы сотрудников. На двух площадках работает около 400 человек — дежурные инженеры, эксперты, менеджеры и руководители направлений.
— Как решаются ситуации с поломками?
— Если что-то ломается, вступает в действие зонтичная система мониторинга. В сутки она получает около 35 млн сообщений со всех устройств на сети, анализирует их. Система обучена различным сценариям, например объединять однотипные сообщения в одно, так она помогает инженеру «обрабатывать» инциденты. Если пропало электропитание на базовой станции, комплекс просигнализирует об этом и уведомит о переходе на аккумуляторные батареи. Благодаря этому у инженеров всегда будет ответ, какая причина привела к сложившейся ситуации. По итогам анализа общее число полученных в сутки сообщений сокращается приблизительно до 6 тыс. инцидентов, с которыми уже плотно работают инженеры.
Для поддержания надежности сети используется множество инструментов, регулярно проводятся плановые работы по проверке ее резервирования, тестовые запуски дизельных генераторов на крупных площадках. Это любопытный момент, потому что на каждой из таких площадок есть несколько вводов электропитания. Если выходит из строя один, автоматически включается второй. Если вдруг и он оказывается выведенным из строя, например на фоне природных ЧС, запускаются генераторы, а в крайних случаях площадка переходит на аккумуляторные батареи.
По каждому крупному инциденту мы открываем расследование и тщательно выясняем, что его спровоцировало и как можно было упорядочить процесс устранения неисправности и ее последствий в минимальные сроки. Это позволяет своевременно корректировать алгоритмы взаимодействия между подразделениями, выявлять недоработки в конфигурации сети.
— Какой еще функционал есть у ЕЦУСа?
— Если у одного из операторов мобильной связи возникает масштабная авария с покрытием, мы готовы предоставить их абонентам голосовую связь в рамках процедуры включения аварийного межсетевого роуминга (АМР). В России отработан механизм, при котором любой оператор в случае возникновения проблем с покрытием в определенной зоне, может обратиться в Роскомнадзор. Ведомство привлекает других операторов и просит предоставить покрытие для голосовой связи.
— В 2018 году мощности центра использовались при проведении чемпионата мира по футболу в России. Как именно?
— Оргкомитет чемпионата закупил у нас услуги связи в местах, где размещались команды, участники чемпионата и были развернуты информационные центры, в том числе продажи билетов на соревнования. Было реализовано более 1,5 тыс. каналов связи, установлено множество базовых станций. Чтобы все это работало, мы предусмотрели огромное количество резервов, проверяли их отказоустойчивость. Дежурили в дни чемпионата 24 часа в сутки. Наш опыт потом использовался при проведении чемпионата мира по футболу в Катаре. Соглашение, по которому представители «МегаФона» делились с коллегами экспертизой в области обеспечения крупных спортивных мероприятий телекоммуникационными и ИКТ-сервисами, было подписано на ПМЭФ.
ЕЦУС также используется как диспетчерский центр при проведении массовых мероприятий, например концертов или важных телетрансляций вроде «Прямой линии с президентом». В этом году мы оперативно проводили мониторинг поступающих на прямую линию через сеть «МегаФона» СМС-сообщений и телефонных звонков, чтобы каждый мог задать свой самый важный вопрос. Он заключался в том, что мы видели объемы поступающих обращений и в случае, если бы поток в каком-нибудь регионе начал сокращаться, мы бы оперативно выяснили, почему звонки или СМС не поступали. Все проходило штатно.
Помимо мероприятий, каждый год мы внимательно следим за нагрузкой на сети в новогоднюю ночь. Мы «усиливаемся» в моменты повышенной нагрузки, делаем необходимые расширения на сети, благодаря чему абоненты получают в эти полные приятной суеты предновогодние и праздничные дни такой же качественный сервис, как и в любой другой день в году.