Mediation-системы в условиях экспоненциального роста источников данных
Объемы данных, которые ежедневно поступают с различного сетевого оборудования телеком-операторов, могут достигать миллиардов записей в день. Одним из критических элементов ИТ-инфраструктуры для обработки такого потока разнородных данных с большого количества устройств становится Mediation-система. О том, какие требования телеком-операторы предъявляют к подобным продуктам и как уход иностранных вендоров повлиял на этот сегмент рынка, рассказывает Павел Кравченко, старший консультант по поддержке продаж Nexign.
С какими сложностями сегодня сталкиваются телеком-операторы при работе с данными сети?
Основным вызовом сегодня становится стремительное увеличение разнообразия и общего объема источников данных. Ведь благодаря развитию сетей и средств IoT появляется все больше новых устройств и новых версий старых устройств, которые генерируют разнородные данные. В результате крупный телеком-оператор в среднем обрабатывает не менее миллиарда записей в день, поступающих из различных источников, количество которых может варьироваться от десяти до нескольких сотен. И важно обработать эти данные корректно, в полном объеме и вовремя. Так, например, несвоевременный анализ записей о производительности и параметрах сети на фоне увеличившегося трафика может привести к операционным сбоям, а неспособность оперативно получить тарификационные данные несет финансовые риски.
На помощь операторам приходят Mediation-системы, их еще часто в России называют системами предбиллинга, которые способны централизованно собирать информацию из разрозненных источников, преобразовывать и отправлять ее потребителям в корректном формате, с определенной частотой и по заданным сценариям. Более того, такие системы имеют высокую степень автоматизации и роботизации, что позволяет обрабатывать огромные объемы данных практически без участия сотрудников оператора.
Получается, такие решения работают практически без участия человека?
Да, у большинства современных Mediation-решений примерно 99,9% операций обрабатывается в автоматическом режиме. Системы сами подключаются к источникам, собирают данные и самостоятельно распределяют их по потокам на основе преднастроенных правил. Далее они могут автоматически фильтровать, соотносить и обогащать данные, например, добавлять сведения об устройстве для анализа причин сбоя. Все это обеспечивает качественную и безопасную доставку и обработку информации. Оповещение и вмешательство оператора необходимо только в случае получения нестандартных записей и необходимости их ручной корректировки.
В целом на глобальном уровне можно отметить тренд на более высокий уровень автоматизации работы с данными сети. А в идеальном варианте – и на автоматическое масштабирование, когда, например, при достижении определенного порога объема данных система должна сама разворачивать дополнительный сборщик данных и переключать на него половину нагрузки. А уже сейчас, система может, как минимум, уведомить оператора о проблеме.
Какие новые сценарии обработки данных можно ожидать? Как повлияло развитие 5G на рынок Mediation-систем?
Операторы вынуждены реагировать на значительный рост количества сетевых элементов, например, увеличение базовых станций для сетей 5G. В свою очередь, Mediation-системы должны быть способны анализировать все большие и большие объемы данных различного типа. Это повышает требования к гибкости систем, скорости их работы и корректности обработки событий.
В то же время развивается не только сеть, но и растет количество «получателей» данных. Информация, прежде используемая только в определенных системах, теперь имеет более широкое применение. В частности, данные из биллинга и системы мониторинга производительности также идут в различные аналитические системы, например, для выявления корреляции между количеством сбоев сети в определенной местности и уровнем лояльности абонентов. Соответственно, к Mediation-системам добавляется требования по отправке данных более широкому списку «получателей» в считываемых ими форматах.
Как повлиял уход иностранных вендоров из РФ на рынок Mediation-систем? Как обстоит ситуация с импортозамещением в этой сфере?
По нашим приблизительным оценкам, более 70-80% российских операторов используют зарубежные Mediation-системы. При этом большинство из них имеют внутренние команды поддержки, у некоторых даже есть доступ к исходному коду. Поэтому они смогут продолжать обслуживание, несмотря на уход вендоров с отечественного рынка. Тем не менее, развитие подобных систем ограничено. Кроме того, происходит ужесточение регуляторных требований, что, на мой взгляд, также побудит операторов рассмотреть вопрос полной локализации систем в ближайшие 2-3 года. В свою очередь, мы готовы помочь поставщикам услуг связи замещать эти решения с помощью собственных разработок.
В начале ноября мы представили свое OSS-решение для централизованного сбора и трансформации данных сети под названием Nexign Mediation. Продукт использует базы данных с открытым исходным кодом и не содержит зарубежные коммерческие лицензии и компоненты. При его разработке мы ориентировались на нашу обширную техническую экспертизу по созданию и поддержке BSS-систем, включающих и компонент предбиллинга, а также на отраслевые стандарты 3GPP и TM Forum.
Какие возможности предоставляет Nexign Mediation?
Мы создавали систему, отталкиваясь от текущих запросов наших партнеров и потенциальных заказчиков. В первую очередь, это эффективность и надежность процесса сбора и обработки данных. Nexign Mediation способна обрабатывать не менее 1,5 млрд записей в сутки в стандартной конфигурации, что соответствует уровню операторов с более 10-15 млн абонентов . Система также вертикально и горизонтально масштабируема, что позволяет поддержать и более высокую нагрузку при необходимости. В Nexign Mediation также встроен мониторинг, позволяющий выявлять проблемные события и своевременно уведомлять о них техническую службу оператора.
Вместе с тем клиенты часто интересуются возможностью интеграции системы с большим количеством источников данных и запрашивают протоколы с информацией об их объемах. Наш продукт имеет высокий уровень гибкости и может работать с широким спектром различного сетевого оборудования и источников, оперативно собирать и анализировать данные даже со сложными алгоритмами обработки. К тому же система основана на индустриальном подходе, при котором все данные обрабатываются по разным правилам, но эти правила контролируются из единого центра. Это позволяет легко и быстро разворачивать новые сценарии обработки в зависимости от изменения источников и «получателей» данных и эффективно мониторить ситуацию.
Для разработки системы вы использовали low-code подход. Каковы его преимущества?
С помощью low-code оператор может собственными силами, без привлечения сторонних разработчиков, добавлять новые типы и форматы данных, запускать для них сценарии обработки и подключать самые разные устройства. Делается это с помощью набора преднастроенных плагинов, оформленных как визуальный конструктор. Это значительно увеличивает легкость и гибкость конфигурирования системы, а также скорость ее масштабирования. В среднем срок создания новых сценариев и вывод системы на новый уровень автоматизации сокращается в два раза.
Более того, использование low-code подхода помогает снизить затраты на дальнейшее развитие продукта, а полуоткрытый исходный код позволяет оператору или системному интегратору самостоятельно развивать решение, обращаясь к нам только как к поддержке третьей линии.
Расскажите про ваше видение будущего развития Mediation-систем.
Одним из ключевых трендов можно назвать консолидацию OSS, в который входят Mediation-системы, и BSS направлений у телеком-операторов. Сегодня в двух из трех тендеров на BSS-системы мы видим запрос на Mediation-системы. Такая синергия помогает развивать общую инфраструктуру оператора и расширять ее возможности.
В будущем Mediation-системы могут также представлять полностью автоматизированные и роботизированные фабрики данных с понятным графическим интерфейсом. В частности, можно будет легко добавить новый источник данных, правила обработки, обогащения, фильтрации и корреляции. В то же время, система будет самостоятельно выполнять свои основные функции, например, разворачивать и сворачивать дополнительные модули в зависимости от нагрузки. Или решать любые задачи ETL (Extract, Transform, Load), чтобы обрабатывать данные в бизнес-цепочке, не имеющие отношения к сети оператора. Именно таким видением мы руководствуемся при формировании дорожной карты для своего продукта Nexign Mediation.
Узнайте больше о Nexign Mediation по ссылке.