Бенчмаркинг операторов

Бенчмаркинг операторов помогает выбрать сеть для конкретного сценария или оценить её положение относительно других участников рынка. Терминалы работают одновременно, проходят один маршрут и выполняют единый набор тестов, что снижает влияние различий во времени и условиях измерений.

Нужно сравнить операторов?

Укажите территорию, сети и критерии – мы предложим сопоставимый сценарий бенчмаркинга.

Для кого

Операторам мобильной связи и MVNO

Для сравнения сети с конкурентами и контроля качества услуг

Корпоративным и промышленным заказчикам

Для выбора оператора, SIM‑карт и тарифов

Девелоперам, владельцам зданий, транспортной и событийной инфраструктуры

Государственным, исследовательским и экспертным организациям

Для независимого сравнения по утверждённой методике

Когда нужна услуга

Нужно выбрать оператора для сотрудников, объектов, транспорта или корпоративных устройств

Требуется сравнить фактическое покрытие и сервисы нескольких сетей на одном маршруте или объекте

Нужно оценить позицию собственной сети относительно конкурентов по единым KPI

Планируется закупка SIM‑карт или смена оператора на основании измерений, а не рекламных карт покрытия

Требуется повторный бенчмаркинг до и после изменений либо в разные периоды нагрузки

Что проверяем

Технологии и радиосеть

GSM/EDGE (2G), UMTS/HSPA+ (3G), LTE/LTE‑A (4G) и 5G NR (NSA/SA): покрытие, качество сигнала, обслуживающие и соседние соты, диапазоны и смена сот по этажам и зонам. NB‑IoT и LTE‑M/eMTC – по отдельной программе.

Голосовая связь

Доступность и удержание голосовых соединений.

Передача данных

Скорость загрузки и передачи данных, задержка и потери пакетов.

Пользовательские сервисы

Успешность и время выполнения выбранных пользовательских сценариев.

Соответствие порогам

Доля маршрута или площади, соответствующая согласованным порогам.

Как проходят работы

Согласовываем цель сравнения, территорию, операторов, сценарии, KPI и правила формирования итоговых выводов;
Подбираем одинаковые или технически сопоставимые терминалы и проверяем ограничения SIM‑карт, тарифов и тестовых серверов;
Запускаем единые тестовые сценарии одновременно на одном маршруте или внутри одного объекта;
Контролируем полноту данных и при необходимости повторяем участки, где условия или качество записи не позволяют сравнивать результаты;
Обрабатываем данные по единой методике и отдельно фиксируем внешние факторы, способные повлиять на сопоставимость.

Что получает заказчик

Сравнительные карты по каждому оператору

Единые таблицы KPI и ранжирование по согласованным показателям

Перечень зон, где различия между сетями наиболее заметны

Описание методики и условий, необходимых для корректной интерпретации

Выводы по оператору или сети, лучше отвечающей выбранному сценарию использования

Оборудование

Сбор данных

Для синхронной работы нескольких терминалов:
Pilot Walktour Pack и Pilot Matrix

Для контроля полевого теста: Pilot Pioneer

Управление и анализ

Pilot Pioneer Expert

Pilot Fleet Edge

Стандарты и методика

Программа измерений и расчёт KPI формируются с учётом применимых положений ITU‑T E.800 и ITU‑T E.804, серии ETSI TS 102 250 и спецификаций 3GPP для тестируемой технологии.

До начала бенчмаркинга фиксируются одинаковые сценарии, длительности, серверы, аппаратные конфигурации, тарифные ограничения, число повторов и правила ранжирования.

Что потребуется от заказчика?

Цель бенчмаркинга и решения, для которых будут использоваться результаты;
Перечень операторов, территория или объект, маршруты и желаемые временные интервалы;
Корпоративные SIM‑карты и тарифы, если требуется оценить именно условия заказчика;
Приоритетные сервисы, KPI, пороговые значения и правила ранжирования, если нужен общий рейтинг;
Требования к составу отчёта, исходным логам и повторным измерениям.

Вопрос-ответ

В согласованной конфигурации Pilot Matrix используются одинаковые встроенные тестовые модули, которые одновременно выполняют единый сценарий. Это практически исключает преимущество из‑за аппаратной части. Если применяются смартфоны, берутся одинаковые модели с одинаковыми версиями ОС, ПО и настройками. Различия SIM‑карт и тарифов полностью исключить нельзя: их проверяют до теста, а ограничения фиксируют в методике и отчёте.

Веса определяются задачей заказчика до начала измерений: например, для транспорта важны непрерывность и мобильность, для офиса – indoor‑покрытие и голос, для мобильных рабочих мест – скорость и задержка. Если веса не утверждены, результаты показываются раздельно без искусственного общего места.

Одного маршрута недостаточно для выводов о городе в целом, различиях между часами пик и низкой нагрузки или устойчивости результата во времени. В таких задачах нужны повторные проезды и заранее определённая выборка маршрутов и временных интервалов.

Нужно сравнить мобильных операторов?