«Тестовая Зона» Билайн: проходите в гермошлюз, одевайтесь теплее в машзале и выключайте телефоны

4f6cca669320bcd3aa28b9311d591ba8.jpgЭлементы антенной системы: RF кабель, аттенюатор переменный (тестовая нагрузка)Объект выглядит как машзал ЦОДа, только оборудование более разношерстное и инженеры работающие с ним, находятся в зале большее количество времени. С оборудованием работает постоянно от 2 до 6 групп инженеров. Проходя по машзалу, можно застать тепло одетых инженеров компании Хуавей, европейцев в классическом дресс-коде, или экспертов компании Билайн принимающих тесты и контролирующих все происходящее.

54893c5201c01926bbd0bad5109c72b2.jpgИнженеры развернулись прямо в машзале, но куда чаще работа идёт удалённо.

Внутри одновременно работает до 15-и сотовых сетей разных стандартов и производителей. На площади 250 квадратных метров, работают около 100 стоек, в которых реализованы полноценные сегменты магистральной транспортной сети, городской транспортной сети, билинга, пакетной и голосовой опорной сети, контроллеры и базовые станции мобильных сетей разных стандартов.

Трафик. Дальше много фото оборудования.

Когда производители оборудования предлагают нам свои новые решения, прежде чем ставить их в живую сеть, необходимо убедиться, что оборудование работает так как нужно нам, и провести большое количество разнообразных тестов. Как правило, речь идёт о «тяжёлых» решениях уровня Core Network (каждое из которых может состоять из нескольких стоек), новых базовых станциях разных стандартов, оборудовании транспортной сети и так далее. Понятное дело, необходимо место, где всё это можно собрать, включить, настроить и протестировать. В Билайне уже много лет такое место есть — это «Тестовая Зона» ДТР

d71cd001fb3b614018308dcc1753bdfc.jpgВид с высоты стремянки

По результатам выполняемых тестов подбирается оптимальная конфигурация железа, необходимые софтовые функции и проводится тонкая настройка всех параметров для идеальной совместной работы всех устройств.

Несмотря на высокую скорость ротации оборудования (целые стойки могут меняться в течении месяца несколько раз), требования к качеству монтажа остаются такими же, как на коммерческих сайтах. Иначе можно потерять несколько недель на безуспешные тесты продвинутых решений, а проблема окажется в небрежно обжатом кабеле. Да и классическое понимание что «хорошо летают только красивые самолеты» абсолютно справедливо для нашей сферы — хорошо работают только красиво уложенные кабели!

fb4c3b0609385a056aa25d4d95c28267.jpgГрамотный монтаж кабелей подключенных в многопортовый коммутатор

Количество проложенных кабельных коммуникаций в ТЗ не поддается оценке, одних только силовых кабелей питания лежит под фальшполом около 12 километров.

Шлюз на входе в инженерное крыло, служит для дополнительной безопасности. Вторая дверь шлюза откроется только когда закроется первая.

945e28102c469c6da7d1c19e3061ae5c.jpg

Требования к безопасности предъявляемые инженерам работающим на «Тестовой Зоне» весьма высоки, причем они касаются как собственно безопасности, так и знаний по охране труда и по электробезопасности. Вот, например, группа китайских инженеров, конфигурирующих свое оборудование. Чтобы получить право доступа в помещение ТЗ нужно иметь допуск уровня 3-й группы по электробезопасности (для работы с электроустановками напряжением до 1000В), поскольку получить документы российского образца иностранным гражданам не получится — работают они здесь только в сопровождении наших экспертов, имеющих необходимые допуски.

cb638482c6836754d7a076333f108b53.jpgМозговой штурм в исполнении китайских инженеров

Перед входом лучше выключать мобильные телефоны, поскольку за этой дверью, царит настоящее буйство в радиоэфире.

23f9c99be70d3303cf870c98e9d8470c.jpgБронированная дверь в помещение ТЗ

В замкнутом помещении одновременно может работать больше десятка базовых станций разных стандартов (GSM/UMTS/LTE/Wi-Fi) и разных производителей, как поведёт себя ваш телефон в такой сложной радиообстановке — большой вопрос. Часто те, кто не позаботились отключением телефона заранее, будут оставаться в уверенности, что находятся на связи, в то время как телефон, сведенный с ума тестовым радиоэфиром давно уже ожидает перезагрузки для возврата в родную мобильную сеть.

Чтобы снизить уровень излучения от базовых станций до безопасных — каждая база оснащается аттенюаторами (постоянными или переменными) — устройствами для снижения интенсивности электромагнитного сигнала.

cd24c06182355798af70ff1891e3c973.jpgЭлементы антенной системы: RF кабель, аттенюатор постоянный, антенна всенаправленная — OMNI

При этом для проведения тестов конкретной базовой станции требуется обеспечить полную изоляцию от внешних факторов, приблизив состояние рядом с тестовым телефоном, близкое к «сферическому радиосигналу в вакууме». Для этого используются специальные экранированные шкафы — радиочастотные безэховые камеры, которые не пропускают ЭМ сигналы. Конечно, не пропускают — это сильно сказано, точнее будет — почти не пропускают и чем меньше это «почти», тем дороже безэховая камера. ТЗ Билайн оснащена несколькими безэховыми камерами, экранирующих свойств которых достаточно для наших задач.

6f22d6b64242d754eeed7db0b45a153b.jpgВнутренняя стенка радиочастотной безэховой камеры

Безэховая камера с панельными антеннами и телефонами внутри для проведения тестов мобильных сетей. Закрывается дверь, подается мощность на приемопередатчик базовой станции, и мы можем начинать тестирование.

0e247edc4439d14a4de9949995d59dc4.jpgВсе готово к началу тестов мобильной сети

2e4f2dbede0fc7d0ebf2a8272987d924.jpgПанельные антенны в безэховой камере и тестовый мобильный телефон

73bc48d6170b2885e041f202b1f6a68c.jpgА вот здесь видно стойку, с которой идут тесты. Мультистандартная базовая станция Ericsson с RF кабелями, постоянными и переменными аттенюаторами и безэховой камерой.

Как всё это работаетДля обеспечения бесперебойной работы ТЗ, создаются все условия: — Резервированное питание как для коммерческого оборудования, стойка управления питанием:

5fd68d7621c773dc5816c3d32c575bff.jpg

Цветовая гамма может быть неожиданной, но, главное, что оборудование функционирует:

b40f44ea37bd38b9f311761508246338.jpg

— Автоматическая система пожаротушения:

64a5827b711996ec1ab3ede3ba79fdb9.jpg

— Система видеонаблюдения — камеры контролируют каждый ряд оборудования:

172a0fca92891105caa9da1bc9575d0d.jpg

6479b56c339ed39619562d22d2041776.jpg

Оборудование в зал попадает через грузовой лифт, а непосредственно в помещении ТЗ смонтирована платформа для подъёма завозимого оборудования на уровень фальшпола:

b99c860a2dbc63468f047f4092fba750.jpg

Для помещений с фальшполом, один из главных инструментов — вакуумная присоска, обычно называемая «лягушка»:

a21a8ea25fa374c3eb2c74414e7ff28c.jpg

Вот так кабель прокладывается под фальшполом, с использованием специальных кабельных трасс и лотков:

22b11fcdcf98547dc3fc6a7380345f76.jpg

Для подключения оборудования в «Тестовой Зоне» к сети электропитания, было принято решение, опробовать предложение от компании ABB, «Система разъемного монтажа электрооборудования Smissline».

dbf9eaeab8d0c8814ab2dca03cae5334.jpgАвтоматы с установленными датчиками тока, с помощью которых в режиме реального времени можно контролировать нагрузку на каждом автомате

68f658638379ad54ea1cc8708ed07049.jpgРеализация решения системы Smissline в распределительном щите (настенный подвесной вариант)

342e358b31ef080d9090e37eb69df66f.jpgШинная система Smissline вблизи, простота монтажа, защита от поражения электрическим током, гибкость и экономия времени при замене автоматов потребителей

Какое есть железо e44eb77af2e8add1c8c0f82d5ac371a1.jpgСтойки ровными рядами. Монтажные работы завершены, все стойки закрыты

В ТЗ функционируют узлы практически всех систем, и вендоров эксплуатирующихся в Билайне: оборудование CS Core — MSC/VLR/MGW/HLR, PS Core — SGSN/GGSN/MME/ePC, радиоподсистемы GSM — BSC/TRC/BTS, UMTS — NodeB/RNC, LTE — eNodeB. Кроме того, эмулируются сегменты транспортных сетей — MEN, IP/MPLS. Настолько полный «набор» оборудования позволяет собирать схемы, максимально приближенные к коммерческой сети, но лишенные влияния на сервисы «живых» абонентов. Если возникнет любой вопрос, связанный с проверкой имеющегося оборудования — прежде чем реализовывать конфигурацию в коммерческих сетях, необходимые настройки применяются на тестовом оборудовании, и мы можем оценить их влияние на все узлы, с которыми оно взаимодействует.

Далее — небольшой фото-экскурс по некоторому оборудованию, которое работает в нашей ТЗ.

5048fd79485d60e09508ae5d2d758705.jpgМультистандартная базовая станция Huawei для использования в помещениях

Один из элементов устаревающего наследства — кросс-панель, для кроссировки потоков E1. В новом оборудовании данный тип транспорта практически не применяется, все сети переводятся на оптический транспорт (STM) либо на каналы Ethernet FE/GE/10GE.

81d82f109e4a78ce99cececc93429b3b.jpgМедный кросс (DDF 120 Om) с плинтами KRONE. В основном используется для обеспечения транспортом базовых станций GSM

3208555bdfe295ef7e1551413d03bc8a.jpgМаршрутизатор, реализующий тестовый сегмент транспортной сети базовых станций. Не подписать кабель здесь фатально

2edeb027af67783ca0793c1624be9971.jpgКонтроллер BSC сети GSM производства Ericsson, модель evoBSC8200 (новейшая модель шведского производителя)

409385ac538ea9a5fc2b5bf5be1dad5c.jpgГолосовой коммутатор Huawei MSoftx3000

f1c8c9ac5445377175c8d97667089a0a.jpgШасси Cisco ASR5000, на котором построена тестовая Packet Core для сегментов сетей стандартов GSM/UMTS/LTE

0fb345eba0617080a40a985fe8856f54.jpgТелеком-оборудование внутреннего IP Backbone тестовой Packet Core на базе Cisco

775773b4b46f22fff27f9f2d6fbd8e1e.jpg

6c8937dcc0219dd7becfda3dc2097d6a.jpgПлаты тестового шасси Huawei OSTA 2.0. Шасси Huawei OSTA 2.0, на котором построена тестовая IMS Core.

4d1e51010fd2495acf2e5e90ee6b7d87.jpgСтойки с оборудованием компании Comverse, на котором реализован тестовый сегмент биллинговой системы

b84801ff917a2a2723842eed4c324abd.jpg

a25402530c23515f3270226be52d0555.jpgВнутренние панели (оптическая и Ethernet) в стойке с оборудованием MGW производства Nokia

5004319ab1507e9f81619985637ea395.jpgКомпактная базовая станция стандарта LTE производства компании ZTE

afbbcf64b08959028327e7046400b2c1.jpgРадиопередатчики (RRU) различных стандартов (2G/3G/4G) и различных производителей

234bd99dabcb18b6bc4dacfdb24c6f6f.jpgМультистандартная базовая станция Ericsson для использования в помещениях

79e0283cf6c3466a258bf2e31aa5f85e.jpgПико-базовая станция GSM производства Ericsson

Одна из важнейших задач ТЗ — проверка функциональности нового оборудования. К примеру, с появлением коммерческих сетей LTE, в России нашлись увлеченные и знающие люди, которые сумели наладить производство маломощных базовых станций стандарта LTE (http://ranberry.net/ru).

Билайн совместно с российскими разработчиками проводит полнофункциональное тестирование работы pico eNodeB LTE, проверяя все аспекты — от легкости и надежности интеграции базовой станции в существующую мобильную сеть, до проверки процедур мобильности между новой базой и уже существующими.

3a8e88bfc275165d57fd8924786ac7a1.jpgНадпись «Made in Russia» — крайне редкое явление на подобных устройствах

b6de01237d0a0017fb0610b772fe0235.jpgСовмещённый модуль Wi-Fi + Femto 3G производства Cisco.

Присмотритесь к нему внимательнее, сейчас в телекоме наметилось развитие направления миниатюрных многостандартных устройств, и возможно очень скоро подобные решения можно будет приобрести в личное пользование в обычном магазине электроники. Сейчас тесты продолжаются и проходят весьма успешно.

77c33e8658aa680341042fe327e7693e.jpgСегмент тестовой сети MetroEthernet — роутер Alcatel-Lucent 7750 SR-7

e8eaefa31eea14a7ccb332c58ad18ca0.jpgСегмент транспортной сети, для подключения мультистандартных базовых станций, на оборудовании Alcatel-Lucent и Cisco.

54152bf9268c0723f7beed87c7ea40c3.jpgМодуль KVM расположенный в стойке Huawei

Подобные модули часто можно увидеть в телекоммуникационных стойках, используются они для организации локального доступа к оборудованию.

7aa98935b8b266af13b22633c17d123b.jpgПередатчик стандарта UMTS производства Ericsson

2b4dc75287d90336a5e6f946a4d02307.jpgБалансировщик пакетного трафика

Ну и напоследок — пара экспонатов, которые вы вряд ли встретите, в обычных ЦОД-ах, или машинных залах телеком-оператора:

Первый экспонат:

a5a8623a3a9d0c93f72f018b4f946e0f.jpg

Кажется, что он похож на старую радиолу, которая стояла когда-то у бабушки, и даже навевает «теплые-ламповые» ассоциации.

На самом деле это — новейший радио-контроллер сети UMTS — RNC, от компании NSN. В нашей ТЗ был смонтирован, проинтегрирован и успешно прошел тесты, первый образец данного типа оборудования в России.

79f21333333f30d9d68ed78695ef0e22.jpg

Второй экспонат: Выглядит как странный многопортовый сервер, к тому-же запертый на кодовый замок.

6b4735c49dddbb5c9d9f407074e7d0df.jpg

Это один из ключевых элементов для выполнения тестов транспортной сети — Spirent Test Centre, который позволяет творить в пакетных сетях практически все, что вы сможете придумать для реализации самых каверзных тестовых сценариев. В текущей конфигурации тестовый центр имеет 8×10GE и 4xGE портов и позволяет генерировать различные виды L2/L3 трафика (как юникастового, так и мультикаст/броадкаст); эмулировать десятки тысяч клиентских устройств и маршрутизаторов с полной поддержкой всех основных сетевых протоколов, таких как протоколы маршрутизации (OSPF, BGP, IS-IS); базовые служебные протоколы (ARP, DHCP); MPLS; синхронизации (PTPv2, SyncE). Этот набор позволяет проводить полный набор функциональных и нагрузочных тестов оборудования транспортной сети.

По «Тестовой Зоне» нас водили:

378a1004347a25b76b7bd6e753cd5b07.jpgПоляк Евгений Олегович, бессменный руководитель «Тестовой Зоны» с момента её основания

be872541019f6185abd03f0ef9af369b.jpgГлебов Виктор Геннадьевич, ведущий эксперт службы развития мобильной опорной сети

Ссылки

© Habrahabr.ru