100-гигабитный Ethernet

40-гигабитный Ethernet (или 40GbE) и 100-гигабитный Ethernet (или 100GbE)^[1] — стандарты Ethernet разработанные группой IEEE P802.3ba Ethernet Task Force^[2] в период с ноября 2007 года ^[3] по июнь 2010 года^[4]. Эти стандарты являются следующим этапом развития группы стандартов Ethernet, имевших до 2010 года наибольшую скорость в 10 гигабит/с. В новом стандарте, IEEE Std 802.3ba-2010, обеспечивается скорость передачи данных в 40 и 100 гигабит в секунду, при совместном использовании нескольких 10 гбит/с или 25 гбит/с линий связи (lane).

История

История проекта:

• 18 июля 2006 IEEE 802.3 на пленарном собрании, проходящем в Сан-Диего (San Diego), проявил интерес к созданию стандарта
• В сентябре 2006 года состоялось первое заседание инициативной группы HSSG (Higher Speed Study Group)
• В ноябре 2007 года состоялось последнее заседание инициативной группы
• 5 декабря 2007 года инициативная группа разработчиков стандарта формально принята, под названием P802.3ba, в IEEE LMSC
• В январе 2008 года состоялось первое заседание инициативной группы P802.3ba
• В марте 2009 года IEEE 802.3 выпускает бюллетень для рабочих групп
• В ноябре 2009 года IEEE LMSC выпускает бюллетень для спонсорских организаций
• В январе 2010 года состоялось первое заседание группы, разрабатывающей 40-гигабитный Ethernet использующий одномодовое оптическое волокно PMD^[5]
• 25 марта 2010 группа P802.3bg принимает стандарт на 40 гбит/с одномодовое PMD-волокно
• 17 июня 2010 — принятие стандарта IEEE 802.3ba

Даты выхода Черновых версий решений Рабочей группы P802.3ba:

• Черновая версия 1.0 — 1 октября 2008
• Черновая версия 1.1 — 9 декабря 2008
• Черновая версия 1.2 — 10 февраля 2009
• Черновая версия 2.0 — 12 марта 2009 (избирательно, для бюллетеня рабочих групп)
• Черновая версия 2.1 — 29 мая 2009
• Черновая версия 2.2 — 15 августа 2009
• Черновая версия 2.3 — 14 октября 2009
• Черновая версия 3.0 — 18 ноября 2009 (избирательно, для бюллетеня спонсорских групп)^[6]

• Черновая версия 3.1 — 10 февраля 2010
• Черновая версия 3.2 — 24 марта 2010

Итоговая версия стандарта принята 17 июня 2010 под названием IEEE 802.3ba-2010.

Физический уровень

В стандартах 40/100-гигабитного Ethernet содержится описание нескольких различных стандартов физического уровня (PHY). Сетевые устройства могут использовать различные типы PHY путем использования сменных PHY-модулей. Модули, использующие оптическое волокно, стандартизированы в 802.3ba а в различных multi-source agreements, MSA (соглашения между различными производителями). Один из стандартизованных модулей, поддерживающий и 40 и 100-гигабитный Ethernet, — это CFP MSA (англ. C form-factor pluggable)^[7], который может использоваться для расстояний 100 и более метров. Модули QSFP и CXP обеспечивают работу на меньших дистанциях^[8].

Стандарт 802.3ba поддерживает только полнодуплексный режим работы^[9].

При разработке PHY-части стандарта ставились цели:

• Сохранить формат кадров Ethernet стандарта 802.3, использующих формат 802.3 MAC
• Сохранить минимальные и максимальные размеры кадра (FrameSize), совпадающие с текущей редакцией стандарта 802.3
• Обеспечить в точке сопряжения MAC/PLS уровень ошибок (en:Bit error ratio) не выше $10^{-12}$ (то есть не более 1 ошибки в среднем на каждые $10^{12}$ бит)
• Обеспечение соответствующей поддержки Оптических Транспортных Сетей (англ. Optical Transport Network, OTN)
• Скорость передачи данных на уровне MAC в 40 и 100 гигабит в секунду
• Разработка вариантов уровня PHY для работы через одномодовое оптическое волокно (SMF), многомодовое оптическое волокно OM3 (MMF), кабели с медными проводниками и через объединительные платы (backplane).

Стандартизованы следующие варианты PHY:

PHY	40-гигабитный Ethernet	100-гигабитный Ethernet
как минимум 1 метр по объединительной плате	40GBASE-KR4
как минимум 10 метров по медному кабелю	40GBASE-CR4	100GBASE-CR10
как минимум 100 метров по OM3 MMF	40GBASE-SR4	100GBASE-SR10
как минимум 125 метров по OM4 MMF	40GBASE-SR4	100GBASE-SR10
как минимум 10 км по SMF	40GBASE-LR4	100GBASE-LR4
как минимум 40 км по SMF		100GBASE-ER4

Задача передачи 40 и 100 Гбит/с сигнала по оптическому кабелю OM3 на 100 м (40GBASE-SR4 и 100GBASE-SR10) была решена с использованием волн около 850 нм, сходной с таковой в стандарте 10GBASE-SR.

Передача сигнала со скоростью 40 Гбит/с по печатным платам на расстояния до 10 м (40GBASE-KR4) реализуется использованием 4 линий стандарта 10GBASE-KR.

Работа на расстояниях 10 и 40 км реализуется с использованием 4х разных длин волн (около 1310 нм) и используют оптические элементы со скоростью передачи данных 25 Гбит/с (для 100GBASE-LR4 и 100GBASE-ER4) и 10 Гбит/с (для 40GBASE-LR4).^[10].

Готовые продукты для уровня PHY

Сгруппированы по реализуемым вариантам PHY.

Backplane

Информация о создании модулей 40/100GbE для объединительных плат в настоящее время отсутствует. Тем не менее, многоканальные 100GbE соединения небольшой дальности с точки зрения стоимости и надежности выглядят перспективнее используемых в настоящее время планарных матриц поверхностно-излучающих 10Gbps лазеров (VCSEL arrays) и в ближайшее время скорее всего появятся в продуктах с оптической матрицей коммутации — таких как Juniper TX и Cisco СRS FCC.

Медный кабель

В 2009 году Quellan объявил о создании оценочной платы (Evaluation Board)^[11], однако не предоставил готовых модулей.

Многомодовое оптическое волокно

Компании Mellanox^[12] и Reflex Photonics ^[13] объявили о начале продаж CFP-модулей для многомодовых волокон.

Одномодовое оптическое волокно

Компании Finisar^[14], Sumitomo Electric Industries ^[15] и OpNext ^[16] на Европейской Выставке Оптических Коммуникаций (англ. ECOC) в 2009 году продемонстрировали одномодовые 40 и 100-гигабитные Ethernet модули, основанные на стандарте CFP MSA.

Поддержка в коммерческих продуктах

В отличие от ситуации конца 1990-х годов, когда отсутствие скоростных интерфейсов магистральных маршрутизаторов сдерживало развитие всей сети Интернет, увеличение транспортных скоростей с 10 до 100 Гигабит в секунду в 2010-х годах в основном мотивировалось экономическими соображениями, как-то: сокращение числа требуемых волн в магистральных оптических сетях, снижение стоимости интерконнектов в больших центрах обработки данных и точках обмена трафиком, а также снижение потерь емкости за счет разбалансировки трафика в параллельных группах 10Гбит каналов. При этом многие магистральные операторы связи стремились перейти непосредственно от использования 10Gbps SONET/SDH, минуя промежуточную фазу в 40Гбит, к 100Гбит Ethernet интерфейсам и выиграть в стоимости за счет ожидаемого быстрого снижения стоимости последних.

Немаловажную роль в ожидаемом снижении цен сыграл отказ от разработки отдельных канальных схем для SONET/SDH и Ethernet. Де-факто, 100 Гигабитный Ethernet отныне становился единственным фреймовым форматом на вершине оптической иерархии скоростей (ODU4), что гарантирует параллельное снижение цен при росте производства 100Гбит интерфейсов как для магистральных, так и для локальных сетей. Следующим уровнем иерархии должен стать формат ODU5, эксклюзивно планируемый к применению в 400Гбит Ethernet сетях.

При разработке 100Гбит систем индустрии предстояло преодолеть следующие технологические проблемы:

• разработать схемы модуляции и кодирования сигнала, позволяющие передавать 100Гбит потоки на достаточную дальность в оптическом С-диапазоне (1530—1565 нм)
• разработать новые оптические источники и приемники вкупе с оборудованием оптической коррекции (усилители, компенсаторы дисперсии, селективные фильтры и так далее)
• разработать электронные линейные карты, Ethernet MAC чипы и сетевые процессоры для потоковой обработки пакетных данных на скорости 100 Гбит в секунду

В целом, решение этих проблем потребовало значительных инвестиций в интеллектуальную собственность, что способствовало затягиванию выхода конечных продуктов на рынок. Несмотря на то, что большинство производителей оптического и электронного оборудования заявили о поддержке 100Гбит систем в течение 2009—2010 года и регулярно испытывали системы разной степени готовности, широкое внедрение 100-гигабитного Ethernet началось лишь в 2011 году.

Оптический транспорт с поддержкой 100-гигабит Ethernet

Поскольку передача оптического сигнала в условиях нелинейной среды (оптическое волокно) является принципиально аналоговой проблемой, прогресс в этой области замедляется, причём значительно в большей степени, чем снижающийся прогресс в литографии цифровых электронных схем (описываемый эмпирическим законом Мура). Как результат, несмотря на то, что 10Гбит оптические интерфейсы и транспортные системы существовали с середины 1990-х годов, первые успешные попытки передачи 100Гбит потоков в оптических сетях произошли более чем через 15 лет. Кроме того, первые магистральные 100Гбит системы были подвержены ряду серьёзных ограничений, в том числе — высокой стоимости за счет использования уникальных лазерных систем, а также значительным энерго-габаритным требованиям, что исключало выпуск трансиверов в компактных форматах (таких как SFP+) раннее разработанных для 1Гбит, 2.5Гбит и 10Гбит сигналов.

Тем не менее, по состоянию на август 2011 как минимум пять компаний поставляли покупателям системы оптического транспорта совместимые с канальной скоростью ODU4 (104.794Гбит/сек) — в том числе, Ciena (решение бывшей Nortel Networks), MRV, Alcatel-Lucent, ADVA Optical Networking. Последней к списку присоединилась компания Huawei, объявившая о начале поставок корейской компании KPN в июне 2011 года ^[17] Ожидается, что до конца 2011 года такие системы будут доступны от всех ведущих производителей оптического оборудования.

Совершенствование оптических транспортных систем для передачи 100Гбит Ethernet будет неизбежно происходить в сторону уменьшения их стоимости, при этом могут использоваться следующие перспективные технологии: совместная передача сигнала двумя 50Гбит лазерами меньшей стоимости в одной выделенной полосе спектра, широкое использование цифровой обработки сигнала (DSP) для коррекции нелинейностей, уменьшение числа оптоэлектронных (OEO) преобразований в транспортной системе за счет поддержки внешних источников сигнала (foreign lambdas) и так далее.

Первые пакетные маршрутизаторы и коммутаторы с поддержкой 100-гигабит Ethernet

Наличие линейных оптических 100Гбит систем передачи данных позволяет сократить число требуемых длин волн в DWDM системах и увеличить объем передаваемых данных по существующей кабельной инфраструктуре. Тем не менее, использование 100Гбит оптического транспорта для передачи параллельных 10Гбит потоков данных снижает эффективность статистического мультиплексирования в пакетных сетях а также требует 10x10Гбит мукспондеров для согласования форматов. По этой причине, магистральные операторы проявляют заинтересованность в переходе на поддержку 100Гбит Ethernet непосредственно на интерфейсе маршрутизатора (пакетного коммутатора).

Сложность в разработке чипсета для поддержки 100Гбит Ethernet заключается в необходимости обеспечения высокой производительности при равномерной загрузке интерфейса вне зависимости от параметров входящего трафика и отсутствии перестановок пакетов внутри одного IP/MPLS потока — последнее требование делает распараллеливание одного полнодуплексного 100Гбит интерфейса между несколькими (2-мя или 4-мя) отдельными сетевыми процессорами технически сложным. Дополнительные трудности создает дизайн линейных карт — за счет возросших требований к размерам и охлаждению 100Гбит оптики и в условиях дефицита на рынке 100Гбит трансиверов, фирмы-пионеры 100Гбит сетевого оборудования были вынуждены вести самостоятельные либо совместные оптоэлектронные разработки для того чтобы уложиться в жесткие линейные и энергетические ограничения современных сетевых устройств. Ожидается, что по мере выхода на свободных рынок коммерческих электронных и оптических компонентов 100Гбит решений, список поставшиков таких систем будет расти, а цены будут активно снижаться.

Значительный объем начальных инвестиций в запуск 100Гбит Ethernet продуктов объясняет как начальный фокус в сторону оборудования высшей ценовой категории (операторского класса), так и желание производителей «досрочно рапортовать» о запуске продуктов до начала серийного производства, по результатам инженерных либо технологических испытаний. Поэтому в приведенном ниже историческом списке первых поставщиков 100 Гигабит Ethernet решений указаны как даты начального объявления IP/MPLS продуктов, так и официальные даты поставок (с учетом доступности информации).

Alcatel-Lucent

Компания Alcatel-Lucent впервые анонсировала 100GbE интерфейсы стандарта 802.3ba для маршрутизаторов 7450 ESS/7750 SR в июне 2009 года, с последующими тестами и показами продукта в июне-сентябре 2010-го ^[18]. Однако, в презентации президента оптического отделения компании Джеймса Ватта (апрель 2011 года) ^[19], 100GE упоминался все еще лишь в контексте демонстрации клиентам (T-Systems, Portugal Telecom, 360Networks). Также, пресс-релиз компании от 18 июня 2011 года ^[20] был вновь ограничен результатами полевых испытаний.

Возможным объяснением столь длительной задержки является уникальная архитектура пакетных продуктов Alcatel-Lucent, изначально ориентированных на оказание услуг на границе сети (VPLS, PPPoE, развитая структура очередей).

Фактически, компания Alcatel-Lucent производит всего одно базовое семейство маршрутизаторов (Alcatel 7750) приобретенное с компанией Timetra Networks. В 2011 году, единственной серийно выпускаемой элементной базой для семейства являлся сетевой процессор собственной разработки FP2 с полнодуплексной производительностью в 50Gbps. В соответствии с документацией фирмы, два чипсета FP2 могут также быть установлены в оппозитной, полудуплексной 100Гбит конфигурации, позволяющей реализовать интерфейс 100Гбит Ethernet без балансировки по потокам между чипами. Однако, такая аппаратная конфигурация чревата дисбалансом нагрузки ввиду того, что количество входных операций (ingress lookup) как правило превышает количество требуемых выходных операций (egress lookup) — что может быть недостаточно для стабильной работы решения в реальной сети.

В перспективе, Alcatel-Lucent планирует перевести платформу 7750 на объявленный в мае 2011 года 400Гбит чипсет FP3 ^[21], который, возможно и станет первым реальным 100GE продуктом компании на обновленной платформе 7750.

Brocade

Фирма Brocade объявила о поддержке 100Гбит Ethernet технологии на унаследованной от поглощения Foundry Networks платформе MLXe в сентябре 2010 года ^[22]. Тем не менее, уже в июне 2011 года Brocade смогла анонсировать первый коммерческий запуск своей 100GE технологии на площадке AMS-IX в Амстердаме ^[23], таким образом став одной из первых фирм получивших доход на 100Гбит Ethernet рынке.

Линейка скоростных маршрутизаторов MLXe использует сетевые процессоры и оптику сторонних разработчиков; платформа поддерживает минимум услуг как в пакетном (базовый IP/MPLS коммутатор) так и в оптическом (разнообразие трансиверов) диапазоне. Brocade позиционировал свой первый 100Гбит Ethetnet продукт для MLXe (2-x портовую линейную карту) в начальном ценовом сегменте, с дополнительной лицензией на использование второго порта.

Cisco

Корпорация Cisco совместно с Comcast еще в 2008 году объявили об успешных испытаниях 100-гигабитного Ethernet (100GbE) по существующей оптической инфраструктуре между городами Филадельфия (штат Пенсильвания)^[24] и Маклин (штат Вирджиния). Использовались маршрутизаторы Cisco CRS-1 и оптические каналы DWDM ^[25]. Тем не менее, эта демонстрация не воспроизводила полностью полнодуплексный 100Гбит/с Ethernet канал, поскольку маршрутизатор CRS-1 поддерживает скорость всего лишь до 40Gbps на слот. Очевидно, что в тесте 2008 года нагрузка интерфейса не могла превысить половины от расчетной скорости.

Технически, первой платформой Сisco способной обеспечить работу 100Гбит Ethernet интерфейсов стал маршрутизатор CRS-3 с одним чипсетом на линейную карту и скоростью в 140 Гбит на слот. По этой причине, первые настоящие испытания 100Гбит Ethernet технологии от Cisco состоялись лишь в 2010 году, а первые коммерческие клиенты (AT&T и Comcast) были объявлены в апреле 2011 года ^[26]. В июле 2011 года Cisco также проводила демонстрации 100GbE интерфейсов на маршрутизаторах границы ядра (ASR9000) ^[27] без анонсирования даты поставок.

Huawei

Китайская компания Huawei представила «первую в индустрии» разработку 100GE интерфейса для машрутизатора в октябре 2008 года ^[28]. Следующим шагом фирмы стал анонс законченной системы для передачи 100Гбит Ethernet в сентябре 2009 года ^[29]. Система включала в себя оптический транспорт OSN6800/8800 и 1x100GE линейные карты машрутизаторов NE5000e на основе чипсета собственной разработки «Solar 2.0 PFE2A chip» и оптики в форм-факторе CFP. В 2010 году, это же решение было детализировано как использующее карты LPU-100F на основе двух чипсетов Solar 2.0 в оппозитной конфигурации ^[30]. Тем не менее, в пресс-релизе компании о получении контракта на строительство IP/MPLS сети от российской компании Мегафон в октябре 2010 года ^[31], Huawei отчитался лишь о поставке 40Гбит систем NE5000e, «с возможностю масштабирования до 100Гбит» на слот.

В апреле 2011 года, компания выпустила новый анонс линейной карты для NE5000e на том же чипсете Solar 2.0 — 2x100GE карты LPU-200 ^[32]. В описании сопутствующего решения ^[33] приводились цифры по поставкам 20G/40G версии чипсета (120 тысяч комплектов Solar 1.0) но не были приведены цифры по поставкам Solar 2.0. Также, в пресс-релизе о тестировании 100G оборудования в России от августа 2011 года ^[34], Huawei рапортовал о коммерческой установке 100G DWDM систем в KPN и China Telecom, но не привел ни одного покупателя 100GE решений на базе NE5000e.

Помимо задержек с реализацией чипсета для поддержки 100GbE, позиции Huawei могут также ослабляться установленной базой NE5000e, большинство экземпляров которой несовместимы с новыми 100Гбит/слот и 200Гбит/слот картами. Таким образом, несмотря на весьма раннее анонсирование 100-гигабитных продуктов, вероятность получения компанией Huawei прибыли на 100Гбит Ethernet рынке в 2011 году невелика.

Juniper Networks

Juniper заявил о поддержке 100Гбит Ethernet на платформе T1600 в июне 2009 года ^[35]. К тому времени платформа T1600 поставлялась уже два года и поддерживала работу 100-Гбитных линейных карт (конфигурации 10x10GE портов). Впервые установленные в ноябре 2010 в маршрутизаторах T1600 академической сети Internet2 1x100Гбит Ethernet модули Internet2 racing ahead with 100G Ethernet network. Архивировано из первоисточника 11 мая 2012. позволили Juniper позиционировать себя как ведущего поставщика серийных 100GbE продуктов. В том же, 2010 году, компания показала работу 100Гбит Ethernet интерфейсов от ядра до границы сети между платформами T1600 и MX3D ^[36]. Компания вновь подтвердила статус пионера рынка в марте 2011 года, на месяц опередив Cisco с анонсом поставок 100Гбит Ethernet крупному североамериканскому оператору (им стал Verizon ^[37]). Судя по отчетам пользователей, что в тот же период времени Juniper производил поставки и менее крупным клиентам (к примеру JANET UK^[38]) и на середину 2011 года скорее всего уже располагал существенной 100-гигабитной клиентской базой. Обратной стороной лидерства на 100GE рынке для Juniper, по видимому, стал выбор 100GE архитектуры относительно низкой плотности (один 100GE интерфейс на слот работающий через два параллельных 50Гбит чипсета с равномерным делением нагрузки). К концу 2011 года Juniper подготовил начало коммерческой эксплуатации сразу двух новых магистральных продуктов с поддержкой 100Гбит Ethernet — обновленной 240Гбит/слот Т-серии (T4000) и полностью нового 480Гбит/слот MPLS коммутатора PTX ^[39]

Интересно, что рынок 100Гбит решений для маршрутизаторов в целом повторил ситуацию с запуском 10Gbps интерфейсов десятилетней давности — де-факто, пионером поставок выступила компания Juniper, на несколько месяцев опередившая своего крупнейшего соперника — Cisco. Компанию им составило новое сетевое отделение компании Brocade, при этом остальные участники рынка закрепиться в первой волне не смогли.

См. также

• Ethernet
• 10-гигабитный Ethernet
• Оптическое волокно

Ссылки

• Overview of Requirements and Applications for 40 Gigabit Ethernet and 100 Gigabit Ethernet Technology Overview White Paper (Archived 2009-08-01) — Ethernet Alliance
• 40 Gigabit Ethernet and 100 Gigabit Ethernet Technology Overview White Paper — Ethernet Alliance
• CFP Multi-Source Agreement (MSA) defines a hot-pluggable optical transceiver form factor to enable 40Gb/s and 100Gb/s applications (Archived 2009-07-20) — CFP MSA
• IEEE P802.3ba 40Gb/s and 100Gb/s Ethernet Task Force
• Ethernet Alliance
• 100G Ethernet cheat sheet

Примечания

1. ↑ 100G Ethernet cheat sheet
2. ↑ IEEE P802.3ba 40Gb/s and 100Gb/s Ethernet Task Force. Архивировано из первоисточника 27 сентября 2009. Проверено 25 сентября 2009.
3. ↑ http://www.ieee802.org/3/ba/PAR/par_0308.pdf
4. ↑ http://www.theregister.co.uk/2010/06/22/ieee_802_dot_3ba_ratified/
5. ↑ 40G SMF study group web page. Архивировано из первоисточника 6 июля 2012.
6. ↑ Ilango Ganga Chief Editor's Report. Архивировано из первоисточника 27 сентября 2009. Проверено 25 сентября 2009.
7. ↑ CFP Multi-Source Agreement. Архивировано из первоисточника 27 сентября 2009. Проверено 25 сентября 2009.
8. ↑ http://www.nanog.org/meetings/nanog47/presentations/Tuesday/Hankins_IEEE_N47_Tues.pdf
9. ↑ John D'Ambrosia IEEE P802.3ba Objectives. Архивировано из первоисточника 27 сентября 2009. Проверено 25 сентября 2009.
10. ↑ IEEE P802.3ba 40Gb/s and 100Gb/s Ethernet Task Force Meeting May 2008
11. ↑ Quellan QLx411GRx 40G Evaluation Board. Архивировано из первоисточника 27 сентября 2009. Проверено 25 сентября 2009.
12. ↑ Mellanox Technologies. Архивировано из первоисточника 27 сентября 2009. Проверено 25 сентября 2009.
13. ↑ InterBOARD CFP 100GBASE-SR10 Parallel Optical Module - Reflex Photonics Inc.. Архивировано из первоисточника 27 сентября 2009. Проверено 25 сентября 2009.
14. ↑ Finisar Corporation - Finisar First to Demonstrate 40 Gigabit Ethernet LR4 CFP Transceiver Over 10 km of Optical Fiber at ECOC. Архивировано из первоисточника 27 сентября 2009. Проверено 25 сентября 2009.
15. ↑ Sumitomo Electric develops 40GbE transceiver. Архивировано из первоисточника 6 июля 2012. Проверено 25 сентября 2009.
16. ↑ Hitachi and Opnext unveil receiver for 100GbE and demo 10km transmission over SMF. Архивировано из первоисточника 6 июля 2012. Проверено 26 октября 2009.
17. ↑ Хуайвей наконец выпустил 100Гбит систему. Архивировано из первоисточника 6 июля 2012.
18. ↑ Аlcatel-Lucent объявляет о 100Гбит решении в Китае. Архивировано из первоисточника 6 июля 2012.
19. ↑ OPTICS UPDATE April 2011. Архивировано из первоисточника 6 июля 2012.
20. ↑ Verizon completes industry-leading 100G Ethernet field trial. Архивировано из первоисточника 6 июля 2012.
21. ↑ Alcatel-Lucent's FP3 network processor routes at 400Gbps. Архивировано из первоисточника 6 июля 2012.
22. ↑ Brocade анонсирует 100Гбит Ethernet. Архивировано из первоисточника 6 июля 2012.
23. ↑ 3 new services are launched by AMS-IX at MORE IP event. Архивировано из первоисточника 6 июля 2012.
24. ↑ Cisco NGN Transport Solutions. Архивировано из первоисточника 6 июля 2012.
25. ↑ Новости 1 июля 2008 Comcast и Cisco впервые продемонстрировали работающий интерфейс маршрутизации 100GbE
26. ↑ AT&T, Comcast Go Live With 100G
27. ↑ Live! Showing Off 100GE on CRS-3 and ASR 9000 Series
28. ↑ Huawei Successfully Develops 100 Gigabit Ethernet WDM Prototype. Архивировано из первоисточника 6 июля 2012.
29. ↑ Huawei Launches World' s First End-to-End 100G Solutions. Архивировано из первоисточника 6 июля 2012.
30. ↑ Huawei E2E 100G Solution. Архивировано из первоисточника 6 июля 2012.
31. ↑ Russia's MegaFon Awards Backbone Contract to Huawei. Архивировано из первоисточника 6 июля 2012.
32. ↑ Huawei Unveils the World's First 200G High-Speed Line Card for Routers. Архивировано из первоисточника 6 июля 2012.
33. ↑ Huawei 200G Solution.(недоступная ссылка — история)
34. ↑ Оборудование Huawei 100G успешно прошло тестирование в России.(недоступная ссылка — история)
35. ↑ JUNIPER NETWORKS INTRODUCES BREAKTHROUGH 100 GIGABIT ETHERNET INTERFACE FOR T SERIES ROUTERS. Архивировано из первоисточника 6 июля 2012.
36. ↑ Juniper Demonstrates Industry's First Live 100G Traffic From the Network Core to Edge. Архивировано из первоисточника 6 июля 2012.
37. ↑ Verizon First Service Provider to Announce 100G Deployment on U.S. Network. Архивировано из первоисточника 6 июля 2012.
38. ↑ Deploying 100GE JANET UK
39. ↑ PTX series как шаг в светлое будущее