Проект вклада на ВАСЭ-2012 Состав вопросов ИК11 МСЭ

Проект вклада на ВАСЭ-2012
Состав вопросов ИК11 МСЭ-Т по тестированию в новом исследовательском периоде
Введение
В рамках проводимой МСЭ-Т деятельности по тестированию за предыдущий
исследовательский период были разработаны и введены в действие более 20 рекомендаций по
тестированию, основная направленность которых сети последующего поколения, а
лидирующей комиссией в МСЭ-Т в данной области признана ИК11.
Принимая во внимание сложившуюся за последнее время активность в области
тестирования вокруг ИК11 предлагается не реструктуризировать ИК11 и не объединять ее с
другими ИК МСЭ-Т, а закрепить на ВАСЭ-12 за ней право быть основной комиссией,
ответственной за разработку спецификаций тестирования в МСЭ-Т, и осуществлять
координацию в МСЭ-Т всех работ по тестированию в следующем исследовательском периоде.
Также, принимая во внимание складывающуюся в последнее время динамику развития
технологий и направленность исследований МСЭ-Т в сторону технологий облачных
вычислений, качества обслуживания/восприятия и сенсорных сетей связи, РГ4/11 утвердила на
заседании в феврале 2012 года перечень новых вопросов, ряд которых предлагается вынести
для поддержания на ВАСЭ-12 от лица РСС.
Для одобрения предлагается следующий состав новых вопросов ИК11 МСЭ-Т на
следующий исследовательский период:
 Q.CL «Тестирование совместимости услуг облачных вычислений»;
 Q.CT «Профилирование контента и мониторинг контента»;
 Q. TaaS «Тестирование как услуга (TaaS). МСЭ облако»;
 Q.bench «Рейтинговое тестирование сетей и услуг связи. (Service and networks
benchmarking)».
В рамках проводимой МСЭ-Т Глобальной инициативы по стандартизации сетей
последующих поколений в период 06-18 Февраля 2012 г. были согласованы и утверждены
следующие положения:
 В части Q.CL «Тестирование совместимости услуг облачных вычислений»
Под эгидой ИК 13 МСЭ-Т инициирован процесс создания специализированной Фокус
группы по исследованию совместимости облачных вычислений.
Предлагается с учетом сложившегося веяния по переводу всей активности в области
тестирования в ИК11 вопрос тестирования совместимости облачных вычислений также
рассматривать как отдельный вопрос ИК11.
 В части Q.CT «Профилирование контента и мониторинг контента»
На заседаниях РГ4 ИК11 МСЭ-Т (Февраль 2012) делегацией РФ представлены и
одобрены предложения по новым проектам рекомендаций – Q.39xx “Подход к
определению эталонов медиа контента” и МСЭ-Т Q.39yy “Подход к мониторингу медиа
контента”.
В настоящее время МСЭ-Т является основным разработчиком алгоритмов оценки
качества восприятия передаваемой по сети голосовой информации, которая является в
свою очередь одной из разновидностей контента (алгоритмы PESQ – оценка восприятия
качества передачи речи, POLQA –анализ качества восприятия реальной слышимости). В
условиях стремительного развития состава предоставляемого в сетях связи контента
(видео, данные, групповые виды связи и т.д.) становится актуальным разработка моделей
данного контента и методологий их оценки. Данная задача позволит операторам решать
ряд вопросов как со стороны оптимизации трафика и биллинга услуг, так и со стороны
обеспечения качества предоставляемых услуг.
Представленные материалы получили одобрение со стороны участников собрания.
Данное направление было предложено вынести в качестве предложения для ВАСЭ-12 –
как нового вопроса для исследований в МСЭ-Т.
 В части Q. TaaS «Тестирование как услуга (TaaS). МСЭ облако»
Данное направление становится особенно актуальным в условиях развернутой
деятельности МСЭ-Т по облачным вычислениям. Принимая во внимание основную
деятельность МСЭ-Т, а именно разработку рекомендаций, для МСЭ становится
необходимым организовать верификацию стандартов. Предлагается начать проработку в
МСЭ нового проекта по созданию на базе МСЭ универсального инструмента по
удаленному тестированию и мониторингу сетей связи с использованием услуг TaaS на
базе ресурсов облачных вычислений. Для реализации проекта необходимо
предусмотреть в МСЭ-Т отдельный вопрос, исследующий принципы функционирования
и построения подобных систем.
 В части Q.bench «Рейтинговое тестирование сетей и услуг связи. (Service and
networks benchmarking)»
За предыдущий исследовательский период в ИК11 были разработаны ряд рекомендаций,
посвященных тестированию производительности систем и услуг связи, в число которых
входит Руководство по тестированию предельных показателей функционирования сетей
связи для предоставления услуг с заданными параметрами качества.
В связи с тем, что МСЭ-Т разрабатывает в основном архитектуры сетей и требования к
ним, то предлагается усилить данное направление путем создания методологий
тестирования производительности сетей, услуг и систем связи путем формирования
отдельного вопроса, объединяющего вопросы Q.10/11 и Q.11/11 предыдущего
исследовательского периода.
Предложение
Включить в программу работ ИК11 на следующий исследовательский период новые
вопросы (Приложение).
Приложение
Вопрос
Q.CT «Профилирование контента и мониторинг контента»
Мотивация
Ключевым продуктом операторов связи на современном телекоммуникационном рынке
является контент. В применяемых бизнес-моделях оператору связи отведена роль контентпровайдера, и распределение доходов от предоставления контент-услуг между оператором и
производителем контента происходит непрозрачно и зачастую не соответствует
задействованным инфраструктурным затратам оператора связи.
С другой стороны, заполнение рынка разнообразным контентом со специфическими
характеристиками и форматами (видео, данные, групповые виды связи и т.д.), приводит к
проблемам оптимизации трафика и оценки затрачиваемых инфраструктурных ресурсов для
предоставления контент ориентированных услуг. Для решения сложившихся проблем
предлагается использовать унифицированный метод создания моделей (или профилей)
контента с определением характеризующих их показателей с последующим измерением
показателей контента и сравнением с установленными операторам значениями (мониторинг
контента).
Вопросы
 Какие существуют подходы к определению профиля контента (формата контента)?
 Какие показатели характеризуют качество контента?
 Как организована система мониторинга контента?
 Какие параметры контента следует измерять при мониторинге контента
(профиля/формата контента)?
 Как реализуется механизм проведения измерений показателей контента в целях
мониторинга?
Задачи
 Разработка методологии профилирования контента
 Определение показателей качества контента
 Разработка программы и методики мониторинга контента
 Определение архитектуры и принципов функционирования системы мониторинга
контента
 Определение принципов построения системы мониторинга контента
Вопрос
Q.CL «Тестирование совместимости услуг облачных вычислений»
Мотивация
Набирающая популярность среди операторов связи концепция облачных вычислений
зачастую не оправдывает ожиданий потребителей, так как предоставляемые сервисы не
регламентированы, отсутствуют четкие механизмы контроля соблюдения соглашений об
уровне обслуживания (SLA), а доступ к ресурсам «облака» может занимать значительно
большее время.
Для реализации преимуществ облачных вычислений: оперативного управления объемами
используемых ресурсов, легкой масштабируемости, прозрачности затрат, помимо обеспечения
надежных каналов связи и политик информационной безопасности требуется гарантировать
совместимость приложений и предоставляемых «облаком» услуг.
В соответствии с условной классификацией «облаков» на проприетарные платформенные
«облака» и «облака» сервис-провайдеров, методология тестирование совместимости услуг
подразумевает проверки совместимости услуг как внутри одного облака, как и взаимодействие
приложений, предоставляемыми разными «облачными» платформами.
Вопросы
 Какие услуги «облачных вычислений» необходимо тестировать на совместимость?
 Какие требования предъявляются к облачной платформе для обеспечения
совместимости услуг?
 Какие требования к измерительному оборудованию необходимо предъявлять для
тестирования совместимости услуг, схемы испытаний?
 Какие функции платформы «облачных вычислений» следует проверять в целях
тестирования совместимости услуг?
 Какие рекомендации по подготовке приложений к работе в облачной среде могут
быть даны по результатам тестирования совместимости?
Задачи
 Определить набор услуг, которые следует проверять на совместимость
 Разработать методологию тестирования совместимости услуг облачных
вычислений
 Разработать схему испытаний для тестирования совместимости услуг облачных
вычислений
 Разработать программу и методику тестирования совместимости услуг облачных
вычислений
 Формализовать результаты испытаний совместимости услуг, дать рекомендации по
подготовке приложений к работе в облачной среде в целях гарантирования
совместимости предоставляемых услуг
Вопрос
Q.bench «Рейтинговое тестирование сетей и услуг связи. (Service and networks
benchmarking)»
Мотивация
Проблема оценки предельных возможностей сетей и услуг связи (Рейтинговое
тестирование - Benchmarking) является одним из актуальных вопросов, стоящих перед
операторами связи.
Многообразие системно-сетевых решений, услуг и технологий приводит к появлению
ряда проблем, связанных с отсутствием возможности оценки реальной производительности
предлагаемых производителями технологических платформ и реализуемых на них услугах.
Также, существенное значение принимает качество обслуживания/восприятия услуг,
оценка которого в настоящее время осуществляется различными способами от интрузивного
мониторинга до нового метода оценки предельных показателей функционирования сети для
обеспечения заданных показателей качества обслуживания. Данное направление получило
название Рейтинговое тестирование (Benchmarking).
Вопрос
Перечень вопросов, подлежащих рассмотрению, включает, но не ограничивается,
следующими:
 Как необходимо расширить архитектурную модель, определенную в Рек. Q.3900
для проведения оценки предельных возможностей сетей и услуг связи
(Рейтинговое тестирование - Benchmarking).
 Какие виды услуг могут быть протестированы?
 Какие сценарии тестов применимы на сетях связи для оценки предельных
возможностей сетей и услуг связи?
 Какие тесты на производительность могут быть проведены на не загруженной
трафиком сети?
 Какие тесты на производительность могут быть проведены на сети, загруженной
трафиком?
 Какой тип трафика может моделироваться для проведения оценки предельных
возможностей сетей и услуг связи? Какие наборы типов трафиков?
 Какие сценарии тестов применимы для паспортизации каналов связи?
 Создание каких профилей услуг необходимо, для паспортизации канала?
 Какие параметры качества обслуживания/функционирования сети/восприятия,
указанные в соглашениях об уровне обслуживания (SLA) могут быть
протестированы?
 Какие сценарии тестов применимы для контроля SLA?
 Как необходимо расширить набор тестов на производительность услуг
определенный в Рек. Q.39xx?
 Какие сценарии тестов применимы для вызова базовых (экстренных) служб?
 Какие сценарии тестов применимы для интерактивных услуг?
 Какие сценарии тестов применимы для потоковых услуг?
Задачи
Перечень задач включает, но не ограничивается следующими:
 Определение архитектурной модели для проведения оценки предельных
возможностей сетей и услуг связи.
 Определение видов услуг, подлежащих тестированию.
 Разработка программы тестирования производительности на сетях связи.
 Разработка программы тестирования производительности на не загруженной
трафиком сети.
 Разработка программы тестирования производительности на сети, загруженной
трафиком.
 Определение набора моделируемых типов трафика для проведения оценки
предельных возможностей сетей и услуг связи.
 Разработка программы и методики паспортизации каналов связи.
 Профилирование услуг связи.
 Определение типов SLA, которые могут быть протестированы.
 Разработка подхода тестирования/контроля SLA.
 Определение набора тестов на производительность услуг.
 Разработка программы и методики испытаний вызова базовых (экстренных)
служб.
 Разработка программы и методики тестирования интерактивных услуг.
 Разработка программы и методики тестирования потоковых услуг.
Вопрос
Q. TaaS «Тестирование как услуга (TaaS). МСЭ облако»
Мотивация
Одним из ключевых направлений МСЭ в настоящее время становится создание
Региональных центров по тестированию с правовой формой взаимного признания результатов
испытаний (MRA).
Задачами центров MRA станет тестирование на соответствие и функциональную
совместимость.
Также, принимая во внимание сложившиеся за последнее время исследовательские
тренды МСЭ-Т, ориентированные на архитектуры сетей будущего, услуги связи, контент и
качество обслуживания/восприятия, термин функциональной совместимости расширился до
глобальной совместимости, включающей тестирование оборудования, услуг и качество
обслуживания/восприятия.
Принимая во внимание, что МСЭ-Т определяет Рекомендации в том числе и в части
организации взаимодействия операторов стран-членов МСЭ, а также положение РМЭ
относительно сотрудничества администраций по созданию, эксплуатации и техническому
обслуживанию международной сети для обеспечения удовлетворительного качества
обслуживания, особенно актуальным становится мониторинг функционирования сетей.
Третьим направлением будущих исследований МСЭ-Т является контент. Ключевой
проблемой на настоящее время является отсутствие моделей контента и оценки качества его
восприятия. Исключением в части оценки качества восприятия является только голос, где
МСЭ-Т является разработчиком спецификаций PESQ и нового метода POLQA.
В результате, деятельность будущих Региональных центров по тестированию МСЭ с
правовой формой MRA будет сосредоточена на глобальной совместимости и мониторинге.
Развитие подходов к тестированию и мониторингу предопределяет в настоящее время
применение локальных систем. Однако, в условиях стоящих перед МСЭ задач по сокращению
цифрового разрыва, особенно остро встает задача формирования удаленных инструментов
оценки функционирования сетей и технологий, а также мониторинга.
Одним из направлений будущего развития может стать виртуальное пространство МСЭ-Т,
предоставляющее ряд актуальных для всех участников рынка услуг – «МСЭ облако».
Данное направление исследований МСЭ-Т (вопрос) позволит сформировать требования к
виртуальным инструментам тестирования/оценки и мониторинга ключевых показателей
функционирования сетей связи, технологий и услуг, и определит задачи виртуального
инструмента «МСЭ облако».
Вопрос
Перечень вопросов, подлежащих рассмотрению, включает, но не ограничивается,
следующими:
 Какие виды тестирований могут предоставляться удаленно на базе виртуального
инструмента МСЭ облако? В том числе:
 Какие виды тестов могут проводиться в области измерения
производительности сетей и услуг (Рейтинговое тестирование Benchmarking)?
 Какие виды тестов могут проводиться по мониторингу качества
обслуживания/воспрития услуг QoS/QoE?
 Какие виды тестов могут проводиться в области мониторинга контента?
 Какое архитектурное решение подходит для построения системы удаленного
тестирования?
 Какие взаимосвязи подсистем «МСЭ облака» должны быть реализованы?
 Какие участники и их роли в процессе удаленного тестирования?
Задачи
Перечень задач включает, но не ограничивается следующими:
 Определить виды тестирований, которые могут предоставляться в рамках
инструмента МСЭ облако.
 Определить типы тестов, которые могут проводиться в области измерения
производительности сетей (Рейтинговое тестирование - Benchmarking).
 Определить типы тестов, которые могут проводиться в области мониторинга
качества предоставления услуг QoS/QoE.
 Определить типы тестов, которые могут проводиться в области мониторинга
контента.
 Определить архитектурное решение подходит системы удаленного тестирования и
мониторинга.
 Определить роли участников процесса удаленного тестирования.
 Определить взаимосвязи с другими системами МСЭ облака.