Поисковые исследования условий использования открытых сетей в системах обработки сверхбольших объемов данных.

Проведен анализ текущего состояния проблемы, изучен большой объем доступных источников, в том числе по сетевым соединениям и системам метрик для соединенийц типа «точка – точка» и «точка – несколько точек».
Каждая метрика из этой системы отражает специфику использования открытых сетей грид приложениями ориентированных на обработку сверх больших объемов данных, которые характерны для научных приложений в области физики высоких энергий, термоядерного синтеза и биомедицины.

3 этап работы по госконтракту 02.434.11.1006

отчет по теме:
"Разработка модели работы и изготовление макета сегмента сети"

Объектом исследования является модель работы распределенной системы обработки сверхбольших объемов данных.
Цель третьего этапа — разработка модели работы распределенной системы обработки данных с использованием сетевых соединений типа «несколько точек – несколько точек», создание макета сегмента сети, который будет использоваться для проведения испытаний и измерения эффективности такого рода соединений.
Исследования, проводимые в рамках проекта, находятся на стыке двух интенсивно развивающихся направлений информационных технологий - глобальных грид-систем и глобальных открытых сетей нового поколения для передачи научных данных.
В процессе работы проводились:
1) разработка модели работы распределенной системы обработки сверхбольших объемов данных с виртуальными соединениями типа «несколько точек – несколько точек» с учетом иерархической (доменной) структуры сети;
2) подготовка технической документации на макет сегмента сети;
3) изготовление макета сегмента сети на базе НИИЯФ МГУ и РНЦ «КИ».
В рамках поставленной задачи была разработана модель работы распределенной системы обработки сверхбольших объемов данных с виртуальными соединениями «несколько точек – несколько точек», которая будет испытана на подготовленном к испытаниям макете сегмента сети.
Данное исследование проводится в России впервые и не имеет аналогов в мировой практике.

Аннотация
работ, выполненных на 4 (заключительном) этапе
по Госконтракту 02.434.11.1006

Тема работ:
"Экспериментальные исследования макета сегмента сети, создание проекта технического задания на разработку сетевых сервисов и выработка рекомендаций по их оптимизации"
Объектом исследования является макет сегмента сети, на котором проводятся испытания и эксперименты на потоках данных, создаваемых вычислительными ресурсами виртуальных организаций EGEE.
Цель четвертого этапа — по результатам проведенных испытаний на макете сегмента сети провести окончательную корректировку макета и модели работы распределенной системы обработки сверхбольших объемов данных, подготовить техническую и отчетную документацию, предусмотренную Техническим заданием и Календарным планом.
Исследования, проводимые в рамках проекта, находятся на стыке двух интенсивно развивающихся направлений информационных технологий - глобальных грид-систем и глобальных открытых сетей нового поколения для передачи научных данных.
Результаты работы:
поведены испытания и эксперименты на макете сегмента сети на потоках данных, создаваемых вычислительными ресурсами виртуальных организаций EGEE;
окончательно откорректирован макет сегмента сети и модель работы распределенной системы обработки сверхбольших объемов данных;
откорректирована система метрик;
подготовлен проект технического задания на разработку сетевых сервисов, совместимых с открытыми международными стандартами, для виртуальных соединений типа «несколько точек – несколько точек», соответствующих классам сетевого обслуживания, необходимым для грид систем распределенной обработки данных сверхбольших объемов;
создано учебное пособие для сетевых администраторовугих грид систем;
разработаны рекомендации по оптимизации сетевых соединений в существующих открытых сетях (GEANT, RBnet);
проведено технико-экономических исследований эффективности внедрения результатов НИР и сделана оценка возможности создания конкурентоспособной продукции и услуг.
Данное исследование проводится в России впервые и не имеет аналогов в мировой практике.

Руководитель работ
д.ф.-м.н. Ильин В.А.