Экспериментальные исследования поставленных перед нир задач. Обобщение и оценка результатов исследований

1 Введение 11

2 Обобщение результатов предыдущих этапов работ. 13

2.1 Выбор направления исследований 13

2.2 Теоретические исследования поставленных перед НИР задач 15

2.3 Экспериментальные исследования поставленных перед НИР задач 19

3 Проведение комплексных испытаний системы запуска в рамках Российского грида для интенсивный операций с данными РДИГ (грид-сегмент EGEE). 21

3.1 Состав комплексных испытаний 21

3.2 Результаты комплексных испытаний 23

4 Оценка полноты решения задач и эффективности полученных результатов в сравнении с современным научно-техническим уровнем. 24

4.1 Современный научно-технический уровень разработок в области предоставления сред исполнения 24

4.2 Оценка эффективности исследований 27

4.3 Оценка полноты решения задач 30

5 Оценка возможности создания конкурентоспособной продукции и услуг и разработка рекомендаций по использованию результатов проведенных НИР 30

6 Формулирование технических требований для технического задания на разработку продукции 32

6.1 Требования к функциональным характеристикам 32

6.1.1 Состав выполняемых функций 32

6.1.1.1 Служба предоставления сред исполнения (СПСИ) 33

6.1.1.2 Модуль разворачивания ВМ на рабочем узле 33

6.1.1.3 Монитор виртуальных машин (МВМ) 33

6.1.1.4 Модуль передачи данных в виртуальную среду 34

6.1.1.5 Модули безопасности 34

6.1.1.6 Репозиторий сред исполнения 34

6.1.2 Организация входных и выходных данных 34

6.2 Требования к надежности; 35

6.2.1 Обеспечения устойчивого функционирования 35

6.2.2 Контроль входной и выходной информации 35

6.2.3 Время восстановления системы после отказа 36

6.3 Условия эксплуатации; 36

6.3.1 Климатические условия и характеристики питающей сети 36

6.3.2 Вид обслуживания 36

6.3.3 Необходимое количество и квалификация персонала 36

6.4 Требования к составу и параметрам технических средств 36

6.4.1 Необходимый состав технических средств 36

6.4.2 Основные технические характеристики технических средств 36

6.5 Требования к информационной и программной совместимости 37

6.5.1 Требования к информационным структурам на входе и выходе 37

6.5.2 Программная совместимость 37

6.5.3 Исходные коды, языки программирования и программные средства, используемым программой 37

6.6 Специальные требования 37

6.7 Требования к программной документации 37

7 Заключение 38

8 Список использованных источников 43

Определения
В настоящем отчете о НИР применяют следующие термины с соответствующими определениями:



Аппаратная технология виртуализации - набор инструкций процессора Intel VT-x или AMD-V для упрощения и ускорения переключения контекста между гостевой и хостовой операционными системами.

Вычислительный элемент - в контексте грид-технологий термин "вычислительный элемент", используется для обозначения интерфейса ресурсного центра для запуска заданий на рабочие узлы.

Виртуальная машина - программная или аппаратная среда, в той или иной степени имитирующая работу реального компьютера. На виртуальную машину, так же как и на реальный компьютер можно инсталлировать операционную систему, у виртуальной машины так же есть BIOS, оперативная память, жёсткий диск (выделенное место на жёстком диске реального компьютера), могут эмулироваться периферийные устройства. На одном компьютере может функционировать несколько виртуальных машин.

Грид-инфраструктура – инфраструктура, обеспечивающая пользователям грида прозрачный, унифицированный, безопасный доступ к географически распределенным вычислительным ресурсам и ресурсам хранения данных через открытые компьютерные сети.

Гостевая операционная система - операционная система, работающая внутри виртуальной машины.

Инфраструктура безопасности грида - компонента промежуточного программного обеспечения грида; основывается на понятии открытого ключа, входит в инструментальный пакет Globus.

Кластер компьютерный - доступная по сети группа рабочих узлов (при необходимости вместе с головным узлом), размещённая на некотором сайте. Другими словами, кластер это "контейнер", который группирует вместе компьютерные узлы или подкластеры.

Монитор виртуальных машин (гипервизор) - программный уровень абстракции, разделяющий аппаратную платформу на несколько виртуальных машин; в более узком смысле - часть ядра хостовой операционной системы, ответственная за хостинг и управление виртуальными машинами; работает непосредственно с оборудованием.

Мониторинг/грид-мониторинг - грид-мониторинг подразумевает сбор, анализ и публикацию информации от распределенной инфраструктуры с целью определения статуса грид-ресурсов и хода выполнения заданий.

Приложение – любая компьютерная программа, предназначенная для решения конкретной задачи пользователя из некоторой прикладной области. В данном контексте рассматриваются грид-приложения, т.е. приложения, использующие грид-инфраструктуру для получения результата.

Промежуточное программное обеспечение/ППО - слой программного обеспечения, состоящий из агентов, являющихся посредниками между различными компонентами крупного приложения. Зачастую ППО используется в распределённых приложениях, причём агентов, составляющих этот слой, может быть несколько.

Ресурсный центр грид-инфраструктуры - может включает два типа ресурсов (или один из них): вычислительные ресурсы, на которых выполняется обработка данных; ресурсы хранения данных, которые обеспечивает хранение и транспортировку данных между аналогичными ресурсами и/или данным ресурсом и пользователем.

Рабочие узлы грид-системы - отдельный хост кластера; информация о вычислительном узле может быть видима гриду, но может быть и не видима - это зависит от способа администрирования кластера.

Сайт - используемое для администрирования логическое имя, обозначающее конкретный, стабильный, уникально идентифицируемый и тестируемый набор служб и ресурсов (вычислительных и ресурсов хранения данных).

Сервис/служба - абстрактный ресурс, представляющий возможность выполнения задач, которые имеют четкие функции с точки зрения поставщиков и потребителей. Чтобы службой можно было воспользоваться, она должна быть реализована конкретным агентом поставщика. В данном тексте термины "сервис" и "служба" используются как эквивалентные.

Хостовая операционная система - операционная система, в которой работает платформа виртуализации, исполняющаяся непосредственно на хосте

Хостовая система (хост) - компьютер, на котором работает платформа виртуализации.

Элемент хранения - любой ресурс хранения данных, зарегистрированный в информационной подсистеме грида и обеспечивающий доступ к удаленным сайтам посредством грид-интерфейса; элемент хранения может управлять большими массивами на дисках, системами хранения сверхбольшой ёмкости и подобными им системами.
Обозначения и сокращения

ВМ виртуальная машина

МВМ монитор виртуальных машин (гипервизор)

ОС операционная система

ПО программное обеспечение

ППО промежуточное программное обеспечение

РДИГ Российский грид для интенсивных операций с данными

РЦ ресурсный центр

СЗЗ-РСИ система запуска заданий, подготовленных для различных сред исполнения, в грид-среду

СПСИ служба предоставления сред исполнения

CE вычислительный элемент (Computing Element)

EGEE развертывание грид-систем для e-науки (The Enabling Grids for E-sciencE)

GT4 набор инструментальных средств Globus версии 4 (Globus Toolkit 4)

CLI интерфейс командной строки (Command Line Interface)

gLite промежуточное программное обеспечение проекта EGEE (Lightweight Middleware for Grid Computing)

GSI система безопасности (Grid Security Infrastructure)

JDL язык описания задания (Job Description Language)

KVM Linux Kernel Virtual Machine

OGSA открытая архитектура ГРИД-сервисов (Open Grid Service Architecture)

PBS портируемая система пакетной обработки (Portable Batch System)

RB сервис распределения ресурсов (Resource Broker)

SE элемент хранения; ресурс хранения данных (Storage Element)

UI интерфейс пользователя (User Interface)

UML User-mode Linux

VMM монитор виртуальных машин (Virtual Machines Monitor)

VW виртуальное рабочее пространство (Virtual Workspace)

VWS служба виртуального рабочего пространства (Virtual Workspace Service)

WM менеджер загрузки (Workload Manager)

WMS подсистема управления загрузкой (Workspace Management Service)

WN рабочий узел (Working Node)