05-6-1118-2014/2023
 
Приоритет: 1
   
Статус: Одобрена


Информационно-вычислительная инфраструктура ОИЯИ
  
Руководитель темы:    Кореньков В.В.
Заместитель: Стриж Т.А.

Участвующие страны и международные организации:
Азербайджан, Армения, Беларусь, Болгария, Германия, Грузия, Египет, Италия, Казахстан, Китай, Молдова, Монголия, Польша, Россия, Румыния, Словакия, США, Тайвань, Украина, Франция, ЦЕРН, Чехия, Швеция, ЮАР.

Изучаемая проблема и основная цель исследований:
Целью темы является развитие сетевой и информационно-вычислительной инфраструктуры ОИЯИ для обеспечения научно-производственной деятельности Института и государств-членов необходимыми средствами современных информационных технологий согласно 7-летнему плану развития ОИЯИ. Особым направлением в рамках темы является развитие Многофункционального информационно–вычислительного комплекса ЛИТ ОИЯИ (МИВК), представленного в виде Проекта.

Ожидаемые результаты по завершении этапов темы:
  1. Развитие сетевой и информационно-вычислительной инфраструктуры МИВК для обеспечения реализации 7-летнего плана развития ОИЯИ необходимыми средствами современных информационных технологий. Создание единого пространства существующих в ОИЯИ ресурсов: вычислительных, информационных и хранения данных.

    Развитие внешней и локальной сетевых инфраструктур, обеспечивающих возможность обмена данными между подразделениями института, государствами членами ОИЯИ и сотрудничающими с ОИЯИ международными организациями; создание сетевой инфраструктуры для приема и передачи данных между установками BM@N, MPD, SPD и on/off-line кластерами мегапроекта NICA; поддержка и развитие общих сетевых сервисов, таких как электронная почта (e-Mail), управление именами (DNS), кэширование данных (Proxy), управление ресурсами (IPDB), мониторинг (NMIS), сервис единой авторизации (SSO), система информационной безопасности.

    Модернизация и развитие инженерной инфраструктуры МИВК, включая системы электроснабжения и бесперебойного питания, системы кондиционирования и вентиляции, комплекса противопожарной безопасности в соответствии с ростом вычислительных мощностей и объемов хранилищ данных.

    Создание на базе МИВК off-line кластера в рамках развития компьютинга для мегапроекта NICA, обеспечивающего прием данных с детекторов, передачу данных на обработку и хранение и удовлетворяющего всем требованиям к сетевой инфраструктуре, вычислительным архитектурам, системам хранения и к соответствующему программному обеспечению.

    Создание единой информационно-вычислительной платформы (среды) на базе ресурсов МИВК для реализации нейтринной программы ОИЯИ.

    Наращивание вычислительных ресурсов и систем хранения данных грид-компоненты МИВК Tier1, Tier2/ЦИВК в соответствии с 7-летним планом развития ОИЯИ, что позволит обеспечить для всех коллабораций LHC на Tier1 и Tier2 в ОИЯИ необходимый уровень ресурсов.

    Переход на новое системное программное обеспечение: системы пакетной обработки заданий и планировщики заданий – HTCondor и Slurm, единая система доступа к программному обеспечению CVMFS.

    Наращивание облачной компоненты МИВК с целью расширения спектра услуг, предоставляемых пользователям. Создание интегрированной облачной среды с облаками государств членов ОИЯИ.

    Наращивания вычислительных ресурсов суперкомпьютера "Говорун" для удовлетворения потребностей пользователей из ОИЯИ и стран-участниц вычислительными ресурсами для решения задач, связанными с высокопроизводительными вычислениями (НРС). Обеспечение пользователей современными IT – решениями и сервисами в области HPC.

    Создание на базе систем хранения МИВК "озера данных" (Data Lake) ОИЯИ.

    Создание и внедрение унифицированной системы управления ресурсами МИВК, оптимизирующей эффективность использования вычислительных ресурсов и ресурсов хранения.

    Разработка и внедрение унифицированной системы управления обработкой данных, позволяющей упростить процесс запуска обработки данных новых экспериментов и оптимизировать использование имеющихся вычислительных ресурсов за счет лучшего прогнозирования потоков данных.

    Создание информационно–аналитической интеллектуальной системы мониторинга, на новых технологических подходах, в том числе аналитике Больших данных, позволяющей агрегировать информацию с разных уровней вычислительного центра: инженерной инфраструктуры, сети, вычислительных узлов, систем запуска задач, элементов хранения данных, грид–сервисов и др., что обеспечит высокий уровень надежности МИВК.

    Усовершенствование системы обеспечения информационной безопасности.

  2. Сопровождение и дальнейшее развитие интегрированной корпоративной информационной системы (КИС) ОИЯИ, включающей в себя подсистемы бухгалтерского, финансового и кадрового учета, электронного документооборота, связанные между собой через универсальный шлюз обмена данными и обеспечивающей оперативный доступ к достоверной управленческой информации. Развитие информационной системы управления проектом NICA. Модернизация подсистемы PIN. Реализация системы "Личный кабинет", предоставляющей конечному пользователю доступ к его персональной информации, а также упрощающей доступ к КИС ОИЯИ. Развитие электронных библиотек и видеопорталов.

  3. Создание специального полигона на базе МИВК для проведения учебных курсов по современным IT-технологиям.

Ожидаемые результаты по этапам темы в текущем году:

  1. Обеспечение устойчивого и безопасного функционирования локальной сетевой инфраструктуры и внешних телекоммуникационных каналов связи ОИЯИ (опорной сети (2х100 Гбит/сек); транспортной сети мегапроекта NICA (4х100 Гбит/сек); многосвязной сети ЛИТ (100 Гбит/сек); магистральных телекоммуникационных каналов (3х100 Гбит/сек); сети Wi-Fi на площадках ОИЯИ) для осуществления надежного обмена данными между подразделениями института, государствами членами ОИЯИ и сотрудничающими с ОИЯИ международными организациями.

     

    Обеспечение полнофункциональной и оптимальной работы систем гарантированного электроснабжения и климатического контроля вычислительной инфраструктуры МИВК. Реализация проекта новой системы противопожарной безопасности инфраструктуры МИВК.

    Наращивание производительности и системы хранения базовой грид–компоненты МИВК – Tier1 центра эксперимента CMS в ОИЯИ: процессорных мощностей до 240 kHS06, системы хранения dCache на дисках до 11 РВ.

    Увеличение вычислительных ресурсов и систем хранения данных, входящих в интегральную компоненту Tier2/ЦИВК - процессорных мощностей до 130 kHS06 и дисковых хранилищ 6 РВ.

    Переход на новое системное программное обеспечение: система пакетной обработки заданий и планировщики заданий – HTCondor и Slurm.

    Сопровождение единой системы доступа к программному обеспечению CVMFS.

    Поддержка и обновления программного обеспечения промежуточного уровня грид. Поддержка работы виртуальных организаций WLCG, экспериментов NICA и локальных групп пользователей на ресурсах Тier1 и Тier2 МИВК. Обеспечение сервисов виртуальных организаций для экспериментов NICA и групп локальных пользователей.

    Наращивание емкости общей распределенной системы хранения и доступа к данным на базе файловой системы EOS в МИВК ОИЯИ до 30 РВ. Поддержка работы пользователей с системой EOS в ЛИТ и других подразделениях ОИЯИ.

    Ввод в эксплуатацию облачного сервиса для научных и инженерных расчётов (http://saas.jinr.ru) с набором приложений для исследования джозефсоновских нанопереходов. Создание прототипа вычислительной среды для нейтринных экспериментов - нейтринной платформы. Разработка облачной платформы для анализа и управления данными в рамках международной программы мониторинга и прогнозирования состояния окружающей среды. Развитие на базе облачной инфраструктуры многофункциональной платформы и мобильного приложения для определения болезней растений. Наращивание вычислительной составляющей облачной компоненты МИВК до 2400 ядер ЦПУ и 12 ТB ОЗУ. Увеличение общего объёма облачного хранилища на базе ceph до 2 PB, а также повышение скорости записи посредством добавления кэширующего пула с SSD-дисками. Расширение мощности облака ОИЯИ за счёт ресурсов, приобретённых экспериментами Baikal-GVD, JUNO, NOvA/DUNE и их сопровождение. Развитие распределённой информационно-вычислительной платформы на базе DIRAC, интегрирующей облачные ресурсы организаций государств членов ОИЯИ.

    Наращивание вычислительных ресурсов и расширение иерархической системы хранения и обработки данных суперкомпьютера "Говорун" в соответствии с 7-ми летнем планом развития ОИЯИ.

    Разработка для пользователей суперкомпьютера "Говорун" технологии "вычислительной системы по требованию" на основе механизма контейнеризации пользовательских приложений, которая позволит на основе параметров, задаваемых пользователем, выделять необходимое количество вычислительных узлов и создавать временное хранилище данных с необходимым объемом и скоростью ввода/вывода под управлением соответствующей файловой системы (NFS, Lustre, EOS и т.д.). Разработка системы управления контейнерами с пользовательскими приложениями. Поэтапное включение в общую систему хранения и обработки данных МИВК иерархической системы хранения суперкомпьютера "Говорун".

    Создание прототипа унифицированной системы управления ресурсами МИВК, оптимизирующей эффективность использования вычислительных ресурсов и ресурсов хранения.

    Внедрение системы мониторинга работоспособности и производительности ресурсов, интегрированных в DIRAC. Интеграция новых вычислительных ресурсов и ресурсов хранения.

    Расширение функций системы мониторинга МИВК посредством включения в сферу мониторинга контроля параметров внешней инженерной инфраструктуры: дизель генераторы, градирни, внешние и внутренние элементы системы охлаждения, систем бесперебойного энергообеспечения. Разработка системы мониторинга и системы учета ресурсов суперкомпьютера "Говорун".

  2. Развитие и сопровождение системы электронного документооборота СЭД "Дубна", системы управления проектом APT EVM для NICA, систем ADB2, ИСС, "База документов", HR LHEP по запросам конечных пользователей, и в соответствии с разрабатываемой концепцией облачной SaaS платформы единой административно-хозяйственной информационной системы. Сопровождение информационной системы научной аттестации (ИСНА) ОИЯИ. Модернизация базы персональной научной информации сотрудников ОИЯИ (ПИН).

    Продолжение работ по переходу с 1С УПП на 1С ERP 2.4. Консультация и поддержка пользователей информационных систем на базе 1С. Работы по текущему сопровождению, доработке систем и поддержке пользователей. Создание мобильных систем управления темами.Продолжение работ по повышению производительности и надежности системы как путем оптимизации используемого кода, анализа длительных запросов, возникающих блокировок в базе данных, так и путем повышения производительности серверов и перераспределения выполняемого на них функционала.

    Развитие институционального репозитория научных публикаций на основе программной платформы Invenio JOIN2: обогащение и повышение качества метаданных; развитие пользовательских сервисов; поддержка нормативных справочников.

    Сопровождение библиотек программ JINRLIB и математических программ CERNLIB (MATHLIB). Изучение возможности интеграции современных языков высокого уровня (Python, C#) с Фортраном для использования ими библиотек, написанных на Фортране (CERNLIB, JINRLIB).

    Развитие и сопровождение центральных информационных серверов, порталов и баз данных для информационного и программного обеспечения деятельности ЛИТ и ОИЯИ: усовершенствование представления и актуализация информации сайта диссертационных советов ОИЯИ, сопровождение и развитие сервисов портала «Визит-центр», модернизация и администрирование сайта журналов ЭЧАЯ и "Писем в ЭЧАЯ", разработка, создание и поддержка сайтов конференций, симпозиумов по заявкам лабораторий и других подразделений ОИЯИ, организация сайтов подразделений и конференций ОИЯИ в режиме хостинга.

    Развитие на базе платформы HybriLIT экосистемы для задач машинного и глубокого обучения, позволяющей разрабатывать нейросетевые модели, проводить их обучение и осуществлять инференс на различных вычислительных архитектурах для задач проекта NICA. Разработка для задач радиационной биологии информационной системы, обеспечивающей хранение и доступ к экспериментальным данным и их анализу на базе методов машинного обучения.

    Поддержка сервиса HLIT-VDI, позволяющего пользователям платформы использовать в своих исследованиях пакеты прикладных программ с развитым графическим интерфейсом, таких как Mathematica, Matlab, COMSOL Multiphysics, FLUKA и др.

    Внедрение и поддержка сервиса "Личный кабинет" для пользователей платформы HybriLIT, содержащего информацию по работе в системе, статистику использования ресурсов платформы и др.

  3. Организация и проведение специальных курсов и тренингов по новейшим HPC-технологиям, технологиям и инструментарию для решения прикладных задач на основе методов машинного и глубокого обучения для сотрудников Института, студентов и молодых ученых из стран-участниц, в том числе в рамках практик, организуемых УНЦ, в рамках конференций и школ, организуемых ОИЯИ. Проведение специальных курсов и тренингов в странах-участницах ОИЯИ по программам международного сотрудничества. Организация специализированных учебных курсов по подготовке IT-специалистов для решения задач, связанных с обработкой и анализом данных для экспериментов класса мегасайнс, в том числе для проекта NICA.

  4. Проведение школ по задачам искусственного интеллекта и квантовым вычислениям. Создание лаборатории интеллектуальной робототехники для разработки систем когнитивного управления на базе ускорительного комплекса NICA и в других лабораториях ОИЯИ, разработка лабораторного практикума по робототехнике.

Проекты по теме:
  Название проекта Руководитель проекта Приоритет проекта
(сроки реализации)
1. МИВК Кореньков В.В. 1   (2017-2023)
Основные этапы темы:
  Этап темы Руководители  
  Лаборатория или другие
подразделения ОИЯИ
Основные исполнители
1. Проект МИВК Кореньков В.В.
Долбилов А.Г.
Мицын В.В.
Стриж Т.А.
 
  ЛИТ
 
Адам Г., Александров Е.И., Александров И.Н., Ангелов К.Н., Багинян А.С., Баландин А.И., Балашов Н.А., Баранов А.В., Белов С.Д., Беляков Д.В., Бондяков А.С., Бутенко Ю.А., Войтишин Н.Н., Воронцов А.С., Гаврилов С.В., Гавриш А.П., Галактионов В.В., Голоскокова Т.М., Голунов А.О., Графова Е.Н., Графов Е.А., Громова Н.И., Гущин А.Э., Закомолдин А.Ю., Зрелов П.В., Зуев М.И., Кадочников И.С., Каменский А.С., Капитонов В.А., Кашунин И.А., Кондратьев А.О., Коробова Г.А., Кульпин Е.Ю., Кутовский Н.А., Лаврентьев А.А., Мажитова Е., Марченко С.В., Маров Д.М., Матвеев М.А., Мицын С.В., Нечаевский А.В., Олейник Д.А., Ососков Г.А., Пелеванюк И.С., Петросян А.Ш., Пляшкевич М.С., Подгайный Д.В., Попов Л.А., Пряхина Д.И., Розенберг Я.И., Сапожникова Т.Ф., Семенов Р.Н., Стрельцова О.И., Соколов И.А., Трофимов В.В, Ужинский А.В., Чащин С.В., Чурин А.И., Шишмаков М.Л.
  ЛФВЭ
 
Потребеников Ю.К., Минаев Ю.И., Рогачевский О.В., Шматов С.В., Щинов Б.Г., Мошкин А.Н., Герценбергер К.В.
  ЛНФ
 
Сухомлинов Г.А.
  ЛРБ
 
Чаусов В.Н.
  ЛЯР
 
Сорокоумов В.В., Поляков А.Г.
  ЛЯП
 
Иванов Ю.П.
  ЛТФ
 
Сазонов А.А., Шукринов Ю.М., Рахмонов И.Р., Куликов К.В.
  УНЦ
 
Семенюшкин И.Н.
2. Информационное и программное
обеспечение научно-производ-
ственной деятельности ОИЯИ
Зрелов П.В.
Кореньков В.В.
Филозова И.А.
 
  ЛИТ
 
Балашов Н.А., Баранов А.В., Беляков Д.В., Воробьева Н.Н., Гердт П.В., Голоскокова Т.М., Голубь Д.С., Давыдова Н.А., Дучиц С.В., Заикина А.Г., Заикина Т.Н., Иерусалимова Н.В., Калмыкова Л.А., Карлов А.А., Кекелидзе Д.В., Кретова С.А., Кошлань Д.И., Куняев С.В., Курмаева Г.А., Кутовская А.А., Кутовский Н.А., Мельникова О.Г., Мусульманбеков Ж.Ж., Нечитайло С.А., Пащенко Е.А., Пляшкевич М.С., Попкова Л.В., Приходько А.В., Пушкина В.М., Разинкова Е.Ю., Рапортиренко А.М., Сапожников А.П., Сапожникова Т.Ф., Семашко С.В., Семенов Р.Н., Станкус Д.Б., Сыресина Т.С., Шейко А.В., Шестакова Г.В., Ягафарова В.М.
  УНОРиМС
 
Сорин А.С.,  Борисовский В.Ф.
  ЛФВЭ
 
Потребеников Ю.К.,  Турусина К.В.,  Филиппов А.В.
3. Развитие системы подготовки и
переподготовки ИТ-специалистов
на базе МИВК ОИЯИ и его
учебно-образовательных
компонент
Кореньков В.В.
Стриж Т.А.
Стрельцова О.И.
 
  ЛИТ
 
Балашов Н.А., Баранов А.В., Белов С.Д., Галактионов В.В., Голоскокова Т.М., Громова Н.И., Зуев М.И., Иванцова О.В., Кадочников И.С., Кекелидзе Д.В., Киракосян М.Х., Кошелев К.В., Кутовский Н.А., Мицын В.В., Мицын С.В., Некрасова И.К., Нечаевский А.В., Олейник Д.А., Петросян А.Ш., Подгайный Д.В., Решетников А.Г., Сапожникова Т.Ф., Семенов Р.Н., Торосян Ш.Г., Трофимов В.В., Ужинский А.В., Ульянов С.В.
  УНЦ
 
Пакуляк С.З.

Сотрудничество по теме:

Страна или международная организация

Город Институт или лаборатория Участники Статус
Азербайджан Баку АДА Адамов А. Совместные работы
    ИФ НАНА Мамедов Н.Т. + 5 чел. Совместные работы
Армения Ереван ИПИА НАН РА Саакян В.Г. Совместные работы
Беларусь Минск БГТУ Коротаев А.В. + 6 чел. Протокол
    НИИ ЯП БГУ Масолов В.А. + 4 чел. Совместные работы
    ОИПИ НАНБ Тузиков А.В. + 2 чел. Совместные работы
    ОИЭЯИ-Сосны НАНБ Бабичев Л.Ф. + 4 чел. Совместные работы
Болгария София INRNE BAS Георгиев С.Л. + 3 чел. Совместные работы
    SU Димитров В. Совместные работы
Германия Гамбург DESY Боррас К. Совместные работы
      Вагнер А.  
      Касеманн М.  
      Кохлер М.  
      Лободзински Б.  
      Фурман П.  
  Дармштадт GSI Шварц К. Совместные работы
  Карлсруэ KIT Звада М. Совместные работы
      Хайсс А.  
  Франкфурт/М Ун-т Кисель И.В. Совместные работы
      Линденштрут В. + 1 чел. Совместные работы
  Цойтен DESY Вегнер П. Совместные работы
Грузия Тбилиси GRENA Кватадзе Р. Совместные работы
    GTU Прангишвили А. Протокол
    TSU Модебадзе З. Совместные работы
      Элизбарашвили А.  
Египет Гиза CU Суэйлам Н. Совместные работы
      Эльлити А.  
Италия Болонья INFN Марон Г. Совместные работы
      Сапуненко В.  
Казахстан Алма-Ата ИЯФ Кенжин Е.А. Протокол
  Нур-Султан АФ РГП ИЯФ Здоровец М.В. Протокол
    НУ Мажитов М.И. Протокол
Китай Пекин IHEP CAS Ли В.Д. Совместные работы
Молдова Кишинев RENAM Богатенков П.П. Совместные работы
    ИМИ Кожокару С. Совместные работы
    ИПФ Базнат М.И. Протокол
Монголия Улан-Батор NUM Болормаа Д. + 2 чел. Совместные работы
Польша Краков CYFRONET Бубак М. Обмен визитами
      Нивицки Я.  
Россия Владикавказ СОГУ Тваури И.В. Совместные работы
  Гатчина НИЦ КИ ПИЯФ Кирьянов А.К. Договор
      Олешко С.А.  
  Дубна Гос. ун-т "Дубна" Крюков Ю.А. + 5 чел. Совместные работы
      Черемисина Е.Н.  
    ОЭЗ "Дубна" Рац А.А. Совместные работы
    ЦКС "Дубна" Дука А.П. Совместные работы
      Елеферов С.В.  
      Окулов Ю.Н.  
  Москва ГПКС Буйдинов Е.В. Совместные работы
      Прохоров Ю.В.  
    ИПМ РАН Коваленко В.Н. + 2 чел. Договор
      Лацис А.О.  
      Четверушкин Б.Н.  
    ИППИ РАН Афанасьев А.П. + 2 чел. Совместные работы
      Волошинов В.В.  
      Посыпкин М.А.  
    ИСП РАН Аветисян А.И. Совместные работы
      Томилин А.Н.  
    ИТЭФ Гаврилов В.Б. Договор
      Королько И.Е.  
      Люблев Е.А.  
      Соколов М.М.  
    МГУ Соколов И.А. Совместные работы
      Гуляев А.В.  
      Ризниченко Г.Ю.  
      Смелянский Р.Л.  
      Сухомлин В.А.  
    МСК-IX Воронина Е.П. + 3 чел. Договор
    НИВЦ МГУ Воеводин В.В. + 4 чел. Совместные работы
    НИИЯФ МГУ Бережнев С.Ф. + 2 чел. Договор
      Крюков А.П.  
      Саврин В.И.  
    НИУ "МЭИ" Топорков В.В. Совместные работы
    НИЦ КИ Велихов В.Е. Договор
      Ильин В.А.  
      Рябинкин Е.А.  
    РЭУ Валентей С.Д. Совместные работы
    ФИЦ ИУ РАН Соколов И.А. Совместные работы
  Москва, Троицк ИЯИ РАН Каравичев О.В. Совместные работы
      Степанова Л.И.  
  Нижн. Новгород ННГУ Гергель В.П. Совместные работы
  Новосибирск ИЯФ СО РАН Анисенков А.В. Совместные работы
      Скринский А.Н.  
      Тихонов Ю.А.  
  Переславль-Залесский ИПС РАН Абрамов С.М. Совместные работы
  Протвино ИФВЭ Гусев В.В. Совместные работы
      Котляр В.В.  
      Минаенко А.А.  
  Пущино ИМПБ РАН Лахно В.Д. + 2 чел. Договор
      Устинин М.Н.  
  С.-Петербург НИИФ СПбГУ Зароченцев А.К. Договор
      Феофилов Г.А.  
      Шабаев В.К.  
    СПбГПУ Болдырев Ю.Я.+ 2 чел. Договор
    СПбГУ Богданов А.В. + 2 чел. Совместные работы
      Дегтярев А.Б.  
    Ун-т ИТМО Бухановский А.В. Совместные работы
  Самара СУ Сойфер В.А. Совместные работы
  Черноголовка ИТФ РАН Щур Л.Н. Совместные работы
    СКЦ ИПХФ РАН Волохов В.М. + 2 чел. Совместные работы
Румыния Бухарест IFIN-HH Дулеа М. + 5 чел. Совместные работы
      Замфир Н.В.  
  Клуж-Напока INCDTIM Бот А. Совместные работы
      Фаркаш Ф.  
  Мэгуреле IFA Бузату Ф. Совместные работы
Словакия Кошице IEP SAS Копчански П. Совместные работы
  Прешов PU Штевко Р. Протокол
США Аптон BNL Климентов А. Совместные работы
      Паниткин С.  
  Арлингтон UTA Де К. Совместные работы
  Батавия Fermilab Розен Р. Совместные работы
      Хольцман Б.  
Тайвань Тайбэй ASGCCA Лин С. Совместные работы
Украина Киев ИТФ НАНУ Загородний А.Г. Совместные работы
      Зиновьев Г.М.  
      Свистунов С.Я.  
  Харьков ННЦ ХФТИ Левчук Л.Г. Совместные работы
Франция Марсель CPPM Царегородцев А. Совместные работы
ЦЕРН Женева ЦЕРН Андреева Ю. Совместные работы
      Бетев Л.  
      Карлин Р.  
      Компана С.  
      Матесон Д.  
      Хеммер Ф.  
Чехия Прага IP CAS Куба Т. Совместные работы
      Локайчек М. + 3 чел.  
Швеция Лунд LU Смирнова О.Г. Совместные работы
ЮАР Кейптаун UCT Беккер Б. Совместные работы
      Клейманс Дж.