Проект

«Трудный ребенок» «Ростеха»: в Подмосковье запущен один из самых мощных вычислительных комплексов страны

Заказчики: Центр суперкомпьютерного моделирования (ЦСМ, ранее - Солнечногорский приборный завод)

Солнечногорск; Электротехника и микроэлектроника

Продукт: Проекты построения комплексной ИТ-инфраструктуры
Второй продукт: T-Platforms V-Class
Третий продукт: Supermicro SuperServer

Дата проекта: 2013/06 — 2017/12
Технология: ИТ-аутсорсинг
подрядчики - 850
проекты - 2653
системы - 183
вендоры - 122
Технология: Серверные платформы
подрядчики - 440
проекты - 1236
системы - 468
вендоры - 212
Технология: Суперкомпьютер
подрядчики - 55
проекты - 115
системы - 112
вендоры - 68
Технология: Центры обработки данных - технологии для ЦОД
подрядчики - 388
проекты - 947
системы - 690
вендоры - 253
СМ. ТАКЖЕ (1)

В соответствии с ФЦП «Развитие оборонно-промышленного комплекса на 2007-2010 годы и на период до 2015 года» одна из компаний в составе «Ростеха» - «Солнечногорский приборный завод» (СПЗ) - реализует проект по техническому перевооружению своего предприятия, чтобы создать на его базе центр компьютерного моделирования промышленной продукции.

Основная цель этого - обеспечить промышленные предприятия, прежде всего, предприятия оборонно-промышленного комплекса (ОПК), высокопроизводительными вычислительными ресурсами. Центр планирует предоставлять круглосуточный удаленный доступ к вычислительным ресурсам, а также решение предметных задач заказчиков полностью или частично. Последнее включает, в том числе, разработку, верификацию моделей и методологии расчетов, а также адаптацию и доработку параллельного ПО.

Проектная пиковая мощность вычислительного комплекса центра составляет 1,5 Пфлопс. В рейтинге Топ-500 мощнейших суперкомпьютеров мира на июнь 2017 года от России заявлены всего две системы сопоставимой мощности - их пиковая производительность составляет 1,7 Пфлопс и 2,9 Пфлопс. Обе они установлены в МГУ.

Площадку под размещение оборудования центра компьютерного моделирования СПЗ арендует у входящего в состав «Росэлектроники» «НИИ «Платан» в подмосковном городе Фрязино

Из документов СПЗ следует, что сам завод должен выполнять роль коммерческого оператора центра. Физически же основное оборудование размещается на площадке во Фрязино, арендованной у «НИИ «Платан», входящего в состав «Росэлектроники». Многолетний договор аренды был подписан в 2013 году. Общая площадь арендуемой площадки составляет более 2,6 тыс. кв. м.TAdviser выпустил Гид по российским операционным системам 9.9 т

Ход проекта

2018

Запуск вычислительного центра

В 2018 году «Солнечногорский приборный завод» (СПЗ), входящий в состав «Ростеха», ввел в эксплуатацию центр высокопроизводительных вычислений и моделирования. Это следует из годового отчета компании, опубликованного в июле 2019 года. Ранее компания об этом не сообщала.

Путь к началу эксплуатации был небыстрым и тернистым: создание центра велось с 2012 года и неоднократно сталкивалось со сложностями (см. историю создания в блоках ниже). Изначальный срок его запуска был обозначен еще 2014 годом, но потом неоднократно переносился.

Проектная пиковая производительность вычислителя составляла 1,5 Пфлопс. В «Росэлектронике» (также входит в «Ростех»), сообщили TAdviser, что этот показатель введенного в эксплуатацию вычислительного комплекса превышает проектный, не уточнив, насколько существенно. По данным рейтинга топ-50 мощнейших суперкомпьютеров России, самым производительным является «Ломоносов-2», установленного в МГУ. Его пиковая мощность – 2,5 Пфлопс.

Создание центра вычислений и моделирования шло с 2012 года (фото - rtinform.ru)

Оборудование для вычислителя поставляли «Т-Платформы», но, похоже, к моменту запуска оно уже несколько морально устарело: в годовом отчете СПЗ указано, что в 2018 году были разработаны предложения по замене отдельных единиц оборудования. Это позволит оснастить вычислительный центр «самым современным оборудованием», обеспечивающим высокопроизводительные вычисления, объясняет СПЗ там же. И в 2018 году была завершена работа по согласованию этой замены с Минпромторгом России, сказано в отчете.

В «Росэлектронике» заявили TAdviser, что в годовом отчете содержится техническая ошибка. А на самом деле предложения по замене оборудования были разработаны в 2016 году и в 2017 году согласованы Минпромторгом. Оборудование было поставлено в 2017-2018 гг. тем же поставщиком - «Т-Платформами». По данным «Росэлектроники», во введенном в эксплуатацию центре используется вычислительное оборудование 2016-2017 годов выпуска.

В годовом отчете СПЗ указано, что приоритетным направлением деятельности центра является обеспечение организаций оборонно-промышленного комплекса необходимыми высокопроизводительными вычислительными мощностями, позволяющими проводить численное моделирование и инженерные расчеты.

Говоря о конкуренции на рынке, в «Росэлектронике» заявили TAdviser, что за последние несколько лет она возросла только в сегменте классических ЦОДов, в то время как в сегменте предоставления суперкомпьютерных ресурсов, напротив, наблюдается дефицит предложений.

«
С каждым годом среди промышленных предприятий все больше распространяется практика применения численного моделирования, соответственно, растут и потребности в суперкомпьютерных ресурсах. При этом на рынке представлено ограниченное количество суперкомпьютеров, доступных для аренды, а использование обычных ЦОДов для решения подобных задач не эффективно из-за особенностей архитектуры, - пояснили TAdviser в компании.
»

По данным базы «Контур.Фокус», в 2018 году у вычислительного центра «Ростеха» появился первый профильный клиент по госконтракту: ФГУП «Государственный НИИ авиационных систем». С ним был заключен договор объемом около 251 млн рублей на оказание услуг по предоставлению в аренду вычислительных ресурсов.

По состоянию на июль 2019 года, сайт СПЗ в интернете выглядит устаревшим, он содержит мало практической информации о предоставляемых сервисах. В описании вакансий, которые СПЗ размещал в 2019 году, говорится, что компания трансформирует свой имидж: планируется смена названия, брендирование, разработка сайта.

Помимо высокопроизводительных вычислений и моделирования, на которые изначально делалась ставка при создании центра, теперь среди его основных видов деятельности: также упоминаются анализ, обработка и хранение данных, облачные вычисления, обучение нейронных сетей.

Общий объем финансирования проекта, приведенный в годовом отчете, составляет около 2,2 млрд рублей. Из них порядка 1,5 млрд рублей составил взнос «Ростеха» в уставный капитал общества. Доля «Ростеха» в компании, по данным отчета, в 2018 году составляла 100%.

Выручка СПЗ в 2018 году - 26,4 млн рублей, что составляет 50% от плановой. Компания закончила год с убытком 49,13 млн рублей. Но убыток и планировался, правда, меньший: предусматривался убыток в 27,8 млн. рублей.

Главными факторами, повлиявшими на финансово-экономическое состояние организации, является поздний ввод в эксплуатацию объекта и недостаточная контрактация выручки, а также перенос реализации непрофильных активов (имущественного комплекса СПЗ) на 2019 год, объясняет компания эти показатели деятельности в годовом отчете.

2017

«Т-Платформы» заплатят неустойку 280 млн рублей

В июле 2017 года апелляционный суд утвердил мировое соглашение между входящим в «Ростех» «Солнечногорским приборным заводом» (СПЗ) и суперкомпьютерной компанией «Т-Платформы», являющейся его подрядчиком по созданию крупного Центра компьютерного моделирования. Соответствующее постановление было опубликовано в системе «Электронное правосудие».

Из постановления суда следует, что «Т-Платформы» полностью признали неустойку по контракту 2014 года на поставку оборудования для центра моделирования и обязуются ее выплатить. Размер неустойки составляет около 281,5 млн рублей за период с октября 2015 по февраль 2017 года.

Ранее суд первой инстанции обязал компанию выплатить неустойку СПЗ, однако «Т-Платформы» не были согласны с этим решением суда и собирались его оспаривать (подробнее об этом - в блоке ниже).

Кроме того,в рамках мирового соглашения стороны договорились внести изменения в договор 2014 года, из-за которого завязалась судебная тяжба. Изменения, в частности, вносятся в спецификации оборудования и сроки поставки. Согласно новой договоренности, «Т-Платформы» должны поставить оборудование в срок до 1 ноября и выполнить его монтаж и пуско-наладку до 1 декабря 2017 года.

Оборудование, которое «Т-Платформы» должны были поставить для Центра компьютерного моделирования «Ростеха», уже устарело

В отличие от решения первой инстанции, в постановлении апелляционного суда спецификации оборудования не приводятся. СПЗ направлял суду ходатайство о применении к новым спецификациям оборудования, размеру и порядку выплаты неустойки грифа «Коммерческая тайна». Несмотря на то, что суд в удовлетворении этого ходатайства отказал, в списке контрактных документов, в которые должны быть внесены изменения, техзадание и спецификации оборудования помечены как конфиденциальные.

В ОПК, управляющей СПЗ, в феврале 2017 года говорили о том, что с момента формирования проектной документации ряд технологических решений, на которых изначально базировался проект, уже устарели.

В «Ростехе» заявили TAdviser, что центр моделирования будет введен в строй к концу года в соответствии с плановыми сроками. С учетом смещения сроков строительства, спецификация оборудования значительно пересмотрена. В итоге «Т-Платформы» поставят более современное и производительное оборудование, при этом цена контракта остается прежней, добавили в «Ростехе».​ Детали о новом оборудовании в госкорпорации решили не раскрывать.

Из отчета СПЗ за 2016 год следует, что вместо «Т-Платформ» в 2016 году СПЗ рассматривал компанию «Ниагра» в качестве нового подрядчика по проекту. В «Ростехе» не прокомментировали TAdviser, был ли он в итоге утвержден на замену «Т-Платформам».

«Ростех» начинает судиться с «Т-Платформами»

Конфликт входящего в «Ростех» «Солнечногорского приборного завода» (СПЗ) и суперкомпьютерной компании «Т-Платформы», работающей у него на подряде на проблемном мегапроекте по созданию Центра компьютерного моделирования, перешел весной 2017 года в острую фазу. Арбитражный суд Москвы по иску завода обязал «Т-Платформы» выплатить неустойку в размере p281,5 млн за непоставленное и несмонтированное в срок оборудование[1].

Как следует из материалов, размещенных в системе «Электронное правосудие», данный иск был подан заводом 16 февраля 2016 г., а решение по делу было принято ровно через год — 16 февраля 2017 г.

Разбирательство касалось заключенного в декабре 2014 г. контракта «Т-Платформ» с СПЗ на сумму p1,24 млрд. Изначально в его рамках «Т-Платформы» должны были до 10 октября 2015 г. поставить «железо», а до 25 октября 2015 г. провести монтажные пусконаладочные работы. Из-за возникшего конфликта на данный момент, по факту, не сделано ни то, ни другое. При этом вынесенное сейчас решение суда о взыскании неустойки данные обязательства с подрядчика не снимает.

Представитель «Т-Платформ» Елена Чуракова сообщила CNews, что компания с решением суда не согласна и готовит апелляционную жалобу, которую подаст в ближайшее время. «Считаем, что требования истца не подлежат удовлетворению, — сказала она. — Мы продолжаем решать эту проблему в сотрудничестве с истцом. Тем временем, работы по реализации проекта продолжаются, есть общее понимание дальнейшего хода проекта, сроки окончания реализации сейчас в процессе согласования».

В ОПК подчеркивают, что проблематика данного вопроса гораздо глубже. «Возможности информационных технологий, в том числе в России, быстро прогрессируют, — говорят собеседники CNews. — Сегодня они не те, что были год-два назад, не говоря уже о годах, когда формировалась проектная документация. К завершающему этапу строительства Центра ряд технологических решений, на которых изначально базировался проект, попросту говоря, устарели».

В ОПК сейчас считают, что поставки старого «железа» на объект такого уровня — сценарий неприемлемый, и это понимают и заказчики, и исполнители. «Поэтому идут переговоры, формируется новая спецификация, — отмечают в компании. — Понятно, что сроки тоже пересматриваются. Однако результат того стоит: на объект в итоге будут поставлено новейшее оборудование. По производительности и уровню информационной безопасности эта техника будет соответствовать всем современным вызовам».

Представители ОПК заверили CNews, что если у кого-то есть впечатление, что проект «утонул» в судах, то оно является ошибочным. «В целом на сегодняшний день проект находится в высокой стадии готовности — в полном объеме работ выполнено более 60 % мероприятий», — добавили собеседники.

По судебным документам, номенклатура поставки неисполненного контракта включает 1034 сервера обработки данных T-Platforms V-Class V210S, 88 серверов обработки данных T-Platforms V-Class V210F, вычислительный кластер A-Class Systemaka T-BladeIII, 34 служебных сервера T-Platforms.

Также в поставку должны были войти четыре многопроцессорных сервера SuperMicro SuperServer 4048B-TRFT, многопроцессорный сервер SGI UV2000, комплект серверов доступа к данным V-Class V20Qs, четыре сервера доступа к метаданным Intel Server System S2600WTT.

Из остального выделим, что «Т-Платформы» должны были организовать сеть хранилища данных на оборудовании QLogic и EMC, а также само хранилище на «железе» Oracle и EMC.

2016: Перенос сроков запуска

Новый срок запуска центра компьютерного моделирования на базе «Солнечногорского приборного завода», который изначально планировалось ввести в эксплуатацию в декабре 2014 года, теперь обозначен декабрем 2017 года. Это следует из отчетных документов компании за 2015 год.

Там же говорится, что в 2015 году компания не планировала и не осуществляла капитальных вложений в инвестиционные проекты, каковым для нее является создание центра. По данным годового отчета, В 2015 году на 75% были завершены строительно-монтажные работы по подготовке площадей к размещению центра компьютерного моделирования и поставлен весь объем инфраструктурного оборудования, поставлено оборудование системы хранения данных.

Данные о том, сколько вычислительной техники уже поставлено, в отчете не приводятся, однако там говорится, что объем оборудования, поставляемого «Солнечногорскому приборному заводу» в рамках реализации проекта, законтрактован на 100%.

В «Ростехе» заявили TAdviser, что по состоянию на середину 2016 года проект находится на высокой стадии строительной готовности, полностью развернута инженерная и обеспечивающая инфраструктура, поставлена «значительная часть» вычислительного оборудования.

«
В 2015-2016 годах реализация мероприятий шла с незначительным отклонением от плановых сроков в связи с необходимостью внесение изменений в технологическую часть проекта, - сказали в госкорпорации.
»

Вместе с тем, известно, что в 2015 году «Т-Платформы» задержали поставку вычислительного оборудования для центра моделирования по контракту от декабря 2014 года, общая сумма которого составляет около 1,2 млрд рублей. В связи с этим «Солнечногорский приборный завод» в феврале 2016 года обратился в суд с иском к «Т-Платформам», требуя взыскать с поставщика неустойку в размере 70,9 млн рублей. Информация об этом содержится в картотеке арбитражных дел.

В «Т-Платформах» и «Ростехе» не смогли ответить на вопросы TAdviser о просрочке поставки.

2015: Поставка оборудования на 1,2 млрд рублей

В феврале 2015 года «Т-Платформы» вынесли на повестку дня предстоящего собрания акционеров одобрение крупной сделки с СПЗ, касающейся поставки оборудования и его монтажа для центра компьютерного моделирования. Одобрение сделки производилось задним числом: датой заключения договора с СПЗ указывается конец декабря 2014 года.

Объем договора составил более 1,235 млрд руб., а сроки поставки оборудования обозначены концом марта 2015 года.

Блейд-серверы составляют основную часть поставки оборудования для центра моделирования СПЗ, которую необходимо осуществить до конца марта 2015 года

Помимо «Т-Платформ» СПЗ также рассматривал предложения от компаний Depo Computers и «Аквариус». Одним из аргументов в пользу выбора «Т-Платформ» в качестве поставщика стал тот факт, что компания выступала исполнителем по договору на поставку первой очереди оборудования для центра моделирования: в СПЗ сочли нецелесообразным менять поставщика «из соображений сохранения общей стандартизации поставляемого оборудования».

В документации по проекту указывается, что в рамках договора для центра моделирования СПЗ необходимо поставить более 1100 серверов обработки данных, более трех десятков служебных серверов, комплект серверов удаленной визуализации, хранилище данных и другое оборудование.

Помимо серверов производства «Т-Платформ» в составе поставки также указана вычислительная техника и ряда других вендоров: например, серверы SuperMicro, SGI, Intel и рабочие станции системы доступа к ресурсам Depo Computers.

2013-2014

Создание инфраструктуры, первые поставки оборудования

В конце июня 2013 года СПЗ заключил договор на поставку первой очереди оборудования и выполнение комплекса пусконаладочных и монтажных работ с компанией «Т-Платформы». Сумма контракта составила 590 млн руб. Запуск первой очереди оборудования планировался на конец декабря 2013 года.

В декабре 2013 года СПЗ подписал еще один договор - на поставку второй очереди оборудования для организации центра компьютерного моделирования на общую сумму в 250,9 млн руб.

Осенью 2014 года в «Т-Платформы» рассказали TAdviser, что контракты, которые были заключены ранее по этому проекту, касались инфраструктуры и СХД, вычислительное же оборудование еще не поставлялось.

Согласно техническому заданию к первому контракту, в списке поставляемого оборудования числилось порядка 1,4 тыс. серверов хранения и обработки данных, часть из которых - на процессорах с архитектурой x86, а часть - с использованием и графических сопроцессоров. На момент заключения этого контракта с СПЗ «Т-Платформы» находились под санкциями США, введенными в отношении компании в марте 2013 года, и не могли поставлять товары с использованием электронных компонентов от американских производителей. Из санкционного списка компания была исключена в январе 2014 года.

В «Т-Платформах» заявили TAdviser, что поставляли инженерную инфраструктуру, которая не содержала оборудования, контролируемого экспортным законодательством США. В компании добавили, что ничего контролируемого экспортным законодательством не поставляли: «Все что контролировалось экспортным законодательством мы поставлять не могли, это поставляли другие компании», сказал представитель «Т-Платформ». Какие именно компании участвовали в поставке, в «Т-Платформах» предпочли не уточнять.

Задержка запуска центра

Осенью 2014 года в «Т-Платформы» рассказали TAdviser, что срок финальной сдачи комплекса в эксплуатацию был перенесен, при этом точной новой даты пока нет. Источник в «Ростехе» вкратце пояснил TAdviser, что с учетом отраслевой специфики центра в процессе его создания встал ряд вопросов, связанных с информационной безопасностью и импортозамещением, которые пока еще не решены. Он также подтвердил, что новая дата ввода центра в эксплуатацию еще не определена.

2012: Утверждение документации, начало проекта

Проектная документация для создания центра моделирования была утверждена в конце 2012 года. Срок ввода его в эксплуатацию, согласно отчетным документам СПЗ, изначально был обозначен декабрем 2014 года.

Назначение Центра компьютерного моделирования

По данным сайта СПЗ, Центр компьютерного моделирования создается во исполнение указа Президента России от 7 мая 2012 года № 596. Центр сможет обеспечить научным и производственным организациям, а также предприятиям и компаниям доступ к суперкомпьютерным ресурсам, ПО и экспертизе. В результате данные организации, как предполагается, смогут решать предметные задачи, проводить серийные производственные расчеты, создавать высокоточные модели изделий и пр.

Основу Центра, по изначальным планам, должен составить гибридный вычислительный кластер — на процессорах классической архитектуры x86 с графическими ускорителями — с пиковой производительностью в 1,5 Пфлопс. Общий объем системы хранения данных должен был составить 5 ПБ

По данным СМИ, проектная документация для создания Центра была утверждена в конце 2012 г. Срок его ввода в эксплуатацию, по отчетным документам СПЗ, изначально был ограничен декабрем 2014 г.

Начинка центра

Основу центра компьютерного моделирования промышленной продукции на базе СПЗ должен составить гибридный вычислительный кластер (архитектура Х86 плюс ускорители) с общей пиковой производительностью в 1,5 Пфлопс. Для сравнения, аналогичный показатель самой мощной системы рейтинга Топ-50 мощнейших компьютеров России и СНГ по состоянию на середину 2014 года, установленной в МГУ, составлял 1,7 Пфлопс. Вычислительный комплекс петафлопсного уровня производительности, который в рейтинге Топ-50 не присутствует, есть также у «Росатома».

Запланированный общий объем системы хранения данных вычислительного кластера составляет 5ПБ. Также он будет включать инженерную инфраструктуру с резервированием уровня N+1, многопользовательские лицензии на прикладное ПО, облачную вычислительную среду, защищенные каналы связи для обеспечения удаленного доступа и др.

План финансирования

По данным отчетов СПЗ, предельный объем финансирования проекта, утвержденный в конце 2012 года, составляет 2,78 млрд руб., в том числе средств федерального бюджета – 849,1 млн.руб. и внебюджетных средств - 1,93 млрд руб.

В 2012-2013 гг. в целях привлечения бюджетных средств под проект между «Ростехом» и СПЗ был определен имущественный взнос РФ в сумме около 841 млн руб. в уставной фонд СПЗ в обмен на его акции. После того как СПЗ осуществило дополнительную эмиссию акций, доля «Ростеха» в компании к концу 2013 года достигла 62,4% (вторым акционером СПЗ является РФ в лице Росимущества).