стань автором. присоединяйся к сообществу!
Лого Сделано у нас
67

Суперкомпьютер НИУ ВШЭ удвоил свою производительность

Следи за успехами России в Телеграм @sdelanounas_ru

 © hse.ru

Пиковую производительность суперкомпьютера НИУ ВШЭ «cHARISMa» удалось увеличить в два раза — до 2 петафлопс (2 квадриллиона операций над числами двойной точности с плавающей запятой в секунду).

Таким образом Вышка обогнала по вычислительной производительности НИЦ «Курчатовский институт». Среди университетских суперкомпьютеров впереди остались только «Ломоносов-2» МГУ и «Политехник» СПбГПУ. Благодаря своевременному расширению суперкомпьютерный комплекс «cHARISMa» третий год сохраняет достойную 6-ю позицию в рейтинге топ-50 мощнейших суперкомпьютеров СНГ.

В то же время суперкомпьютерные технологии нашли эффективное применение не только в науке и промышленности России, но и в крупном бизнесе. На первых строчках рейтинга топ-50 суперкомпьютеров СНГ стали появляться такие бизнес-гиганты, как Сбербанк и МТС. Организации, владеющие высокопроизводительными комплексами и возможностями обучить искусственный интеллект лучше, чем конкуренты, сейчас получают существенные преимущества на рынке. Удвоение производительности суперкомпьютера НИУ ВШЭ показывает, что университет идет в ногу со временем.

 © hse.ru

Высокопроизводительный вычислительный кластер «cHARISMa» (Computer of HSE for Artificial Intelligence and Supercomputer Modelling) был запущен в Вышке в начале 2019 года. Его ресурсы предназначены для поддержки проведения фундаментальных и прикладных научных исследований в части компьютерного моделирования, анализа больших данных, машинного обучения и т. п.

Также «cHARISMa» используется в учебном процессе для выполнения научных и научно-практических проектов, требующих применения суперкомпьютерных систем. Благодаря суперкомпьютеру университет выигрывает новые гранты и выполняет высокотехнологичные научно-технические работы. Только за 2020 год финансирование исследований, выполняемых с использованием суперкомпьютера, составило более 570 млн рублей.

На «cHARISMa» выполняются сотни проектов, такие как «Разработка новых методов предсказания и анализа хаотических временных рядов» Департамента анализа данных и искусственного интеллекта ФКН; «Атомистическое и континуальное моделирование в задачах физики» Международной лаборатории суперкомпьютерного атомистического моделирования и многомасштабного анализа НИУ ВШЭ; «Изучение и усовершенствование современных методов ансамблирования нейронных сетей» Центра глубинного обучения и байесовских методов лаборатории компании Самсунг ФКН; «Расчет свободной энергии сольватации лекарственных соединений в скСО2» департамента прикладной математики МИЭМ; «Анализ эпидемии коронавируса в России» Международной лаборатории статистической и вычислительной геномики «Разработка алгоритмов мюонной идентификации для LHCB» Научно-учебной лаборатории методов анализа больших данных ФКН и многие другие.

 © hse.ru

«Для современного университета обязательно наличие суперкомпьютера. Это признак того, что в вузе активно развиваются естественно-научные направления: делать исследования мирового уровня без таких вычислительных машин невозможно. В рамках Программы развития НИУ ВШЭ мы поэтапно расширяем суперкомпьютерный комплекс и обеспечиваем все наши научные коллективы его вычислительными мощностями. Так мы повышаем конкурентоспособность университета», — говорит Дмитрий Бондарь, исполняющий обязанности старшего директора по цифровой трансформации ВШЭ.

Как отмечает начальник отдела суперкомпьютерного моделирования Павел Костенецкий, сейчас в мире все исследования проводятся в виртуальном пространстве на суперкомпьютерах: «И только когда уже обнаружено идеальное теоретическое решение, ученые проверяют его на практике».

После расширения до 2 петафлопс суперкомпьютер Вышки может за секунду выполнять 2 квадриллиона операций с плавающей запятой, причем над числами двойной точности (с 20 знаками). «Столько операций один математик смог бы выполнить в уме примерно за 50 тысяч лет», — объясняет Павел Костенецкий. Именно в таком формате «cHARISMa» вошел в топ-50 лучших суперкомпьютеров СНГ. «Чтобы попасть в рейтинг, нужно выполнить общепринятый тест LINPACK, основанный на решении матрицы линейных уравнений большой размерности. Получить хороший результат на этом тесте — сложная и объемная задача, даже в некоторой мере искусство», — рассказывает начальник отдела суперкомпьютерного моделирования. Для начала, по его словам, суперкомпьютер должен быть в идеальном состоянии.

«Даже пыль на одном из сотен коннекторов 200-гигабитных сетевых карт InfiniBand может приводить к деградации производительности кластера в несколько раз»

Также важно, отмечает он, чтобы все вычислительные узлы были настроены абсолютно одинаково и на них использовались последние версии системных программ и микропрограмм. Кроме того, необходимо, чтобы с предельной нагрузкой во время тестирования справлялась система электропитания и охлаждения ЦОД. А дальше начинается длительная многоэтапная оптимизация настроек, чередующаяся с запусками сотен вариантов теста LINPACK.

 © hse.ru

Отдел суперкомпьютерного моделирования успешно решил поставленную задачу, благодаря чему суперкомпьютер НИУ ВШЭ сохранил позицию в быстро меняющемся топ-50 по СНГ. По словам начальника отдела, в период с 2022 по 2030 год также планируется дальнейшее увеличение производительности суперкомпьютерного комплекса. Научные коллективы подразделений Высшей школы экономики смогут проводить более ресурсоемкие исследования и успешно конкурировать с зарубежными учеными. Рост мощности суперкомпьютера будет сопровождаться вхождением НИУ ВШЭ в еще более престижный рейтинг — топ-500 суперкомпьютерных центров мира.

Кстати, а вы знали, что на «Сделано у нас» статьи публикуют посетители, такие же как и вы? И никакой премодерации, согласований и разрешений! Любой может добавить новость. А лучшие попадут в телеграмм @sdelanounas_ru. Подробнее о том как работает наш сайт здесь👈


  • 1
    d-rs.livejournal.com d-rs
    26.10.2120:56:39

    Хотелось бы услышать о проекте суперкомпа на Эльбрусах 16С, например, а то по суперкомпам мы, как признали официально, в т. ч. от стран куда беднее России («Как пишет ТАСС, на это отставание в середине октябре 2021 г. прямо указал президент РАН Александр Сергеев. С его слов, Россия отстает в этом плане от мирового уровня уже более чем в 100 раз").

    Например, кластер на 1024шт 16С 2 ггц = 1024 * 1,5 тфлопса =~ 1,5 петафлопса (32 разряда). Таких сделать 1024 штуки и будет 1,5 экзафлопса, мировой лидер.

    Естественно это вряд ли выйдет так круто, ведь придётся сделать млн процессоров, а такие мощности даже за деньги не факт что тайваньцы выделят. Так что эти расчёты это просто как теоретический предел возможно.

    Чтобы нам сократить отставание нам надо произвести миллионы Эльбрусов 16С, не говоря уже о их производстве для обычных компов/серверов/ЦОД.

    • 1
      Clausson Clausson
      26.10.2121:43:34

      нам надо произвести миллионы Эльбрусов 16С

      скажите, сколько это может быть в деньгах?

      Ну или… поскольку производство такого наноразмера у нас пока не предвидится — сколько за аналогичный товар в миллионном количестве могут запросить республиканские китайцы Тайваня?

      Просто интересно, насколько это посильная задача для бюджета. Для бюджета развития, естественно.

      ЗЫ: Знаю, слышал, видел, как многие преуспевшие за западе советские ученые с удовольствием бы приехали заниматься наукой… было бы только чем заниматься, и не сильно бы это ударило по карману (то есть по сути люди готовы на некоторое снижение своего уровня жизни). Многие говорят о том, что их душит (их научную мысль) сильно душит американская грантовая система, в результате чего они вынуждены ковыряться во всякой малозначительной чуши (не хватает им советского простора мысли!).

      Отредактировано: Clausson~21:55 26.10.21
      • 1
        d-rs.livejournal.com d-rs
        26.10.2122:11:49

        Судя по ценам на процы AMD с кол-м транзисторов приведённым по коэффициенту на 12 млрд у 16С, при больших объёмах производства розница на 16С должна быть порядка $550.

        Валовая наценка (gross margin) у AMD это 45%, но надо ещё учесть 20% наценки розничников, т. е. тайваньцам платить $550/(1,45 * 1,2) = $315.

        Т.е.на тираж в 1 млн для суперкомпа мощностью 1,5 экзафлопса надо будет заплатить $315 млн.

        Есс-но дальнейшие расходы тож большие, поэтому выйдет вряд ли дешевле $1 млрд, что затратили на нынешнего лидера Фугаку.

        Однако такой суперкомп работал бы на всю страну: от тотального приведения всех разработок к цифровым двойникам на всех уровнях до пресловутых биохимеческих исследований, т. е.к развитию такие инвестиции, даж столь большие, под 100 млрд рублей на наши, имеют самое прямое отношение.

        Кстати, необязательно эти 100 млрд должны быть из бюджета. К примеру, один суперкомпов из топ-10 итальянский, принадлежит Эни (энергетическая контора).

        Но, как я и сказал, не факт, что США дадут Тайваню сделать так много мощных процессоров. Остаётся тогда переход на китайцев: у них тоже есть 28 нм и даже 14 нм (но их нам не дадут тк самим китайцам для себя их мало).

        А что касается грантов, то с ними у нас в последние годы вполне неплохо. Однако это не поможет в производстве оборудования для пр-ва процов/памяти. Тут все отстали от голландцев, даже японцы с американцами, не говоря уже об остальных. Но у нас в правительственной программе написано освоение производства 28 нм ~через 10 лет, но не понятно, как, если оборудования нам никто не продаст, а про разработку оборудования у нас ничего не слышно.

        Отредактировано: d-rs.livejournal.com~22:13 26.10.21
        • 0
          Нет аватара termometrix
          27.10.2108:41:21

          Вы продолжаете нагнетать негатив и непонимание некоторых основных вопросов.В ваших алармистских писаниях мы всегда необратимо отстали от всего и от всех,постоянно прячась за цитатами.

          Или мы не строим достаточно много жилья или наши планы вычислительных мощностей провалились,ибо у нас проблемы с оборудованием, или мы должны утопить МКС в океан.

          Отредактировано: termometrix~08:52 27.10.21
          • 0
            d-rs.livejournal.com d-rs
            27.10.2109:15:19

            Интересно, как это получается, что «алармисткий» я, хотя заявление сделал глава РАН. А про недостаточность строительства жилья из раза в раз говорит ВВП, и требует исполнение своего плана тк предыдущий был провален. ВВП алармист и негативщик?

            Про проблемы с оборудованием говорят Мантуров, Минцифры и та же РАН.

            (А про утопление МКС я не говорил, о чём это вообще? Пока нет новой станции, она нужна.)

            Да и вообще, причём тут Ваш переход на личности? Это грубое нарушение правил сайта. По сути вопроса сказать нечего?

            Отредактировано: d-rs.livejournal.com~09:16 27.10.21
            • 0
              Das Schwarz Das Schwarz
              27.10.2110:22:36

              Похоже, у Китая уже есть сразу два экзафлопсных суперкомпьютера — больше таких систем нет ни у кого, даже у США. Вот такие новости.

              • -3
                d-rs.livejournal.com d-rs
                27.10.2110:26:03

                На счёт Китая не помню, но Японский Фугаку разогнали до экзафлопса.

                • 1
                  Roman Wyrzykowski Roman Wyrzykowski
                  27.10.2112:10:14

                  Нет — там в раионе половинки экзафлопса.

                  • -3
                    d-rs.livejournal.com d-rs
                    27.10.2112:15:44

                    Хвастаются, что уже есть, но пока не пересертифицировали на линпаке.

              • 2
                Roman Wyrzykowski Roman Wyrzykowski
                27.10.2112:11:55

                Официально — нет пока экзафлоповых машин в мире. Подождем до ноября.

                • 0
                  Нет аватара termometrix
                  27.10.2112:54:15

                  Подождем до ноября.

                  Май-июнь 2022 г. ожидается полномасштабный запуск экзафлопсного суперЭВМ в США Frontier.

                  Отредактировано: termometrix~13:06 27.10.21
                  • 1
                    Roman Wyrzykowski Roman Wyrzykowski
                    27.10.2114:25:35

                    Понятно, но в ноябре будет новый выпуск top500 и посмотрим найдется ли какой-то выскочка из Китая    

              • 1
                Clausson Clausson
                27.10.2112:16:37

                Нет, по состоянию на лето этого года ничего такого у КНР не было.

                Лидер всё еще японский Фугаку, потом два американских компьютера.

                Наш сберовский Кристофари на 61 месте.

                https://www.top...top500/2021/06/

                Отредактировано: Clausson~12:20 27.10.21
    • 0
      d-rs.livejournal.com d-rs
      28.10.2115:43:41

      *чтоб в мировые лидеры надо не млн, а 2 млн, тк флопсы всё же нужны 64-р.

  • 5
    Нет аватара commandor
    26.10.2123:26:15

    тут ведь все определяется целесообразностью, ибо городить лидера в топ500 за многаденех и потом всей страной сидеть на одном выч центре может и не так нужно, тогда как собрать N вычислителей меньшей мощности, но и цены на порядки меньше будут и доступность выше. при этом экзафлопы конечно не бесполезны, но практических задач требующих непременно такой мощности не так много.

    • 3
      Clausson Clausson
      27.10.2102:11:26

      но практических задач требующих непременно такой мощности не так много.

      Если судить по количеству Мегасайенс проектов которые уже на подходе в России, очень скоро мы как раз упремся в острую нехватку собственных вычислительных мощностей.

      Да и не простаивают эти мощности нигде. Напротив, везде на них очередь. И мы уже сегодня вынуждены бронировать мощности за границей и ждать очереди.

      Отредактировано: Clausson~02:13 27.10.21
      • 1
        Roman Wyrzykowski Roman Wyrzykowski
        27.10.2112:45:01

        1. У Эльбрусов есть многие сферы применения — но в них не входят такие суперкомпьютерные установки как даже в ВШЭ. Их строят в основном на графических процессорах или спецпроцессорах как в случае японского Фугаку.

        2. Я рад за ВШЭ — там один из главных зачинщиков мой друг — очень хороший и энергичный парень. Они показали как надо идти вперед!!!

        3. Касательно отставания России в таких сверхпроизводительных установках — оно действительно есть.

        Я не имею полной инфомации и причина мне не очень понятна — Россия в состоянии ложить действительно большие деньги на большие научные проекты — как в Сарове. Суперкомпьютер на этом фоне не так уж дорогой. По моему тут какая-то внутренняя проблема российских научных кругов что не умеют договориться и выступить с единым преддожением и концепцией к нпр. Мишустину — он откликается на такие инициативы. Но нужно это донести до властей единым фронтом. Тот же МГУ получает большие деньги на развитие, но их установка застряла и не расширяется. По моим наблюдениям и впечатлениям академик Сергеев какой-то мало пробивной и я бы сказал даже мало убедительный — нужно не просто алармировать, нужно собирать людей и выступать единым фронтом с конкретныии программами и предложениями — хорошо подготовленными.

        Но это конечно только мои личные наблюдения.

        Отредактировано: Roman Wyrzykowski~14:27 27.10.21
        • 1
          Е.Юрий Е.Юрий
          27.10.2116:41:37

          Я очень сильно подозреваю, что упор ресурсов как финансовых так и научных сделали на квантовые компьютеры ибо как ни крути там производительность во много раз больше. Видимо не хотят распыления средств, а нынешние нужды тех которые есть компьютеров хватает.

          • 1
            Roman Wyrzykowski Roman Wyrzykowski
            27.10.2118:27:47

            Квантовый компьютер конечно важный, но он все равно не для в всех задач и по сути пока нет примера который бы на важной реальной задаче показывал его убедительные преимущества по сравнению с обычными параллельными суперкомпьютерами.

            И такая суперЭВМ на скажем 50 петафлопс для российской науки и технологиии не такая уж дорогая вещь, а она очень нужна.

            Отредактировано: Roman Wyrzykowski~19:55 27.10.21
            • 1
              Нет аватара termometrix
              27.10.2118:48:43

              И такая суперЭВМ на скажем 50 петафлопс для российской науки и технологиии не такая уж дорогая вещь, а она очень нужна.

              Совершенно верно.

    • 3
      Нет аватара adlik
      27.10.2118:16:54

      Хотя одна машинка супермощности должна быть, а то наши жалуются что приходиться в Германии делать обсчет перспективного сверхзвукового пассажирского лайнера, так как в России нет такой мощности суперкомпьютера на 70 петафлопс

      • 1
        Roman Wyrzykowski Roman Wyrzykowski
        27.10.2118:33:02

        Нехватка такой суперЭВМ уже начинает мешать технологическому развитю страны, не говоря о ее авторитете. А он в современном мире тоже имеет значение.

  • 0
    Нет аватара Salarymen
    28.10.2106:41:27

    А ведь эра современных компьютерных технологий началась с того, что микроэлектронику и интегральные микросхемы стали наносить на кремниевые пластины! Например, на такие: [ссылки отключены]

Написать комментарий
Отмена
Для комментирования вам необходимо зарегистрироваться и войти на сайт,