Technical supercomputers laboratory. & insitute of cybernetics of ukraine @ hpc day 2012 kiev
1. Iнститут кiбернетики iменi В.М.Глушкова НАН України
СКIТ-4 – СУПЕРКОМП’ЮТЕР IНСТИТУТУ КIБЕРНЕТИКИ
НАН УКРАЇНИ
Головинський А.Л., Маленко А.Л., Бандура О.Ю.,
Горенко С.О., Черепинець В.В., Ємченко I.О.
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 1 / 12
2. Характеристики СКIТ-4
Супекомп’ютерний комплекс СКIТ було розширено новим
GPU-кластером СКIТ-4. Кластер базується на новiтнiй платформi HP
ProLiant Gen8 BladeSystems.
12 вузлiв на базi CPU Intel Xeon E5-2600 з частотою 2.6 ГГц;
192 обчислювальних ядра;
36 прискорювачiв NVidia Tesla M2075;
768 ГБ оперативної пам’ятi;
cховище даних обсягом 100 ТБ;
мережа передачi даних мiж вузлами Infiniband FDR 56 Гбiт/с.
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 2 / 12
4. Продуктивнiсть СКIТ-4
Характеристики вузла:
реальна продуктивнiсть 1 ТФлопс;
16 ядер (32 у режимi HyperThreading);
64 ГБ оперативної пам’ятi;
3 прискорювача NVidia Tesla M2075.
В цiлому кластер має наступнi характеристики продуктивностi:
пiкова продуктивнiсть 25,6 ТФлопс;
реальна продуктивнiсть 10 ТФлопс.
СКIТ-4 удвiчi потужнiший за СКIТ-3, при цьому менший за розмiрами
та має значно менше енергоспоживання – 15 кВт проти 60 кВт.
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 4 / 12
6. Порiвння латентностi Infiniband FDR та DDR при
передачi даних рiзного розмiру
Латентнiсть, мiкросекунд
Розмiр буфера DDR FDR
читання запис читання запис
512 Б 8,51 4,7 1,95 1,67
8 КБ 15,18 12,05 3,65 3,39
32 КБ 33,02 29,31 7,73 7,42
256 КБ 197,02 194,45 44,19 43,81
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 6 / 12
7. Порiвння пропускної здатностi Infiniband FDR та DDR
при передачi даних рiзного розмiру
Пропускна здатнiсть, МБ/с
Розмiр буфера DDR FDR
читання запис читання запис
512 Б 96 659 3182 3747
8 КБ 830 1318 5900 6000
32 КБ 1200 1341 5998 6035
256 КБ 1315 1337 6005 6041
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 7 / 12
8. Латентнiсть Infiniband FDR та GPU у MPI при передачi
4- та 512-байтових значень
Режим 4-байтовi, мкс 512-байтовi, мкс
Всерединi вузла ОЗУ – ОЗУ 0,68 0,84
Мiж вузлами ОЗУ – ОЗУ 1,47 2,39
Всерединi вузла ОЗУ – GPU 20,64 20,91
Всерединi вузла GPU – GPU 20,59 20,72
Мiж вузлами GPU – GPU 40,95 42,11
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 8 / 12
9. Пропускна здатнiсть Infiniband FDR та GPU у MPI при
передачi 512-байтових та 4 МБ значень
Режим 512, МБ/с 4 МБ, МБ/с
Всерединi вузла ОЗУ – ОЗУ 972 9881
Мiж вузлами ОЗУ – ОЗУ 648 6400
Всерединi вузла ОЗУ – GPU 17 4940
Всерединi вузла GPU – GPU 90 4955
Мiж вузлами GPU – GPU 15 4900
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 9 / 12
10. Практичний ефект
збiльшення ресурсiв комплекса СКIТ;
сприяння переходу на новi технологiї.
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 10 / 12
11. Позицiя у свiтi
З 2011 року у списку Top50 немає українських систем;
cередня продуктивнiсть систем списку складає 51 ТФлопс;
кластер СКIТ-4 не є суперкомп’ютером у сучасному розумiннi.
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 11 / 12
12. Дякую за увагу!
http://icybcluster.org.ua/
Головинський А.Л. (IК НАНУ) СКIТ-4 Iнституту кiбернетики 12 жовтня 2012 р. 12 / 12