Size: a a a

Puppet — русскоговорящее сообщество

2020 December 16

DV

Dmitriy Vilkhivskiy in Puppet — русскоговорящее сообщество
Dmitry Sergeev
тогда как интепритировать
> с учётом отказоустойчивости и распределения я могбы получить псевдополноценные 100*4/2=200 гигов (под единую виртуалку)
> Или например 10 компов с видюхами объединить в единую мощь, а кластер сам распределит задачу по вычислениям между картами и в случае выхода из строя одной из них перераспределит задачу между оставшимися

В первом случае  я понял, что он хочет оперативную память нескольких хостов объеденить в один пул, а потом еще виртуалку создать из этого. Как бы странно это не звучало =)

Во втором случае штуку, которая будет параллелить  задачу на видюхах разных компов. То есть что-то похоже на MPI, только для видюх. Ну в теории это наверное можно сделать на MPI. Типо на каждом компе по видюхе или несколько. Ты параллелишь задачи по вокрерам, а каждая задача паралелится еше на кажом воркере уже через CUDA
да, че то я это пропустил. Интересно, что это за задачи такие где надо вычеслительные ресурсы объеденять
источник

A

Andor in Puppet — русскоговорящее сообщество
Dmitry Sergeev
тогда как интепритировать
> с учётом отказоустойчивости и распределения я могбы получить псевдополноценные 100*4/2=200 гигов (под единую виртуалку)
> Или например 10 компов с видюхами объединить в единую мощь, а кластер сам распределит задачу по вычислениям между картами и в случае выхода из строя одной из них перераспределит задачу между оставшимися

В первом случае  я понял, что он хочет оперативную память нескольких хостов объеденить в один пул, а потом еще виртуалку создать из этого. Как бы странно это не звучало =)

Во втором случае штуку, которая будет параллелить  задачу на видюхах разных компов. То есть что-то похоже на MPI, только для видюх. Ну в теории это наверное можно сделать на MPI. Типо на каждом компе по видюхе или несколько. Ты параллелишь задачи по вокрерам, а каждая задача паралелится еше на кажом воркере уже через CUDA
источник

A

Andor in Puppet — русскоговорящее сообщество
но это про вычисления, а не как sli
источник

A

Andor in Puppet — русскоговорящее сообщество
то есть опять же хпц
источник

DV

Dmitriy Vilkhivskiy in Puppet — русскоговорящее сообщество
было бы прикольно если бы была возможность такой виртуализации, собрать из компов и одной виртуалке выдать кучу ядер и оперативы
источник

A

Andor in Puppet — русскоговорящее сообщество
Dmitriy Vilkhivskiy
было бы прикольно если бы была возможность такой виртуализации, собрать из компов и одной виртуалке выдать кучу ядер и оперативы
openmosix
источник

A

Andor in Puppet — русскоговорящее сообщество
но всё упирается в скорость сети как обычно
источник

DV

Dmitriy Vilkhivskiy in Puppet — русскоговорящее сообщество
ну можно infiniband прикрутить для связи
источник

A

Andor in Puppet — русскоговорящее сообщество
доступ до памяти соседнего хоста в сотни раз медленнее, чем до локальной
источник

DS

Dmitry Sergeev in Puppet — русскоговорящее сообщество
Andor
то есть опять же хпц
а что значит хпц?
источник

DV

Dmitriy Vilkhivskiy in Puppet — русскоговорящее сообщество
понятно что не геораспределенно
источник

A

Andor in Puppet — русскоговорящее сообщество
Dmitry Sergeev
а что значит хпц?
хай-перформанс-компьютинг
источник

DS

Dmitry Sergeev in Puppet — русскоговорящее сообщество
Andor
доступ до памяти соседнего хоста в сотни раз медленнее, чем до локальной
+ смысла же нет
источник

A

Andor in Puppet — русскоговорящее сообщество
Dmitriy Vilkhivskiy
ну можно infiniband прикрутить для связи
всё равно рдна медленнее, чем локальная память
источник

DV

Dmitriy Vilkhivskiy in Puppet — русскоговорящее сообщество
я с вами не спорю))
источник

A

Andor in Puppet — русскоговорящее сообщество
ну то есть в теории так можно
источник

A

Andor in Puppet — русскоговорящее сообщество
на практике дешевле купить железку мощнее, чем связываться с инфинибендом и рдна
источник

A

Andor in Puppet — русскоговорящее сообщество
даже локальный доступ до памяти соседнего процессора намного медленее, чем до памяти нынешнего процессора (привет NUMA), так что даже в пределах одного хоста про это надо думать
источник

DS

Dmitry Sergeev in Puppet — русскоговорящее сообщество
Кажется человек думал что ec2 в амазон не просто виртуалочки на железках. А что там есть некий пул cpu и memory, который как бы виртуальный. И виртуалочки создаются и используют мощности из этого пула. Типо 1024MB с одного хоста, другие 3 гига с другого, одно ядро  cpu из третьего, другое ядро из четвертого. И вот готова виртуалка =)
Вроде как все его высказывания таким образом можно объяснить
источник

A

Andor in Puppet — русскоговорящее сообщество
на практике же там внутри относительно обычные xen и kvm (ну или что у них там нынче, хз) с умным оркестратором
источник