Dell c6100 4х ноды можно ли объединить в 1 сервер?

[MAC. 1]

Добрый день, 

 

Возникает вопрос Dell c6100 4х ноды можно ли объединить в 1 сервер?

 

Нужно поставить 1 OS и получить в итоге с 8 CPU = 48 ядер или 96 виртуальных!

 

Это реально? Говорят что за счет RAID, но как это ведь 4 отдельных сервака

[VitalVas 14]

Никак

А RAID - это совершенно другое - Redundant Array of Independent Disks

[MAC. 1]

Гговорят что собирали в 1 сервак такую ноду и ОС покажет 96 ядер в top. Дают чуть не 100% гарантию говорят что есть опция в рейде юзать 1 винт на все 4 ноды. 

Відредаговано 2016-07-23 17:41:29 macintosh

[MAC. 1]

Вроде такое делали тут

 

Dell C6100 XS23-TY3 2U 4-Node (8 CPU) Cloud Server

https://forums.servethehome.com/index.php?threads/dell-c6100-xs23-ty3-2u-4-node-8-cpu-cloud-server.1247/

 

Может кто пробовал 8 процессоров заставить работать на 1 OS и с 1 винтом     

[masters 126]

Не понял - причем тут рейд и 96 ядер.

Если общий дисковый массив можно собрать - в принципе можно поднять виртуализацию, а на ней ВМ. 

[stunt 19]

Да, только как общий вычислительный пул для виртуализации, собственно для этих целей подобные сервера и задумывались. Ну подумайте логически - шины процессора и памяти - десятки гигабайт в секунду, а чем вы будете ноды объединять? Адекватно только 10G ethernet... И какой смысл в этой системе?

Відредаговано 2016-07-23 15:57:59 stunt

[dimka890 16]

Чисто теоретически если туда поставить Infiniband, будет возможность RDMA, как-то попадался линукс-дистрибутив, который умел через IB собирать сервера в 1, но оно было очень сырое, очень кривое и практически сделано just for fan, но в любом случае взаимодействие между процессорами по сети идет, т.к. QPI естественно никак в PCI-E не выводится, более того у процессоров на 1366 сокете 2 QPI линка => максимум 2 процессора (без использования QPI свича, коего для данной платформы, насколько мне известно, не существует)

P.S. Могу предложить 4-х сокетный сервер  либо 8-ми сокетный (но это уже очень не бюджетно) сервер без танцев с бубном, всё работает из коробки как один сервак.

[Den_LocalNet 1 474]

Там тупо 4 сервера в одном ящике, общее там только питание.

[dimka890 16]

P.P.S Винты там в принципе можно все собрать в 1 ноду, или раскидать как надо по разным, не помню как там в 12-ти дисковой версии, а в 24 дисковой там к каждому винту идет свой кабель, никаких SAS экспандеров там нет. Будет конечно несколько колхозно, но всё же. В атаче фото как оно там сделано

[Den_LocalNet 1 474]

Дык ТС не винты хочет собрать в кучу, а процы.

[dimka890 16]

Да то понятно, я выше написал варианты, но он же хочет ещё вроде как и винты соединить, если я правильно его понял

[maxx 202]

 Dell c6100 4х ноды можно ли объединить в 1 сервер?

Нет.

Знал я одного тех-лида который хотел такое что бы я такое ему сделал в мае, причем на таком же железе.

Вариант один. Виртуализировать и строить кластер с балансировкой нагрузки.Но костыли еще те.

Відредаговано 2016-07-23 17:33:33 maxx

[MAC. 1]

Спасибо все за ответы, понял что нельзя!

 

Как мне тогда быть, база убивается на 24 ядрах, нужно реально грузить 8 камней 96 ядер MySQL

 

Что посоветуйте как построить балансировщик правильно? Сколько винтов надо SSD тогда в каждую ноду минимум по 2 в RAID-0?

[MAC. 1]

Камни там буду стоять  8 X 5670  в итоге это 48 ядер или 96 вирутальных.  По хорошему под мои задачи нужен сервак с 120 ядрами минимум.  Скажем это 9 х 5670.  везде хочу ставить , SSD Samsung Enterprise 240GB 2,5" SATA 6Gb/s, Nieuw SM863 

 

Вот не знаю стоит ли липить рейд или лучше напрямую подать в контроллер или в мать SSD, чтоб не терять скорость. Безопасность данных не так важна, резервируется каждую минуту.  Запросы на столько тупые что не хотят переписывать вчера при 2к посещалки положили 24 ядра и 144 оперативы. Теперь идет замах на 96 ядер минимум. 

 

Intel® Xeon® Processor X5670 (12M Cache, 2.93 GHz, 6.40 GT/s Intel® QPI)

[pavlabor 1 950]

Может тебе типа такого нужно?

Вычислительный кластер под FreeBSD

[MAC. 1]

Если я упираюсь в камни может мне стоит взять тогда

 

 

2 х E5-2670  напротив 4х X5670. 

[dimka890 16]

две системы с двумя 5670 не равно системе с двумя 5670, если нужно много ядер - смотрите в сторону многосокетных систем на E7-4xxx и E7-8xxx. У 2670 ниже частота кстати, это тоже может сказаться

[masters 126]

Спасибо все за ответы, понял что нельзя!

 

Как мне тогда быть, база убивается на 24 ядрах, нужно реально грузить 8 камней 96 ядер MySQL

 

Что посоветуйте как построить балансировщик правильно? Сколько винтов надо SSD тогда в каждую ноду минимум по 2 в RAID-0?

 

Если БД упирается именно в ядра - почему бы не разнести ее на разные сервера, и не использовать мастер-мастер репликацию. И не надо велосипедов.

[NiTr0 584]

 

 

Как мне тогда быть, база убивается на 24 ядрах, нужно реально грузить 8 камней 96 ядер MySQL

разработчику чудо-софта, убивающего базу кривыми запросами без индексов, оторвать руки по самую ж#пу из которой они растут...

 

 

 

Запросы на столько тупые что не хотят переписывать вчера при 2к посещалки положили 24 ядра и 144 оперативы.

тому подтверждение.

 

 

 

Если БД упирается именно в ядра - почему бы не разнести ее на разные сервера, и не использовать мастер-мастер репликацию. И не надо велосипедов.

мсье знаток редких извращений мастер-мастер ломается на ура элементарным скл говнокодом. и будет веселый split-brain...

[MAC. 1]

разработчику чудо-софта, убивающего базу кривыми запросами без индексов, оторвать руки по самую ж#пу из которой они растут...

 

Согласен! ))

 

Но ребята готовы платить! Не за код который некому переписать а за железо!

 

Нашел одного зверя сегодня

 

 

HP ProLiant DL580 G7  процы туда поставят 4 штуки Intel® Xeon® Processor E7-4860 (24M Cache, 2.26 GHz, 6.40 GT/s Intel® QPI)  вроде сравнивал с E5-2670 не плохие камни

 

В итоге получаем 40 ядер и 80 виртуальных. и засунем 144Гб мозгов. Про питание я уже молчу думаю в пик будет жрать 2-3квт/час

 

Скажите как лучше организовать теперь SSD масив чтоб максимум получить скорость? Делать RAID-10 или RAID-0 ? Или вообще без рейда что будет лучше? А если RAID то какой ставить PCI-E что типа Адаптека пихать? Бортовой думаю не годится.

 

Пожалуйста кто имел дело с мощными железом и нагрузками c БД. Дайте совет.

 

P.S

Вчера было 900к запросов /сек MySQL на 24 ядрах 2х X5650 тачка все под 100-ку % забиты были. 5.2к  запросов стояли в очереди la была 30+! на оба камня. 

Відредаговано 2016-07-23 19:27:39 macintosh

[MAC. 1]

 

Одно стремает частота проца  4x E7-4860 всего 2.26 но если врубить турбо правда там 1 поколение то должно до 2.66 догнать по заявленным характеристикам, никто не в курсе по умолчанию на всех процах оно выключено? 

[dimka890 16]

Вы только с ним по аккуратнее, они не все поддерживают Е7 камни

[MAC. 1]

По поводу увеличить скорость на SSD, нашел статью на хабре https://habrahabr.ru/company/intel/blog/148257/ человек делал RAID-0 и повысил хорошо показатели. 

 

Мне сказали что E7-4860 на борту 4 штуки все соберут и привезут. Сейчас остался вопрос с винтами разобраться как их ускорить правильно. 

[dimka890 16]

а какой объем базы? если не большой, то попробуйте Fusion IO

[MAC. 1]

там 200 метров всего. Что такое Fusion IO ? Нашел такая карта будет по быстрее SSD в массиве-0 ?

Відредаговано 2016-07-23 20:02:50 macintosh