Плата Dell PowerEdge c8220, запуск и сборка вычислителя. (Собираюсь запустить плату ноды сервера Dell PowerEdge С8220Х и собрать спецвычислитель с GPGU для работы с TenzorFlou.)

Все, что не подходит под определение "старого софта и железа", обсуждается здесь
falanger
Advanced Member
Сообщения: 2514
Зарегистрирован: 30.04.2008,17:45
Откуда: г Черняховск Калининградскjй обл

Вклад в сообщество

Сообщение falanger » 22.09.2018,01:41

В общих чертах собрал машину, осталось поставить Теслу на место и уложить проводку. Выглядит конечно как сляпанное на скорую руку, но главное что работает и не перегревается.
Когда доведу до ума более-менее выложу снова фото.

falanger
Advanced Member
Сообщения: 2514
Зарегистрирован: 30.04.2008,17:45
Откуда: г Черняховск Калининградскjй обл

Вклад в сообщество

Сообщение falanger » 22.09.2018,16:46

Ну что поехали.

"Первый ярус".

https://i.imgur.com/DFFCu3r.jpg

Материнка с парой Xeon E5-2650L под "улитками" для 1U-корпусов. Несмотря на то что кулеры из Китая - качества хорошего медные, я доволен. Марка COOLERSERVER с логотипром пантеры.
Еще пара планок 4 Гб ЕСС REG и на переходнике М.2 SSD Samsung 960 EVO 250 Гб отданный полностью под SWAP раздел.

"Второй ярус".

https://i.imgur.com/lL6mQCT.jpg

Серверная Тесла К20 с "улиткой" и воздуховодом аж из Австралии.
Если ставить нормальные карты с активным охлаждением вроде GTX 780 Ti или Теслы а бортовым кулером штатным то можно поставить 2 карты, каркас сделан именно так.

"Третий ярус" - пара SSD Kingston A400 240 Gb в рейд1 и 4 винта в корзине ноутбучных по 1 Тб Барракуды зеленые в рейд5.
Фотку забыл сделать а раскручивать не хочу.

"Четвертый ярус".

https://i.imgur.com/uCW9xIy.jpg

Блок питания Термалтэк бронза 850 Вт модульный.

Вся разводка на стяжках по каркасу провода питания и на винты и прочее.

falanger
Advanced Member
Сообщения: 2514
Зарегистрирован: 30.04.2008,17:45
Откуда: г Черняховск Калининградскjй обл

Вклад в сообщество

Сообщение falanger » 22.09.2018,19:24

Продолжение банкета

Вид сбоку.

https://i.imgur.com/DvKexlI.jpg
https://i.imgur.com/CtYJIJk.jpg

Все разъемы, кнопка включения и морда река быстрой замены дисков - "на одну сторону".

https://i.imgur.com/uGa9QJ5.jpg
https://i.imgur.com/RurNp1e.jpg

DC-DC бустер повышающий +5VSB от обычного АТХ БП до серверного стандарта +12VSB.

https://i.imgur.com/vneMEZe.jpg

Нужно чтобы работала кнопка питания на плате и функции IPMI, оно питается по этой линии тоже.

А это подключен GPGPU райзер на гибком шлейфе штатный. Потрахался пока заставил работать, в BIOS если опцию энергоконтроля неправильно выставить одну то не работает хоть убейся.

https://i.imgur.com/50T35xQ.jpg

А это высокий Г-образный райзер для GPGPU в который сейчас Тесла подключена, а за ним низкий Г-образный в который включена М2 SSD.

https://i.imgur.com/UtK7wNK.jpg

Тоесть 3 слота расширения задействовано. Можно конечно и 3 GPGPU поставить подключив третью через гибкий райзер длинный Термалтэковский, но у меня нет столько денег...

falanger
Advanced Member
Сообщения: 2514
Зарегистрирован: 30.04.2008,17:45
Откуда: г Черняховск Калининградскjй обл

Вклад в сообщество

Сообщение falanger » 28.09.2018,01:50

Народ нет ни у кого опыта как разбудить сервер выключенный правильно ИБП при пропадании питания?
Питание с сервера совсем не пропадает, так что автостарт по появлению питания не работает. Будить через IPMI вручную не очень кузяво.

geg
Advanced Member
Сообщения: 12303
Зарегистрирован: 21.11.2010,12:04

Сообщение geg » 28.09.2018,09:02

falanger писал(а):нет ни у кого опыта
есть
falanger писал(а):как разбудить сервер выключенный правильно ИБП при пропадании питания?
always on

Аватара пользователя
CodeMaster
Advanced Member
Сообщения: 7669
Зарегистрирован: 27.08.2010,11:17
Откуда: Воронеж
Контактная информация:

Вклад в сообщество

Сообщение CodeMaster » 28.09.2018,10:31

falanger писал(а):выключенный правильно ИБП при пропадании питания?
Питание с сервера совсем не пропадает
Как это, разве ИБП не должен выключится сам после того как погасил комп?
aleksvolgin писал(а):always on
falanger писал(а):Питание с сервера совсем не пропадает
Так-то это не срабатыеват, как falanger и пишет.
"Во времена всеобщей лжи говорить правду - это экстремизм" © Джордж Оруэлл, "1984"

geg
Advanced Member
Сообщения: 12303
Зарегистрирован: 21.11.2010,12:04

Сообщение geg » 28.09.2018,10:42

CodeMaster писал(а):разве ИБП не должен выключится сам после того как погасил комп?
Это зависит от настроек ИБП.
CodeMaster писал(а):Питание с сервера совсем не пропадает
Конечно. АТХ же.

Аватара пользователя
CodeMaster
Advanced Member
Сообщения: 7669
Зарегистрирован: 27.08.2010,11:17
Откуда: Воронеж
Контактная информация:

Вклад в сообщество

Сообщение CodeMaster » 28.09.2018,15:21

falanger писал(а):Народ нет ни у кого опыта как разбудить сервер выключенный правильно ИБП при пропадании питания?
Опыта нет, но идея есть ;-) Например устройство инициирующее сигнал на WoL или WoR при появлении напряжения в сети перед ИБП.
aleksvolgin писал(а):Это зависит от настроек ИБП.
Не вижу в этом логики. Если ИБП не отключается после гашения компа, то должен быть в нём предусмотрен механизм запуска компа после появления питания, иначе какой тайный смысл в холостой работе DC-AC конвертера? Тренировка АКБ глубоким разрядом?
"Во времена всеобщей лжи говорить правду - это экстремизм" © Джордж Оруэлл, "1984"

geg
Advanced Member
Сообщения: 12303
Зарегистрирован: 21.11.2010,12:04

Сообщение geg » 28.09.2018,15:52

CodeMaster писал(а):то должен быть в нём предусмотрен механизм запуска компа после появления питания
Есть, конечно, и он настраиваемый.
CodeMaster писал(а):Опыта нет, но идея есть
НаписАл же, по английски: always on.

falanger
Advanced Member
Сообщения: 2514
Зарегистрирован: 30.04.2008,17:45
Откуда: г Черняховск Калининградскjй обл

Вклад в сообщество

Сообщение falanger » 28.09.2018,20:16

В ИБП слишком тупорылая прога управления родная, там ничего не настроить, и сервер не поддерживает побудки по USB.
Программу проверял под виндами от него SVEN POWR Pro+ 700 USB. И в NUT пока ничего такого чтобы влезть внутрь ИБП пока тоже не нашел, есть графические утилиты и WEB-интерфейс NUT но я их пока не запускал и не проверял. Доступ то весь по SSH консольный.
Пока склоняюсь настроить оповещение NUT на рассылку емыла и будить по IPMI ручками "когда роутер очнется" по появлении светы в розетке. Все равно промежуточные коммутаторы провайдера без ИБП сами.

Аватара пользователя
CodeMaster
Advanced Member
Сообщения: 7669
Зарегистрирован: 27.08.2010,11:17
Откуда: Воронеж
Контактная информация:

Вклад в сообщество

Сообщение CodeMaster » 28.09.2018,23:36

falanger писал(а):В ИБП слишком тупорылая прога управления родная, там ничего не настроить, и сервер не поддерживает побудки по USB.
Ты объясни, что происходит с ИБП когда пропало напряжение? ИБП уведомил ОСь о сбое, та свернулась и выключила АТХ, а дальше? Обычно ИБП ждёт какое-то время (предварительно настраевоемое, т.к. он не в курсе когда именно ОСь отключит АТХ) и отключает DC-AC конвертер. Что происходит в твоём случае, ИБП работает до полного разряда батарей?
"Во времена всеобщей лжи говорить правду - это экстремизм" © Джордж Оруэлл, "1984"

Ответить