Перейти до

Налаштування BAR (Resizable BAR) для 8x Radeon Pro VII на сервері Gigabyte G292-Z20 (AMD EPYC).


Рекомендованные сообщения

Помогите пожалуйста 
 

 Проблема распределения ресурсов PCIe (Resizable BAR / Large BAR) на сервере Gigabyte G292-Z20 с 8x Radeon Pro VII.

Конфигурация:

Сервер: Gigabyte G292-Z20 (rev. 100).

Материнская плата: MZ22-G20, BIOS версии R23.

Процессор: AMD EPYC 7002 (Rome).

GPU: 8 x Radeon Pro VII 16GB (архитектура Vega 20 / gfx906).

ОС: Ubuntu 22.04

Суть проблемы:
Не удается расширить адресное пространство видеокарт (BAR) до номинальных 16 ГБ на каждую карту. В данный момент система выделяет картам стандартные 256 МБ. При попытке инициализации ROCm возникает нехватка ресурсов.

Что уже сделано в BIOS:

Включен Above 4G Decoding и IOMMU.

Режим загрузки — чистый UEFI (CSM отключен).

Топология выставлена в NPS1 (NUMA nodes per socket = 1) для объединения ресурсов.

Отключен SR-IOV.

В чем затык:
BIOS версии R23 довольно старый и не имеет явных настроек «MMIO High Base» или переключателя «Resizable BAR». Судя по логам, PCI-мосты (Bridge Windows) зажаты на уровне ~770 МБ, что физически не дает ядру Linux выделить окна по 16 ГБ для 8 видеокарт (требуется суммарно 128 ГБ адресного пространства). Стандартные параметры ядра pci=realloc не помогают или приводят к конфликтам с сетевыми интерфейсами (пропадание сети из-за переназначения шин).

Нужна помощь специалиста, который сможет:

Правильно сконфигурировать параметры загрузки ядра (pci=realloc, assign_busses и т.д.) так, чтобы карты получили 16 ГБ BAR, но при этом сохранилась работоспособность бортовых сетевых карт.

Проверить лимиты MMIO и, если необходимо, помочь с обновлением BIOS/VBIOS или правкой таблиц ресурсов через ОС.

.

Допоможіть будь ласка, сервер простаивает из-за невозможности корректно адресовать память видеокарт!

Ссылка на сообщение
Поделиться на других сайтах

Создайте аккаунт или войдите в него для комментирования

Вы должны быть пользователем, чтобы оставить комментарий

Создать аккаунт

Зарегистрируйтесь для получения аккаунта. Это просто!

Зарегистрировать аккаунт

Вхід

Уже зарегистрированы? Войдите здесь.

Войти сейчас
  • Зараз на сторінці   0 користувачів

    Немає користувачів, що переглядають цю сторінку.

  • Схожий контент

    • Від AlvinGPad
      Доброго дня. 
      Потратив мені до рук такий пристрій MikroTik ATL LTE18 kit (ATLGM&EG18-EA) підкажіть хто має адекватний гайд чи інструкцію підключення даного девайсу. Має використовуватись для підключення мобільних до LTE мереж київстар, vodafone, life і все решта що можливо інше.
      Будемо вдячні за допомогу. Хто добре розбирається в такому обладнанні потрібна Ваша допомога.
    • Від Andriydjv
      Перепрошую за створення ще одної теми, може в цьому розділі швидше допоможуть мені?
      По суті тре поставити білінг і звязати з мікротіком та бути на тех підтримці для добавлення правил і налаштувань ( можу і неторбувати як все працює чи при потребі щось редагувати) за щомісячну плату.
      Детальніше: шукаю системного адміністратора для встановлення білінгової системи ubilling і обслуговування та розвитку мережі 350+ абонентів. 
      Що є:
      -Mikrotik ccr1036
      -абоненти epon - olt - Bdcom 3310 та WiFi ubiqiti 
      -авторизація по статичних IP
      -2 вхідних канали трафіку
      -самописний білінг - Nuance billing
      Що треба:
      -Впорядкувати, оптимізувати налаштування мікротіка, авторизацію абонентів і зарезервувати канали
      -встановити білінг - ubilling або щось краще з розрахунку на маштаб мережі і доцільність
      -налаштувати прийом платежів з Приват банку і автоматичну активацію абонентів в реальному часі з відображенням залишку на рахунку
      -прийом платежів з терміналів esypay в реальному часі
      -подальше обслуговування, що місячна тех підтримка /налаштування з модернізацією і розвитком мережі за адекватну до маштабу мережі що місячну плату ( ps можу за місяць дзвонити а можу і нетурбувати коли все працює і нового нічого непотрібно на той час) 
      Вимоги до кандидата:
      - територіальне знаходження у Львові / Миколаєві або Львівській області (надаю перевагу живому спілкуванню) 
      - також відкритість на спілкування по реальному номеру телефону а не конспірологія і скривання по всяких вайберах прив'язаних до недійсних номерів (звісно в неробочий, особистий, тихий час по вашому проханню турбувати небудемо без критичної на то потреби як наподобі піднятя мережі і відновлення маштабного звязку). 
      - ну і на перспективу створення сайту якщо ще в такому спеціалізуєтесь. 
      Прошу звертатись тут чи вайбер, телеграм, а краще дзвоніть з 11:00 до 20:00 (окрім Неділі і свят) за н.т: 0637766025 Андрій
    • Від Pantech
      Є хата. На вікні стоїть роутер tp-link. Потрібен інет чз 200 м прямої видимості.
      Як sxt законектить по wifi до роутера, і віддать на ПК
    • Від mlevel
      Шукаю системного адміністратора для виконання разової роботи по налаштуванню корпоративного поштового сервера на базі вже встановленої ОС FreeBSD 10.2 (повністю "чиста" система).
       
      Софт:
      1. Postfix 3 + Dovecot 2.2
      2. PostgreSQL 9
      3. SpamAssassin 3.4 + ClamAV 0.99
      4. PostfixAdmin (+ nginx)
      5. Roundcube 1.1 (+ nginx)
       
      Вимоги:
      1. Підтримка квот (quotas) на розмір поштових скриньок.
      2. 3 поштових домени (multi-domain support)
      3. SSL/TLS support.
      4. LMTP support.
      5. Врахування наявності SPF/DKIM при рангуванні спаму.
      6. Автоматичне навчання системи розпізнавання спаму при переміщенні повідомлення в папку Spam.
      7. Віртуальні mailboxes (одна поштова скринька для декількох користувачів).
       
      Також треба performance tunning (для 4k+ користувачів).
       
      Будь ласка пишіть в приватні повідомлення, обговоримо деталі.
    • Від holubets
      Доброго вечора.
      Проблема наступна: Є БС з каналом в 30 мбіт. На тестах є 30 мбіт.
      Але клієнти більше 6-8 мбіт не викачують, видно що не вистачає каналу.
      Завантаження процесора 25-30%.
      Підключення РРРОЕ і DHCP. Черги відключені.
      Прошивка 2.25. Роутер 2011L-IN.
       
      Куди копати? Можу дати доступ до роутера.
×
×
  • Створити нове...