Перейти до

Распределение прерываний сетевой карты


Рекомендованные сообщения

Да, так. Это битмаска и для аффинити абсолютно не имеет смысла одинаковая маска и тем более ff, она дефолтовая ff, т.е. раскидывать на любое попавшееся ядро. Читайте официальную документацию:

https://www.kernel.org/doc/Documentation/IRQ-affinity.txt
https://www.kernel.org/doc/Documentation/networking/scaling.txt

Ссылка на сообщение
Поделиться на других сайтах
В 19.03.2018 в 16:22, Sashok1985 сказал:

Какой тогда смысл от такого разброса?

а в чем собссно проблема-то?

 

и какой смысл для очереди, в которую идут ВСЕ прерывания, указывать worker'ом только одно ядро???

 

 

В 19.03.2018 в 17:12, ttttt сказал:

для аффинити абсолютно не имеет смысла одинаковая маска

это ни разу не аффинити. это - RPS.

Ссылка на сообщение
Поделиться на других сайтах
28 минут назад, NiTr0 сказал:

это - RPS

Именно.

Это не аппаратная обработка прерывания, это уже уровень soft irq. Накладных расходов на использование чужих ядер минимум, конструкция вида "все ядра всем потокам" работает хорошо, выравнивая кривую аппаратную балансировку.

Ссылка на сообщение
Поделиться на других сайтах

Не именно, распределение по ядрам традиционно называется аффинити, не важно чего конкретно, IRQ, обработки соединений, чего-то другого.
И называется так именно потому, что разделяя вещи связанные друг с другом по одним и тем же ядрам можно более эффективно использовать кэш каждого ядра, а не ждать пока данные прилетят откуда попало и не засорять ненужным кэшем не то ядро.

https://en.wikipedia.org/wiki/Affinity_mask
https://en.wikipedia.org/wiki/Processor_affinity

Відредаговано ttttt
Ссылка на сообщение
Поделиться на других сайтах
18 часов назад, ttttt сказал:

разделяя вещи связанные друг с другом по одним и тем же ядрам можно более эффективно использовать кэш каждого ядра, а не ждать пока данные прилетят откуда попало и не засорять ненужным кэшем не то ядро.

 

ну т.е. вы хотите сказать, что включение RPS в случае одной очереди прерываний (либо PPPoE пакетов, которые падают в одну и ту же очередь, делая аппаратные очереди бесполезными) снизит производительность? при том, что в реальном мире все ровно с точностью до наоборот?

Ссылка на сообщение
Поделиться на других сайтах

Ок, не надо мне свои выдумки приписывать, потому уточнение, у рпс аффинити достигается выбором ядра по хэшу. Как вообще работает: при одной очереди прерывание выполняется на каком-то ядре и на этом ядре вычисляется хэш пакета и по хэшу выбирается из списка рпс ядро, куда отправлять дальнейшую обработку пакета. Соответственно оптимально в этом случае будет прибить прерывание к одному какому-то ядру, а остальные ядра указать в рпс. Если, конечно, не нума, иначе на все ядра будет медленно и нужно прибивать только к тем ядрам, куда можно быстро с ядра прерывания ходить. Когда очередей много, включен рсс и не нума, ядро где вычисляется хэш уже выбрано рсс хардом, таким же вычислением хэша и смысл отправлять пакет на дальнейшую обработку есть только самому себе. Если рсс не работает для доминирующего типа трафика, то прерывания будут попадать на одно ядро выбранное рсс, то очевидно что для оптимума стоит отключить рсс и мультиочереди и делать как и с одной очередью.

Ссылка на сообщение
Поделиться на других сайтах
В 21.03.2018 в 23:37, ttttt сказал:

Соответственно оптимально в этом случае будет прибить прерывание к одному какому-то ядру, а остальные ядра указать в рпс.

таки нет. получение пакета из сетевухи и вычисление хеша по заголовку - копеечная по ресурсам операция. потому выделять под это отдельное ядро смысла нет. тут вся суть - распределить ресурсоемкую маршрутизацию пакетов на более чем одно ядро.

да и не факт что cache miss будут меньше при отдельном ядре под прием пакетов.

 

В 21.03.2018 в 23:37, ttttt сказал:

Если рсс не работает для доминирующего типа трафика, то прерывания будут попадать на одно ядро выбранное рсс, то очевидно что для оптимума стоит отключить рсс и мультиочереди и делать как и с одной очередью.

зачем? чем мешают тут мультиочереди?

Ссылка на сообщение
Поделиться на других сайтах

Всем спасибо за консультации. RPS не был лишним, тем более, что ранее, за непониманием его работы, я назначал маску по ядрам, по типу афинити. Маска на все ядра дала не плохой общий результат по ядрам. А вот проблема с полкой оказалась совсем не в этом. Один из абонентов супер заядлый торрентщик. В пики, порождал около 3-4 тыс. запросов в секунду на своём pppoe коннекте. А так как каждый pppoe коннект может обрабатываться только одной очередью, вот он и кладёт одно ядро в полку.

Ссылка на сообщение
Поделиться на других сайтах

Создайте аккаунт или войдите в него для комментирования

Вы должны быть пользователем, чтобы оставить комментарий

Создать аккаунт

Зарегистрируйтесь для получения аккаунта. Это просто!

Зарегистрировать аккаунт

Вхід

Уже зарегистрированы? Войдите здесь.

Войти сейчас
  • Зараз на сторінці   0 користувачів

    Немає користувачів, що переглядають цю сторінку.

  • Схожий контент

    • Від kolomiets
      Продано
       
      Сервер Intel (SR2600URBRP)
      Процесор: Intel Quad-Core Xeon E5520. 2.26 ГГц
      Привод: DVD RW samsung SN-S083C
      Оперативная память: DIMM DDR3 4 GB 1333 MHz x 3 = 12Gb
      Цена 1500$, торг
      тел. 063930###2 Константин
    • Від Гриша
      Продам SFP:
      SFP+ 10G 1310 20km HUAWEI - 1шт
      SFP+ 10G 1310 20km HUAWEI - 1шт
      SFP+ 10G 1310 20km HUAWEI - 1шт
      SFP+ 10G 1310 20km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 10G 1310 10km HUAWEI - 1шт
      SFP+ 1G 1310 WDM 10km 6COM - 1шт
      SFP 1G 850nm 300m CISCO - 1шт
      SFP 1G 850nm 300m CISCO - 1шт
      SFP+ 10G 850nm 300m INTEL - 1шт
      SFP+ 10G 850nm 300m INTEL - 1шт
      SFP+ 10G 850nm 300m INTEL - 1шт
       
      Ціна, фото по посиланню: 
      https://docs.google.com/spreadsheets/d/1qgYDF0iqjyv2IG6wO5O0O4fYSllWILm1Pj4khu_WCBo/edit#gid=0
      Торг доречний
    • Від rocker_ilko
      продам мережеві карти. Є з низькопрофільною планкою і з стандартною. 
       
      HP nc365tIntel, 10/100/1000, 4порта, PCI-E    550грн
      HP 361t, Intel, 10/100/1000, 2порта, PCI-E      1100грн
      Intel I350-t2, Intel, 2порта, PCI-E                      550грн
      HP nc375tIntel, 10/100/1000, 4порта, PCI-E    550грн
      HP nc364tIntel, 10/100/1000, 4порта, PCI-E    550грн
      Intel ET DualIntel, 10/100/1000, 2порта, PCI-E      550грн
      HP 10GB Ethernet 2-Port 530T, HP, 10/100/1000/10000, 2порта, PCI-E   1100грн
      Intel ET QuadIntel, 10/100/1000, 4порта, PCI-E         1100грн    
      Intel I350-t4, Intel, 4, PCI-E    1100грн
       
    • Від Kycherr
      Торг!!! Ціну пропонуйте
      Конфигурация портов
      Quad
      Скорость передачи данных на порт
      10GbE/1GbE/100Mb
      Технология виртуализации Intel® для соединений
      Да
      Скорость и ширина слота
      8.0 GT/s, x 8 Lane
      Контроллер
      Intel® Ethernet Controller XL710
    • Від trn457
      продам сетевую карту Intel Pro 1000Mbit
      Интерфейс PCI
      Скорость 1 Гбит/с
      Разъемы RJ-45
      Стандарты IEEE 802.3, 802.3u, 802.3ab
      новая
      есть 2 шт.
      цена за одну - 700 грн



×
×
  • Створити нове...