FreeBSD 7.2 - Высокий load averages

[kvirtu 315]

 

13 root     -68    -     0K     8K CPU1   1  21:56 91.26% swi1: net

sysctl net.isr.dispatch=deferred стоїть чи direct? 

 

нет такой переменной, фря 7.2

[KaYot 3 710]

У тебя одно ядро выжрано в хлам прерываниями сетевки(98.68%), второе - шейпером(45+42%).

Шаманить что-либо абсолютно бесполезно, надо менять платформу - нужен шустрый 4ех ядерный CPU, платформа соответственно хотя бы G6 от HP вместо вашей G5.

Ну и сетевку поставить с очередями, это даст пространство для маневров.

 

В линуксе я бы и на таком железе мегабит 500 прокачал, все упирается в тюнинг НАТа и шейпера, а вот что делать с БСД хз.

 

 

А зачем вы одно старье на другое меняете? Сервера одного поколения, старые и неэффективные.

От того что в нем вместо E5400 стоит такой же камень, но с лейбой Xeon оно быстрее работать не станет

да, но это хоть полноценный сервак, а не декстопный комп

 

По факту в этом серваке стоит регистровая низкочастотная память - как машрутизатор он еще слабее старого, хоть и стабильнее.

Відредаговано 2015-02-14 19:17:32 KaYot

[l1ght 377]

 

 

нет такой переменной, фря 7.2

net.isr.direct: 0
net.isr.direct_force: 0 

[kvirtu 315]

У тебя одно ядро выжрано в хлам прерываниями сетевки(98.68%), второе - шейпером(45+42%).

Шаманить что-либо абсолютно бесполезно, надо менять платформу - нужен шустрый 4ех ядерный CPU, платформа соответственно хотя бы G6 от HP вместо вашей G5.

Ну и сетевку поставить с очередями, это даст пространство для маневров.

 

В линуксе я бы и на таком железе мегабит 500 прокачал, все упирается в тюнинг НАТа и шейпера, а вот что делать с БСД хз.

 

 

А зачем вы одно старье на другое меняете? Сервера одного поколения, старые и неэффективные.

От того что в нем вместо E5400 стоит такой же камень, но с лейбой Xeon оно быстрее работать не станет

да, но это хоть полноценный сервак, а не декстопный комп

 

По факту в этом серваке стоит регистровая низкочастотная память - как машрутизатор он еще слабее старого, хоть и стабильнее.

 

я понял, спс.

замена fxp на bge даст изменения ?

загрузка на fxp0 возникает спонтанно и так же исчезает

на g5 стоит сейчас стоит память: DDR2,667,cl5,pc2-5300E-12

Відредаговано 2015-02-14 19:33:54 kvirtu

[kvirtu 315]

 

нет такой переменной, фря 7.2

net.isr.direct: 0
net.isr.direct_force: 0 

у меня сейчас:

net.isr.direct: 1

sysctl: unknown oid 'net.isr.direct_force'

[KaYot 3 710]

isr не поможет, т.к. все ядра и так заняты.

Ищи что именно дает такой резкий рост нагрузки при увеличении трафика(может шейпер кривой, может таблицы у НАТа раздуваются и нужно таймеры крутить). Ну или железо меняй сразу на более мощное.

Відредаговано 2015-02-14 19:35:50 KaYot

[kvirtu 315]

isr не поможет, т.к. все ядра и так заняты.

Ищи что именно дает такой резкий рост нагрузки при увеличении трафика(может шейпер кривой, может таблицы у НАТа раздуваются и нужно таймеры крутить). Ну или железо меняй сразу на более мощное.

до этого проблем не было, работало четко, без сбоев и затыков ?

что мониторить, что бы выявить от чего нарузка возрастает ?

Відредаговано 2015-02-14 19:38:50 kvirtu

[BUM 242]

hyper threading включен? если да, выключи

Відредаговано 2015-02-14 20:11:11 BUM

[l1ght 377]

 

 

isr не поможет, т.к. все ядра и так заняты.

isr тут тільки в контексті

 

 

13 root     -68    -     0K     8K CPU1   1  21:56 91.26% swi1: net

 

бо це на netisr схоже поведінка.

[kvirtu 315]

hyper threading включен? если да, выключи

нет такого в биосе

 

isr не поможет, т.к. все ядра и так заняты.

isr тут тільки в контексті

 

 

13 root     -68    -     0K     8K CPU1   1  21:56 91.26% swi1: net

 

бо це на netisr схоже поведінка.

 

сейчас 3.37% swi1: net

[maxx 202]

/sbin/sysctl net.isr.direct=0

Уже обсуждалось тут. Пппое ппс и тд и тп. Лечится только нормальными сетевушками и сендибридж архитектурой.

Відредаговано 2015-02-14 20:53:34 maxx

[l1ght 377]

або я неправильно зрозумів, або включений полінг і нетіср одночасно...

якщо я правильно зрозумів - залишити тільки нетіср.

[Sided 132]

kvirtu

 

ка говорил BUM

 

выключи HT

\

 

и igb счастье наше...)))_

[kvirtu 315]

 

/sbin/sysctl net.isr.direct=0

Уже обсуждалось тут. Пппое ппс и тд и тп. Лечится только нормальными сетевушками и сендибридж архитектурой.

 

завтра поменяю на bge,

а что такое сендибридж

kvirtu

 

ка говорил BUM

 

выключи HT

\

 

и igb счастье наше...)))_

как выключить ? подскажи плиз

вроде сам не включал ?

[Sided 132]

 

 

/sbin/sysctl net.isr.direct=0

Уже обсуждалось тут. Пппое ппс и тд и тп. Лечится только нормальными сетевушками и сендибридж архитектурой.

 

завтра поменяю на bge,

а что такое сендибридж

kvirtu

 

ка говорил BUM

 

выключи HT

\

 

и igb счастье наше...)))_

как выключить ? подскажи плиз

вроде сам не включал ?

 

биос

[kvirtu 315]

або я неправильно зрозумів, або включений полінг і нетіср одночасно...

якщо я правильно зрозумів - залишити тільки нетіср.

поллинг по умолчанию выключен, нетиср включен.

Поллинг включаю на fxp0 каогда происходят непонятные скачки нагрузки

 

 

 

/sbin/sysctl net.isr.direct=0

Уже обсуждалось тут. Пппое ппс и тд и тп. Лечится только нормальными сетевушками и сендибридж архитектурой.

 

завтра поменяю на bge,

а что такое сендибридж

kvirtu

 

ка говорил BUM

 

выключи HT

\

 

и igb счастье наше...)))_

как выключить ? подскажи плиз

вроде сам не включал ?

 

биос

 

не нашел я в биосе такой опции

[KaYot 3 710]

kvirtu

 

ка говорил BUM

 

выключи HT

\

 

и igb счастье наше...)))_

У этого камня нет HT в принципе. И igb этому серверу не поможет.

[Sided 132]

ааа.

ну вроде в

http://ark.intel.com/ru/products/40478/Intel-Pentium-Processor-E5400-2M-Cache-2_70-GHz-800-MHz-FSB

нт нет

 

если че

 

могу дать igb ет

на тест

[kvirtu 315]

ааа.

ну вроде в

http://ark.intel.com/ru/products/40478/Intel-Pentium-Processor-E5400-2M-Cache-2_70-GHz-800-MHz-FSB

нт нет

 

если че

 

могу дать igb ет

на тест

спс,

завтра если что отпишусь

[kvirtu 315]

Всем спасибо !

Помогли найти причину,

НАДО менять железо , как минимум, сетевые. Сейчас поеду менять на bge (других пока нет). Буду заказывать igb.

Подскажите  "правильный" тюнинг сетевой подситемы, что бы сгладить ПОКА скачки нагрузки. Спасибо.

 

ПЫ.СЫ. Вырос я из штанишек и не заметил ....

Відредаговано 2015-02-15 06:18:40 kvirtu

[KaYot 3 710]

bge это для древних броадкомов? Точно не поможет такая замена.

Для pppoe хороший вариант - поставить 4 сетевки intel PT и включить их в бондинг, будут равномерно загружены 4(или сколько нужно) ядра.

Відредаговано 2015-02-15 09:04:30 KaYot

[kvirtu 315]

bge это для древних броадкомов? Точно не поможет такая замена.

Для pppoe хороший вариант - поставить 4 сетевки intel PT и включить их в бондинг, будут равномерно загружены 4(или сколько нужно) ядра.

такую Intel EXPI9402PT ?

[kvirtu 315]

Вот сейчас возле сервака,

был момент резкого скачка нагрузки на bge0 до 100 %, потом моргает свет , у нас вілетает один из свичей, поменяли. Сейчас пока все нормально.

Заметил, в моменты нагрузки один из клиентских компов ломиться на сервак, в частности на апач. Может флуд все загаживает ?

[kvirtu 315]

Шейпера ложат сетевуху, отключаю шейпера - все стабилизируется.

 

через 2-3 минуты включил шейпера - нормально.

Не пойму

 

Нормально, нормально , потом резко Нагрузка растет резко до 100 %

Відредаговано 2015-02-15 11:01:46 kvirtu

[l1ght 377]

еееем...

прибити dummynet до 0 ядра?