jordanmua 29 Posted 2013-06-30 14:41:10 Share Posted 2013-06-30 14:41:10 Прошу совета и помощи. Нужно в 1u поставить сервер для BGP ожидаемая нагрузка 7 гбит с запасом 10. В работе стоит amd 8350 и двух глазая сетевая 82599eb только зебра, прокачивает 4 гбита, и проц упарается по прерываниям.Вопрос что поставить для 7-10 гбит. Какой пооц? Интел? Какой? А оптерон 6300 16 ядер ( 8 пакетов по 2 ядра) это 16 физ прерываний или всетаки 8.Очень бы хотелось поднять вопрос о физ прирываниях амд, да они медленее по тестам но нам сетевикам может быть физ прерывания дадут то что надо? Или всетаки интел? Link to post Share on other sites
onorua 126 Posted 2013-06-30 14:57:01 Share Posted 2013-06-30 14:57:01 в 1U не поместитесь, ИМХО. Link to post Share on other sites
jordanmua 29 Posted 2013-06-30 15:00:17 Author Share Posted 2013-06-30 15:00:17 Ну 2U. Вопрос в процессоре. А так же в АМД неужели 16 физ прерываний на оптеронах не дорогих не дают нам сетевикам ничего? Link to post Share on other sites
ttttt 195 Posted 2013-06-30 15:43:05 Share Posted 2013-06-30 15:43:05 А каким боком сюда "прерывания на оптеронах"? Link to post Share on other sites
fastvd 62 Posted 2013-06-30 15:43:27 Share Posted 2013-06-30 15:43:27 когда дорастают до 4Г-7Г то думаю на нормальную железку деньги должны быть.. Link to post Share on other sites
Link_x 47 Posted 2013-06-30 15:46:21 Share Posted 2013-06-30 15:46:21 I7-3930K должен справиться, остальное по вкусу Link to post Share on other sites
Melanxolik 63 Posted 2013-06-30 15:46:40 Share Posted 2013-06-30 15:46:40 Там помимо процов еще надо смотреть что сама материнка может прожевать, часто упирается в её, и кол её связей между шиной и процом. К стати, на наге вроде темка была по поводу soft router, и многое обговаривалось. Link to post Share on other sites
Sided 132 Posted 2013-06-30 15:50:41 Share Posted 2013-06-30 15:50:41 На локале уже обсуждали http://local.com.ua/forum/topic/41439-uabgp-10g-soft-router-%D1%81%D0%B2%D0%BE%D0%B8%D0%BC%D0%B8-%D1%80%D1%83%D0%BA%D0%B0%D0%BC%D0%B8-v10/ Link to post Share on other sites
KaYot 3,606 Posted 2013-06-30 15:56:59 Share Posted 2013-06-30 15:56:59 Процессор класса e3-1270 v2, мать собственно говоря любая. Легко можно поместить в 1u. Многоголовые оптероны не нужны. На задачах тупой маршрутизации PPS и трафик упирается сугубо в эффективность контроллеров памяти и PCI-e, вот с этим у свежих xeon'ов полный порядок. У вас должна получиться околонулевая загрузка всех 4ех ядер при 10г сквозном(если туда всякие soft-flow, и NATы с шейперами не пихать конечно и минимально подтюнить linux). Link to post Share on other sites
ttttt 195 Posted 2013-06-30 16:40:04 Share Posted 2013-06-30 16:40:04 Где-то был бенчмарк vyatta на уже древних ксеонах, 20 гигабит, 1.5 mpps или что-то около того. Link to post Share on other sites
mt6561 63 Posted 2013-06-30 17:53:32 Share Posted 2013-06-30 17:53:32 +1 к Кайоту, у нас все так и работает, 40G расчетной загрузки на Е5-м. Сетевушки естесственно только Intel. Link to post Share on other sites
martin 170 Posted 2013-06-30 18:49:02 Share Posted 2013-06-30 18:49:02 mx80 - сила ) а если по компам - тогда да? ксеон Е3 серия или Е5, На Е5 был НАТ + куча шейперов + бгп - суммарно 16 гиг трафика при загрузке всех процов на 40-50 процентов (проц Е5-2690) Link to post Share on other sites
loki 86 Posted 2013-06-30 19:15:31 Share Posted 2013-06-30 19:15:31 Фул предвидется? У нас 4 BGP сессии, 2 фула + ua-ix + msk-ix. Xeon E5520, 4 Гб Озу, карты - интел, настроена агрегация. Сервер 2U, материнка Tyan. Если нужен точный конфиг, могу збросить. Планируем переезд на 10G. total: 433759.85 P/s 417856.30 P/s 851616.15 P/stotal: 2.65 Gb/s 2.45 Gb/s 5.10 Gb/s Link to post Share on other sites
ttttt 195 Posted 2013-06-30 19:18:12 Share Posted 2013-06-30 19:18:12 851616.15 P/s5.10 Gb/s А как ядра загружены на таком? 50%+? Link to post Share on other sites
loki 86 Posted 2013-06-30 19:23:47 Share Posted 2013-06-30 19:23:47 снял только что: 162 processes: 14 running, 106 sleeping, 42 waitingCPU 0: 0.0% user, 0.0% nice, 1.1% system, 46.6% interrupt, 52.3% idleCPU 1: 0.0% user, 0.0% nice, 3.8% system, 43.6% interrupt, 52.6% idleCPU 2: 0.0% user, 0.0% nice, 8.6% system, 35.6% interrupt, 55.8% idleCPU 3: 0.0% user, 0.0% nice, 1.9% system, 46.2% interrupt, 51.9% idleCPU 4: 0.4% user, 0.0% nice, 5.3% system, 19.5% interrupt, 74.8% idleCPU 5: 0.8% user, 0.0% nice, 2.3% system, 33.5% interrupt, 63.5% idleCPU 6: 0.4% user, 0.0% nice, 3.4% system, 29.7% interrupt, 66.5% idleCPU 7: 0.0% user, 0.0% nice, 10.5% system, 8.6% interrupt, 80.8% idle Link to post Share on other sites
KaYot 3,606 Posted 2013-06-30 19:27:34 Share Posted 2013-06-30 19:27:34 Там шо, HT включен? А может еще и conntrack с фаерволом? Link to post Share on other sites
loki 86 Posted 2013-06-30 19:33:46 Share Posted 2013-06-30 19:33:46 НТ выключен, фаервола чуть-чуть, ос FreeBSD 8.0 Link to post Share on other sites
KaYot 3,606 Posted 2013-06-30 19:44:58 Share Posted 2013-06-30 19:44:58 Аааа так бсд маздай) 2xE5520 получается стоит? Link to post Share on other sites
loki 86 Posted 2013-06-30 20:09:54 Share Posted 2013-06-30 20:09:54 (edited) Давай без холиваров. Сырую 8ку как то спеша поставили, и с тех пор стоит себе. Но в 9ветке много чего пофиксили, беду с распаралеливанием и роутинг перфомансом. bgp# uptime11:07PM up 716 days, 8:41, 2 users, load averages: 0.36, 0.42, 0.41 Да, есть чем удивить на линуксе ? Edited 2013-06-30 20:14:47 by loki Link to post Share on other sites
KaYot 3,606 Posted 2013-06-30 20:20:56 Share Posted 2013-06-30 20:20:56 (edited) Ну на НАГе ветка есть, 37гбит по-моему получили на обычном железе с БРАС(!!) функционалом(аккаунтинг+полисинг). С ровно нулевой загрузкой, дальше уперлись в пакетную скорость pci-e шины - при росте трафика появляются дропы. Про хоть что-то подобное в BSD я никогда не слышал. Edited 2013-06-30 20:26:39 by KaYot Link to post Share on other sites
mlevel 52 Posted 2013-06-30 20:30:02 Share Posted 2013-06-30 20:30:02 (edited) Ну на НАГе ветка есть, 37гбит по-моему получили на обычном железе с БРАС(!!) функционалом(аккаунтинг+полисинг). С ровно нулевой загрузкой, дальше уперлись в пакетную скорость pci-e шины - при росте трафика появляются дропы. Про хоть что-то подобное в BSD я давно не слышал. Ето значит что такое на FreeBSD не возможно? P.S. http://info.iet.unipi.it/~luigi/netmap/ Edited 2013-06-30 20:34:08 by mlevel Link to post Share on other sites
KaYot 3,606 Posted 2013-06-30 20:39:01 Share Posted 2013-06-30 20:39:01 (edited) Ну на НАГе ветка есть, 37гбит по-моему получили на обычном железе с БРАС(!!) функционалом(аккаунтинг+полисинг). С ровно нулевой загрузкой, дальше уперлись в пакетную скорость pci-e шины - при росте трафика появляются дропы. Про хоть что-то подобное в BSD я давно не слышал. Ето значит что такое на FreeBSD не возможно? P.S. http://info.iet.unipi.it/~luigi/netmap/ Бррр. По ссылке - некий SDK для смелых, с графиком тупой отправки pktgen. Какое отношение ЭТО имеет к реальному трафику в 37G полисера-бриджа в linux? В подобных условиях на тестах vyatta какой-то celeron под socket 1566 легко заливал тестовые 40гбит упираясь в интерфейсы. Да-да, на том же НАге я смотрел про испытания этого netmap'a и попытки его куда-то припинать. Но это ведь чисто академический интерес, не правда ли? Edited 2013-06-30 20:44:42 by KaYot Link to post Share on other sites
loki 86 Posted 2013-06-30 20:42:36 Share Posted 2013-06-30 20:42:36 Скинь ссылку, очень интересно, чё за карты PCIe3 они пользовали, x8 небось. Link to post Share on other sites
ttttt 195 Posted 2013-06-30 20:49:52 Share Posted 2013-06-30 20:49:52 37гбит ... С ровно нулевой загрузкой Кайот, реально это с загрузкой 100%, просто не учитывается в статистике. Да и гигабиты не интересны, pps больше скажут о реальном овэрхэде. А так интеловские бенчмарки с DPDK куда интереснее цифры показывают (160 Mpps), как и с netmap кстати. Link to post Share on other sites
KaYot 3,606 Posted 2013-06-30 20:57:35 Share Posted 2013-06-30 20:57:35 (edited) 37гбит ... С ровно нулевой загрузкойКайот, реально это с загрузкой 100%, просто не учитывается в статистике. Да и гигабиты не интересны, pps больше скажут о реальном овэрхэде. А так интеловские бенчмарки с DPDK куда интереснее цифры показывают (160 Mpps), как и с netmap кстати. http://forum.nag.ru/forum/index.php?showtopic=81814&hl=route-cache&st=0 Это реальный сервер с аккаунтингом и полисингом абонентов, даже не бридж как я выше писал. Местами вывод top проскакивает, реально загрузка пара процентов. Edited 2013-06-30 21:00:58 by KaYot Link to post Share on other sites
Recommended Posts
Create an account or sign in to comment
You need to be a member in order to leave a comment
Create an account
Sign up for a new account in our community. It's easy!
Register a new accountSign in
Already have an account? Sign in here.
Sign In Now