Разработка модуля Netflow для STG 2.4

[Max 0]

В архиве с модулем идёт описание и процесс инсталяции

[teapot 0]

Если в период таймаута юзер опять законектится то сервер выполнит скрипт онконект и продолжит работать в штатном режиме.

 

Жду коментариев и возражений...

... а если у пользователя несколько учеток?? То к сожелению пока не закончится таймаут он не сможет авторизоваться с другой учетной записью

Вопрос: сколько нужно модулю времени чтоб записать/передать статистику по пользователю?

Можно же просто в скрипт ондисконект добавить команду для сенсора принудительного сброса накопленой статистики.

[Max 0]

... а если у пользователя несколько учеток?? То к сожелению пока не закончится таймаут он не сможет авторизоваться с другой учетной записью

Вы имеете ввиду несколько адресов на один логин? Тогда да.

Вопрос: сколько нужно модулю времени чтоб записать/передать статистику по пользователю?

Это время от модуля не зависит, это зависит от сенсора, котрых великое множество.

Можно же просто в скрипт ондисконект добавить команду для сенсора принудительного сброса накопленой статистики.

Можно но это как вариант, ибо мы например пользуем ng_netflow, которому к сожалению незя сказать что бы он сиюсекундно сбросил стату в клектор!

[teapot 0]

Вы имеете ввиду несколько адресов на один логин? Тогда да.

 

...вариант именно таков - в он дисконект команду для сброса стата

 

Это время от модуля не зависит, это зависит от сенсора, котрых великое множество.

 

... ну вот сенсор передал стат - как быстро его обработает модуль и собсно залогирует билинг??? -- понимаю что зависит от колва пользователей

 

возьмем к примеру 50 онлайн - с тремя каналами 8мб 2мб и 4мб - максимум.

при средней общей загрузке 3мб

 

Можно но это как вариант, ибо мы например пользуем ng_netflow, которому к сожалению незя сказать что бы он сиюсекундно сбросил стату в клектор!

... ну а что мешает использовать другой сенсор??? (чем так не нравится использование libpcap) например Softflowd умеет принудительно сбрасывать стат минимум раз в 10 сек???

[Max 0]

.. ну вот сенсор передал стат - как быстро его обработает модуль и собсно залогирует билинг??? -- понимаю что зависит от колва пользователей

Не только! Завист так же от: железа (винты иде, сата, скази), проца, ФС, типа хранилища.

возьмем к примеру 50 онлайн - с тремя каналами 8мб 2мб и 4мб - максимум.

при средней общей загрузке 3мб

Ну у нас 36 мегабит поток, в среднем 36 онлайн, обработка мгновенная, единственное что не сразу, так как а) пользуем ng_netflow only (он ядерный) б) зависит от таймаута сессии, но это время сброса статы на колектор

 

... ну а что мешает использовать другой сенсор??? (чем так не нравится использование libpcap) например Softflowd умеет принудительно сбрасывать стат минимум раз в 10 сек???

Мешает его user space положение, а так же надёжностью нг_нетфлоу, плюс отпадает очень не приятный случай когда демон (сенсор) по какой то причине не стартанул (например переполнение журнальной ФС или некоректное завершение по питанию например, особенно этим страдает сквид который видит пид фал и не стартует сцука при загрузке!), и трафик не считается! А если ядро не загрузится то не загрузится и модуль, или наоборот, и трафик на холяву не потечёт!

Вопросы?

[teapot 0]

Мешает его user space положение, а так же надёжностью нг_нетфлоу, плюс отпадает очень не приятный случай когда демон (сенсор) по какой то причине не стартанул (например переполнение журнальной ФС или некоректное завершение по питанию например, особенно этим страдает сквид который видит пид фал и не стартует сцука при загрузке!), и трафик не считается! А если ядро не загрузится то не загрузится и модуль, или наоборот, и трафик на холяву не потечёт!

Вопросы?

... ну это частности - проверить процес на его живучесть мона раааазными способами - и собсно в соответствии обработать результат.

 

... с ng_netflow - более менее разобрался в своем случае (4 канала "инета" + 2 канала "локальная сеть")

запустил - НО!!! - с модулем нет флоу правила rules с портами не отрабатывает

Пример:

***
TCP_UDP 192.168.*.*:443      DIR9
TCP_UDP 192.168.*.*:3128    DIR0
***
TCP_UDP 192.168.*.0/23      DIR2
ALL    192.168.*.0/23            DIR2
ICMP   192.168.*.0/23          DIR2
***

 

в такой конфигурации дир9 и дир0 не отрабатывается, все пакеты на эти порты идут в дир2.

с модулем bpf считает все номано.

 

Как победить - и если это трабл модуля нетфлоу - когда можно ждать исправления.

[Max 0]

попробуйте указать маску /32 после номера порта:

 

***

TCP_UDP 192.168.*.*:443/32 DIR9

TCP_UDP 192.168.*.*:3128/32 DIR0

***

Если не поможет, просьба связаться с нами по icq _____

 

ps. сами пользуем данный модуль, и считает очень точно расхождение с провайдером в МБ 0.001

Відредаговано 2011-05-11 11:56:49 Max

[teapot 0]

попробуйте указать маску /32 после номера порта:

 

***

TCP_UDP 192.168.*.*:443/32      DIR9

TCP_UDP 192.168.*.*:3128/32    DIR0

***

Если не поможет, просьба связаться с нами по icq 340846559

 

ps. сами пользуем данный модуль, и считает очень точно расхождение с провайдером в МБ 0.001

СТГ так не примет файл rules - не заработало так

Відредаговано 2007-04-05 21:18:50 teapot

[Max 0]

попробуйте указать маску /32 после номера порта:

 

***

TCP_UDP 192.168.*.*:443/32      DIR9

TCP_UDP 192.168.*.*:3128/32    DIR0

***

Если не поможет, просьба связаться с нами по icq 340846559

 

ps. сами пользуем данный модуль, и считает очень точно расхождение с провайдером в МБ 0.001

СТГ так не примет файл rules - не заработало так

опечатка вышла, нужно так:

TCP_UDP 192.168.*.*/32:443 DIR9

TCP_UDP 192.168.*.*/32:3128 DIR0

[teapot 0]

опечатка вышла, нужно так:

TCP_UDP 192.168.*.*/32:443      DIR9

TCP_UDP 192.168.*.*/32:3128    DIR0

 

да эт понятно что опечатка - не работает так

 

вот часть моего rules - самое его окончание

 

TCP_UDP 0.0.0.0/0:2593          DIR1
TCP_UDP 0.0.0.0/0:6110-6112     DIR1
TCP_UDP 0.0.0.0/0:7777          DIR1
TCP_UDP 0.0.0.0/0:7877          DIR1
TCP_UDP 0.0.0.0/0:7977          DIR1
TCP_UDP 0.0.0.0/0:27950-27955   DIR1
TCP_UDP 0.0.0.0/0:27960-27965   DIR1
TCP_UDP 0.0.0.0/0:8085          DIR1
TCP_UDP 0.0.0.0/0:3724          DIR1
TCP     0.0.0.0/0               DIR0
UDP     0.0.0.0/0               DIR0
ICMP    0.0.0.0/0               DIR0
ALL     0.0.0.0/0               DIR0

 

с модулем нетфлоу в дир один ни чего нет - а с бпф есть!

 

хотя конечно чечас попробую поставить маску 32 на отдельный ИП

 

ну вот попробовал - TCP_UDP 192.168.*.*/32:3128    DIR0 - эффекта ноль

Відредаговано 2007-04-05 21:20:07 teapot

[Max 0]

давайте попробуем посмотреть в онлайне, что у вас, свяжитесь с нами, 340846559.

[Genius 0]

Модуль очень интересный, интересует такой вопрос:

 

Можно ли параллельно использовать несколько механизмов подсчета, например:

 

Есть один сегмент информация с которого поступает в биллинг по netflow, а другой сегмент напрямую идет через биллинг и считается по ipq?

[egor2fsys 5]

На данный момент архитектура биллинга такова, что может использоваться только один модуль подсчета.

[Genius 0]

Жаль, будем переделывать всю архитектуру под одну гребенку.

[Max 0]

вышла исправленная версия модуля нетфлоу mod_netflow-1.3.4.tar.gz

Благодарим за сообщение об ошибке.

Взять разработку можно сдесь: http://www.v-lan.ru/projects/stargazer-2.4...ow-1.3.4.tar.gz

[teapot 0]

Сенькс работает стабильно и в нашей ситуации единственный вариант - диверт не подходит.

 

маленький нюанс - я бы сказал опечатка - в исходном коде не изменен номер версии.

Его в принципе и менять то не зачем - мона и 1.3.3. мне кажется - но разработчику ведней.

[Max 0]

ок исправим

[Max 0]

вышла новая версия nfproxy-1.1.6

вышла специальная версия mod_netflow-1.3.4-stg_web.tar.gz которая позволяет использовать и netflow и web_stat от Алфёрова!

Брать можно сдесь: v-lan.ru/projects

[Dioxide 0]

а можно ли считать не по айпишкам клиентов а по Vlan'ам ? А то получается только клиентов по ипам можно посчитать, а не по подсетям.

За ранее спасибо за ответ.

[Max 0]

за ваши деньги любые фантазии

[Dioxide 0]

с удовольствием помогу проекту) порядок цифр?

[Max 0]

с удовольствием помогу проекту) порядок цифр?

детали в личку или аську, хотя всё зависит от того что нужно заказчику

[Genius 0]

http://local.com.ua/forum/index.php?showtopic=8241&st=45

 

Вот ошибка, выделенная там строчка действительно не выполняется, printfd вставленные дальше не выводяться уже.

[dima1980 0]

вопрос - есть ли у модуля ограничение на количество сенсоров ?

будет ли модуль работать при их количестве 8-10 ?

[napTu 4]

у кого нибуть есть идеи как с этим ng_netflow сенсором останавливать закачку при окончании денег на счету абонента? Не очень то приятно потом ему объяснять что деньги посчитались потом, по окончании его мегазакачки.