Перейти до

Требуется эмулятор StarGazerа.


Рекомендованные сообщения

Почитал вопросы возникающие вокруг работы ubilling и понял что проблемы связаны с архитектурой  Stargazer

Насколько я понял проблем очень много, некоторые из них.

Stargazer работает с базой в памяти и при параллельной работе с базой возникают конфликты с работой, например с внесением оплаты другим приложением.

При остановке Stargazerа или биллинга идет сбой работы Насов.

Текущая архитектура может стать ограничением по количеству возможно обслуживаемых клиентов.

 

Проблемы не все, но этих достаточно чтобы задуматься о альтернативе написания эмулятора  Stargazer-а.

Мое понимание, эмулятор должен выглядеть как модуль, который можно включить или выключить, или выбор работы или через Stargazer, или через внутренний модуль.

 

Приветствуется любая критика и предложения,

помощь в консультации и программировании.

Спонсирование заинтересованных сторон, приветствуется.

Ссылка на сообщение
Поделиться на других сайтах
34 минуты назад, vop сказал:

Не совсем понятна идея. Со Старгейзером все понятно. А зачем его еще и эмулировать?

 

Выражение "Эмулятор Старгейзера" используется как указатель именно на то что о чем собственно разговор.

Старгейзер висит как не зависимый демон, слушает, отдает команды насам, поэтому дабы не положить сеть, структура управляющих команд должна совпадать.

 

Ссылка на сообщение
Поделиться на других сайтах
52 минуты назад, KaYot сказал:

Это весеннее обострение, не обращайте внимания.

 

Полезнее было бы направить энергию в нужное русло -- писать законопроекты в ВР.

Ссылка на сообщение
Поделиться на других сайтах
44 минуты назад, Prime сказал:

ключевые слова: транзакция, acid

 

Где искать?

Сначала нужно собрать инфу, потом анализ - что можно сделать, а дальше смотреть какие получатся объемы работ.

 

Ссылка на сообщение
Поделиться на других сайтах

в коде работы с базой данных, бизнес операции должны проходить транзакционно.

 

https://ru.wikipedia.org/wiki/Уровень_изолированности_транзакций

вы должные сами определять где какой уровень изоляции.

где в каких местах присоединяться к транзакции, где требовать открытую, где открывать новую принудительно.

 

Цитата

Stargazer работает с базой в памяти и при параллельной работе с базой возникают конфликты с работой, например с внесением оплаты другим приложением.

возможно так и нужно?

если он работает через буфер и не делает flush в базу это одно, если второй datasource не видит uncommited batch transaction это другое

 

Ссылка на сообщение
Поделиться на других сайтах
56 минут назад, Prime сказал:

возможно так и нужно?

Безусловно так и нужно.

 

Но Stargazer не решает проблему одновременного обращения к полю, скажем при работе с одной карточкой двумя менеджерами горбыль гарантирован.

Насколько я понял, основная проблема Stargazer-а в непредсказуемости работы с насами.

 

Ссылка на сообщение
Поделиться на других сайтах

Я думаю что от stargazer-а нужно отказаться уже в самом начале. Ключевое звено в каждой сети это NAS (Network Access Server) и он должен работать очень надёжно и быть независимым от доступности сервера(ов) билинга. По сути для NAS нужно знать IP+MAC пользователя, скорость приема/передачи, и когда отключить или включить, и это должен сформировать билинг и передать на NAS.

Відредаговано olsasha
Ссылка на сообщение
Поделиться на других сайтах

Собственно можно и отказаться, но тогда нужно пересобрать всю архитектуру юбиллинга, а это люди, сроки и деньги.

Хотелось бы решить малой кровью, хотя это может быть в итоге дороже.

Ссылка на сообщение
Поделиться на других сайтах

Как показала 4-х летняя практика работы с базой ubilling-а что лучше написать свой и с нуля. Тем более у нас будет очень сложная база данных, чего только одна матрица доступа стоит, а подстраиваться под БД ubilling-а себе дороже будет.

Ссылка на сообщение
Поделиться на других сайтах
1 час назад, Prime сказал:

в коде работы с базой данных, бизнес операции должны проходить транзакционно.

 

https://ru.wikipedia.org/wiki/Уровень_изолированности_транзакций

вы должные сами определять где какой уровень изоляции.

где в каких местах присоединяться к транзакции, где требовать открытую, где открывать новую принудительно.

 

возможно так и нужно?

если он работает через буфер и не делает flush в базу это одно, если второй datasource не видит uncommited batch transaction это другое

 

Для сетевиков это слищком ... заумно :) ...

  • Haha 1
Ссылка на сообщение
Поделиться на других сайтах
25 minutes ago, olsasha said:

Я думаю что от stargazer-а нужно отказаться уже в самом начале.[/quote]

 

Это надо было делать лет 15 назад. :)

 

Quote

Ключевое звено в каждой сети это NAS (Network Access Server) и он должен работать очень надёжно и быть независимым от доступности сервера(ов) билинга. По сути для NAS нужно знать IP+MAC пользователя, скорость приема/передачи, и когда отключить или включить, и это должен сформировать билинг и передать на NAS.

 

Я об этом сейчас веду неторопливый дискусс на наге. Данные, которые необходимы для предоставления услуги я называю реестром доступа. Для NASа - это пара IP-MAC, или другие данные. Объем этих данных решительно небольшой, и делать зависимость работы NASа от сложной системы, которой является биллинг - совсем не умно.

 

Відредаговано vop
  • Like 1
Ссылка на сообщение
Поделиться на других сайтах
2 minutes ago, Stroj said:

Для сетевиков это слищком ... заумно :) ...

 

Для обеспечения надежности транзакций подойдут любые методы, от семафоров и блокировок, до разделения полномочий на изменение данных. Сетевики могут найти для себя подходящие методы. :)

2 minutes ago, olsasha said:

Скинь ссылку на тему на НАГе.

 

https://forum.nag.ru/index.php?/topic/139742-srochno-nuzhen-nomer-kruglosutochnoy-podderzhki-carbonsoft/

 

Там бедные админы мучаются отсутствием интернета из-за неработающего биллинга. Ну и попутно возникла концептуальная часть беседы.

Ссылка на сообщение
Поделиться на других сайтах
44 минуты назад, pavlabor сказал:

Но Stargazer не решает проблему одновременного обращения к полю, скажем при работе с одной карточкой двумя менеджерами горбыль гарантирован.

Извините, но Вы не понимаете смысла работы с релятивными Базами данных ... :( В разрезе многопользовательской среды ...

Тут работать или с со старой методологией изолированных транзакций (не гарантирующих впрочем ничего) ...

Или идти по принципу отказа от "релятивизма" в сторону объектного представления данных.

Точнее, как по мне, выреженого в словах: "постоянный пересчет конечных данных на основе объектных моделей".

 

Ссылка на сообщение
Поделиться на других сайтах
9 минут назад, Stroj сказал:

Извините, но Вы не понимаете смысла работы с релятивными Базами данных ... :( В разрезе многопользовательской среды ...

Тут работать или с со старой методологией изолированных транзакций (не гарантирующих впрочем ничего) ...

Или идти по принципу отказа от "релятивизма" в сторону объектного представления данных (к сожалению без рекурсий в строед-процедурах тут не обойтись, что не всем SQL движкам пока по вкусу :( ).

Точнее, как по мне, выреженого в словах: "постоянный пересчет конечных данных на основе объектных моделей".

 

 

Відредаговано Stroj
Ссылка на сообщение
Поделиться на других сайтах
17 минут назад, olsasha сказал:

Как показала 4-х летняя практика работы с базой ubilling-а что лучше написать свой и с нуля. Тем более у нас будет очень сложная база данных, чего только одна матрица доступа стоит, а подстраиваться под БД ubilling-а себе дороже будет.

Как по мне, это через чур глобально.

ubilling написан поверх "RCMS Framework 1.2.12", сейчас на сайте есть "ReloadCMS 1.5.1 WebSat, version from 15.01.2013" но не качается, возможно что тоже помер.

Взять к сведению это

2 минуты назад, Stroj сказал:

Или идти по принципу отказа от "релятивизма" в сторону объектного представления данных.

Точнее, как по мне, выреженого в словах: "постоянный пересчет конечных данных на основе объектных моделей".

на сколько я понимаю это решается на уровне процедур базы данных, потянет ли это мускуль, вопрос открытый, свой биллинг писал на PostgreSQL.

Далее делать ревизию и портировать модули с ubilling-а.

Координатором брать nightfly, с последующей передачей ему всего депозитария.

 

Это самый широкий и дешевый вариант.

Но по любасу денег это может затянуть даже не на соточку гривен.

 

Мне l1ght  предложил открыть ветку обсуждения на https://github.com/nightflyza/Ubilling, но почему то мне кажется что на локале это эффективней решится.

Нужно заценить объемы, выйти на сумму, открыть счет и после сбора определенной сумы запилить новый биллинг.

Без бодрого финансирования, такой глобальный проект за три месяца утоптать сложно.

15 минут назад, Stroj сказал:

Извините, но Вы не понимаете смысла работы с релятивными Базами данных ... :( В разрезе многопользовательской среды ...

Извиняю и готов сотрудничать.

Ссылка на сообщение
Поделиться на других сайтах
18 минут назад, pavlabor сказал:

Нужно заценить объемы, выйти на сумму, открыть счет и после сбора определенной сумы запилить новый биллинг.

Без бодрого финансирования, такой глобальный проект за три месяца утоптать сложно.

3 Месяца? Я сомневаюсь :( Это же такое !бодрое! финансирование должно быть ... :(

....

Короче ... я - пас ... (я свой проект, из примера, 2 года пилил), если конкретикой - помогу советом или кодом ...

Но учитывая что я понимаю чего это стоить будет - я, в основном, ПАС!. Не обессудьте ...

 

Ссылка на сообщение
Поделиться на других сайтах
4 минуты назад, Stroj сказал:

если конкретикой - помогу советом или кодом ...

Любая помощь приветствуется.

Я задумывался, но никогда не занимался многопользовательской средой.

Поэтому готов выслушать практические предложения.

Первое, есть ли такая практика?

Второе, какая база данных?

Ссылка на сообщение
Поделиться на других сайтах

pavlabor, вы сейчас смешали 3 компонента:

сам демон биллинга, который работает с бд, веб морду, которая работает с бд и сам сервер базы данных.

 

в данном случае - у вас "общий ресурс" это сервер бд, неважно какой движок вы используете, будь то mysql, будь postgres - принципы ACID в реляционных бд одни и те же.

по хорошему, для систем с временными рядами удобней всего ClickHouse от яндекса, более крутой системы я не видел.

 

если хотите писать свой биллинг: возьмите стек Java, Postgres, Clickhouse, Angular.

в этом ключе дофига фреймворков для скейлабилити, эвейлиабилити, фейловеров и прочих необходимых вещей.

 

стг уже плохо масштабируется, я помню в 2005 году еще на с++ под него что-то писал, но кардинально все осталось тем же.

ребята были первые, кто сделал простой и работаюший биллинг с inetaccess и sgconfig нативными приложениями под винду :)

 

работать напрямую с сервером бд не очень хорошая практика.

удобней и правильней иметь какой-то API для работы с биллингом, популярней и гибче HTTP - для биллинга сложно придумать.

это дает возможность интеграции с огромным количеством других компонентов.

Ссылка на сообщение
Поделиться на других сайтах
20 минут назад, pavlabor сказал:

Первое, есть ли такая практика?

Второе, какая база данных?

1) Есть. Для начала сеть пейджинговой связи (древность). Во вторых сеть АЗС ... (торговля). В третьих сеть удаленных "юридических  консультаций", потом сеть торговых точек (вообще разное), и т.д. Пока не занялся провайдингом ...

2) Firebird (ака Interbase и её клоны) http://www.ibase.ru/ (Но это скорее моё личное предпочтение)

 

ЗЫ: А вообще-то пофиг на чем писать, для начала нужно выкристализовать структуру, концепцию ...

Відредаговано Stroj
Ссылка на сообщение
Поделиться на других сайтах
Цитата

ЗЫ: А вообще-то пофиг на чем писать, для начала нужно выкристализовать структуру, концепцию ...

скачать

http://ab.kh.ua/books/Vigers Karl - Razrabotka Trebovany K Programmnomu obespecheniu.pdf

 

описание

https://balka-book.com/razrabotka_programnogo_obespecheniya-366/razrabotka_trebovaniy_k_programmnomu_obespecheniyu_izdanie_trete_dopolnennoe-25248

 

я уже павлабору рекомендовал ее

Ссылка на сообщение
Поделиться на других сайтах
12 минут назад, Stroj сказал:

2) Firebird (ака Interbase и её клоны) http://www.ibase.ru/ (Но это скорее моё личное предпочтение)

https://db-engines.com/en/system/Firebird;PostgreSQL

вот здесь можно сравнивать движки.

 

FB был не плох в свое время, но есть нюансы, связанный даже не с внутренней реализацией СУБД, а с ее поддержкой современными фреймворками.

безусловно можно делать все руками, но это время, деньги, баги, нервы... 

Ссылка на сообщение
Поделиться на других сайтах

Создайте аккаунт или войдите в него для комментирования

Вы должны быть пользователем, чтобы оставить комментарий

Создать аккаунт

Зарегистрируйтесь для получения аккаунта. Это просто!

Зарегистрировать аккаунт

Вхід

Уже зарегистрированы? Войдите здесь.

Войти сейчас
  • Зараз на сторінці   0 користувачів

    Немає користувачів, що переглядають цю сторінку.

  • Схожий контент

    • Від mac
      Глюк в тому, що один (так - тільки один) mac адрес onu існує в білінгу у вигляді строки. Це трохи заважає.
      olt - bdcom gepon.
      Наскільки зрозумів, це виключно проблема реалізації snmpwalk у freebsd, де snmpwalk може на свій розсуд віддати mac адресу не як hex-string, а як звичайний string.
      Можливо snmpwalk тригериться на якомусь символі, мені невідомо.
       
      # tcpdump -vv -i em0 udp port 161 and host olt and host ub | grep "3320.101.10.4.1.1.241 ... olt.snmp > ub.47940: [udp sum ok] { SNMPv2c C="*****" { GetResponse(44) R=93278354 E:3320.101.10.4.1.1.241="8LO"W*" } } ub.47940 > olt.snmp: [udp sum ok] { SNMPv2c C="*****" { GetNextRequest(34) R=93278355 E:3320.101.10.4.1.1.241 } } snmpwalk -c***** -v2c -t5 olt .1.3.6.1.4.1.3320.101.10.4.1.1 SNMPv2-SMI::enterprises.3320.101.10.4.1.1.241 = STRING: "8LO\"W*" snmpwalk -Ox -c***** -v2c -t5 olt .1.3.6.1.4.1.3320.101.10.4.1.1 SNMPv2-SMI::enterprises.3320.101.10.4.1.1.241 = Hex-STRING: 38 4C 4F 22 57 2A  
      Це стосується таких параметрів у snmp конфізі bdcom
       
      [signal] MACINDEX=".1.3.6.1.4.1.3320.101.10.4.1.1" [misc] ONUINDEX=".1.3.6.1.4.1.3320.101.11.1.1.3"  
      За для усунення глюку спробував трошки змінити код і завдати тип snmp параметру явно у ./api/libs/api.ponbdcom.php у function collect()
      Це працює. Мабуть станеться у нагоді:
       
      # diff api.ponbdcom.php{.new,.bak} 37c37 < $onuIndex = $this->snmp->walk('-Ox ' . $oltIp . ':' . self::SNMPPORT, $oltCommunity, $onuIndexOid, self::SNMPCACHE); --- > $onuIndex = $this->snmp->walk($oltIp . ':' . self::SNMPPORT, $oltCommunity, $onuIndexOid, self::SNMPCACHE); 91c91 < $macIndex = $this->snmp->walk('-Ox ' . $oltIp . ':' . self::SNMPPORT, $oltCommunity, $macIndexOID, self::SNMPCACHE); --- > $macIndex = $this->snmp->walk($oltIp . ':' . self::SNMPPORT, $oltCommunity, $macIndexOID, self::SNMPCACHE);  
      P.S. Створив тему, а зараз міркую: а може це глюк у ПЗ olt. Оновлю фірмваре olt та перевірю...
       

    • Від Plastilin
      Вітаю. Маю наступний комплект. Ubilling на Debian + Mikrotik CHR як маршрутизатор. Наче все запустилось, але виникло питання яке не вдається розрулити. Читав Wiki, ковиряв, читав знову Wiki, знову ковиряв - не допомогло.
      Чи можливо якось визначити конкретну IP адресу з пулу який видає Mikrotik клієнту через Radius? Мені пропонує обрати наступну вільну адресу з пулу при спробі зміни адреси?
      З цього з'являється додаткове питання, чи можливо контролювати доступ користувачам у яких IP назначений статично, тобто прописаний вручну? Наприклад при зміні статусу не активний - пхати до Firewall Mikrotik правила заборони доступу з IP адреси визначеної вручну, навіть якщо вона не отримана по DHCP.
       
      UPD: з першою частиною знайшов: IP_CUSTOM=1 в alter.ini 
    • Від ppv
      Потрібно було витерти одну мережу, всі абоненти з неї були перенесені в іншу. Але світить що 6 IP зайняті, хоча вона повністю вільна.
       
      ID    Мережа/CID           RВсього IP        Використано IP ▾           Вільно IPСервіс
      6      172.16.70.0/23        506                    6                                       500
       
      Підкажіть як правильно це підчистити щоб видалити мережу.
    • Від ppv
      Проглянув FAQ і Ubilling Wiki. Зацікавило питання чи є в Ubilling якась реалізація reCAPTCHA, чи потрібно додавати руцями, (для прикладу для форми подачі заявок чи для кабінету користувача)?
       
    • Від sanyadnepr
      Приветствую всех.
      Подскажите пожалуйста где копнуть и нет ли проблемы со стороны протокола взаимодействия сити24 или возможно не учтена необходимая проверка в модуле сити24 в Ubilling, пока писал понял что похоже в проверке payID, но это не точно.  
      Недавно обнаружилось с сити24 начали прилетать дубликаты платежей, в целом платежей мало, два одинаковых запроса Pay с одинаковым transactionID и payID в одну секунду одному платежному ID при этом биллинг "думает" примерно чуть больше минуты и отвечает одним ответом <result>0</result>, сити24 утверждает что ответ они не получили и по протоколу дальше повторяет запросы дублем, биллинг ответ и так по кругу, сити24 спрашивает каким образом с одинаковым payID от сити24 билл продолжает обрабатывать запросы и пополнять абоненту счет раз в 5 минут примерно, на одну и туже сумму, ведь этот payID уже был обработан предполагают сити24 согласно протоколу.
      Конечно есть вопрос к сити24 зачем они дублем присылают два запроса, но они отвечают что эта ситуация учтена в протоколе и проблема на стороне биллинга, потому что он пополняет счет по уже обработанному одинаковому payID.
      При этом transactionID в дублях одинаковый, но с каждым новым дублем разный.
      Если зафаерволить запросы от сити24, но оставить возможность отвечать то после блокировки билл отправляет 2-3 минуты 6 ответов <account>0001</account>  <result>0</result>.
      После снятия блокировки, дубли и платежи нескольких проблемных абонентов прилетают так же по кругу, при этом и с некоторыми новыми пополнениями происходит аналогичная ситуация.
      В openpayz в платежах transactionID и не видно payID.
×
×
  • Створити нове...