Перейти до

Требуется эмулятор StarGazerа.


Рекомендованные сообщения

Почитал вопросы возникающие вокруг работы ubilling и понял что проблемы связаны с архитектурой  Stargazer

Насколько я понял проблем очень много, некоторые из них.

Stargazer работает с базой в памяти и при параллельной работе с базой возникают конфликты с работой, например с внесением оплаты другим приложением.

При остановке Stargazerа или биллинга идет сбой работы Насов.

Текущая архитектура может стать ограничением по количеству возможно обслуживаемых клиентов.

 

Проблемы не все, но этих достаточно чтобы задуматься о альтернативе написания эмулятора  Stargazer-а.

Мое понимание, эмулятор должен выглядеть как модуль, который можно включить или выключить, или выбор работы или через Stargazer, или через внутренний модуль.

 

Приветствуется любая критика и предложения,

помощь в консультации и программировании.

Спонсирование заинтересованных сторон, приветствуется.

Ссылка на сообщение
Поделиться на других сайтах
34 минуты назад, vop сказал:

Не совсем понятна идея. Со Старгейзером все понятно. А зачем его еще и эмулировать?

 

Выражение "Эмулятор Старгейзера" используется как указатель именно на то что о чем собственно разговор.

Старгейзер висит как не зависимый демон, слушает, отдает команды насам, поэтому дабы не положить сеть, структура управляющих команд должна совпадать.

 

Ссылка на сообщение
Поделиться на других сайтах
52 минуты назад, KaYot сказал:

Это весеннее обострение, не обращайте внимания.

 

Полезнее было бы направить энергию в нужное русло -- писать законопроекты в ВР.

Ссылка на сообщение
Поделиться на других сайтах
44 минуты назад, Prime сказал:

ключевые слова: транзакция, acid

 

Где искать?

Сначала нужно собрать инфу, потом анализ - что можно сделать, а дальше смотреть какие получатся объемы работ.

 

Ссылка на сообщение
Поделиться на других сайтах

в коде работы с базой данных, бизнес операции должны проходить транзакционно.

 

https://ru.wikipedia.org/wiki/Уровень_изолированности_транзакций

вы должные сами определять где какой уровень изоляции.

где в каких местах присоединяться к транзакции, где требовать открытую, где открывать новую принудительно.

 

Цитата

Stargazer работает с базой в памяти и при параллельной работе с базой возникают конфликты с работой, например с внесением оплаты другим приложением.

возможно так и нужно?

если он работает через буфер и не делает flush в базу это одно, если второй datasource не видит uncommited batch transaction это другое

 

Ссылка на сообщение
Поделиться на других сайтах
56 минут назад, Prime сказал:

возможно так и нужно?

Безусловно так и нужно.

 

Но Stargazer не решает проблему одновременного обращения к полю, скажем при работе с одной карточкой двумя менеджерами горбыль гарантирован.

Насколько я понял, основная проблема Stargazer-а в непредсказуемости работы с насами.

 

Ссылка на сообщение
Поделиться на других сайтах

Я думаю что от stargazer-а нужно отказаться уже в самом начале. Ключевое звено в каждой сети это NAS (Network Access Server) и он должен работать очень надёжно и быть независимым от доступности сервера(ов) билинга. По сути для NAS нужно знать IP+MAC пользователя, скорость приема/передачи, и когда отключить или включить, и это должен сформировать билинг и передать на NAS.

Відредаговано olsasha
Ссылка на сообщение
Поделиться на других сайтах

Собственно можно и отказаться, но тогда нужно пересобрать всю архитектуру юбиллинга, а это люди, сроки и деньги.

Хотелось бы решить малой кровью, хотя это может быть в итоге дороже.

Ссылка на сообщение
Поделиться на других сайтах

Как показала 4-х летняя практика работы с базой ubilling-а что лучше написать свой и с нуля. Тем более у нас будет очень сложная база данных, чего только одна матрица доступа стоит, а подстраиваться под БД ubilling-а себе дороже будет.

Ссылка на сообщение
Поделиться на других сайтах
1 час назад, Prime сказал:

в коде работы с базой данных, бизнес операции должны проходить транзакционно.

 

https://ru.wikipedia.org/wiki/Уровень_изолированности_транзакций

вы должные сами определять где какой уровень изоляции.

где в каких местах присоединяться к транзакции, где требовать открытую, где открывать новую принудительно.

 

возможно так и нужно?

если он работает через буфер и не делает flush в базу это одно, если второй datasource не видит uncommited batch transaction это другое

 

Для сетевиков это слищком ... заумно :) ...

  • Haha 1
Ссылка на сообщение
Поделиться на других сайтах
25 minutes ago, olsasha said:

Я думаю что от stargazer-а нужно отказаться уже в самом начале.[/quote]

 

Это надо было делать лет 15 назад. :)

 

Quote

Ключевое звено в каждой сети это NAS (Network Access Server) и он должен работать очень надёжно и быть независимым от доступности сервера(ов) билинга. По сути для NAS нужно знать IP+MAC пользователя, скорость приема/передачи, и когда отключить или включить, и это должен сформировать билинг и передать на NAS.

 

Я об этом сейчас веду неторопливый дискусс на наге. Данные, которые необходимы для предоставления услуги я называю реестром доступа. Для NASа - это пара IP-MAC, или другие данные. Объем этих данных решительно небольшой, и делать зависимость работы NASа от сложной системы, которой является биллинг - совсем не умно.

 

Відредаговано vop
  • Like 1
Ссылка на сообщение
Поделиться на других сайтах
2 minutes ago, Stroj said:

Для сетевиков это слищком ... заумно :) ...

 

Для обеспечения надежности транзакций подойдут любые методы, от семафоров и блокировок, до разделения полномочий на изменение данных. Сетевики могут найти для себя подходящие методы. :)

2 minutes ago, olsasha said:

Скинь ссылку на тему на НАГе.

 

https://forum.nag.ru/index.php?/topic/139742-srochno-nuzhen-nomer-kruglosutochnoy-podderzhki-carbonsoft/

 

Там бедные админы мучаются отсутствием интернета из-за неработающего биллинга. Ну и попутно возникла концептуальная часть беседы.

Ссылка на сообщение
Поделиться на других сайтах
44 минуты назад, pavlabor сказал:

Но Stargazer не решает проблему одновременного обращения к полю, скажем при работе с одной карточкой двумя менеджерами горбыль гарантирован.

Извините, но Вы не понимаете смысла работы с релятивными Базами данных ... :( В разрезе многопользовательской среды ...

Тут работать или с со старой методологией изолированных транзакций (не гарантирующих впрочем ничего) ...

Или идти по принципу отказа от "релятивизма" в сторону объектного представления данных.

Точнее, как по мне, выреженого в словах: "постоянный пересчет конечных данных на основе объектных моделей".

 

Ссылка на сообщение
Поделиться на других сайтах
9 минут назад, Stroj сказал:

Извините, но Вы не понимаете смысла работы с релятивными Базами данных ... :( В разрезе многопользовательской среды ...

Тут работать или с со старой методологией изолированных транзакций (не гарантирующих впрочем ничего) ...

Или идти по принципу отказа от "релятивизма" в сторону объектного представления данных (к сожалению без рекурсий в строед-процедурах тут не обойтись, что не всем SQL движкам пока по вкусу :( ).

Точнее, как по мне, выреженого в словах: "постоянный пересчет конечных данных на основе объектных моделей".

 

 

Відредаговано Stroj
Ссылка на сообщение
Поделиться на других сайтах
17 минут назад, olsasha сказал:

Как показала 4-х летняя практика работы с базой ubilling-а что лучше написать свой и с нуля. Тем более у нас будет очень сложная база данных, чего только одна матрица доступа стоит, а подстраиваться под БД ubilling-а себе дороже будет.

Как по мне, это через чур глобально.

ubilling написан поверх "RCMS Framework 1.2.12", сейчас на сайте есть "ReloadCMS 1.5.1 WebSat, version from 15.01.2013" но не качается, возможно что тоже помер.

Взять к сведению это

2 минуты назад, Stroj сказал:

Или идти по принципу отказа от "релятивизма" в сторону объектного представления данных.

Точнее, как по мне, выреженого в словах: "постоянный пересчет конечных данных на основе объектных моделей".

на сколько я понимаю это решается на уровне процедур базы данных, потянет ли это мускуль, вопрос открытый, свой биллинг писал на PostgreSQL.

Далее делать ревизию и портировать модули с ubilling-а.

Координатором брать nightfly, с последующей передачей ему всего депозитария.

 

Это самый широкий и дешевый вариант.

Но по любасу денег это может затянуть даже не на соточку гривен.

 

Мне l1ght  предложил открыть ветку обсуждения на https://github.com/nightflyza/Ubilling, но почему то мне кажется что на локале это эффективней решится.

Нужно заценить объемы, выйти на сумму, открыть счет и после сбора определенной сумы запилить новый биллинг.

Без бодрого финансирования, такой глобальный проект за три месяца утоптать сложно.

15 минут назад, Stroj сказал:

Извините, но Вы не понимаете смысла работы с релятивными Базами данных ... :( В разрезе многопользовательской среды ...

Извиняю и готов сотрудничать.

Ссылка на сообщение
Поделиться на других сайтах
18 минут назад, pavlabor сказал:

Нужно заценить объемы, выйти на сумму, открыть счет и после сбора определенной сумы запилить новый биллинг.

Без бодрого финансирования, такой глобальный проект за три месяца утоптать сложно.

3 Месяца? Я сомневаюсь :( Это же такое !бодрое! финансирование должно быть ... :(

....

Короче ... я - пас ... (я свой проект, из примера, 2 года пилил), если конкретикой - помогу советом или кодом ...

Но учитывая что я понимаю чего это стоить будет - я, в основном, ПАС!. Не обессудьте ...

 

Ссылка на сообщение
Поделиться на других сайтах
4 минуты назад, Stroj сказал:

если конкретикой - помогу советом или кодом ...

Любая помощь приветствуется.

Я задумывался, но никогда не занимался многопользовательской средой.

Поэтому готов выслушать практические предложения.

Первое, есть ли такая практика?

Второе, какая база данных?

Ссылка на сообщение
Поделиться на других сайтах

pavlabor, вы сейчас смешали 3 компонента:

сам демон биллинга, который работает с бд, веб морду, которая работает с бд и сам сервер базы данных.

 

в данном случае - у вас "общий ресурс" это сервер бд, неважно какой движок вы используете, будь то mysql, будь postgres - принципы ACID в реляционных бд одни и те же.

по хорошему, для систем с временными рядами удобней всего ClickHouse от яндекса, более крутой системы я не видел.

 

если хотите писать свой биллинг: возьмите стек Java, Postgres, Clickhouse, Angular.

в этом ключе дофига фреймворков для скейлабилити, эвейлиабилити, фейловеров и прочих необходимых вещей.

 

стг уже плохо масштабируется, я помню в 2005 году еще на с++ под него что-то писал, но кардинально все осталось тем же.

ребята были первые, кто сделал простой и работаюший биллинг с inetaccess и sgconfig нативными приложениями под винду :)

 

работать напрямую с сервером бд не очень хорошая практика.

удобней и правильней иметь какой-то API для работы с биллингом, популярней и гибче HTTP - для биллинга сложно придумать.

это дает возможность интеграции с огромным количеством других компонентов.

Ссылка на сообщение
Поделиться на других сайтах
20 минут назад, pavlabor сказал:

Первое, есть ли такая практика?

Второе, какая база данных?

1) Есть. Для начала сеть пейджинговой связи (древность). Во вторых сеть АЗС ... (торговля). В третьих сеть удаленных "юридических  консультаций", потом сеть торговых точек (вообще разное), и т.д. Пока не занялся провайдингом ...

2) Firebird (ака Interbase и её клоны) http://www.ibase.ru/ (Но это скорее моё личное предпочтение)

 

ЗЫ: А вообще-то пофиг на чем писать, для начала нужно выкристализовать структуру, концепцию ...

Відредаговано Stroj
Ссылка на сообщение
Поделиться на других сайтах
Цитата

ЗЫ: А вообще-то пофиг на чем писать, для начала нужно выкристализовать структуру, концепцию ...

скачать

http://ab.kh.ua/books/Vigers Karl - Razrabotka Trebovany K Programmnomu obespecheniu.pdf

 

описание

https://balka-book.com/razrabotka_programnogo_obespecheniya-366/razrabotka_trebovaniy_k_programmnomu_obespecheniyu_izdanie_trete_dopolnennoe-25248

 

я уже павлабору рекомендовал ее

Ссылка на сообщение
Поделиться на других сайтах
12 минут назад, Stroj сказал:

2) Firebird (ака Interbase и её клоны) http://www.ibase.ru/ (Но это скорее моё личное предпочтение)

https://db-engines.com/en/system/Firebird;PostgreSQL

вот здесь можно сравнивать движки.

 

FB был не плох в свое время, но есть нюансы, связанный даже не с внутренней реализацией СУБД, а с ее поддержкой современными фреймворками.

безусловно можно делать все руками, но это время, деньги, баги, нервы... 

Ссылка на сообщение
Поделиться на других сайтах

Создайте аккаунт или войдите в него для комментирования

Вы должны быть пользователем, чтобы оставить комментарий

Создать аккаунт

Зарегистрируйтесь для получения аккаунта. Это просто!

Зарегистрировать аккаунт

Вхід

Уже зарегистрированы? Войдите здесь.

Войти сейчас
  • Зараз на сторінці   0 користувачів

    Немає користувачів, що переглядають цю сторінку.

  • Схожий контент

    • Від ppv
      Проглянув FAQ і Ubilling Wiki. Зацікавило питання чи є в Ubilling якась реалізація reCAPTCHA, чи потрібно додавати руцями, (для прикладу для форми подачі заявок чи для кабінету користувача)?
       
    • Від sanyadnepr
      Приветствую всех.
      Подскажите пожалуйста где копнуть и нет ли проблемы со стороны протокола взаимодействия сити24 или возможно не учтена необходимая проверка в модуле сити24 в Ubilling, пока писал понял что похоже в проверке payID, но это не точно.  
      Недавно обнаружилось с сити24 начали прилетать дубликаты платежей, в целом платежей мало, два одинаковых запроса Pay с одинаковым transactionID и payID в одну секунду одному платежному ID при этом биллинг "думает" примерно чуть больше минуты и отвечает одним ответом <result>0</result>, сити24 утверждает что ответ они не получили и по протоколу дальше повторяет запросы дублем, биллинг ответ и так по кругу, сити24 спрашивает каким образом с одинаковым payID от сити24 билл продолжает обрабатывать запросы и пополнять абоненту счет раз в 5 минут примерно, на одну и туже сумму, ведь этот payID уже был обработан предполагают сити24 согласно протоколу.
      Конечно есть вопрос к сити24 зачем они дублем присылают два запроса, но они отвечают что эта ситуация учтена в протоколе и проблема на стороне биллинга, потому что он пополняет счет по уже обработанному одинаковому payID.
      При этом transactionID в дублях одинаковый, но с каждым новым дублем разный.
      Если зафаерволить запросы от сити24, но оставить возможность отвечать то после блокировки билл отправляет 2-3 минуты 6 ответов <account>0001</account>  <result>0</result>.
      После снятия блокировки, дубли и платежи нескольких проблемных абонентов прилетают так же по кругу, при этом и с некоторыми новыми пополнениями происходит аналогичная ситуация.
      В openpayz в платежах transactionID и не видно payID.
    • Від nightfly
      Ubilling 1.4.3 rev 9058 The Bladewood Grove
       
      Зміни в структурі БД. alter.ini: нові опції OPHANIMFLOW_ENABLED та OPHANIMFLOW_URLS котрі вмикають та керують інтеграцією з OphanimFlow. alter:ini: нова опція PHOTOSTORAGE_POSTPROCESSING, що вмикає післяобробку зображень при завантаженні в Сховище зображень. alter:ini: нова опція PHOTOSTORAGE_WATERMARK, що вмикає розміщення вотермарки на всіх зображеннях, що завантажуються. alter:ini: нова опція PHOTOSTORAGE_RECOMPRESS, що вмикає зміну компрессії завантажених зображень. alter:ini: нова опція PHOTOSTORAGE_AUTORESIZE, що вмикає автоматичне та лагідне масштабування зображень конячих розмірів. alter:ini: нова опція PHOTOSTORAGE_DRAWIMGINFO, що вмикає вдруковування в зображення відлагоджувальної інформації. alter.ini: нова опція ONDEMAND_CHARTS, що вмикає відкладене завантаження графіків завантаження користувацької смуги. userstats.ini: нова опція OPHANIM_ENABLED, що вмикає інтеграцію OphanimFlow в кабінеті користувача. Модуль Заздрість: тепер авторизаційні дані пристроїв, не відображаються в списку пристроїв. Модуль “Заздрість”: при створенні та редагуванні пристроїв, для полів “пароль” та “enable пароль” тепер використовуються інпути паролів. Модуль “Заздрість”: заздрісним пристроям додано нове поле “Порт”. Тепер в скриптах можна використовувати, відповідний макрос {PORT}. Модуль “Статистика трафіку користувача”: проведено радикальний рефакторинг. Модуль “Статистика трафіку користувача”: додано опційну можливість, відображення трафіку отриманого з OphanimFlow. Модуль “Статистика трафіку користувача”: виправлено проблему невірного відображення залишку коштів на кінець місяця, при використанні Ішимури. Модуль “Статистика трафіку користувача”: додано можливість відображення графіків за останню годину з OphanimFlow. Модуль “Користувачі”: додано опційну можливість, відображення трафіку отриманого з OphanimFlow. Модуль “Сховище зображень”: тепер додатково перевіряє завантажувані зображення на тему їх валідності. Модуль “Фінансові операції”: виправлено відображення суми платежів користувача. Remote API: новий виклик ophanimtraff, який просто бере і синхронізує локальну БД з віддаленими джерелами OphanimFlow. Remote API: виклик userbynum тепер також опційно містить поле з “Платіжним ID” користувача. Глобально: у всіх полях вводу паролів, окрім форми входу, тепер відображається елемент керування “показати/приховати” пароль. Кабінет користувача: в модулі “Трафік” додано опційну можливість, відображення трафіку отриманого з OphanimFlow. Кабінет користувача: в модулі “Трафік” виправлено проблему невірного відображення залишку коштів на кінець місяця, при використанні Ішимури. Кабінет користувача: в модулі “Відеоспостереження” для NVR WolfRecorder замінено розділювач попередньо заповнених даних авторизації. OpenPayz: додано frontend portmonemulti, для отримання платежів від різних контрагентів. Інформацію по контрагентам бере з біллінгу, також використовую розширену інформацію контрагента. Платіжна система в контрагенті мусить бути створена, як PORTMONE 1984tech: додано функціонал генерації RPZ для isc-bind, спасибі @misterromanbush  
      Повний чейнджлог
      Оновлена демка
       

    • Від mac
      Здається, після оновлення PHP 7.4 до PHP 8.2 feesharvester припинив працювати:
       
      /usr/local/bin/curl "http://127.0.0.1/billing/?module=remoteapi&key={SERIAL}&action=feesharvester" <br /> <b>Fatal error</b>: Uncaught TypeError: Unsupported operand types: string - string in {UBPATH}/billing/api/libs/api.fundsflow.php:570 Stack trace: #0 {UBPATH}/billing/modules/remoteapi/feesharvester.php(22): FundsFlow-&gt;harvestFees('2024-01') ...  
      Невеличке розслідування врешті з'ясувало, що це через наявність пробілу у деяких логінах абонентів. Як так сталося? Тому що інколи був неуважно додан трейлінг пробіл до номеру будинка і цей пробіл потрапив до логіну абоненту. Логін абоненту неможливо змінити ніяким чином штатними засобами. Я не розглядаю створення нового абонента для усунення помілки.

      Був обран такий шлях вирішення проблеми. Заміну функції php explode() знайшов у мережі. Мабуть це станеться в нагоді:

       
      diff api.fundsflow.php.bak api.fundsflow.php.new 559c559 < $eachfee = explode(' ', $eachline); --- > $eachfee = preg_split("~(?<!\\\\)(?:\\\\{2})*'[^'\\\\]*(?:\\\\.[^'\\\\]*)*'(*SKIP)(*F)|\s+~s" , $eachline);  
    • Від Dilan
      Собственно ищу кто сделает такую связку с нуля под ключ. Тз высылаю в личку. Заранее спасибо.
×
×
  • Створити нове...