Издаден е Sukarix 0.4.0: редици во Redis со висока пропусност за реални процесни низи под големо оптоварување

Најава за издание

Атомско извршување преку Lua, вградена дедупликација според членство, структурирана телеметрија на напредокот и строго вбризгување на зависности. Дознајте како Sukarix нуди моќ за корпоративни системи без вишок во рамката и како ја придвижува нашата процесна низа во реално време за BigBlueButton Analytics.

Кога се градат критични заднински системи и процесни низи за проток на податоци во реално време, се брои секоја милисекунда и секој мегабајт RAM. Додека современиот PHP прерасна во моќна алатка со силно типизирање и брзина, многу популарни PHP рамки тргнаа во спротивна насока: собираат длабоки стебла на наследување, тешки трошоци за рефлексија, преоптоварени графови на зависности и почетно оптоварување од повеќе мегабајти што ги задушува долготрајните CLI-процеси.

Во RIADVICE градиме архитектури со висока конкурентност за платформи за виртуелни училници, аналитички системи во реално време и балансери на оптоварување со висока достапност. Ни требаше рамка што ги соединува брзината и едноставноста на микрорамките со структурата од корпоративно ниво потребна за сложени корпоративни апликации.

Таа рамка е Sukarix. Денес со гордост го најавуваме изданието Sukarix 0.4.0, кое носи робусен механизам за редици заснован на Redis, специјално изграден за повеќестепени процесни низи.

Зошто Sukarix? Роден од вистинските предизвици на продукцијата

Sukarix не е замислен како академска вежба. Тој е директен резултат на долгогодишно инженерство, проверено во продукциски околини со голем сообраќај: обработка на милиони телеметриски настани од WebRTC, континуирани миграции на бази на податоци и насочување на API-повици преку обратни прокси-сервери под големо оптоварување.

Изграден врз исклучително брзото јадро на Fat-Free Framework (F3), Sukarix го задржува молскавично брзото насочување и минималната потрошувачка на меморија на F3, а додава и современи основи за корпоративни системи:

• Современа архитектура за PHP 8.4+ и 8.5+: целосна безбедност на типовите, строго типизирање и чист објектно ориентиран дизајн.
• Вбризгување на зависности (DI) и IoC без вишок: динамична иницијализација на процесорите заснована на trait-ови, без тесни грла од рефлексија.
• Интегрирани алатки за продукција: првокласна интеграција со Monolog, дебагирање со Tracy, миграции на бази на податоци со Phinx и комплетот алатки за тестирање Statera.
• Стабилност наместо постојани промени: дизајниран така што надградбите бараат минимални измени, со што продукциските оптоварувања се заштитени од редизајни на API што ја кршат компатибилноста.

Што е ново во Sukarix 0.4.0: ажурирањето за редиците

Sukarix 0.4.0 го воведува именскиот простор Sukarix\Queue, наменска архитектура за FIFO-редици во Redis со висока пропусност, оптимизирана за повеќестепени асинхрони процесни низи.

Атомско извршување преку Lua и автоматска дедупликација

Стандардните редици во Redis засновани на листи се склони кон состојби на трка или дупликати при отказ на работните процеси. Sukarix го решава ова со тоа што FIFO-листите во Redis ги спарува со придружни множества за следење на членството, кои се извршуваат преку атомски Lua-скрипти во Redis. Додавањето ставка што веќе е во редицата автоматски не прави ништо, а работен процес прекинат среде операција никогаш не може да ја остави состојбата неконзистентна.

Следење на обидите по ставка без наметнати правила

Наместо да наметнува строги, однапред зададени ограничувања за повторни обиди или за dead-letter редици во самиот механизам за редици, Sukarix нуди бројачи на обиди за секоја ставка во Redis hash-структури. Вашиот деловен домен има целосна слобода да одлучи дали неуспешната задача ќе се повтори веднаш, ќе се одложи, ќе се остави настрана за преглед или ќе се премести во dead-letter редица.

Trait-от HasQueue со иницијализација што паѓа веднаш

Сервисите што ги користат редиците лесно ги вбризгуваат тие можности со trait-от за однесување HasQueue. Ако сервисот за редици не е регистриран во инјекторот, Sukarix фрла јасен \LogicException уште при подигнувањето и така спречува тешко откриени падови поради null-покажувачи во продукција.

Структуриран QueueProgressLogger и запишување дневници во CLI-конзолата

Sukarix 0.4.0 додава структурирано, машински читливо запишување на настаните во животниот циклус на редиците (почеток, напредок на серијата, пропусност и завршување). Содржината се прочистува (на пример, се запишува како array[3]) за да се гарантира дека ниту еден чувствителен податок за клиентите не протекува во системите за дневници. Покрај тоа, LogWriter сега нуди и опционално обоено запишување во конзолата за следење на CLI-процесите во реално време.

Пример со код: процесна низа на работни процеси во акција

// Worker implementation with HasQueue trait
namespace App\Workers;

use Sukarix\Behaviours\HasQueue;
use Sukarix\Behaviours\LogWriter;
use Sukarix\Core\Processor;

class EventIngestionWorker
{
    use HasQueue, LogWriter;

    public function __construct()
    {
        Processor::instance()->initialize($this);
    }

    public function consume(): void
    {
        while (null !== ($payload = $this->queueService->popFromQueue('queue.events.pending'))) {
            try {
                $this->processEvent($payload);
                $this->queueService->clearAttempts('queue.events.failed', $payload);
            } catch (\Throwable $e) {
                $attempts = $this->queueService->incrementAttempts('queue.events.failed', $payload);
                $this->logger->error('Failed processing item', ['attempts' => $attempts, 'error' => $e->getMessage()]);
            }
        }
    }
}

Во продукција: процесната низа во реално време на BigBlueButton Analytics

Како работи Sukarix 0.4.0 под вистинско корпоративно оптоварување? Доволно е да ја погледнете платформата BigBlueButton Analytics на RIADVICE, нашиот аналитички систем во реално време за BigBlueButton.

Големите инфраструктури за виртуелни училници создаваат огромен обем детални податоци за настани низ милиони истовремени настани: аудио и видео потоци преку WebRTC, приклучувања и заминувања на учесниците, пораки во разговорот, одговори на анкети, цртежи на таблата, промени на слајдовите и друго. Сигурното внесување на овие податоци без заостанување зад часовите во живо бара крајно цврста процесна низа за проток на податоци.

Зад сцената, редиците во Redis на Sukarix 0.4.0 го координираат претворањето на тешките потоци сурови настани во структурирани збирки податоци што се чуваат во база на податоци за временски серии, со контролни табли прикажани преку Apache Superset. Процесната низа директно има корист од:

• Внесување без дупликати: дедупликацијата според членство спречува двојно броење на метриките кога серверите испраќаат вишок синхронизациски импулси.
• Моментално закрепнување на работните процеси: атомските трансакции во Redis гарантираат дека рестартирањата на работните процеси или скалирањето на јазлите никогаш нема да ги оштетат индексите на редиците или да изгубат настани од состаноците.
• Огромна ефикасност на ресурсите: бидејќи CLI-процесите на Sukarix трошат само дел од RAM-меморијата што ја трошат алтернативните рамки, десетици истовремени работни процеси за редиците удобно работат на скромни виртуелни машини.
• Прегледност под големо оптоварување: структурираниот QueueProgressLogger дава моментален увид во пропусноста на работните процеси, завршувањето на сериите и дијагностиката на грешките, директно во собирачите на дневници.

Скалирајте ја вашата BigBlueButton инфраструктура со RIADVICE

Без разлика дали ви требаат готови контролни табли во реално време на BigBlueButton Analytics за вашиот универзитет или организација, прилагодени високоперформансни процесни низи за обработка на податоци или архитектонски консултации за големи BigBlueButton кластери, RIADVICE е тука да помогне.

Закажете презентација / консултација

Надградба на Sukarix 0.4.0

Sukarix 0.4.0 само додава нови можности и не воведува никакви промени што ја кршат компатибилноста на постојните апликации. Ако користите Sukarix 0.3.x на PHP 8.4+, можете веднаш да надградите преку Composer:

composer update sukarix/sukarix

Целосните белешки за изданието ги најдете во дискусиите за Sukarix на GitHub.

Ознаки: Sukarix, PHP 8.5, PHP-рамка, редици во Redis, асинхрона обработка, BigBlueButton, аналитика на учењето, образовна технологија, процесна низа за податоци во реално време, RIADVICE, високоперформансен PHP, отворен код.