sbooker/event-loop-worker 问题修复 & 功能扩展

解决BUG、新增功能、兼容多环境部署,快速响应你的开发需求

邮箱:yvsm@zunyunkeji.com | QQ:316430983 | 微信:yvsm316

sbooker/event-loop-worker

Composer 安装命令:

composer require sbooker/event-loop-worker

包简介

ReactPHP's event loop based worker

README 文档

README

Read in English

Event Loop Worker (sbooker/event-loop-worker)

Latest Version Software License PHP Version Total Downloads

Асинхронный, production-ready воркер на базе ReactPHP EventLoop.

Назначение библиотеки

Проблема: наивные воркеры

Для фоновой обработки задач часто используются два подхода, и оба имеют серьезные недостатки:

1. "Вечный" while-цикл с sleep():

while (true) {
    if (!$handler->handleNext()) {
        sleep(5);
    }
}
  • Недостатки: Неэффективный поллинг, блокирующие операции, фиксированная задержка.

2. Команда, запускаемая по cron:

// Запускается каждую минуту по cron
while ($handler->handleNext()) { /* ... */ }
  • Недостатки:
    • Высокая задержка: Новая задача будет ждать до минуты, прежде чем ее обработка начнется.
    • Пиковые нагрузки: Создает пиковую нагрузку на ресурсы в начале каждой минуты.
    • Проблемы с параллельным запуском: Если обработка занимает больше минуты, следующий cron-процесс может запуститься параллельно.

Попытки "починить" cron с помощью мьютексов (механизмов блокировки) для предотвращения параллельного запуска лишь создают новые проблемы:

  • Блокировка на файлах: Плохо работает в многосерверной или контейнеризированной среде.
  • Блокировка в Redis: Требует развертывания и поддержки дополнительной инфраструктуры.
  • Блокировка в БД: Создает дополнительную нагрузку на базу данных и может приводить к дедлокам.

Решение: умный воркер на Event Loop

Эта библиотека решает все эти проблемы, предоставляя постоянно работающий (демонизированный) воркер на базе event loop. Он запускается один раз и работает непрерывно.

Главная особенность — стратегия Doubled (экспоненциальная задержка). Воркер:

  1. Часто проверяет наличие новых задач, когда они есть (например, каждые 0.1с).
  2. Если задач нет, он экспоненциально увеличивает интервал ожидания (например, 1с, 2с, 4с, 8с...) до заданного максимума.
  3. Как только новая задача появляется и обрабатывается, интервал снова сбрасывается до минимального.

Это позволяет создать высокоотзывчивый и одновременно очень экономичный воркер.

Ключевые особенности

  • Асинхронная основа: Построен на react/event-loop, что обеспечивает неблокирующую работу.
  • Умные стратегии ожидания: Включает Periodic (постоянный интервал) и Doubled (экспоненциальная задержка) для экономии ресурсов.
  • Корректное завершение работы: Перехватывает сигналы SIGINT и SIGTERM для graceful shutdown.
  • Компонуемость: Позволяет запускать несколько разных обработчиков (например, основной и ping для поддержания открытого соединения с БД) в рамках одного воркера.
  • Простая интеграция: Любой ваш обработчик может быть адаптирован через простой интерфейс Workable.

Установка

composer require sbooker/event-loop-worker

Зависимости:

  • react/event-loop

Быстрый старт

Шаг 1: Адаптируйте ваш обработчик

Вам нужен класс, реализующий интерфейс Workable. Библиотека sbooker/command-bus уже предоставляет готовый адаптер CommandProcessor.

// bootstrap.php
use Sbooker\CommandBus\Handler;
use Sbooker\CommandBus\Infrastructure\Worker\CommandProcessor;

/** @var Handler $commandHandler */ // Ваш обработчик из command-bus

// Просто оборачиваем его в Workable-адаптер
$workable = new CommandProcessor($commandHandler);

Шаг 2: Создайте консольную команду воркера

Создайте класс, унаследованный от Symfony\Component\Console\Command, и используйте WorkerFactory для его конфигурации.

// src/Command/RunWorkerCommand.php
use Sbooker\EventLoopWorker\WorkerFactory;
use Sbooker\EventLoopWorker\Workable;
use Symfony\Component\Console\Command\Command;
use Symfony\Component\Console\Input\InputInterface;
use Symfony\Component\Console\Output\OutputInterface;

final class RunWorkerCommand extends Command
{
    private WorkerFactory $workerFactory;
    private Workable $workable; // Ваш адаптированный обработчик

    // ... constructor ...

    protected function execute(InputInterface $input, OutputInterface $output): int
    {
        // Создаем воркер с экспоненциальной задержкой.
        // Это наиболее рекомендуемый вариант.
        $worker = $this->workerFactory->createDoubled(
            $this->workable,
            0.1,   // Минимальный таймаут (когда есть работа)
            300.0, // Максимальный таймаут (когда работы долго нет)
            1.0    // Начальный таймаут
        );

        // Запускаем вечный цикл
        return $worker->run($input, $output);
    }
}

Шаг 3: Запустите воркер

Теперь вы можете запустить ваш воркер из консоли.

php bin/console app:run-worker

Продвинутое использование

Решение проблемы "Connection timed out" с PostgreSQL

Долгоживущие процессы, работающие с PostgreSQL, часто сталкиваются с проблемой разрыва соединения, если в течение некоторого времени нет запросов.

Метод createDoubledWithPeriodic идеально решает эту проблему. Вы можете использовать его, чтобы наряду с основной задачей запускать очень легкую периодическую задачу (например, SELECT 1), которая будет поддерживать соединение "живым".

1. Создайте "пингующий" Workable:

// src/Infrastructure/Persistence/ConnectionPinger.php
use Doctrine\DBAL\Connection;
use Sbooker\EventLoopWorker\Workable;

final class ConnectionPinger implements Workable
{
    private Connection $connection;
    public function __construct(Connection $connection) { $this->connection = $connection; }

    public function process(): bool
    {
        $this->connection->executeQuery('SELECT 1');
        return true; // Всегда возвращаем true, т.к. "работа" была выполнена
    }
}

2. Используйте его в воркере:

// src/Command/RunWorkerCommand.php

/** @var Workable $commandProcessor */
/** @var ConnectionPinger $pinger */

$worker =
    $this->workerFactory->createDoubledWithPeriodic(
        $commandProcessor, // Основная задача
        $pinger,           // Задача для "пинга" соединения
        0.1,
        300.0,
        1.0,
        30.0 // "Пинговать" соединение каждые 30 секунд
    );

return $worker->run($input, $output);

License

See LICENSE file.

sbooker/event-loop-worker 适用场景与选型建议

sbooker/event-loop-worker 是一款 基于 PHP 开发的 Composer 扩展包,目前已累计 4.73k 次下载、GitHub Stars 达 0, 最近一次更新时间为 2020 年 06 月 03 日, 在 PHP 生态内属于活跃度较高的组件。

它主要适用于以下技术方向: 「worker」 「event loop」 「background process」 等业务场景。在实际项目中,围绕这些方向常见需要落地的问题包括:接口对接、性能调优、并发安全、与既有框架(Laravel / ThinkPHP / Yii / Webman 等)的兼容适配,以及生产环境的日志埋点与稳定性保障。

我们在过去多个企业项目中使用过 sbooker/event-loop-worker 或与其功能相近的方案,如果你在选型或落地过程中遇到问题,例如 版本兼容、二次改造、私有化封装、与内部系统对接、生产 BUG 排查,欢迎联系我们协助评估。

围绕 sbooker/event-loop-worker 我们能提供哪些服务?
定制开发 / 二次开发

基于 sbooker/event-loop-worker 在你已有业务上做功能扩展、字段裁剪、UI 适配、与内部账号 / 权限 / 日志系统的深度对接。

BUG 修复 & 性能优化

线上偶发问题、内存泄漏、慢查询、并发异常等排查修复;针对高流量场景做缓存、队列、索引层面的调优。

项目外包 & 长期维护

承接完整的项目从需求 → 设计 → 开发 → 上线 → 长期运维;也可按月提供技术保姆服务。

yvsm@zunyunkeji.com QQ:316430983 微信:yvsm316 西安尊云信息科技 · 专注 PHP / Go / 分布式系统研发

统计信息

  • 总下载量: 4.73k
  • 月度下载量: 0
  • 日度下载量: 0
  • 收藏数: 0
  • 点击次数: 6
  • 依赖项目数: 0
  • 推荐数: 1

GitHub 信息

  • Stars: 0
  • Watchers: 1
  • Forks: 1
  • 开发语言: PHP

其他信息

  • 授权协议: MIT
  • 更新时间: 2020-06-03