djomobil/php-scrapyd 问题修复 & 功能扩展

解决BUG、新增功能、兼容多环境部署,快速响应你的开发需求

邮箱:yvsm@zunyunkeji.com | QQ:316430983 | 微信:yvsm316

djomobil/php-scrapyd

Composer 安装命令:

composer require djomobil/php-scrapyd

包简介

Package de communication avec l'API Scrapyd pour gérer les spiders et les tâches de scraping

README 文档

README

Latest Version on Packagist Total Downloads

Package de communication avec l'API Scrapyd pour gérer les spiders et les tâches de scraping.

Installation

Vous pouvez installer le package via Composer :

composer require Djomobil/php-scrapyd

Configuration

Ajoutez votre configuration Scrapyd dans .env ou directement dans le code :

SCRAPYD_BASE_URL=http://localhost:6800
SCRAPYD_USERNAME=your_username
SCRAPYD_PASSWORD=your_password

Utilisation

Exemples d'utilisation du package pour interagir avec l'API Scrapyd.

Initialisation du Service

use Djomobil\PhpScrapyd\Services\ScrapydService;
use Djomobil\PhpScrapyd\Helpers\HttpHelper;

$scrapydService = new ScrapydService(
    new HttpHelper(),
    'http://localhost:6800',
    'your_username',
    'your_password'
);

Planification d'un Job

$jobId = $scrapydService->job()->scheduleJob([
    'project' => 'my_project',
    'spider' => 'my_spider'
]);

echo "Job ID: $jobId";

Récupération du Statut du Daemon

$status = $scrapydService->daemon()->getDaemonStatus();
print_r($status);

Tests

Exécutez les tests avec :

vendor/bin/phpunit

Contribuer

Les contributions sont les bienvenues ! Merci de bien vouloir ouvrir une issue ou un pull request pour signaler un problème ou proposer une amélioration.

Linting

Assurez-vous que votre code respecte les standards de phpcs :

composer lint

Déploiement sur Packagist

Le package est déployé automatiquement sur Packagist à chaque nouvelle version taggée.

djomobil/php-scrapyd 适用场景与选型建议

djomobil/php-scrapyd 是一款 基于 PHP 开发的 Composer 扩展包,目前已累计 15 次下载、GitHub Stars 达 0, 最近一次更新时间为 2024 年 10 月 30 日, 在 PHP 生态内属于活跃度较高的组件。

它主要适用于以下技术方向: 「spider」 「scraping」 「scrapyd」 「scrapy」 等业务场景。在实际项目中,围绕这些方向常见需要落地的问题包括:接口对接、性能调优、并发安全、与既有框架(Laravel / ThinkPHP / Yii / Webman 等)的兼容适配,以及生产环境的日志埋点与稳定性保障。

我们在过去多个企业项目中使用过 djomobil/php-scrapyd 或与其功能相近的方案,如果你在选型或落地过程中遇到问题,例如 版本兼容、二次改造、私有化封装、与内部系统对接、生产 BUG 排查,欢迎联系我们协助评估。

围绕 djomobil/php-scrapyd 我们能提供哪些服务?
定制开发 / 二次开发

基于 djomobil/php-scrapyd 在你已有业务上做功能扩展、字段裁剪、UI 适配、与内部账号 / 权限 / 日志系统的深度对接。

BUG 修复 & 性能优化

线上偶发问题、内存泄漏、慢查询、并发异常等排查修复;针对高流量场景做缓存、队列、索引层面的调优。

项目外包 & 长期维护

承接完整的项目从需求 → 设计 → 开发 → 上线 → 长期运维;也可按月提供技术保姆服务。

yvsm@zunyunkeji.com QQ:316430983 微信:yvsm316 西安尊云信息科技 · 专注 PHP / Go / 分布式系统研发

统计信息

  • 总下载量: 15
  • 月度下载量: 0
  • 日度下载量: 0
  • 收藏数: 0
  • 点击次数: 14
  • 依赖项目数: 0
  • 推荐数: 0

GitHub 信息

  • Stars: 0
  • Watchers: 1
  • Forks: 0
  • 开发语言: PHP

其他信息

  • 授权协议: MIT
  • 更新时间: 2024-10-30