包列表 - Packagist Composer包仓库

搜索关键词：robots-txt，共找到 9 个结果

排序方式：

当前按更新时间降序排列

bopoda/robots-txt-parser

PHP Class for parsing robots.txt files according to Google, Yandex specifications.

版本：v2.5.0 下载：243.45k Stars：47 点击：4

时间：2026-01-04 18:45

Models a robots.txt file

版本：3.0 下载：1.23M Stars：18 点击：4

时间：2026-01-04 15:36

Determine if a page may be crawled from robots.txt and robots meta tags

版本：2.5.3 下载：14.66M Stars：250 点击：4

时间：2026-01-04 10:12

Given a robots.txt file, user agent and URL path will tell you whether you're allowed to access a page

版本：1.17 下载：58.69k Stars：9 点击：1

时间：2026-01-04 06:07

PHP class to parse robots.txt rules according to Google, Yandex, W3C and The Web Robots Pages specifications.

版本：v0.2.5 下载：488.99k Stars：85 点击：3

时间：2026-01-04 04:33

Laravel robots txt package

版本：v1.0.0 下载：2.15k Stars：1 点击：1

时间：2026-01-04 04:32

A modern, fluent PHP package for managing robots.txt rules with type safety and great developer experience

版本：2.1.0 下载：1.4k Stars：5 点击：1

时间：2024-12-16 20:41

Module for generate robots.txt file by url rules

版本：1.2.3 下载：13.32k Stars：7 点击：1

时间：2016-07-13 13:23

Robots Exclusion Standard/Protocol Parser for Web Crawling/Scraping

版本：v1.1.2 下载：20.88k Stars：9 点击：2

时间：未知