Directories
¶
| Path | Synopsis |
|---|---|
|
Package crawler 实现了 scrapy-go 框架的顶层编排器。
|
Package crawler 实现了 scrapy-go 框架的顶层编排器。 |
|
Package debug 提供 scrapy-go 框架的调试和性能分析工具。
|
Package debug 提供 scrapy-go 框架的调试和性能分析工具。 |
|
Package downloader 实现了 scrapy-go 框架的下载器系统。
|
Package downloader 实现了 scrapy-go 框架的下载器系统。 |
|
middleware
Package middleware 定义了下载器中间件的接口和内置实现。
|
Package middleware 定义了下载器中间件的接口和内置实现。 |
|
middleware/httpcache
Package httpcache 实现了 HTTP 缓存中间件，对应 Scrapy 的 HttpCacheMiddleware。
|
Package httpcache 实现了 HTTP 缓存中间件，对应 Scrapy 的 HttpCacheMiddleware。 |
|
Package engine 实现了 scrapy-go 框架的核心调度引擎。
|
Package engine 实现了 scrapy-go 框架的核心调度引擎。 |
|
Package errors 定义了 scrapy-go 框架中跨包共享的错误类型。
|
Package errors 定义了 scrapy-go 框架中跨包共享的错误类型。 |
|
Package extension 实现了 scrapy-go 框架的扩展（Extension）系统。
|
Package extension 实现了 scrapy-go 框架的扩展（Extension）系统。 |
|
Package feedexport 实现了 scrapy-go 框架的数据导出（Feed Export）系统。
|
Package feedexport 实现了 scrapy-go 框架的数据导出（Feed Export）系统。 |
|
Package http 定义了 scrapy-go 框架的 HTTP 请求和响应模型。
|
Package http 定义了 scrapy-go 框架的 HTTP 请求和响应模型。 |
|
Package item 提供 scrapy-go 框架的 Item 统一访问抽象（ItemAdapter 体系）。
|
Package item 提供 scrapy-go 框架的 Item 统一访问抽象（ItemAdapter 体系）。 |
|
Package linkextractor 提供链接提取器接口和实现。
|
Package linkextractor 提供链接提取器接口和实现。 |
|
Package log 提供了 scrapy-go 框架的结构化日志封装。
|
Package log 提供了 scrapy-go 框架的结构化日志封装。 |
|
Package pipeline 定义了 scrapy-go 框架的 Item Pipeline 接口和管理器。
|
Package pipeline 定义了 scrapy-go 框架的 Item Pipeline 接口和管理器。 |
|
Package pool 提供 HTTP 请求/响应对象池，用于减少 GC 压力。
|
Package pool 提供 HTTP 请求/响应对象池，用于减少 GC 压力。 |
|
Package scheduler 实现了 scrapy-go 框架的请求调度系统。
|
Package scheduler 实现了 scrapy-go 框架的请求调度系统。 |
|
Package scraper 实现了 scrapy-go 框架的 Scraper 组件。
|
Package scraper 实现了 scrapy-go 框架的 Scraper 组件。 |
|
Package selector 提供 HTML/XML 文档的 CSS 和 XPath 选择器。
|
Package selector 提供 HTML/XML 文档的 CSS 和 XPath 选择器。 |
|
Package settings 实现了 scrapy-go 框架的多优先级配置系统。
|
Package settings 实现了 scrapy-go 框架的多优先级配置系统。 |
|
Package signal 实现了 scrapy-go 框架的信号/事件系统。
|
Package signal 实现了 scrapy-go 框架的信号/事件系统。 |
|
Package spider 定义了 scrapy-go 框架的 Spider 接口和基础实现。
|
Package spider 定义了 scrapy-go 框架的 Spider 接口和基础实现。 |
|
middleware
Package middleware 定义了 Spider 中间件的接口和管理器。
|
Package middleware 定义了 Spider 中间件的接口和管理器。 |
|
Package stats 实现了 scrapy-go 框架的统计收集系统。
|
Package stats 实现了 scrapy-go 框架的统计收集系统。 |
|
Package telemetry 定义了 scrapy-go 框架的可观测性扩展点接口。
|
Package telemetry 定义了 scrapy-go 框架的可观测性扩展点接口。 |
Click to show internal directories.
Click to hide internal directories.