56.8k

Python

scrapy

Scrapy, a fast high-level web crawling & scraping framew...

2.3k

Python

快速查看 比较

其他资源

scrapyrt

Scrapy realtime

2.8k

Python

快速查看 比较

  5.8k

Go

ferret

Declarative web scraping

2.2k

Go

快速查看 比较

  14.6k

Python

newspaper

News, full-text, and article metadata extraction in Python 3...

2.4k

Python

快速查看 比较

  24.2k

网络爬虫 \ 蜘蛛

Colly

优雅的 Golang Scraper 和爬虫框架。「Elegant Scraper and Crawler Framew...

2.4k

Go

快速查看 比较

  17.8k

JavaScript

apify-js

Apify SDK — The scalable web crawling and scraping library f...

2.2k

TypeScript

快速查看 比较

  6.7k

Rust

wasm-pack

?✨ your favorite rust -> wasm workflow tool!

2k

Rust

快速查看 比较

Go

dataflowkit

Extract structured data from web sites. Web sites scraping. ...

1.9k

Go

快速查看 比较

  3k

Java

nutch

Apache Nutch

2.5k

Java

快速查看 比较

  2k

PHP

skycaiji

蓝天采集器是一款免费的数据采集发布爬虫软件，采用php+mysql开发，可部署在云服务器，几乎能采集所有类型的网页，无缝...

1.8k

PHP

快速查看 比较

JavaScript

crawljax

Crawljax: Crawling JavaScript-based Ajax Web Applications

1.4k

JavaScript

快速查看 比较

Go

GOPA

用 Golang 编写的易于使用的蜘蛛程序。(之前名为 GOPA）。�「🕷️ An easy-to-use spider...

2.5k

Go

快速查看 比较