Web爬虫 - Web爬虫

按热度排序
235 7.9k 610

C Colly一个Golang的快速和优雅的爬虫框架
 
10.0 0.7
235 7.9k 610

C Colly是Gopher的快速和优雅抓取框架
 
10.0 0.7
Featured
13 699 34

G Geziyor是一个采用Go开发的超快的网页抓取框架,用于抓取网站并从其网页中提取结构化数据。 它可用于各种用途,从数据挖掘到监控和自动化测试。
 
7.0 10.0
  昨天
47 751 52

C Creeper是一个下一代爬虫,它通过爬行脚本抓取网页。 作为跨平台嵌入式抓取工具,您可以将其用于新闻应用,订阅计划等。
 
2.3 0.0
  2年前
40 569 214

B 百度云爬虫
 
1.8 0.0
52 449 125

Z  zerg 基于docker的分布式爬虫服务 特性 多机多 IP,充分利用 IP 资源 服务自动发现和注册(基于 etcd 和 registrator) 负载均衡 服务端客户端通信基于 gRPC,支持多种编程语言的客户端 可设置抓取超时 支持 GET、HEAD、POST 方法 支持自定义 head。
 
1.4 0.0
  2年前
44 361 130

A ants-go - 开源分、布式、restful golang爬虫引擎
 
1.1 0.0
  3年前
9 250 30

P PhantomJS的Go客户端
 
0.8 0.0
  6月前
22 240 57

G GOPA一个采用Go编写的爬虫,易于部署,无需runtime或依赖关系
 
11 148 12

G go-selenium - 采用Go编写的Selenium web 驱动器库
 
0.5 0.0
  11月前
7 147 8

S Sqrape - 利用CSS和Go反射抓取Web数据
 
0.5 0.0
  2年前
3 127 11

L Lao-SiJi - 一个针对老司机的o (golang) CLI 爬虫
 
0.4 0.0
6 110 6

H 一个用于处理headless Chrome的Go包。 使用go和Chrome在页面上运行交互式JavaScript命令。
 
0.3 0.0
  4月前
6 59 6

S Scraply是一个简单的dom scraper,用于从任何基于html的网站获取信息,并将该信息转换为JSON API
 
0.3 2.7
112 1.8k 181

G gocrawl是一个采用Go编写的微型并发Web爬虫
 
0.1 0.0
31 1.1k 68

S soup - 是一个类似于BeautifulSoup采用Go开发的Web爬虫
 
0.1 0.7