Web爬虫 - Web爬虫

按热度排序
253 9k 716

C Colly一个Golang的快速和优雅的爬虫框架
 
10.0 3.3
Popular
100 3.9k 180

Ferret 一种声明式Web爬虫系统
 
10.0 10.0
63 3k 505

J 今日热榜,一个获取各大热门网站热门头条的聚合网站,使用Go语言编写,多协程异步快速抓取信息
 
10.0 3.5
  24天前
16 900 51

G Geziyor是一个采用Go开发的超快的网页抓取框架,用于抓取网站并从其网页中提取结构化数据。 它可用于各种用途,从数据挖掘到监控和自动化测试。
 
3.2 0.2
  1月前
47 757 54

C Creeper是一个下一代爬虫,它通过爬行脚本抓取网页。 作为跨平台嵌入式抓取工具,您可以将其用于新闻应用,订阅计划等。
 
2.3 0.0
  2年前
41 620 224

B 百度云爬虫
 
1.9 0.0
53 457 128

Z  zerg 基于docker的分布式爬虫服务 特性 多机多 IP,充分利用 IP 资源 服务自动发现和注册(基于 etcd 和 registrator) 负载均衡 服务端客户端通信基于 gRPC,支持多种编程语言的客户端 可设置抓取超时 支持 GET、HEAD、POST 方法 支持自定义 head。
 
1.4 0.0
  2年前
44 365 132

A ants-go - 开源分、布式、restful golang爬虫引擎
 
1.1 0.0
  3年前
252 9k 711

C Colly是Gopher的快速和优雅抓取框架
 
0.9 0.0
9 256 32

P PhantomJS的Go客户端
 
0.8 0.0
  10月前
24 251 62

G GOPA一个采用Go编写的爬虫,易于部署,无需runtime或依赖关系
 
11 153 13

G go-selenium - 采用Go编写的Selenium web 驱动器库
 
0.5 0.0
  1年前
7 145 8

S Sqrape - 利用CSS和Go反射抓取Web数据
 
0.4 0.0
  2年前
3 127 12

L Lao-SiJi - 一个针对老司机的o (golang) CLI 爬虫
 
0.4 0.0
7 110 5

H 一个用于处理headless Chrome的Go包。 使用go和Chrome在页面上运行交互式JavaScript命令。
 
0.3 0.0
  8月前