Web爬虫 - Web爬虫

按热度排序
271 9.8k 814

C Colly是Gopher的快速和优雅抓取框架
 
10.0 2.7
271 9.8k 814

C Colly一个Golang的快速和优雅的爬虫框架
 
10.0 5.7
76 3.4k 600

J 今日热榜,一个获取各大热门网站热门头条的聚合网站,使用Go语言编写,多协程异步快速抓取信息
 
10.0 1.0
  12天前
21 982 60

G Geziyor是一个采用Go开发的超快的网页抓取框架,用于抓取网站并从其网页中提取结构化数据。 它可用于各种用途,从数据挖掘到监控和自动化测试。
 
3.2 0.3
  1月前
48 761 55

C Creeper是一个下一代爬虫,它通过爬行脚本抓取网页。 作为跨平台嵌入式抓取工具,您可以将其用于新闻应用,订阅计划等。
 
2.3 0.0
  2年前
24 1k 92

H hakrawler - 简单,快速的Web爬虫,旨在轻松,快速地发现Web应用中的端点和资产
 
2.1 10.0
  昨天
40 640 235

B 百度云爬虫
 
2.0 0.0
52 461 126

Z  zerg 基于docker的分布式爬虫服务 特性 多机多 IP,充分利用 IP 资源 服务自动发现和注册(基于 etcd 和 registrator) 负载均衡 服务端客户端通信基于 gRPC,支持多种编程语言的客户端 可设置抓取超时 支持 GET、HEAD、POST 方法 支持自定义 head。
 
1.4 0.0
  3年前
44 368 133

A ants-go - 开源分、布式、restful golang爬虫引擎
 
1.1 0.0
  3年前
10 261 32

P PhantomJS的Go客户端
 
0.8 0.0
  1年前
24 259 66

G GOPA一个采用Go编写的爬虫,易于部署,无需runtime或依赖关系
 
11 153 13

G go-selenium - 采用Go编写的Selenium web 驱动器库
 
0.5 0.0
  1年前