V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
zhshch
V2EX  ›  分享创造

Goribot - 简洁的 Golang 爬虫框架

  •  
  •   zhshch · 2019-10-02 10:10:30 +08:00 · 5489 次点击
    这是一个创建于 1880 天前的主题,其中的信息可能已经有所发展或是发生改变。

    https://github.com/zhshch2002/goribot

    B 站视频爬虫栗子

    一个简单的栗子:

    package main
    
    import (
        "fmt"
        "github.com/zhshch2002/goribot"
    )
    
    func main() {
        s := goribot.NewSpider()
        s.NewTask(
            goribot.MustNewGetReq("https://httpbin.org/get?Goribot%20test=hello%20world"),
            func(ctx *goribot.Context) {
                fmt.Println("got resp data", ctx.Text)
            })
        s.Run()
    }
    
    3 条回复    2019-10-09 10:44:23 +08:00
    electronic
        1
    electronic  
       2019-10-06 18:23:51 +08:00 via Android
    支持
    zhshch
        2
    zhshch  
    OP
       2019-10-08 06:25:43 +08:00 via Android
    @electronic thx

    好几个收藏 1 个回复😂
    ango
        3
    ango  
       2019-10-09 10:44:23 +08:00
    关注一下~
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2747 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 35ms · UTC 08:23 · PVG 16:23 · LAX 00:23 · JFK 03:23
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.