V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
This topic created in 2932 days ago, the information mentioned may be changed or developed.
项目地址: https://github.com/qbhy/go-tumblr-crawler mac 同学 clone 下来可以直接运行 ./tumblr 运行。 windows or linux 同学需要自己编译一下，golang 编写的，需要 go build 一下(注意依赖)。 有些的不好的地方欢迎指出或者 PR ~
 |
1
qbhy OP # go-tumblr-crawler
Easily download all the photos/videos from tumblr blogs. 下载指定的 Tumblr 博客中的图片，视频。golang 版本。 ## 配置和运行 配置需要爬取的站点: `sites.json` ``` [ { "site": "truenorthshow", "video": true, "photo": true }, { "site": "photosbygerardo", "video": true, "photo": true } ] ``` 配置代理 : `proxies.json` ``` { "http": "socks5://127.0.0.1:1080", "https": "socks5://127.0.0.1:1080" } ``` 然后保存文件,双击运行 `./tumblr.exe`(还没编译好,你可以自行编译). mac 用户可以直接运行 `./tumblr` |
 |
2
jisibencom Apr 21, 2018 via Android
怎么编译呢
|
|
3
qbhy OP @jisibencom 啥系统
|
 |
4
wangxiaoaer Apr 21, 2018 via Android
笑死了，今天是怎么了，刚分享了一个在线下载的就碰到楼主这个
https://www.v2ex.com/t/448720#reply8 |
|
5
qbhy OP @wangxiaoaer 哈哈，我也是默默点了收藏
|
 |
6
sola97 Apr 21, 2018 via Android
我自己用 scrapy 写了个递归抓取的，同时保存每个视频的评论，然后入库后用 MySQL8.0 的正则查询评论存在关键词的视频的源地址，用 aria2c 下载，实际上效果不错
|
 |
7
Osk Apr 21, 2018
看了下代码好像不支持下载原始分辨率的图片，差评 /doge/
|
|
8
sola97 Apr 21, 2018
|
 |
9
aice114 Apr 21, 2018 via Android
默默收藏一个
|
 |
13
ihciah Apr 22, 2018 via iPad
顺便，我的 telegram bot 也可以开 tumblr ………
支持自动抓取并推送至私聊，channel 或者群聊。抓取列表，推送对象等都可以通过 tg 聊天管理。 https://www.v2ex.com/t/448493 |
 |
15
redmofang Apr 22, 2018 via Android
能区分博主自己上传与转发他人的帖子吗？
|
 |
16
suyuanhxx Apr 23, 2018
前段时间，我刚分享过一个这玩意...
|
 |
17
k7262140 Apr 23, 2018
能否 下载 指定博客的 喜欢？
|
Select Language