用 Python 写了个简单的 QQ 群爬虫

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

爱意满满的作品展示区。

This topic created in 3565 days ago, the information mentioned may be changed or developed.

批量抓取 QQ 群信息，包括群名称、群号、群人数、群主、群简介等内容，最终生成 CSV 结果文件。

26 replies • 2018-12-10 20:37:53 +08:00

Jul 23, 2016 via iPhone

qq 消息管理器里不是有搜索的吗。。。。

Asimov

Jul 23, 2016

抓 webQQ 的嗎？

caspartse

Jul 23, 2016

@xz 对的。
本人运营狗一枚，经常用到群资源，所以批量抓下来，备用。

caspartse

Jul 23, 2016

@Asimov http://qqun.qq.com/group/index.html?keyword=V2EX 抓这个页面的。

zxy

Jul 23, 2016

编码似乎有问题 (windows 10 excel 2016)

est

Jul 23, 2016

那个登录的 idea 不错！

GreatMartial

Jul 23, 2016

关注一波

caspartse

Jul 24, 2016

@zxy CSV 是 UTF-8 编码的。新增了导出 xls 选项，应该没问题了。

caspartse

Jul 24, 2016

@est 照搬 QQ 的啦。 QQ 、微信、淘宝的扫码登录原理都差不多。

caspartse

Jul 24, 2016

@GreatMartial 谢谢～

ViFan

Jul 24, 2016 via Android

能把群成员导出来就更好了

lslqtz

Jul 24, 2016 via iPhone

@ViFan 在群空间里拉一下就有列表了，在那里做匹配应该会比找接口轻松一些。

sheep3

Jul 24, 2016

@ViFan 群成员没有权限的吧，毕竟你还没有入群呢

maomaomao001

Jul 24, 2016 via Android

没有加入的群，也可以抓去吗？

MyFaith

Jul 24, 2016

你这码打的。。

prprio

Jul 24, 2016

非常感谢！！！
这是个好东西啊。

henryxie2093

Jul 25, 2016

好东西

dgkae

Jul 25, 2016

马克

caspartse

Jul 25, 2016

@ViFan 导出群成员的话，可以抓两个页面： http://qun.qq.com/manage.html http://qun.qzone.qq.com/group ，不过，如楼上所说，只能导出自己加入的群。

ViFan

Jul 28, 2016 via Android

收藏先

happyhou

Jul 29, 2016

mark

mingyun

Aug 28, 2016

mark

mangshe

Nov 11, 2017

@caspartse 请问 QQ 群爬虫有没有 windows 的脚本？谢谢

caspartse

Dec 31, 2017

@mangshe Windows XP 测试通过。

salamanderMH

Nov 23, 2018

可以出群成员？

cnpays

Dec 10, 2018

@caspartse 楼主，我是 Python 小白，恳请老司机解答我在学习 Python 路上的困惑！

用 Python 写了个简单的 QQ 群爬虫

Github

在线演示

截图示例