临时的抓取任务有什么更幸福的办法?

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 3968 天前的主题，其中的信息可能已经有所发展或是发生改变。

困扰很久的问题了

我在 firefox 用 viewXpath

结果是这样的

为啥不显示图片

要一个一个复制 , 痛啊

有什么更幸福的办法吗?

8 条回复 • 2015-03-13 10:19:59 +08:00

shakoon

2015 年 3 月 4 日

按键精灵、易语言做这种活最高效了

yappa

2015 年 3 月 4 日

python requests BeautifulSoup

reloop

2015 年 3 月 4 日

@shakoon 能详细一点吗 , 都没用过~!~

reloop

2015 年 3 月 4 日

@yappa 这个是不是还要解决登陆的问题什么的 , 有些页面是要登陆 , 有些是 ajax 的用这个可以完成任务?

yappa

2015 年 3 月 4 日

ajax会比较复杂，估计要用到phantomjs，还没试过。
selenium webdriver + Beautifulsoup可以试一下。

reloop

2015 年 3 月 4 日

@yappa 谢谢!! 我了解一下

liad

2015 年 3 月 4 日

控制台运行：$x('//a/@href').map(function(item){return item.value}).join('\n')

reloop

2015 年 3 月 13 日

@liad 这才是最赞的....幸福哭了