V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
HMYDK
V2EX  ›  程序员

「求助」请问是否有 twitter 和 facebook 的爬虫推荐?或者相关经验?

  •  
  •   HMYDK · 318 天前 · 1929 次点击
    这是一个创建于 318 天前的主题,其中的信息可能已经有所发展或是发生改变。
    目前已知:
    API 不符合要求
    会封号
    11 条回复    2024-01-22 20:28:36 +08:00
    vcn8yjOogEL
        1
    vcn8yjOogEL  
       318 天前
    应该可以参考下 nitter
    https://github.com/zedeus/nitter
    kdwnil
        2
    kdwnil  
       318 天前 via Android
    Twitter 的主流做法就是堆号,楼上#1 提到的 nitter 说到底也是堆号,只不过不一定要真实账号。

    fb 不懂,没研究过
    fdd92
        3
    fdd92  
       317 天前 via Android
    建议用俄罗斯人刷的机器人账号和代理 ip ,价格会便宜很多。被封了就换,没什么压力
    feiniu
        4
    feiniu  
       317 天前
    twitter 现在基本就是堆号了
    akeu
        5
    akeu  
       317 天前
    @fdd92 老毛子的机器人账号和代理 IP 在哪里能找到?
    yuchen198
        6
    yuchen198  
       317 天前
    同求,确实会封号,小量还行
    HMYDK
        8
    HMYDK  
    OP
       317 天前
    感谢楼上各位回复,目前觉得稳妥方案还是 selenium+堆账号+代理 ip 了
    Plumbiu
        9
    Plumbiu  
       316 天前
    https://github.com/Plumbiu/twid ,自己写的推特的爬虫,用的浏览器模拟,测试了几十次了,应该不会封号
    HMYDK
        10
    HMYDK  
    OP
       316 天前
    @Plumbiu 感谢,我来参考下
    sunysen
        11
    sunysen  
       304 天前
    @HMYDK 现在做的怎么样,方便加个微信交流吗(我的微信 love16898)
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2866 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 14:51 · PVG 22:51 · LAX 06:51 · JFK 09:51
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.