V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
vincik
V2EX  ›  程序员

现在爬取什么信息比较有意思呢?

  •  
  •   vincik · May 12, 2016 · 8990 views
    This topic created in 3640 days ago, the information mentioned may be changed or developed.

    闲置的服务器,花钱的,不用可惜了。

    Supplement 1  ·  May 13, 2016

    采纳 @Orzzzz 建议, 将建立 知乎关系网 ,新进展会新开贴,即时将在本文附上机票

    62 replies    2016-05-14 10:44:50 +08:00
    clockwerk
        1
    clockwerk  
       May 12, 2016
    爬点 1024 咯 顺便开开车
    murmur
        2
    murmur  
       May 12, 2016
    当然是爬知乎-两栖动物
    mirrosite
        3
    mirrosite  
       May 12, 2016
    vincik
        4
    vincik  
    OP
       May 12, 2016
    @mirrosite 不是要程序, 是爬取建议哈
    vincik
        5
    vincik  
    OP
       May 12, 2016
    @nellace 开车的都是老司机
    vincik
        6
    vincik  
    OP
       May 12, 2016
    @murmur 知乎有什么好爬的呢?
    assassinpig
        7
    assassinpig  
       May 12, 2016
    楼主你啥取向呢???比较有意思可是因人而异啊
    wdlth
        8
    wdlth  
       May 12, 2016
    爬 BGP 信息,做 BGPlay
    waterinet
        9
    waterinet  
       May 12, 2016
    楼上都好污。。。
    laoyuan
        10
    laoyuan  
       May 12, 2016   ❤️ 1
    爬斗鱼弹幕,分析热词趋势
    qq515391365
        11
    qq515391365  
       May 12, 2016
    @laoyuan top1:6666
    coolair
        12
    coolair  
       May 12, 2016
    @wdlth
    @waterinet
    请问 BGP 是什么意思?
    vincik
        13
    vincik  
    OP
       May 12, 2016
    @laoyuan 有点意思
    vincik
        14
    vincik  
    OP
       May 12, 2016
    @assassinpig 大众喜欢的 数据
    murmur
        15
    murmur  
       May 12, 2016
    @vincik 当然是轶可赛艇的东西
    assassinpig
        16
    assassinpig  
       May 12, 2016
    @vincik 要是这么说的话,那还是很多的,大众喜欢的东西很广泛,新闻热点类的往往更多一些
    dolphinv
        17
    dolphinv  
       May 12, 2016 via iPhone
    爬来干嘛
    datafactory
        18
    datafactory  
       May 12, 2016
    关于爬虫能玩出啥花样,推荐大家知乎专栏的这篇文章: https://zhuanlan.zhihu.com/p/20858208?refer=data-factory ,绝对干货
    iyaozhen
        19
    iyaozhen  
       May 12, 2016
    @laoyuan 有点意思。不错
    SourceMan
        20
    SourceMan  
       May 12, 2016 via iPhone
    爬个互联网存在哪些爬虫
    vincik
        21
    vincik  
    OP
       May 12, 2016
    @SourceMan 你是说 爬取 爬虫程序 然后解析他的 规则 然后 在放到自己的规则里面 再 爬行 , 233333
    vincik
        22
    vincik  
    OP
       May 12, 2016
    @datafactory 比这个更有意思的 23333
    vincik
        23
    vincik  
    OP
       May 12, 2016
    @murmur 啥?
    joye1230
        24
    joye1230  
       May 12, 2016
    硬盘女神???????
    mrsolo
        25
    mrsolo  
       May 12, 2016
    我比较喜欢污的东西,然后大家也好喜欢,爬这个吧, yeah
    sparkssssssss
        26
    sparkssssssss  
       May 12, 2016 via Android
    马克
    lslqtz
        27
    lslqtz  
       May 12, 2016 via iPhone
    @nellace 以前我采集过 1024(滑稽)
    cxbats
        28
    cxbats  
       May 12, 2016
    推荐爬一下 g-e.hentai.org (逃
    vincik
        29
    vincik  
    OP
       May 12, 2016 via iPhone
    @cxbats 别跑,页面打不开
    vincik
        30
    vincik  
    OP
       May 12, 2016 via iPhone
    @joye1230 23333 女票就在身边,不需要存硬盘
    ChiangDi
        31
    ChiangDi  
       May 12, 2016 via Android
    希崎杰西卡
    cwlmxwb
        32
    cwlmxwb  
       May 12, 2016 via iPhone
    @vincik 别跑+1
    malaohu
        33
    malaohu  
       May 12, 2016
    爬美图。
    Orzzzz
        34
    Orzzzz  
       May 12, 2016
    爬知乎头像, ID ,个性域名,关注者,被关注者,关注关系网....

    这么多好玩的东西可以爬呢~
    vincik
        35
    vincik  
    OP
       May 13, 2016 via iPhone
    @Orzzzz 少年,你这建议不错
    vincik
        36
    vincik  
    OP
       May 13, 2016 via iPhone
    @ChiangDi 啥玩意?
    Orzzzz
        37
    Orzzzz  
       May 13, 2016
    @vincik 我还有十台机子,帮你跑呀~
    cpygui
        38
    cpygui  
       May 13, 2016
    @wdlth 能不能提供几个关键词?比较木。。。。想不出爬 BGP 信息有什么高级 play
    vincik
        39
    vincik  
    OP
       May 13, 2016 via iPhone
    @Orzzzz 可以的骚年
    Orzzzz
        40
    Orzzzz  
       May 13, 2016
    @vincik 脚本写好记得喊我哟~(づ ̄ 3  ̄)づ
    shajiquan
        41
    shajiquan  
       May 13, 2016
    91 啊。
    shajiquan
        42
    shajiquan  
       May 13, 2016
    楼主你说说机票是什么情况……
    vincik
        43
    vincik  
    OP
       May 13, 2016 via iPhone
    @shajiquan 就是直达链接
    vincik
        44
    vincik  
    OP
       May 13, 2016 via iPhone
    @Orzzzz 可以的,少年
    winiex
        45
    winiex  
       May 13, 2016
    很感兴趣,带上我啊少年。比较想做一个大事件的传播路径图。
    x86
        46
    x86  
       May 13, 2016 via iPhone
    当然是爬 javzoo 那种
    loading
        47
    loading  
       May 13, 2016 via Android   ❤️ 1
    爬光所有论文,然后共享出来!
    liqingcan
        48
    liqingcan  
       May 13, 2016
    用什么写? python3 ?
    aaronzjw
        49
    aaronzjw  
       May 13, 2016
    @nellace experienced driver! Could you drive me for a while?
    yoa1q7y
        50
    yoa1q7y  
       May 13, 2016
    @laoyuan 基本都是 666666
    DualWield
        51
    DualWield  
       May 13, 2016
    caoniu
    easonleo
        52
    easonleo  
       May 13, 2016
    「知乎关系网」确实不错,期待。
    然后关系这种信息要怎么呈现呢,纯文字感觉不好说明,图形化又很容易乱
    vincik
        53
    vincik  
    OP
       May 13, 2016 via iPhone
    @easonleo 如何让数据说话?
    vincik
        54
    vincik  
    OP
       May 13, 2016 via iPhone
    vincik
        55
    vincik  
    OP
       May 13, 2016
    @DualWield nishuoshaya?
    Tyrion
        56
    Tyrion  
       May 13, 2016
    为什么不爬取几家 P2P 平台的信息呢,现在互联网金融这么好玩,也可以看看。好吧其实是我自己想爬但是爬不来~
    clockwerk
        57
    clockwerk  
       May 13, 2016
    @aaronzjw 车还是自己开的稳,我开的容易翻车。。。。
    EthanLiao
        58
    EthanLiao  
       May 13, 2016
    @wdlth BGP 是什么?
    Victor215
        59
    Victor215  
       May 13, 2016
    @lslqtz 我能说我爬了 1024 ,为公司贡献代码了么……
    DualWield
        60
    DualWield  
       May 13, 2016
    @vincik https://github.com/yangyangwithgnu/hardseed 这个现在不好用了,可以考虑做一个 py 版的
    Chigogo
        61
    Chigogo  
       May 13, 2016
    @SourceMan 递归爬?
    HaoC12
        62
    HaoC12  
       May 14, 2016
    @DualWield 好酷
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   803 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 105ms · UTC 20:25 · PVG 04:25 · LAX 13:25 · JFK 16:25
    ♥ Do have faith in what you're doing.