V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
tang3w
V2EX  ›  问与答

我用python去爬网页,页面元素是加载出来的,也不是ajax,网页能看到这个元素,但是html源码中搜不到。这是为什么?

  •  
  •   tang3w · 2013-04-19 11:04:21 +08:00 · 3230 次点击
    这是一个创建于 4240 天前的主题,其中的信息可能已经有所发展或是发生改变。
    7 条回复    1970-01-01 08:00:00 +08:00
    binux
        1
    binux  
       2013-04-19 11:22:05 +08:00   ❤️ 1
    js生成的呗
    bixuehujin
        2
    bixuehujin  
       2013-04-19 11:30:38 +08:00
    iframe 有无可能?
    oldcai
        3
    oldcai  
       2013-04-19 11:57:08 +08:00
    看到链接之前无法做任何判断。
    hwsdien
        4
    hwsdien  
       2013-04-19 12:19:37 +08:00
    iframe?
    sethverlo
        5
    sethverlo  
       2013-04-19 12:21:02 +08:00
    lz 也不截个图什么的……不过我同意 1L
    muzuiget
        6
    muzuiget  
       2013-04-19 12:45:12 +08:00
    除了楼上说的 js 和 iframe,还有可能根据 User-Agent 返回不同内容,比如屏蔽了爬虫的 UA。
    tang3w
        7
    tang3w  
    OP
       2013-04-19 22:11:22 +08:00
    谢谢1L,找到问题了,那个元素是Ajax生成的,我重新POST请求了一次
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3604 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 10:46 · PVG 18:46 · LAX 02:46 · JFK 05:46
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.