lyping
V2EX  ›  问与答

结构化数据的爬取,存储,检索有什么好的实践吗?

  •  
  •   lyping · Nov 12, 2015 · 2070 views
    This topic created in 3851 days ago, the information mentioned may be changed or developed.
    工作的行业属于质检行业,因此工作中接触的单位都是质检单位,他们有个特点就是都会提供检测报告在询搜索,而且都在网上能查到检测报告的基本信息,如样品单位,编号,有的有图片(每一家的网站数据结构都有点不同,但又差别不大)。

    曾经做过爬取工作,用的 python ,实现了其中一家机构报告的检索。但现在的情况是很多家,难道分别按数据结构建数据库?

    另外这类服务存在法律问题吗?
    No Comments Yet
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2471 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 38ms · UTC 15:51 · PVG 23:51 · LAX 08:51 · JFK 11:51
    ♥ Do have faith in what you're doing.