lyping
V2EX  ›  问与答

结构化数据的爬取,存储,检索有什么好的实践吗?

  •  
  •   lyping · Nov 12, 2015 · 2092 views
    This topic created in 3862 days ago, the information mentioned may be changed or developed.
    工作的行业属于质检行业,因此工作中接触的单位都是质检单位,他们有个特点就是都会提供检测报告在询搜索,而且都在网上能查到检测报告的基本信息,如样品单位,编号,有的有图片(每一家的网站数据结构都有点不同,但又差别不大)。

    曾经做过爬取工作,用的 python ,实现了其中一家机构报告的检索。但现在的情况是很多家,难道分别按数据结构建数据库?

    另外这类服务存在法律问题吗?
    No Comments Yet
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3121 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 12:29 · PVG 20:29 · LAX 05:29 · JFK 08:29
    ♥ Do have faith in what you're doing.