金象网药品信息采集

来自JsRobot
Storm讨论 | 贡献2016年1月17日 (日) 04:59的版本 输出

(差异) ←上一版本 | 最后版本 (差异) | 下一版本→ (差异)
跳转至: 导航搜索

摘要

     这个工具解决采集药品信息收集的问题。

展示

20160117 jingxiangwang ui.gif
20160117 jingxiangwang data.gif

背景

     药品采购的时候,需要知道药品的价格。
     金象网是第二大的药品展示网站。
     上面有两万多个药品产品。

需求

     采集内容:网址,分类1,分类2,分类3,分类4,分类5,分类6,分类7,分类8,分类9,分类10,编号,编码,商品名称,通用名称,规格,生产企业,批准文号,有效期至,说明书

功能

输入

      输入网址为http://www.jxdyf.com

输出

   输出有三个。
   药品信息.csv。字段列表:网址,分类1,分类2,分类3,分类4,分类5,分类6,分类7,分类8,分类9,分类10,编号,编码,商品名称,通用名称,规格,生产企业,批准文号,有效期至,说明书
   图片信息.csv。字段列表:编号,外链,内链
   imgs目录。这个目录保存药品相关的图片。

处理

      打开网址http://www.jxdyf.com,
      枚举药品分类,
      处理药品子类翻页
      解析出每个翻页的中的药品信息网址
      依次处理每个药品信息也的具体内容
      保存输出数据

其他