数据采集有哪些限制条件

Storm讨论 | 贡献2016年1月16日 (六) 02:37的版本 (创建页面,内容为“#无法看到的数据无法采集 采集的本质是模拟人类操作的行为的一个工具。 采集的第一条限制条件就是,必须是网...”)

(差异) ←上一版本 | 最后版本 (差异) | 下一版本→ (差异)
Storm讨论 | 贡献2016年1月16日 (六) 02:37的版本 (创建页面,内容为“#无法看到的数据无法采集 采集的本质是模拟人类操作的行为的一个工具。 采集的第一条限制条件就是,必须是网...”)

(差异) ←上一版本 | 最后版本 (差异) | 下一版本→ (差异)
  1. 无法看到的数据无法采集
      采集的本质是模拟人类操作的行为的一个工具。
      采集的第一条限制条件就是,必须是网页上您自己可以看到的数据。
      不是你自己的网站的后台数据,是无法采集的。
  1. 适合采集大量数据,不适合少量数据
      对于人类来说,在网页上收集数据的工作就是“打开网页,然后获取数据”的工作。
      数据少的时候,人力是可以处理的。当数据多的时候,人力就无法处理了,必须用工具。
      这个计算的方法就是看你自己的人工。
      如果一个人处理的时间不超过1天的工作,是不需要使用工具的。
  1. 看到的数据是什么,采集出来就是什么
      有些网站是隐藏了部分展示信息的。即使登陆也看不到。
      阿里店家里的买家信息中有*号,采集下来也是星号。
      有些网站是对免费账号隐藏部分展示信息,对VIP账号是开放的。
      这类信息必须有VIP账号才能采集。