“数据采集有哪些限制条件”的版本间的差异

来自JsRobot
跳转至: 导航搜索
(创建页面,内容为“#无法看到的数据无法采集 采集的本质是模拟人类操作的行为的一个工具。 采集的第一条限制条件就是,必须是网...”)
 
 
第1行: 第1行:
#无法看到的数据无法采集
+
==无法看到的数据无法采集==
 
       采集的本质是模拟人类操作的行为的一个工具。
 
       采集的本质是模拟人类操作的行为的一个工具。
 
       采集的第一条限制条件就是,必须是网页上您自己可以看到的数据。
 
       采集的第一条限制条件就是,必须是网页上您自己可以看到的数据。
 
       不是你自己的网站的后台数据,是无法采集的。
 
       不是你自己的网站的后台数据,是无法采集的。
#适合采集大量数据,不适合少量数据
+
==适合采集大量数据,不适合少量数据==
 
       对于人类来说,在网页上收集数据的工作就是“打开网页,然后获取数据”的工作。
 
       对于人类来说,在网页上收集数据的工作就是“打开网页,然后获取数据”的工作。
 
       数据少的时候,人力是可以处理的。当数据多的时候,人力就无法处理了,必须用工具。
 
       数据少的时候,人力是可以处理的。当数据多的时候,人力就无法处理了,必须用工具。
 
       这个计算的方法就是看你自己的人工。
 
       这个计算的方法就是看你自己的人工。
 
       如果一个人处理的时间不超过1天的工作,是不需要使用工具的。
 
       如果一个人处理的时间不超过1天的工作,是不需要使用工具的。
#看到的数据是什么,采集出来就是什么
+
==看到的数据是什么,采集出来就是什么==
 
       有些网站是隐藏了部分展示信息的。即使登陆也看不到。
 
       有些网站是隐藏了部分展示信息的。即使登陆也看不到。
 
       阿里店家里的买家信息中有*号,采集下来也是星号。
 
       阿里店家里的买家信息中有*号,采集下来也是星号。
 
       有些网站是对免费账号隐藏部分展示信息,对VIP账号是开放的。
 
       有些网站是对免费账号隐藏部分展示信息,对VIP账号是开放的。
 
       这类信息必须有VIP账号才能采集。
 
       这类信息必须有VIP账号才能采集。

2016年1月16日 (六) 02:38的最新版本

无法看到的数据无法采集

      采集的本质是模拟人类操作的行为的一个工具。
      采集的第一条限制条件就是,必须是网页上您自己可以看到的数据。
      不是你自己的网站的后台数据,是无法采集的。

适合采集大量数据,不适合少量数据

      对于人类来说,在网页上收集数据的工作就是“打开网页,然后获取数据”的工作。
      数据少的时候,人力是可以处理的。当数据多的时候,人力就无法处理了,必须用工具。
      这个计算的方法就是看你自己的人工。
      如果一个人处理的时间不超过1天的工作,是不需要使用工具的。

看到的数据是什么,采集出来就是什么

      有些网站是隐藏了部分展示信息的。即使登陆也看不到。
      阿里店家里的买家信息中有*号,采集下来也是星号。
      有些网站是对免费账号隐藏部分展示信息,对VIP账号是开放的。
      这类信息必须有VIP账号才能采集。