数据采集06308.ppt

06/18 2010
扬州腾维信息技术有限公司(腾维呼叫)数据采集培训方案
什么是数据采集
数据采集的方式
数据意义
数据采集的方法
数据分析
常用的数据采集工具
易采网站数据采集系统
get
火车头(重点介绍)
内容纲要
数据采集
数据采集(DAQ),是指从传感器和其它待测设备等模拟和数字被测单元中自动采非电量或者电量信号,送到上位机中进行分析,处理。数据采集系统是结合基于计算机或者其他专用测试平台的测量软硬件产品来实现灵活的、用户自定义的测量系统。
数据采集,又称数据获取,是利用一种装置,从系统外部采集数据并输入到系统内部的一个接口。数据采数据采集集技术广泛引用在各个领域。比如摄像头,麦克风,都是数据采集工具。
在互联网行业快速发展的今天,数据采集已经被广泛应用于互联网及分布式领域,数据采集领域已经发生了重要的变化。国内外各种数据采集机先后问世,将数据采集带入了一个全新的时代。
数据采集方式
是将非结构化的信息从大量的网页中抽取出来保存到结构化的数据库中的过程。在网络信息浩如烟海的今天,如何有效挖掘网络信息富矿,如何收集企业外部信息,对于公司的经营来说至关重要。
通过市场调查消费者消费记录以及促销活动的记录,另一方面利用公共记录的数据,如人口统计数据、医院婴儿出生记录、患者记录卡、银行担保卡、信用卡记录等都可以选择性地进人数据库。
数据采集的意义
案例一:
海湾战争爆发前期,投资商纷纷撤离当地市场,由战争所导致的社会动荡成为扼杀市场的怪物。国内商人除了关注美伊的军事力量以外,对商业关注者寥寥无几。但长虹集团的老板倪瑞峰却从不停播放的战讯中看出了倪端。10天后,伊拉克电台报道,由于战争即将爆发,石油及附属产品价格跌入谷底,聚苯乙烯的价格也不例外。于是,长虹集团董事会立即制定采购500万吨聚苯乙烯的计划,用做电视机外壳材料。后来,经过成功调运,长虹电视机外壳成本是国内同类产品成本的45%,在利润分成中,长虹依靠这一商业信息决策而获得5000万元的相对收益。
数据采集的意义
开发和利用信息资源的第一步就是对信息进行有效的采集,为了采集的高效性,需要:
了解信息采集的目的和需求
掌握信息资源的分布规律
采集时的遵循的原则
数据采集的意义
信息源分析
信息资源反馈
信息资源传递
信息资源利用
信息资源开发
信息资源检索
信息资源存储
信息资源加工
信息资源采集
信息需求分析
信息资源分析
信息资源开发利用
信息资源建设
信息资源传递反馈
用户
信源/信宿
信息资源过程管理示意图
数据采集的程序
信息需求是用户为了满足何种目的需要什么信息,表现在5个方面:

根据信息用户类型的不同,可以将信息需求分为个人信息需求和组织信息需求。
个人信息需求
个人信息需求又分为生活信息需求和职业信息
需求等。
组织信息需求
由团体用户产生、为实现其目标和宗旨而形成
的一系列信息需求。
数据采集过程
采集活动开始
采集策略确定
选择信息源
需求分析
采集效果评价
和解释
采集实施
效果满意
采集结束
反馈意见
数据采集的程序
确定采集内容
通过与信息资源采集目标和需求具有一定相关性的信息的特征来确定。
确定采集的范围
采集的时间范围:注重信息的时效性,选择适当的时间范围。
采集的空间范围:根据信息的分布特性,选择适当的空间范围,提高信息的相关度和适应度。
确定采集量
采集的信息数量决定采集工作的人力、时间和费用。
其他因素
信息环境、信息的可获取性等。