大数据对经济新闻的影响研究.pdf

大数据对经济新闻的影响研究
第一章 大数据与经济新闻概况

第一节 相关概念解析
一、大数据概念
随着信息网络技术的发展及新兴科技的出现，数据呈现了爆发式增
长。图 1 显示了现代社会数据生产状况。当今世界人口 70 多亿，而手
机拥有量也近 70 亿，互联网使用者约 30 亿，社交媒体应用者约 20
亿。可见数据的大规模增长主要来源于互联网、社会化媒体、移动终端等
平台。
正是数据的爆炸式增长带来“大数据”这一概念。2011 年麦肯锡发
布的研究报告中，用“大数据”形容和描述了数据爆炸增长带来的海量数
据。除了海量数据之外，相关研究还认为以海量数据挖掘、分析与应用为
主的数据处理能力也被包含于大数据概念中。综合各方研究，本文认为大
数据包含了三个层面的含义：第一，大数据是一种数据集合，这种数据集
合超过了一般计算机的数据处理能力，无法在一定时间用通常的数据处理
程序抓取、挖掘，存储与分析。这种数据集合首先是数据量级的巨大，除
此还有数据类型多样（Variety），数据处理速度快（Velocity），数据
价值密度低（Value）的特点 6。这种数据集合除了包含大量常规的结构
化和半结构化数据，还包括了海量非结构化数据和交互数据。其中结构化
数据也可称为二手数据，即已经被处理过的数据包括政府和企业发布的各
类统计数据以及第三方数据库中的数据等。非结构化数据，主要是各种网
络数据以及用户行为数据，包括了移动终端、传感器、可穿戴设备产生的
数据，社会化媒体中的ＵＧＣ和用户行为数据。这类数据需要新闻生产者
主动抓取过滤后才能应用于新闻生产，这类数据量级大类型杂，是“大数
据”的丰富来源，得益于大数据技术的发展才能被处理利用。第二，大数
据代表了一种技术趋势，是一种进行大数据抓取、存储、解析的数据处理
能力。大数据技术是以云计算为基础的信息存储、分享和挖掘手段，可以
便宜有效的将那些大量、高速、多变化的终端数据存储下来，并随时进行
分析与计算。大数据技术涉及种类多样，其中数据技术方面，数据获取与
整理技术、数据语言与开源框架建设、数据可视化技术如 Django 开源模
型、统计和可视化 R 语言、适用于文本挖掘的 Python 语言、最简便的
数据整理工具 Ecxel 等被应用较多。第三，大数据代表了一种新型的思
维方式，即一种大数据思维，主要具有以下三大特点：一是对于数据的处
理，不再依赖于随机抽样，有时候甚至样本等于全部；二是信息分析不再
执着于追求精确性，而是混杂性，不拘泥于小数据的精确，通过对大量数
据的分析，发现趋势，进行宏观层面的洞察；三是不再热衷于寻找因果关
系，而是注重事物相关性的分析。
...................

第二节 经济新闻与大数据
数据是经济新闻的必不可少的生产要素，经济水平的衡量，经济活
动的变化，经济趋势的判断、消费市场的观察都离不开数据的呈现和展
示。