大数据研究综述.doc

大数据研究综述大数据文献综述随着以博客、社交网络、基于位置的服务LBS为代表的新型信息发布方式的不断涌现,以及云计算、物联网等技术的兴起,数据正以前所未有的速度在不断地增长和累积,国际数据公司(IDC)的数字宇宙研究报告称[1]:,且增长趋势遵循新摩尔定律(全球数据量大约每两年翻一番),,数据复杂性也急剧增长,其多样性、低价值密度、实时性等复杂特征日益显著,大数据时代已经来到。学术界、产业界甚至于政府机构都已经开始密切关注大数据问题,并对其产生浓厚的兴趣。一、大数据国内外发展现状对于学术界,1989年在美国底特律召开的第11届国际人工智能联合会议专题讨论会上,首次提出了“数据库中的知识发现(KDD)”的概念。在1995年召开了第一届知识发现与数据挖掘国际会议,随着与会人员的增加,KDD国际学术成为年会。大数据的兴起,主要是国际顶尖期刊《Nature》早在2008年推出了Bigdata专刊[2]。munityconsortium) 在2008年发表了报告“puting: merce,scienceandsociety”[3],阐述了在数据驱动的研究背景下,解决大数据问题所需的技术以及面临的一些挑战。《science》在2011年2月推出专刊“dealingwithdata ”[4],主要围绕着科学研究中大数据的问题展开讨论,,联合发布了一份白皮书《challengesandopportunitieswithbigdata》[5]。该白皮书从学术的角度出发介绍了大数据的产生,分析了大数据的处理流程,并提出大数据所面临的若干挑战。全球知名的咨询公司麦肯锡(McKinsey)2011年6月份发布了一份关于大数据的详尽报告“bigdata:petiton,andproductivity”[6],对大数据的影响、关键技术和应用领域等都进行了详尽的分析。进入2012年以来,大数据的关注度与日俱增1月份的达沃斯世界经济论坛上,大数据是主题之一,该次会议还特别针对大数据发布了报告“bigdata,pat:newpossibilitiesforinternationaldevelopment”[7],探讨了新的数据产生方式下,“大数据研究和发展倡议”[8](bigdataresearchanddevelopmentinitiative),投资2亿以上美元,正式启动“大数据发展计划”.计划在科学研究、环境、,联合国一个名为“globalpulse ”的倡议项目在今年5月发布报告“bigdatafordevelopment:challengesoropportunities”[9],该报告主要阐述大数据时代各国特别是发展中国家在面临数据洪流(datadeluge)的情况下所遇到的机遇与挑战,同时还对大数据的应用进行了初步的解读.《纽约时报》的文章