[精品]基于大数据的信息系统关键技术研究.doc

[精品]基于大数据的信息系统关键技术研究.doc基于大数据的信息系统关键技术研究基于大数据的信息系统关键技术研究摘要随着信息技术对人类社会的影响日益深刻,传统数据分析技术已经难以应对当前社会产生的大量旦多样的数据。如何有效地对大数据进行分析,提取其中的重要信息已经成文了相关产业的研究热点。本文对基于大数据的信息系统关键技术进行讨论和分析,并简要介绍了其发展前景。【关键词】大数据信息系统关键技术信息技术、计算机技术和互联网技术的高速发展促进了人类社会各类数据的爆炸性增长。如何对这些结构复杂的大数据进行有效管理已经成为当前社会的热点问题之一。自2011年EMC公司首次在年度大会中提出大数据的概念,已有多家公司和机构对大数据问题进行了研究。由于信息技术已经渗透到人类社会的多个领域,大数据问题会给整个社会带来深刻的影响。可以预见,大数据问题必然会给信息技术产业带来一场深刻的技术变革。基于大数据的信息系统的技术创新是未来发展信息技术的关键,也是有关国家发展战略的重要课题。面对着大数据问题带来的机遇和挑战,我国有必要加大科研力度,努力缩小在信息技术领域与的差距。1大数据的特征与价值对于大数据的定义目前仍没有一种通行的标准,不过从数据使用者的角度来讲,大数据可以定义为超过使用者所能处理和分析能力上限的数据。由于信息技术在人类社会的应用广泛而又深刻,各行业的公司、企业乃至政府机构都存储了大量的数据。然而,这些大数据内的大量有价值的信息却很少被挖掘出来加以利用。究其原因,一方•面是由于目前人们对于大数据的利用价值没有全面而深刻的认识,忽视了大数据中存在的重要信息;另一方面,由于缺乏相关的技术和人才,不能对这些大数据进行有效地处理和分析,以挖掘出其中有价值的信大数据的基本特征是多样性、体量、速度以及价值。所谓多样性是指大数据的来源丰富,且结构组成也相对多样化;体量即指数据量巨大;而速度是指数据的生成、变化和处理的速度都很快;价值则指大数据蕴含的应用价值。由于大数据的这些基本特征给当前的数据处理和分析技术带来了极大的难度,也给信息技术发展带来了新的挑战。为了对大数据进行处理以挖掘有价值的信息,我们不仅需要提升硬件设施的性能,而且要研发出能够处理大容量数据的技术、算法以及应用软件。现代社会的信息化和数字化必然会导致大量数据的产生和累积。就现代企业而言,其在采购、生产、运输、销售等环节都产生了大量数据。这些数据包含了企业运营过程中接触到的供应商、客户、人力资源等重要信息。现代企业的诸多决策很大程度上依赖于这些数据分析的结果。国外相关的研究表明,大数据存在着巨大的潜力,将会给整个社会的经济发展、技术创新和价值取向带来重大的变革。充分发挥大数据的价值,企业可以显著提高其运营效益;而政府的运行和管理效率也会得到大幅提高。总之,大数据的潜在价值巨大,研究基于大数据的信息系统关键技术具有重要的战略意义。,关系型数据库在处理大数据时普遍存在着不可忽视的缺陷。而大数据的价值密度也相对较低,对于数据库提出了新的要求。分布式数据库系统采用更加简单的模型对数据信息进行管理。Bigtable技术采用字符串的形式实现了对数据信息的高效管理;而Dynamo技术采用分布式哈希表等技术也实现对基于大数据的信息系统的可靠管理。分布式的数据处理系统的主要数