大数据应用项目解决方案.docx

该【大数据应用项目解决方案 】是由【zhangkuan1438】上传分享，文档一共【57】页，该文档可以免费在线阅读，需要了解更多关于【大数据应用项目解决方案 】的内容，可以使用淘豆网的站内搜索功能，选择自己适合的文档，以下文字是截取该文章内的部分文字，如需要获得完整电子版，请下载此文档到您的设备，方便您编辑和打印。44/44
2017年年大数据应应用项目
解决方案
2/57
目录
1. 大数数据概述 6
. 概述 6
. 大数据定定义 6
. 大数据技技术发展 8
2. 大数数据应用 11
. 大数据应应用阐述 11
. 大数据应应用架构 13
. 大数据行行业应用 13
. 医疗行业业 13
. 能源行业业 14
. 通信行业业 14
. 零售业 15
3. 大数数据解决方方案 16
. 大数据技技术组成 16
. 分析技术术 16
. 可视化分分析 16
3/57
. 数据挖掘掘算法 16
. 预测分析析能力 16
. 语义引擎擎 16
. 数据质量量和数据管管理 17
. 存储数据据库 17
. 分布式计计算技术 18
. 大数据处处理过程 20
. 采集 20
. 导入/预预处理 21
. 统计/分分析 21
. 挖掘 21
. 大数据处处理的核心心技术-HHadooop 21
. Hadooop的组组成 22
. Hadooop的优优点: 25
. 高可靠性性。 25
. 高扩展性性。 25
. 高效性。 25
4/57
. 高容错性性。 25
. Hadooop的不不足 25
. 主要商业业性“大数据”处理方案案 26
. IBMInfooSpheere大数数据分析平平台 26
. OracleBiigDDataApppliannc 27
. MiccroosoofttSQQLSerrver 27
. SybaaseIIQ 28
. 其他“大数据”解决方案案 28
. EMC 28
.. BigQQueryy 29
. 大数据”与科技文文献信息处处理 29
. 大数据处处理技术发发展前景 29
. 大数据复复杂度降低低 29
. 大数据细细分市场 30
. 大数据开开源 30
. Hadooop将加加速发展 30
. 打包的大大数据行业业分析应用用 30
. 大数据分分析的革命命性方法出出现 31
. 大数据与与云计算::深度融合合 31
5/57
. 大数据一一体机陆续续发布 31
4. 基于于基站大数数据应用及及案例 32
. 气象灾害害应急短信信发布平台台 32
. 概述 32
. 项目背景景 32
. 平台概述述 32
. 平台建设设特点与原原则 32
. 建设特点点 32
. 建设原则则 32
. 大数据管管理平台特特点 33
. 平台整体体架构 33
. 建设原理理 33
. 平台总体体设计 35
1. 平台台总体结构构 35
2. 平台台技术架构构 36
. 平台技术术思路 37
. 平台技术术路线 38
1. 内存存数据库
6/57
38
2. 短信信发送多链链路配置 38
3. 队列列缓存 38
4. 参数数可配置 38
. 平台性能能要求 38
. 平台网络络拓扑 38
. 平台关键键流程 39
. 平台数据据流程 39
. 平台业务务主流程 40
. 短信下发发审批流程程 41
. 信令分析析处理流程程 42
. 短信发送送流程 43
. 平台功能能模块 43
. 信令分析析子系统 43
. 短信发送送子系统 44
1. 短信信发送功能能 44
2. 短信信回执接收收功能 44
3. 短信信批量发送送管理功能能 45
7/57
4. 统计计报表 45
. 管理子系系统 45
1. 用户户管理 45
2. 权限限管理 46
3. 实时时监控 46
4. 日志志管理 46
5. 基站站位置信息息管理 46
6. 系统统参数配置置管理 46
. 内容数据据库子系统统 46
. 平台外部部接口 47
. 信令采集集接口 47
1. 接口口说明 47
2. 数据据采集模式式 47
. 短信发送送接口 47
1. 短信信发送通知知接口 47
2. 短信信发送状态态查询接口口 47
3. 短信信发送接口口 47
. 基站位置置信息接口口 48
1. 数据据同步模式式 48
2. 基站站位置信息息全量同步步接口 48
3. 基站站位置信息息增量同步步接口 48
. 旅游客源源分析 48
8/57
. 建设目标标 48
. 整体方案案 49
. 方案思路路 49
. 分析范围围 49
. 方案特点点 50
. 方案设计计 51
. 系统关系系 51
. 系统架构构 51
1. 数据据分析后台台能力 52
2. Weeb前台能能力 52
. 数据采集集 53
. 业务分析析 53
1. 总体体分析流程程 53
2. 景区区综合流量量统计分析析 54
3. 景区区游客来源源地构成分分析 55
4. 景区区全网总游游客实时估估算 57
5. 景区区流量预判判模型分析析 58
6. 景区区流量上限限告警 59
7. 旅游游景点热度度排名分析析 59
8. 旅游游线路归类类统计 60
9. 景区区与相关场场所关联分分析 61
9/57
. 界面功能能介绍 61
1. 菜单单功能列表表 62
2. 界面面辅助功能能介绍 63
3. 运营营部门应用用Porttal 64
4. 用户户权限 64
10/57
大数据概述述
概述
大数据,IIT行业的的又一次技技术变革,大大数据的浪浪潮汹涌而而至,对国国家治理、企企业决策和和个人生活活都在产生生深远的影影响,并将将成为云计计算、物联联网之后信信息技术产产业领域又又一重大创创新变革。未未来的十年年将是一个个“大数据”引领的智智慧科技的的时代、随随着社交网网络的逐渐渐成熟,移移动带宽迅迅速提升、云云计算、物物联网应用用更加丰富富、更多的的传感设备备、移动终终端接入到到网络,由由此而产生生的数据及及增长速度度将比历史史上的任何何时期都要要多、都要要快。
数据技术发发展历史如如图一所示示:
图一
大数据定义义
“大数据”是一个涵涵盖多种技技术的概念念,简单地地说,是指指无法在一一定时间内内用常规软软件工具对对其内容进进行抓取、管管理和处理理的数据集集合。IBBM将“大数据”理念定义义为4个VV,即大量量化(Voolumee)、多样样化(Vaarietty)、快快速化(VVeloccity))及由此产产生的价值值(Vallue)。如如图二;