微软azure云端大数据解决方案概览.pdf

微软Azure云端大数据解决方案概览张强,首席技术顾问
微软(中国)有限公司议题大数据生态现状微软云端大数据概览成功案例问答什么是大数据?社交数据(微博/微信)大数据音频/视频Petabyte维基/博客传感器/RFID/设备日志文件点击流空间&GPS协调移动WEB/CRM搜索营销应付款(企业内部数据)联系人Web日志天气薪酬订单追踪Megabyte推荐文字/图像盘存销售管道数据复杂度:多样化与高速度大数据建设特点非结构化数据的超大规模和增长大数据对对数据质量的要求不像传总数据量的80~90%统要求那么高体量Volume比结构化数据增长快10倍到50倍数据的要求是尽量要多样化,要海是传统数据仓库的10倍到50倍量,大数据的异构和多样性大数据建设是一个持续不断优化的多样性很多不同形式(文本、图像、视频、机器数据)过程,而不只是一个结果,通过不Variety无模式或者模式不明显断的大数据分析与验证,训练一个不连贯的语法或句义适合企业自身特点的业务模型实时分析而非批量式分析大数据更多的是对未来的预测性分速度Velocity数据输入、处理与丢弃立竿见影而非事后见效析,而非对过去数据的总结性分析大数据战略价值数据成为继物质、能源之后的第三大战略资源。大数据提供了认识复杂系统的新思维、新手段全体数据挖掘近似求解数据量速度多样性价值关联关系随机样本精确求解大数据思维因果关系传统思维数据规模指数级增长,大约年翻一倍,年,年,年预计,!"是过去年内产生大数据生态发展现状大数据生态发展现状基础架构应用分析跨基础架构开源数据源大数据的几个方向实时商务智能内存数据库#$%&'(、)*ezza大数据#'+,&&)%%&*&HTeradata…中国大数据现状全球的大数据应用处于发展初期,中国大数据应用刚刚起步互联网是大数据应用的领跑者大数据应用加速向传统领域拓展金融医疗大数据应用初级发展阶段特征,各个开发商处于P瞎子摸象Q的尝试阶段缺少典型性、共性强的大数据应用;关键技术和分析方法主要依赖国外技术和产品在P创新O开源O产品Q的大数据技术链条上贡献度低中国互联网企业的技术优势难以顺畅地扩散到各行业,行业整合度低议题大数据生态现状微软云端大数据成功案例问答