基于行列混合存储的大数据存储方法研究与实现.pdf

年第 期 通信 管理 与技 术 ．，
总第 期 【一 ．．
基 于行 列 混 合存 储 的大 数 据存 储 方 法
研 究 与 实 现
安 洋，赵 洪松
．东北林业大学 ，哈 尔滨 ；．中国移动通信 集团黑龙江有限 公司 ，哈尔滨
摘 要 ：主要研 究 了基 于行 列的混 合数 据 处理方 法 ，通 过行 列混合 存储 布局 提供 一 种 混合 搭 配 的
物理 存储 格 式 ，不仅 可实现 实体 的行 式存 储 或 列 式存 储 ，同 时在 一 个 实体 内部 ，可针 对 不 同字段
的稀 疏 、稠 密等数据 特征 ，选择 适合 的行 存储 或 列存储 格 式 ，从 而 实现 动 态的数 据存 储 ，为 大数 据
处理提 供 一种 动 态的数 据存储 方法 。
关键 词 ：数 据 仓库 ；数据 存储 ；云计 算 ；稀疏数 据
中图分 类号 ：． 文献标 识 码 ： 文章编 号 ：— — —
随着互 联网 、物联 网以及 产 业 的高速发展 ，相关业 分析系统实体的数据量巨大 、属性列众 多 ，且属性列之 间特点
务数据 呈 现出爆发 式增长 的态势 。据 报告 ，未来 年 各异 ，有 的列数据稠密 、重要性高 ，适合行存储 ，有的