本文主要介绍山西移动实时数仓平台搭建、实施,包括方案选型、方案实现以及应用场景。对比目前主流的数据湖和MPP仓库,根据山西移动当前已有的生态环境,选择满足山西移动业务发的实时数仓方案。主要包括:实时数仓采集系统、存量数据Hudi格式化解析、增量数据Hudi格式化解析、MPP数据库数据加工。最后介绍目前实时数仓在山西移动的应用场景。在企业信息化的过程中,随着信息化工具的升级和新工具的应用,数据量变的越来越大,数据格式越来越多,数据驱动决策的需求越来越迫切。随着5G时代的到来,

相似文献

1 邢建 图书馆的无线网络架构分析 数字通信世界 2017年11期

2 于金良 朱志祥 李聪颖 Hadoop MapReduce新旧架构的对比研究综述 计算机与数字工程 2017年01期

3 陈仁太 云计算架构及其关键技术 电子技术与软件工程 2017年01期

4 吕登龙 朱诗兵 大数据及其体系架构与关键技术综述 装备学院学报 2017年01期

5 胡大川 徐彬凌 钱诚 电子政务系统数据库的架构与设计 信息与电脑(理论版) 2016年16期

6 李赛寒 一种面向大数据的图书馆系统架构研究 软件产业与工程 2016年06期

7 王雷 王智广 改进的三层架构的研究与应用 计算机工程与设计 2017年07期

8 崔涛 创新优化基础架构 保障生产运行安全 金融电子化 2017年02期

9 邓瑜 后院之二 书城 2017年09期

10 曾劭清 刘轶 季新苏 田宇 中国云基础架构即服务市场分析 智能制造 2017年06期

11 奇辉工贸有限公司组织架构优化研究 兰州大学 2013年

12 S公司IT架构变革研究 上海交通大学 2017年

13 中国大型商业银行组织架构再造研究 北京交通大学 2012年

14 基于活动目录的电力企业信息基础架构的设计与实现 2008电力行业信息化年会会议论文集 2008年

15 构筑电力企业面向服务存储基础架构 2008电力行业信息化年会会议论文集 2008年