数据中台架构的主数据平台及关键技术设计

作     者：郝晓伟 武汉伟 高旭瑞 刘秀 HAO Xiaowei;WU Hanwei;GAO Xurui;LIU Xiu

作者机构：国网山西省电力公司信息通信分公司山西太原030021 

出 版 物：《微型电脑应用》 (Microcomputer Applications)

年 卷 期：2022年第38卷第11期

页      码：186-189页

摘      要：针对传统数据平台存储容量不高、数据处理能力较差的问题,对业务数据进行层级分割和水平解耦,构建数据中台架构的主数据平台,实现跨域数据整合和数据积累。通过服务的形式构造数据接口,进行数据业务的开发,对业务前后端应用需求灵活应对。数据模块通过Instagram进行数据采集,数据注册模块使用Nginx+Gunicorn+Flask架构部署在AWS EC2服务器节点,多进程数据管理模式,快速处理多线程并发数据。实验结果表明,数据平台业务流程完整,数据传输没有误差,数据处理能力较强,运算效率较高。

主 题 词：中台架构 水平解耦 数据整合 采集模块 并行算法 

学科分类：08[工学] 081201[081201] 0812[工学-测绘类] 

D　O　I：10.3969/j.issn.1007-757X.2022.11.051

馆 藏 号：203115541...