10.3969/j.issn.1007-757X.2022.11.051
数据中台架构的主数据平台及关键技术设计
针对传统数据平台存储容量不高、数据处理能力较差的问题,对业务数据进行层级分割和水平解耦,构建数据中台架构的主数据平台,实现跨域数据整合和数据积累.通过服务的形式构造数据接口,进行数据业务的开发,对业务前后端应用需求灵活应对.数据模块通过Instagram进行数据采集,数据注册模块使用Nginx+Gunicorn+Flask架构部署在AWS EC2服务器节点,多进程数据管理模式,快速处理多线程并发数据.实验结果表明,数据平台业务流程完整,数据传输没有误差,数据处理能力较强,运算效率较高.
中台架构、水平解耦、数据整合、采集模块、并行算法
38
TP37(计算技术、计算机技术)
2023-01-12(万方平台首次上网日期,不代表论文的发表时间)
共4页
186-189