非关系型分布式大数据多分辨率采集系统设计

作     者：张丹丹 吕颍颍 黄鑫 ZHANG Dandan;LV Yingying;HUANG Xing

作者机构：河南应用技术职业学院郑州450042 银川科技学院银川750021 

基　　金：河南省科技攻关计划项目(212102210430) 河南应用技术职业学院青年骨干教师资助项目(2020-GGJS-X002) 河南应用技术职业学院首席技师资助项目(2022-SXJS-XX03) 河南应用技术职业学院青年骨干教师资助项目(2022-GGJS-X001) 

出 版 物：《自动化与仪器仪表》 (Automation & Instrumentation)

年 卷 期：2023年第10期

页      码：139-143页

摘      要：为了满足用户的数据采集与应用需求,提出非关系型分布式大数据多分辨率采集系统设计。搭建分布式大数据多分辨率采集架构,引入Boosting算法将同一空间分辨率数据划分为同一类别,完成大数据的聚类处理;测量数据传输延时与时钟偏移量,同步配置分布式时钟;以大数据聚类结果为基础,以分布式时钟同步配置为依据,以用户需求数据分辨率范围为限制,在大数据聚类集合中提取相关数据,选取适当的存储节点保存提取数据,从而实现分布式大数据的多分辨率采集。实验结果表明:应用设计系统获得的数据采集速率最大值为140 MB/s,数据采集质量因子最大值为9.4,证实设计系统应用性能更佳。

主 题 词：分布式大数据 多分辨率 非关系型数据 大数据聚类 复杂属性环境 大数据采集 

学科分类：08[工学] 0812[工学-测绘类] 

D　O　I：10.14016/j.cnki.1001-9227.2023.10.139

馆 藏 号：203124248...