摘要：针对当前PDM系统在航空发动机制造业应用时无法高效处理海量数据存储吞吐的问题。文中提出了一种面向PDM系统的新型nosql分布式数据存储方案。该方案采用nosql数据库搭配Ceph分布式文件处理模块作为存储结构,并设计了基于Spark的MapSearch分步查询处理方法对数据进行读取和重构。实验测试结果验证了所提方案的可靠性,且与同类研究结果的数据相比,该存储方案进行数据写存和读取的时间分别减少了约20%及41.6%,传输速度提升了约70%,数据重构完整性的均值则为92%,为先进制造业的PDM系统存储结构设计提供了一种新思路。

摘要：针对海量空间数据量PB级数据存储的问题,分析No SQL数据库中分布式文件存储数据库在海量数据的存储和访问上的优势,分析基于分布式文件存储的数据库MongoDB的存储格式,研究矢量空间数据文档存储模型。针对矢量空间数据的点、线、多边形等几何形态,设计基于文档存储的矢量空间数据存储模型,实现了矢量空间数据在文档存储数据库MongoDB中的存储。针对矢量空间数据在文件存储数据库中的应用效率问题,提出未来工作将围绕文件存储数据库中矢量空间数据拓扑查询及查询效率展开。

摘要：针对目前大部分工矿企业都在数字化转型,数字化后的安全生产监控数据具有实时性强,数据体量庞大等特点,部分系统的数据量如钢丝绳探伤系统每秒钟高达几十万条,常用的SQL数据库已经无法胜任如此庞大的数据存储、分析任务。研究通过nosql数据库、负载均衡、多线程、SOCKET等技术体系,构建基于nosql的具备高并发、高密度数据处理能力的高密度数据采集系统;实现工矿企业安全生产相关数据的高密度接入,满足高密度数据采样周期的硬性需求。

摘要：面向大规模机械装备监测数据管理中遇到的海量数据存储、快速读写响应、大规模数据分析等难题,提出使用基于nosql(Not only SQL)的LaUD-MS系统进行监测数据管理的存储架构。设计一种多列族自由表模型,并通过理论和实验对其读写性能进行分析对比,证明了本存储方案能够解决海量监测数据的存储难题,并满足面向维护、维修和大修服务的查询需求。

摘要：为了解决农田物联网大量图像、视频和传感器等结构化和非结构化数据实时处理与写入问题,该文基于分布式存储与nosql(NotOnlySQL)技术,结合农田物联网数据特征,利用HDFS(HadoopDistributedFileSystem)和HBase(Hadoop Database)存储非结构化和结构化数据,基于Redis缓存服务,设计了三层物联网数据云存储框架,实现了海量农田物联网数据存储中的业务处理、事务处理、图片打包与索引、负载均衡等关键技术。面对复杂业务下的事务数据一致性,该文采用基于HLock的乐观锁机制,实现了HBase对强事务性的支持,经过与传统MySQL集群事务对比测试,当数据量级在500万时,数据读取效率提升达35.75%。为了提高农田物联网中大量的小图片和小文件处理效率,基于图片打包合并策略,利用SequenceFile技术实现物联图片的快速索引读写技术,与原生HDFS存储效率相比,读写效率提升30%以上。该研究可以为海量农业物联网数据的存储和管理提供技术参考和理论支撑。

摘要：在机械产品方案设计中涉及大量半结构化或者非结构化知识,现有的知识表示方式无法支撑设计知识的有效共享与重用,知识存储模式无法适应设计知识的复杂性特征。本文运用基于本体和nosql方法对机械产品方案设计知识和设计案例进行知识表示与存储,提出了基于FBS模型的机械产品方案设计本体构建方法,以及基于本体和nosql的机械产品方案设计存储模型。在此基础之上,以某机械产品为例,完成了本体构建和设计知识存储系统的构建,并与传统的关系型数据库的知识存储与查询系统进行了对比分析,实现了产品方案设计知识的语义化表示以及合理高效的存储,有效地支撑设计知识的共享与重用。

摘要：针对海量Word内容数据的审查,设计了一种基于nosql的Word内容快速索引方法。该方法采用nosql数据库中典型的MongoDB数据库和Elasticsearch搜索引擎,批处理大量需要审查的物资计划文档,通过建立索引实现快速审查大量存储与关键词检索的目标,并返回包含关键词的待审查文本标题和段落。测试结果表明,该方法可以验证审查100篇文章的50万字符,用时仅需80 ms。

摘要：随着互联网时代的到来,IT行业迅猛发展,nosql数据库以其在大数据环境下出色的业务处理处理能力,在IT行业内得到越来越广泛的应用。而各nosql数据库由于自身数据模型的不同,在数据组织方式上彼此存在差异。nosql数据库间进行数据交换时,数据模型的不同会导致数据库间数据传输的阻抗,以源数据库数据模型封装的业务数据可能无法直接被目标数据库解析,需进行额外的模型适配操作,参照目标数据库数据模型组织业务数据以供筛选存储。为此,拟定义一种数据描述模型,对nosql数据库数据模型特征建模,描述nosql数据库的数据组织方式,并定义nosql数据库数据模型间距离评估算法。根据数据描述模型与距离评估算法可设计实现一种通用数据模型,其在数据交换过程中可与相关nosql数据库进行数据模型上的转换,系统相关业务代码只需参照该数据模型设计,而独立于数据交换过程中nosql数据库具体的数据模型。

摘要：针对移动客户端大量用户数据增量储存同步刷新延迟较大和用户界面(User Interface,UI)依赖网络数据渲染无法快速交互的开发痛点,制定了基于nosql数据库的移动客户端响应式编程模型的解决方案,并给出了该模型的统一建模语言(Unified Modeling Language,UML)实践。应用该模型时,表示层先请求数据,优先返回数据仓库的缓存,触发数据更新策略,然后异步获取服务端最新数据并写入数据仓库,再采用Redux方式更新管理数据版本,最后通过响应链路向表示层发射增量数据。在表示层设计中,订阅数据与UI生命周期绑定。表示层只有处于可见可操作状态时,才会异步增量刷新UI视图。当销毁UI时,表示层自动取消数据订阅。

摘要：近年来,大型空间信息系统用户交互数据、业务监测数据、遥感影像数据等不断增长。高效的海量空间数据存储管理、迅速准确的检索、简便可靠快速的扩展已成为地学信息科学和水利业务应用领域日益关注的热点问题。本文结合nosql和全文检索技术,在江西省水利数据共享平台建设实践中基于MongoDB和Lucene开源软件库设计实现了OGC Web地图服务瓦片数据的存储管理、海量空间矢量数据和元数据的全文检索。平台建设完成后大幅提升了数据库管理和检索的效率,达到了100万条记录模糊检索毫秒级响应的目标,较好地实现了海量水利数据的管理,具有良好联通性和互动性、地理数据丰富的空间分析能力,期望能以此为基础带动江西省水利信息的交流融合,促进江西省水利现代化建设。