电力企业互联网舆情数据规格化存储系统设计

作     者：韩维 孙林檀 吕静贤 陈龙 彭渤 潘宝玉 HAN Wei;SUN Lin-tan;LV Jing-xian;CHEN Long;PENG Bo;PAN Bao-yu

作者机构：国家电网有限公司客户服务中心天津300000 天津市普迅电力信息技术有限公司天津300000 

出 版 物：《信息技术》 (Information Technology)

年 卷 期：2023年第47卷第8期

页      码：160-164页

摘      要：为避免舆情焦点损伤电力企业形象,设计了电力企业互联网舆情数据规格化存储系统,实时采集、处理并存储公共舆情数据。利用基于TF-IDF改进算法的聚焦网络爬虫爬取原始数据层的舆情数据,构建正则表达式描述语义模型;应用基于负载权重的负载均衡算法的存储负载均衡机制,根据负载差值计算存储节点执行任务的概率,更新存储节点的负载,实现各存储节点负载均衡。实验结果表明:读取时间均值为72.9ms,写入时间均值为425.3ms,数据读写效率高,各存储节点负载均衡,对大规模数据的处理及存储性能更佳。

主 题 词：电力企业 规格化存储 网络爬虫 负载均衡 

学科分类：080902[080902] 0809[工学-计算机类] 08[工学] 

D　O　I：10.13274/j.cnki.hdzj.2023.08.028

馆 藏 号：203123699...