基于Scrapy的开源核情报采集系统构建

作     者：黄禹 兰洋 张玥 胡家全 黄粲 

作者机构：中国核动力研究设计院四川成都610000 

出 版 物：《科技视界》 (Science & Technology Vision)

年 卷 期：2022年第17期

页      码：1-7页

摘      要：随着大数据时代的到来,互联网集聚了海量的数据,但如何缓解“信息过载”,从互联中获取到专业领域的开源情报却成了问题。为了准确高效地采集开源核情报,文章提出了基于主题的开源核情报采集系统,确定了该系统的功能需求,设计了该系统的基本结构框架,并就该系统各模块进行了详细设计与实现。在对该系统进行部署测试后,所定制开发的采集程序能够顺利采集到的目标站点的开源情报,从而表明该系统的有效性。

主 题 词：数据采集 开源情报 Scrapy 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

D　O　I：10.19694/j.cnki.issn2095-2457.2022.17.01

馆 藏 号：203113766...