文献检索-宁波市创意产业特色资源库

限定检索结果

基于文本频率页面分割算法对论坛正文提取: 收藏
分享
引用; 《中国水运（下半月）》2018年第2期18卷 78-79页; 作者：马凯凯钱亚赫阮东跃浙江海洋大学数理与信息学院浙江舟山316022; 如何在网页数据中避开干扰的图标、广告、链接等"噪音"元素来提取正文是互联网数据处理的重点问题之一。网页的URL由网络协议、主机名、页面文件相对路径等多个部分组成,对于有多个页面的帖子,其URL十分相似。根据这一特性,...; 如何在网页数据中避开干扰的图标、广告、链接等"噪音"元素来提取正文是互联网数据处理的重点问题之一。网页的URL由网络协议、主机名、页面文件相对路径等多个部分组成,对于有多个页面的帖子,其URL十分相似。根据这一特性,通过分析页面内的链接文本及结构特征,找出帖子所分布在的所有网址。再利用页面文本的频率特征,去除HTML标签后按空格对文本进行分词,根据其频率分布计算网页的分割标志,得到回帖所在的文本块。再用正则表达式提取时间信息,进一步去噪后即可得到主贴及回帖信息。; 来源：详细信息评论

限定检索结果