摘要：针对微博平台大数据的采集、挖掘、分析等热点问题,深入介绍并分析了采集平台的相关理论技术,通过对采集平台功能结构及后台数据库设计、页面爬取和解析、反爬虫的应用技术设计、分布式策略设计等四个方面的技术研究,设计并实现了一种基于分布式的微博数据采集平台;给出了主从模式系统架构;达到了用户只需根据需要输入待爬取微博页面的ID,并选择要采集的数据类型,即可获得所需数据的目的。经测试,系统搭建成本低,爬取性能高,可运用于微博数据的舆情分析和数据调研等研究方面的基础数据采集。

摘要：本文描述了一个基于LSTM的Seq2Seq端到端训练问答系统的设计与实现,比较了引入注意力(Attention)机制和没有引入注意力机制的模型的效果。在预测阶段,使用束搜索(beam search)算法使模型预测结果更加合理和多样。