摘要：概述了多源可靠性数据的融合方法,说明了加权法应用于可靠性数据融合的必要性。将层次分析法应用于确定加权融合法中各个数据源的权重,并初步确定了影响可靠性数据源融合权重的因素。引入了合适的不一致性矩阵处理方法,避免了反复打分的繁琐。最后,给出了应用实例。

摘要：SDC(Streamsets Data Collector)是一款可拖拽式的大数据ETL工具,可以不用写代码就能实现大量数据的处理,但要实现任务定时管理和多数据源等复杂功能则需要利用其公司的非开源产品。文章介绍利用SDC内部接口,设计开发定时组件以及结合其自带组件,实现管道(PipeLine)的定时任务调度和多数据源应用。实验结果表明,拓展的框架组件可以实现伪实时及复杂的定时任务,并结合内部组件完成本机及远程多数据源整合应用,能解决用户对具体定时场景的应用问题。

摘要：在网络健康资讯研究中,数据获取是首先要解决的问题,但传统抓取工具无法满足多变的数据源,研究高效爬取健康资讯内容新方法迫在眉睫。基于Python的网络健康资讯抓取方案,整合多个数据源,抓取内容更为全面;利用WebDriver和Python的Selenium库,能够较好地应对复杂网络状况,通过多线程技术极大提高爬虫效率。对抓取的癌症数据进行统计分析,对多线程效率进行对比分析,显示爬虫具有良好的适应性。基于Py?thon的网络健康咨询抓取方案能快速抓取网络资讯,为后续科研打下基础。

摘要：Guzz是一套用来进行快速开发和高性能网站设计的框架，通过ORM、多数据源数据管理以及通用数据处理，为系统在数据层的设计上提供一站式解决方案。用于替代或者补充Hibernate或iBatis，并提供更多的大型系统架构设计支持。Guzz的目标是使得大型网站设计更加简单，团队分工更加明确，框架在使用时更少出问题。