面向数据共享的模型训练服务系统

作     者：魏宏原 华蓓 林飞 Wei Hongyuan;Hua Bei;Lin Fei

作者机构：中国科学技术大学计算机科学与技术学院安徽合肥230027 中国科学院无线光电通信重点实验室安徽合肥230027 

基　　金：科技创新2030-“新一代人工智能”重大项目(2018AAA-0101200) 

出 版 物：《网络安全与数据治理》 (CYBER SECURITY AND DATA GOVERNANCE)

年 卷 期：2022年第41卷第8期

页      码：20-29页

摘      要：数据驱动的人工智能应用需要大数据支持,然而现实中因隐私保护等原因,数据往往互不流通,而以孤岛形式存在。如何实现数据安全可用是当前亟待解决的问题。设计和实现了面向数据共享的模型训练服务系统,通过向用户提供数据功能服务接口而非数据本身,实现数据可用不可见。重点针对资源受限的数据共享平台,设计了高效的资源分配和作业调度方法,特别是通过自动资源缩放来应对多变的工作负载,达到优化用户体验和提高资源利用的目的。实验表明,相较于常规的作业调度方法,本系统在各种工作负载下都具有响应服务请求快、作业完成时间短的优点。

主 题 词：数据共享 模型训练服务 作业调度 资源分配 

学科分类：0711[理学-心理学类] 07[理学] 08[工学] 081101[081101] 0811[工学-水利类] 071102[071102] 081103[081103] 

D　O　I：10.20044/j.csdg.2097-1788.2022.02.004

馆 藏 号：203114399...