专利名称:基于预测的数据分布式协同处理方法专利类型:发明专利
发明人:王锐,罗光春,田玲,张栗粽,王晓雪申请号:CN201811236441.6申请日:20181023公开号:CN109358959A公开日:20190219
摘要:本发明属于任务调度技术领域,本发明的基于预测的数据分布式协同处理方法首先对数据进行预处理,包括清理和定义数据向量。然后采用级联的LSTM分步预测,通过训练不断调整网络参数,获取数据预测函数。最后根据训练获得的预测函数,来预测即将到来的任务所需的数据。若所预测的数据已经存在于资源节点上面,那么将数据本地化;否则将数据处理完提前发送到资源节点上。在对任务进行资源调度时,首先将任务分发到拥有所需数据的资源节点上,若过任务执行时间上限还未被执行,则将其重新分发到负载较低的节点上,并从拥有任务所需数据的资源节点上获取所需数据。本发明省去了现有任务在总任务时间中的数据处理时间和数据传输时间,从而有效提高系统效率。
申请人:电子科技大学
地址:611731 四川省成都市高新区(西区)西源大道2006号
国籍:CN
代理机构:电子科技大学专利中心
代理人:周刘英
更多信息请下载全文后查看
因篇幅问题不能全部显示,请点此查看更多更全内容