一种分布式并行参数优化算法设计及其应用

发布时间：2017-07-19 14:06

  本文关键词：一种分布式并行参数优化算法设计及其应用

  更多相关文章： 参数优化算法 分布式平台 Spark算法

【摘要】：并行参数优化算法在科学计算中有广泛应用。随着Spark等分布式平台的快速发展,越来越多并行参数优化算法开始采用分布式平台进行实现。如何在Spark等平台上设计优化算法,避免其运行效率受到框架固定时间开销和网络I/O影响,已经成为亟需解决的问题。本文设计一种分布式与单机多核并行结合的参数优化算法,将其划分为调度部分和独立子问题部分,单机多核并行算法处理子问题,分布式平台负责子问题的跨节点并行。碳通量模型参数优化的实验结果表明,改进的算法能有效节省时间开销,更快地搜索参数空间。
【作者单位】： 中国科学院大学;中国科学院计算机网络信息中心;中国科学院新疆生态与地理研究所;中国科学院地理科学与资源所;
【关键词】： 参数优化算法 分布式平台 Spark算法
【基金】：中国科学院重点部署项目“新疆山区径流水资源预测模型研制”
【分类号】：TP18
【正文快照】： 3.中国科学院新疆生态与地理研究所,新疆乌鲁木齐8300114.中国科学院地理科学与资源所,北京100101参数优化算法开始采用分布式平台进行实现。如何在Spark等平台上设计优化算法,避免其运行效率受到框架固定时间开销和网络I/O影响,已经成为亟需解决的问题。本文设计一种分布式与，

本文编号：563235