一种利用大数据分析优化的分布式并行算法

随着以云计算为代表的新型计算模式的兴起,合理高效的分布式并行算法成为有效利用分布式环境下的处理机、提高分布式系统性能的一个重要方法。论文提出了一种利用大数据分析进行优化的分布式并行算法。该算法利用大数据分析将用户任务分类,同一类任务被分派到同一类服务器上;然后再动态调整用户任务,以尽可能地减少服务器处理机空闲时间和系统总能耗。借助模型检测的方式验证了该算法的正确性与有效性。