基于MapReduce的BP神经网络算法研究

被引：13

作者：

朱晨杰 ^{[1
]}

杨永丽 ^{[2
]}

机构：

[1] 上海交通大学软件学院

[2] 部队

来源：

微型电脑应用 | 2012年 / 28卷 / 10期

关键词：

BP神经网络; MapReduce; 遗传算法;

D O I：

暂无

中图分类号：

TP183 [人工神经网络与计算];

学科分类号：

081104 ; 0812 ; 0835 ; 1405 ;

摘要：

随着信息化社会的飞速发展,需要进行数据挖掘的数据量急剧增大,传统的串行化BP神经网络训练方法在处理海量数据集时存在很大问题,如耗时过长,甚至内存不足无法训练。为了解决这个问题,提出了一种在云计算环境下,基于MapReduce的BP神经网络训练方法 MR-GAIBP,实验证明,提出的方法,相比于已有的方法拥有更快的收敛速度和更高的精度,在大数据集上有更快的训练速度。

引用

页码：9 / 12+19 +19

页数：5

共 9 条

[1]

Multiplayer feedforward networks are universal approximators. Hornik K M, Stinchcombe M, White H. Neural Networks . 1989

[2]

Map-Reduce for Machine Learning on Multicore. Cheng-Tao Chu,Sang Kyun Kim,Yi-An Lin,YuanYuan Yu,Gary Bradski,Andrew Y. Ng,Kunle Olukotun. Neural Information Processing Systems conference . 2006

[3]

The Google file system. S.Ghemawat,H.Gobioff,S.Leung. Proceedings of the nineteenth ACM symposium on Operating systems principles . 2003

[4]

MapReduce: Simplified data processing on large clusters. Dean, J,Ghemawat, S. Proceedings of the Sixth Symposium on Operating System Design and Implementation . 2004

[5]

HDFS. http://hadoop.apache.org/common/docs/current/hdfs_design.html .

[6]

UCI Dataset. http://archive.ics.uci.edu/ml/datasets.html .

[7]

Map Reduce-basedBackpropagation Neural Network over Large Scale MobileData. Liu Zhiqiang,Li Hongyan,Miao Gaoshan. Proc.of the 6th International Conference on NaturalComputation . 2010

[8]

MapReduce. http://hadoop.apache.org/common/docs/[OL]current/mapred_tutorial.html .

[9]

Hadoop. http://hadoop.apache.org .

← 1 →