一种基于Storm编程模型的迭代Topology方案

被引：5

作者：

杜政颉 ^{[1
]}

王鹏 ^{[1
]}

黄焱 ^{[2
,3
]}

郎福通 ^{[1
]}

机构：

[1] 成都信息工程学院软件工程学院并行计算实验室

[2] 中国科学院成都计算机应用研究所

[3] 中国科学院大学

来源：

成都信息工程学院学报 | 2014年 / 29卷 / 01期

关键词：

大数据; Storm; 迭代; 拓扑;

D O I：

10.16836/j.cnki.jcuit.2014.01.008

中图分类号：

TP311.11 [];

学科分类号：

081202 ; 0835 ;

摘要：

为解决Storm编程模型无法处理具有迭代结构的应用程序的问题,从迭代结构程序的特点出发,在Storm编程模型的基础上通过增加Receiver、IBolt、Checker组件组建迭代Topology,设计了一种可以处理迭代结构的编程模型,分析了这种模型实现原理,对这种模型的新增组件和其对应的应用程序接口进行介绍和分析,同时,在Storm系统架构基础上设计了一种迭代Topology的实现方案,描述了这种实现方式下解决具有迭代结构程序的具体过程,最后使用这种模型模拟实现K-Means算法,实例论证这种迭代模型的可行性。

引用

页码：47 / 51

页数：5

共 6 条

[1] 大数据管理:概念、技术与挑战 [J].