共 2 条
基于Mesos和Docker构建大数据平台技术研究与应用
被引:10
作者:
李丽新
机构:
[1] 吉林建筑大学电气与计算机学院
来源:
关键词:
大数据;
分布式资源管理;
容器隔离;
D O I:
暂无
中图分类号:
TP311.13 [];
学科分类号:
1201 ;
摘要:
本文针对目前在集群中各种框架分别独立运行、框架间静态划分资源、集群中资源利用率低、吞吐量低等问题进行了研究,提出以Mesos分布式资源管理技术和Docker容器隔离技术,构建一个将不同的大数据框架整合在一起的基本大数据分析处理平台,允许不同的大数据分析框架之间在同一个集群内共享资源分配,跨框架管理集群资源,提高了集群内资源使用率和吞吐量,增加了大数据分析平台的灵活性和扩展性,降低了大数据平台的复杂性.
引用
收藏
页码:81 / 84
页数:4
相关论文