Hadoop集群环境下的网络架构的设计与优化

编号 zgly0000904259

文献类型 期刊论文

文献题名 Hadoop集群环境下的网络架构的设计与优化

作者 冯力  杨凯  杨帆 

作者单位 思科公司金融服务事业部 

母体文献 中国金融电脑 

年卷期 2014(2)

页码 88

年份 2014 

关键词 Hadoop  集群环境  网络特性  业务逻辑  分析算法  节点性能  优化经验  基础设置  思科公司  单点失效 

文摘内容 大数据时代,研究大数据的IT厂商把研究重心放在优化大数据系统软件架构、优化业务逻辑、优化数据分析算法、优化节点性能等方向,而忽略了大数据环境基础设置中网络环节的评估和优化。本文介绍了思科公司在Hadoop集群环境下的网络架构设计与优化经验。大数据Hadoop环境网络特性Hadoop集群中的各节点通过网络连接起来,而且MapReduce中的以下过程会在网络中传输数据。