hadoop

hadoop短路本地读

标签（空格分隔）： 未分类

简介

在HDFS中，读取文件都要经过DN。因此，当客户端请求DN去读取文件，DN就会从磁盘读取文件并通过TCP发送到客户端。所谓的短路读取就是绕过DN，允许客户端直接读取文件。显然，这种短路本地读文件是在客户端和data在同一节点上。Hadoop短路本地读方式在许多应用方面有显著的性能提升。