是什么之间的区别WebHDFS REST API和HttpFS?
如果我理解正确:
HttpFS是一个独立的服务,它在HDFS之上公开REST API
WebHDFS是内置于HDFS的REST API.它不需要任何进一步的安装
我对么?
什么时候建议使用一个而不是另一个?
我已经阅读了与您的问题相关的文章.以下是链接.
https://www.linkedin.com/today/post/article/20140717115238-176301000-accessing-hdfs-using-the-webhdfs-rest-api-vs-httpfs
WebHDFS与HttpFs WebHDFS和HttpF之间的主要区别:WebHDFS需要访问集群的所有节点,当读取一些数据时,它直接从该节点传输,而在HttpF中,单个节点的行为类似于"网关",并且是客户端节点的单点数据传输.因此,在大型文件传输过程中,HttpF可能会被阻塞,但好处是我们正在最小化访问HDFS所需的占用空间.