impala可以获取hdfs目录下的数据吗
答案:2 悬赏:0 手机版
解决时间 2021-02-08 04:24
- 提问者网友：皆是孤独
- 2021-02-07 09:42
impala可以获取hdfs目录下的数据吗
最佳答案
- 五星知识达人网友：封刀令
- 2021-02-07 09:51
如果和数据block不在同一个host上，那么就是使用HDFSDataTransaferProtocol(不是正式的命名，意会即可)来读，也就是一个二进制协议走TCP链接。
如果是在同一个host上，那么是利用了HDFS中"short-circuit local reads"技术。简单来说，从DataNode那边获取到所需数据的Meta信息，然后直接通过系统调用open/read来读取。
如果是在同一个host上，那么是利用了HDFS中"short-circuit local reads"技术。简单来说，从DataNode那边获取到所需数据的Meta信息，然后直接通过系统调用open/read来读取。
全部回答
- 1楼网友：鱼忧
- 2021-02-07 10:02
或许可以。
我要举报
如以上问答信息为低俗、色情、不良、暴力、侵权、涉及违法等信息，可以点下面链接进行举报！
大家都在看
推荐资讯