hadoop - 您可以使用代理通过Kite SDK连接到HDFS吗？

Question

我试图创建一个概念证明Hadoop实例，并选择使用KiteSDK与之交互(以及构造我的数据)。当我在本地机器上设置Hadoop实例时，一切正常，并且我的代码连接没有问题。但是，当我在AWS服务器上设置Hadoop时，我不再能够连接到它。我认为这是由于我的网络的安全设置，并且我怀疑需要使用代理进行连接。这可能吗？如果是这样，您可以举一个例子吗？ Kite CLI具有可以传递的proxy-user参数，但是当我查看SDK的代码时，似乎没有发现设置那个参数的值可以满足我的需要。

Answer 1

我从来没有想过Kite SDK的代理设置，但是通过找到一个不在防火墙后面的端口并重新配置Hadoop以使节点名驻留在该端口上，我能够解决此问题。