阿里云ecs部署hdfs javaApi操作hdfs系统的问题

Question

我怀疑是阿里云安全组和防火墙的问题。关闭了防火墙，设置了tcp协议的8020端口，本地idea测试阿里云时，还是一直转圈不报错。

coresit 配置

fs.defaultFS
hdfs://127.0.0.1:8020

阿里云ip+端口 HDFS_URL = “hdfs://39.105.xx.xx:8020”;

Answer 1

Michael_PK 2019-01-10 22:04:30

阿里云的端口都有限制，你需要把一些端口打开才能外部访问

• 提问者 码_致远 #1

  老师工作中的hadoop集群都是 在自建的机房机器上运行的吧？

• 提问者 码_致远 #2

  管理几百台机器，是不是要用Docker+Kubernetes(k8s)之类的技术？

• Michael_PK 回复 提问者 码_致远 #3

  用cm或者ambari就行了，要么就是公司自定义的安装太监方式。前面两者足够用了

点开查看后面2条评论