老师好~! IDEA 阿里云 HDFS 连接不上

来源:3-17 HDFS API编程之第一个应用程序的开发

qq_空之若蓝_0

2020-12-09


老师,我网上查了许多方法,然后也在本课程问答区里看了,感觉这个IDEA里连接阿里云ECS的HDFS就是挺头痛的。我照着你给别的同学说的方式试了,还是不行。买都买阿里云的服务器了,还是想搏一搏用阿里云。请问还有什么解决办法吗?


http://img.mukewang.com/szimg/5fd0e72e09f80bee19201030.jpg

http://img1.sycdn.imooc.com/szimg/5fd0e731098343ae19201030.jpg


http://img.mukewang.com/szimg/5fd0eba4091e435b09840774.jpg

http://img.mukewang.com/szimg/5fd0e72e092e70b109840774.jpg

http://img.mukewang.com/szimg/5fd0e72e09abb9a916440656.jpg

写回答

2回答

慕姐2849259

2021-11-10

core-site.xml中

 <property>

            <name>fs.default.name</name>

            <value>hdfs://0.0.0.0:8020</value>

        </property>

修改后,重启hadoop就可以了

1
0

Michael_PK

2020-12-09

我大概知道问题在哪了

1)你的配置文件中是用了dfs.datanode.use.dataname的参数,但是你客户端代码没设置,代码层面还需要设置dfs.client.use.datanode.hostname为true


2) 不建议用ip进行访问,应该使用hostname。hadoop集群内需要使用内网地址进行配置hosts,本地开发及其需要使用公网ip进行配置


3)云服务器的端口要在访问策略中打开(如果你通过浏览器能访问50070的页面的话,说明你已经开放了端口)

1
10
zzc_110
回复
qq_空之若蓝_0
你好,也遇到这样的问题,请问是怎么解决的呀?
2022-02-05
共10条回复

Hadoop 系统入门+核心精讲

从Hadoop核心技术入手,掌握数据处理中ETL应用,轻松进军大数据

2397 学习 · 902 问题

查看课程