big data tools连接hdfs报错Exception during driver request: java.lang.IllegalArgumentException:java.net.U
IDEA连接hdfs时报错:Exception during driver request: java.lang.IllegalArgumentException:java.net.UnknownHostException: hadoop00按以下步骤进行排查:1)确认配置了hadoop环境2)确认虚拟机开启了hdfs守护进程3)检查在windows中是否配置了主机映射4)big data too
·
1. 报错
在IDEA中使用big data tools
插件连接虚拟机中的hdfs时报错:
Exception during driver request: java.lang.IllegalArgumentException:java.net.UnknownHostException: hadoop00
2. 问题排查步骤
2.1 检查环境
首先要保证windows环境下本地安装了hadoop或者使用hadoop环境调试工具winutils-master
进行hadoop的本地配置,检查环境变量是否正确:
2.2 确认虚拟机中hdfs守护进程开启,可在浏览器中使用Web UI进行访问确认ip地址:9870
,如下:
2.3 检查在windows中是否配置了主机名映射
如果在Big Data Tools Connections
中使用的File system URI
是 主机名:9000
,要确保在windows中配置了主机映射,配置主机映射的hosts文件目录为:C:\Windows\System32\drivers\etc\hosts
可在cmd
中进行ping
命令验证,如下:
2.4 如果上述步骤确认无误,那么应该是此插件的bug,需要在虚拟机上对hdfs进行操作之后进行连接。
创建个文件夹或上传个文件都可以:
hadoop fs -mkdir /test
或
hadoop fs -put test.txt /
然后再进行连接测试:
成功连接。
更多推荐
已为社区贡献2条内容
所有评论(0)