1. 报错

在IDEA中使用big data tools插件连接虚拟机中的hdfs时报错:

Exception during driver request: java.lang.IllegalArgumentException:java.net.UnknownHostException: hadoop00

2. 问题排查步骤

2.1 检查环境

首先要保证windows环境下本地安装了hadoop或者使用hadoop环境调试工具winutils-master进行hadoop的本地配置,检查环境变量是否正确:

在这里插入图片描述

在这里插入图片描述

2.2 确认虚拟机中hdfs守护进程开启,可在浏览器中使用Web UI进行访问确认ip地址:9870,如下:

在这里插入图片描述

2.3 检查在windows中是否配置了主机名映射

如果在Big Data Tools Connections中使用的File system URI主机名:9000,要确保在windows中配置了主机映射,配置主机映射的hosts文件目录为:C:\Windows\System32\drivers\etc\hosts

可在cmd中进行ping命令验证,如下:

在这里插入图片描述

2.4 如果上述步骤确认无误,那么应该是此插件的bug,需要在虚拟机上对hdfs进行操作之后进行连接。

创建个文件夹或上传个文件都可以:

hadoop fs -mkdir /test
或
hadoop fs -put test.txt /

然后再进行连接测试:

在这里插入图片描述

成功连接。

Logo

华为开发者空间,是为全球开发者打造的专属开发空间,汇聚了华为优质开发资源及工具,致力于让每一位开发者拥有一台云主机,基于华为根生态开发、创新。

更多推荐