sqoop could not find any valid local directory 异常解决 博客分类: hadoop sqoop
程序员文章站
2024-03-23 19:17:34
...
在没有更改任何配置的情况下sqoop突然报警:org.apache.hadoop.util.diskchecker$diskerrorexception: could not find any valid local directory;
原来是硬盘空间满了,占用到了100%;删除没用的数据后,sqoop能正常运行。
过了一天后,又报sqoop error reading task output 异常,查了N久之后才发现是zookeeper的节点down掉了。。。。。重新启动zookeeper节点,运行sqoop导入,正常。。。。集群小加上监控系统不完善麻烦事就是多。。。