TDH一次因为节点删除报出来的sqoop导出数据报错

错误消息:[en]Error message:

ipc.client , server:htzq-tdh01:10020.Already tried 9 times

原因分析:由于集群删除了节点htzq-tdh01,所以下游系统使用SQOOP进行数据采集、推送和报错,SQOOP使用HDFS节点,通过MR进行数据计算。[en]Reason analysis: because the cluster deletes the node htzq-tdh01, the downstream system uses sqoop for data collection, push and error reporting, sqoop uses hdfs node, and data calculation is carried out through mr.

,tdh5版本的mr用的是yarn,所以定位到yarn组件;集群已经更新各个组件的配置服务,怀疑tdh客户端有配置yarn的位置

使用命令检查端口10020的配置文件是否存在[en]Use the command to check whether the configuration file for port 10020 exists

grep 10020 TDH-Client/conf/yarn1/* -B 2

该命令解释:[en]The command explains:

grep –B 2

-B 数字N
查找所有匹配行,并在匹配行前面显示N行[en]Find all matching rows and display the N rows in front of the matching lines

发现纱线配置文件属于旧节点。[en]It is found that the yarn configuration file belongs to the old node.

在执行此命令之前重新安装Tdh客户端已经是一个新节点[en]Reinstalling the tdh client before executing this command is already a new node

Original: https://www.cnblogs.com/wang3680/p/15555161.html
Author: TimBlog
Title: TDH一次因为节点删除报出来的sqoop导出数据报错

原创文章受到原创版权保护。转载请注明出处:https://www.johngo689.com/6018/

转载文章受原作者版权保护。转载请注明原作者出处!

(0)

大家都在看

免费咨询
免费咨询
扫码关注
扫码关注
联系站长

站长Johngo!

大数据和算法重度研究者!

持续产出大数据、算法、LeetCode干货,以及业界好资源!

2022012703491714

微信来撩,免费咨询:xiaozhu_tec

分享本页
返回顶部