hudi侧数据丢失，业务临时通过CDM从DWS导数，恢复至hudi，数据量共6亿，预计24h跑完，执行8h后多个业务均报错
【摘要】 1. cn报错信息为 received unexpected EOF from dn2. dn报错信息为An exception interrupts the sending to the client.3. dn报错信息此前无案例，通过分析多个业务的报错时间，为精确的8h，偏差在1min内，数据库statement_timeout参数为8h，初步判断是语句执行超时导致退出4. 调整stat...
1. cn报错信息为 received unexpected EOF from dn
2. dn报错信息为An exception interrupts the sending to the client.
3. dn报错信息此前无案例，通过分析多个业务的报错时间，为精确的8h，偏差在1min内，数据库statement_timeout参数为8h，初步判断是语句执行超时导致退出
4. 调整statement_timeout为30h，重启应用程序重跑作业
5. 持续关注，任务已经跑过去，没有报错。
6. 分析cn和dn日志，确认为statement_timeout超时导致
【版权声明】本文为华为云社区用户原创内容，转载时必须标注文章的来源（华为云社区）、文章链接、文章作者等基本信息， 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容，欢迎发送邮件进行举报，并提供相关证据，一经查实，本社区将立刻删除涉嫌侵权内容，举报邮箱：
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论（0）