Azkaban停留在 Logging initialized using configuration in jar:file:/application/cloudera/parcels/XXXXXX

原创

已于 2022-03-22 17:35:26 修改 · 2.8k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#azkaban

于 2022-03-16 14:33:48 首次发布

Azkaban执行遇到长时间停滞问题，详细分析显示由于表被锁导致，尝试减少重试次数和调整重试间隔。同时，解锁表并不一定能解决分区锁问题，需了解如何单独解锁分区。解决方案包括在SQL代码中加入防止锁表的策略。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

现象 :Azkaban停留在

Logging initialized using configuration in jar:file:/application/cloudera/parcels/CDH-5.16.2-1.cdh5.16.2.p0.8/jars/hive-common-1.1.0-cdh5.16.2.jar!/hive-log4j.properties
 一直不动

16-03-2022 05:00:12 CST tb_product_order_large_minutes INFO - Logging initialized using configuration in jar:file:/application/cloudera/parcels/CDH-5.16.2-1.cdh5.16.2.p0.8/jars/hive-common-1.1.0-cdh5.16.2.jar!/hive-log4j.properties
16-03-2022 06:39:20 CST tb_product_order_large_minutes INFO - Unable to acquire IMPLICIT, EXCLUSIVE lock ods@tb_product_order_large_minutes after 100 attempts.
16-03-2022 06:39:20 CST tb_product_order_large_minutes INFO - FAILED: Error in acquiring locks: Locks on the underlying objects cannot be acquired. retry after some time

从05:00:00 一直不动,到 06:39:20 才报错.这中间经历了大约100分钟。

从报错提示找信息,

1.里面说重试了100次. 那就是1分钟重复一次.

关于重拾次数和重试sleep时间在下面设置.可以把次数和时间设置少一点.