長いジョブを流した際に、 1 task locks are expired. Tasks will be retried.のメッセージが出て、Snowflakeクエリが再実行される

[hiro-hori]

2021-07-07 08:54:37 +0000 [INFO] (0016@[0:default]+🧇🧇🧇: snow>: 🏃‍♀️🏃‍♀️🏃‍♀️.sql
2021-07-07 08:54:38 +0000 [INFO] (0016@[0:default]+🧇🧇🧇: CREATE OR REPLACE TABLE 😀😀😀😀 AS
...

2021-07-07 10:42:50 +0000 [WARN] (lock-expire-0): 1 task locks are expired. Tasks will be retried.
2021-07-07 10:42:52 +0000 [INFO] (0017@[0:default]+🧇🧇🧇: snow>: 🏃‍♀️🏃‍♀️🏃‍♀️.sql
2021-07-07 10:42:52 +0000 [INFO] (0017@[0:default]+🧇🧇🧇: CREATE OR REPLACE TABLE 😀😀😀 AS
...

結果として、Snowflakeクエリが二重で実行されてしまう。

• task lockというものを考慮する必要がある？
• また、現在の実装だとHTTPコネクションを張りっぱなしのように思うので、安定性のためにポーリングするように変更した方が良い？

[hiro-hori]

どうもrunTaskメソッドから発生する例外の種類によっては、うまくdigdagさん側がcatchしてくれず、ジョブが終わらない状態に入ってしまう様子である。ちゃんと例外を投げるは #16 でちゃんとしたつもり。この不具合は現状で再現するだろうか？