正常終了したはずの学習・推論のステータスがFailedになる about kamonohashi HOT 1 CLOSED

想定される問題のフロー

1. コンテナで推論処理が終わり、APIにCompleteリクエスト(A)が送られる
2. (A): APIにリクエストが届く
3. (A): 完了したコンテナの削除を行う（k8sと通信するため数秒かかる）
4. 別のクライアントから、APIに当該推論レコードの参照リクエスト(B)が送られる
5. (B): APIにリクエストが届く
6. (B): コンテナの状況を確認する。まだ8が行われていないので、コンテナは稼働中と認識する。
7. (B): コンテナの稼働状況をチェックする。3でコンテナは既に削除されているので、不正終了とAPIが判断する
8. (A): 3の処理が完了し、コンテナステータスを「Complete」にして、レスポンスを返す
9. (B): 7の結果として、コンテナステータスを「Failed」に上書きして、レスポンスを返す

(A)で、コンテナを削除する前にステータスを書き換えるのが良いと思われる

from kamonohashi.