2017-08-20 17:59:51 UTCごろから18:14:23 UTCごろまで、Redisの不調でこのインスタンスから正常な応答ができませんでした。ご迷惑をおかけしました。
2017-08-20 17:59:51 UTCごろから18:14:23 UTCごろまで、Redisの不調でこのインスタンスから正常な応答ができませんでした。ご迷惑をおかけしました。
\昼寝したので/ \マスターに追随しますたー/
Merged master at 6e9eda53319bc970b085c7c55277981320b2a835
まず気づいたのはSidekiqのコネクションプールだった様子:
Aug 20 17:56:49 ERROR: heartbeat: Error connecting to Redis (Redis::TimeoutError)
同様に、Sidekiqからタスクも取れなくなり、Pumaからもタスクを送れなくなっていたようです。
そのうちに、rack_timeoutもリクエストキューの処理が遅延しているのに気付き始めました:
しばらくすると、エラーがタイムアウトから接続拒否になりました。
Redisの復帰時には特にログはありませんでした。今回はdynoの再起動も無かった様子。
ログを含む詳細は https://gist.github.com/zunda/63c0c2848293b1a6640e306cc2faff35 にあります。