08:24:26
icon

2017-08-20 17:59:51 UTCごろから18:14:23 UTCごろまで、Redisの不調でこのインスタンスから正常な応答ができませんでした。ご迷惑をおかけしました。

08:31:27
2017-08-20 08:31:27 zundaの投稿 zundan@mastodon.zunda.ninja
08:38:15
2017-08-20 08:38:15 zundaの投稿 zundan@mastodon.zunda.ninja
09:43:46
icon

例のレポートってmedium.comに上がってるだけで大学によるレポートの体裁はないんだね

09:48:45
icon

ホームタイムラインが遡れなくなってるの、Redisの内容が消えちゃったからなんだなきっと

10:15:55
icon

MacBook Airの電池のもちが悪くなってきた気がする。使い始めて2年半くらい。

13:29:43
2017-08-20 13:29:43 zundaの投稿 zundan@mastodon.zunda.ninja
13:52:12
icon

\昼寝したので/ \マスターに追随しますたー/

Merged master at 6e9eda53319bc970b085c7c55277981320b2a835

13:54:00
icon

\テスト/ \ですと/

15:16:42
2017-08-20 15:16:42 zundaの投稿 zundan@mastodon.zunda.ninja
16:13:30
Mastodonの稼働中にRedisが落ちるとどうなるか、今朝 https://mastodon.zunda.ninja/@zundan/166563 のログを眺めてみました。
icon

まず気づいたのはSidekiqのコネクションプールだった様子:

Aug 20 17:56:49 ERROR: heartbeat: Error connecting to Redis (Redis::TimeoutError)

同様に、Sidekiqからタスクも取れなくなり、Pumaからもタスクを送れなくなっていたようです。

そのうちに、rack_timeoutもリクエストキューの処理が遅延しているのに気付き始めました:

しばらくすると、エラーがタイムアウトから接続拒否になりました。

Redisの復帰時には特にログはありませんでした。今回はdynoの再起動も無かった様子。

ログを含む詳細は https://gist.github.com/zunda/63c0c2848293b1a6640e306cc2faff35 にあります。

16:16:23
Mastodonの稼働中にRedisが落ちるとどうなるか、今朝 https://mastodon.zunda.ninja/@zundan/166563 のログを眺めてみました。
Attach image
16:17:28
icon

自分のトゥートに返信してメディアをつけたら新しくタイプしたテキストじゃなくて元のテキストが投稿されたで

19:32:40
2017-08-20 19:32:40 zundaの投稿 zundan@mastodon.zunda.ninja
19:32:52
icon

ノシ

19:50:55
icon

にゃーん

20:21:23
icon

ふとんがふっと

20:21:53
icon

20:24:55
icon

そろそろ実験用証明書の有効期限なんだけどどうしよか

20:25:13
icon

実験用ならLEで充分なんよね

20:31:38
21:14:30
2017-08-20 21:14:30 zundaの投稿 zundan@mastodon.zunda.ninja