This account is not set to public on notestock.

@kamisuke おはよう、王

@futsunooppai なんかありましたー？

あー、pushキューがつまってるな……

ちょっと全体に再起動します〜

#fedibird 障害いくつかおきてます。

まず、先日発生したのと同じ、HAProxyのVPSで、IPv4接続できない不具合がでてます。

こちらは、迂回して直接Webサーバへ接続する対応をとりました。

サーバの再起動が必要なアップデートがあったため、このタイミングで各サーバの再起動を行いました。

pushキュー、pullキューの詰まりが発生しています。defaultキューは生きているので、サーバ内でのやりとりや、連合の受信は機能していると思いますが、対外的な配送などがきちんと機能していないものと思います。（これ他鯖に滝が発生するやつだな……）

#fedibird 概ね解消です。説明後ほど。

@nok_Pawoo すまーん！

@futsunooppai メッチャ配送遅延してましたね、すいません！

#fedibird 約8時間ほど、各サーバへの配送が遅延しておりました。

約30〜40分前のオペレーションで解消し、一度に大量にFedibirdの投稿が配送されたかと思います。

各サーバの管理者の皆様、一度に大きな負荷をかけ、大変ご迷惑をおかけいたしました。

====

原因は調査中ですが、Redisの応答が極端に低下しているログがみられること、全サーバの再起動後、最終的にsidekiqプロセスの再起動で解消していることから、構成上の問題と、各種アップデート（最新追従）によるMastodon本体側の挙動の変化の両面から追っています。

また、不具合によりアカウント削除の最終処理が完了せず再試行されているフシがあり、再試行時の突発負荷により引き金を引いている可能性があると見ています。（おそらくFedibird拡張部分による固有の不具合）

不具合修正や構成等を再検討し、対策していきたいと思います。

#fedibird なお、Fedibirdの利用者からみると、サーバ内のやりとりには一切問題がなく、他サーバからのアクティビティも受信されているため、不具合に気付きにくかったのではないでしょうか。

リモートの誰かとやりとりしようとしたときに相手から返事がない、フォローしたのに受理されない、などの症状があったかと思います。

@glueoh すまん、解消した……と思う……

v4が繋がらなくなる症状が再発してるのは嬉しくないな……。VPS側に問題あるような気がするので、こいつだけは立て直すか……。

@zero_zaki_ghost @GUNNAIL 資料、これ足しとくね
https://fedibird.com/@noellabo/106001935542612201

This account is not set to public on notestock.

This account is not set to public on notestock.

すみません，調べてみたけどわかりませんでした．

JRもキューが詰まってるのかしら

@takenoko takenokoおはよー！

#fedibird HAProxy経由に戻しました。Webが2台分散になるので、いくらか軽くなります。

最近のMastodon、ダッシュボードでいろいろ言ってくるようになってます。

これは、次のバージョンから、サーバのルールを簡潔に箇条書きするように求められるんですが、その設定がされてないよ！ というメッセージですw

sidekiqのschedulerキューが起動してない（v3.3.0以降で導入されたので設定忘れとかわりとある）とか、検出可能な構成上の不具合などを発見しやすくなっています。

@tadd @zundan 過負荷ですみません！（私かな）

大きなノードが存在し、そこが不具合を起こして一度に大量の配送を行うと、小さなノードでは、それを処理するのが大変というのはあります。

配送しないで捨てちゃうことはできるんですが、通常は望まれないため（受け取りたいから）、ごめん頑張って、って感じになりますw

わりとMastodonで500文字ぎりぎりで投稿してるけど、500文字ってこんなに短かったんだなと。

昔、課題で何文字以上でって言われたとき無限に長く感じた（そんなに書けない！）の、忘れかけている

心身( º дº)<ｷｴｪｪｪｴｴｪｪｪ

クイズ連合はSHOW gai ショーガイ!!

ネットワークスペシャリストみたいな問題が出そう

朝はやく 目覚めた
今日はいい天気よ
あなたと ポチ連れて
あのヤマ目指そう

へーちょ

٩( ´ω` )و

何をしても伝わらず
上手くいかないばかりで
わたしだって誰だって
あたりまえにあること

ふむ、限定ホーム、悪くないな……。

（限界ホームじゃないよ！）

This account is not set to public on notestock.

カレースープ、いいわね……

いいね！！

This account is not set to public on notestock.

This account is not set to public on notestock.

@mametsuko 伝わるエグいおねえさんたち

意味わからん

Misskey、v12.75.0まではビルドできたけど、v12.75.1とv12.76.0がビルドできてない。

これ以降かな……
https://github.com/misskey-dev/misskey/commit/8432c2c9eab5f40b8add842240224129cc2f9c54

追いかける時間とれないので、しばらく放置で。

@mametsuko 昨日、v12.76.0にしようとして、3時間ぐらい止めちゃった。

ナナチが並んでるわね

This account is not set to public on notestock.

This account is not set to public on notestock.

This account is not set to public on notestock.

This account is not set to public on notestock.

べびつこ

This account is not set to public on notestock.

ゆっくりでもいいよ
でも歩き続けるんだ

C#の後ろがハッシュタグになったりなんかしないんだけどだわ

🥺ちえん

またひっかかっとるな……。ゆっくり解消中……。

おっせえわ

ちょっとバグとらないと根治しなさそうね。夜までまってけれ

みんなのフェディバ語りが楽しい

This account is not set to public on notestock.

「へんじがない。ただのしかばねのようだ。」

さいきんチョコミント色してない中曽根氏

#fedibird あれ、おすすめユーザーの候補、消せないな……なおさねば

初手で中曽根さん、はまる人には最高のおもてなしだと思うなぁ。

@sessoh Fedibirdは公開期限過ぎたら消す機能ついてますよ

スタバじゃん……

🥔

文学的だね

ひへー

@makinon まきのん、お疲れさま！

This account is not set to public on notestock.

@Satis なんか挙動おかしい気がするね。なんだこれ？

←のるえ

@nora55

This account is not set to public on notestock.

This account is not set to public on notestock.

This account is not set to public on notestock.

ここがあのナツキのハウスね

かわR★

This account is not set to public on notestock.

死後鯖カレーる

……！！
バグってやがる
早すぎたんだ

@Satis これ、限定ホーム追加した時にバグったね。

ちょっと不便だと思うけど、直すまでまっててほしいのじゃ。

This account is not set to public on notestock.

This account is not set to public on notestock.