丼も Restart=always で起きてくるの前提で殺すのよくやるけどこれ殺す前に LB から切り離す必要があってな…

独自の進化を遂げてるさん例のコミット入ってないしバージョン上がってもそのままになりそうだなあ

Revert "Revert "Pawoo v2.4.0"" すき。あと 100 回くらい Revert してほしい

10 連駿河茶

naruhodone

確かに即席でシェル環境ごと展開できるのは便利そうね。入ったサーバーが GitHub ready じゃないこともあるだろうし。

xxh、そういうのもあるのか

丼が直ったと思ったら今度はマウスのホイールがぶっ壊れてないています

そのコミットが入ったのが v2.5.0 っぽいのでそのへんも合致するね https://github.com/tootsuite/mastodon/releases/tag/v2.5.0

やはり古すぎる Pawoo は滅ぼしたほうが良さそう

ほんとそれ、まず最初にリバプロを疑うべきだった

いやぁあまりにも複合要因すぎて困っちゃったね・・・ｗ

なんすかこれ

ころねのモーニング☆ルーティーン～幸せのあとの苦しみ編～ https://youtu.be/QjchQkPVU54

@hexin うん

@hexin @citoppig 多分直ったのでもっかいフォロー試してー

勝ったな、風呂入ってくる

で、なんでぱうーだけだったのかと言うと、最近の丼（？）は検証に必要な最小限の情報しか乗せてこないから

見た感じ、pawoo.net の compare_signed_string には Accept-Encoding も含まれてるんたけど、中間の nginx で改変してたのでそれの影響で検証失敗したっぽいな

これ自体は Mastodon 側で gzip 圧縮を掛けられるのを防ぐためにしたやつだったかな（nginx 側で brotil 圧縮かけたかったので）

proxy_set_header Accept-Encoding ''; 外したら直った…？

ア

やってみたけどだめっぽいなぁ

Date 素通ししてみるか…？

あとは 中間の nginx を変えてみるかなぁ

とりあえず疎通は回復させるか。原因究明は二の次で…。

うーんなさそう

あーそれは確認してなかったかも

ああそれは false がかえってる

いやこれで治るとは思えないけど

とりあえず明日は丼の基盤を Arch から Ubuntu にしてみるか

そうなんだよな〜〜

何がトリガーになったか分からないので何とも言えない。。けど pawoo から送られてくるリクエストの署名が壊れてて検証エラーになってるのは確か。

Pawoo 見切り vs Pawoo 署名無視（最悪） vs ダークライみたいなところがある

新規アカウントでもダメだったんでもうお手上げっぽいなぁ

ちとっぴーフォロバはやすぎない？

うーん、一応新規アカウントでどうなるか確認したけどダメだったな

はい、私は特定のアカウントの署名検証を切ってしまいました（流石に戻す）

OK（OK じゃない）

とりあえず pawoo.net からのレスポンスがおかしくて、Pawoo → ごま丼で OpenSSL::PKey::PKey#verify がこけてることはわかった。逆は大丈夫。

☆とかの表示が被るの困るんだけどかといって ambiwidth=double すると壊れるのでもっと困る

見てるアカウントが違ってた（完）

こっちじゃなかった

なんでかわるねんw

ちょっとうちの DB に入ってる pawoo 垢の公開鍵確認するけどご勘弁を（余計なものは見ないつもり）

本来はここまでいかないはずなのに https://github.com/tootsuite/mastodon/blob/master/app/controllers/concerns/signature_verification.rb#L92

Verification failed for gomasy@pawoo.net https://pawoo.net/users/gomasy

ｱ−

えーなんもしてないぞ…

結論としては、pawoo.net のアカウントの AP 署名検証がこけてる

妖怪全部出力おばけ

ありとあらゆる SQL がログに書き出されるようになったけど肝心な情報がなかった

あ、というか Rails のログレベルを debug まであげればいいか？

うーん、予想はしていたけどこっちからのリアクションは通知行くけどあっちからのリアクションは一切の通知がこないね

コード弄れば詳細出せるかな…やってみるか

ブーストはできるな

This account is not set to public on notestock.

method=POST path=/users/gomasy/inbox format=html controller=ActivityPub::InboxesController action=create status=401 duration=659.31 view=0.31 db=81.93 key=https://pawoo.net/users/gomasy#main-key

やっぱ 401

Pawoo 側がおかしいですね。終わり。

Cf 剥がす → ダメ
バニラ丼に戻す → ダメ

あーそらそうや

Cf 外すとリダイレクトループする…

てか Session Affinity してるじゃん…そらかたよるわw

一旦 Cf を完全に bypass してみるか。直近で弄り倒したのはここだし。

IPv6 の特定の実装は嫌いでも、IPv6 のことは嫌いにならないでください…！！になってる

ためしに IPv6 喋れない環境に Sidekiq 置いてテストしてみるかなぁ

あれは「IPv6 よくわからんけど多分つながるからヨシ！ｗ」っつってタイムアウトする AAAA を追加してる鯖があったのでブチ切れながら追加した一文

最悪一時的にバニラにして検証するかなぁ

✅ 配送可能（大嘘）

最近のバージョンから設定すれば一覧出せるようになったんだけどねぇ https://don.gomasy.jp/about/more#unavailable-content

Pawoo 側からドメインブロック食らってたりとかだったら面白い

草じゃないが

フォロー出来ないのにブロ解は反映されるの草

出来てるよ。直近でフォロワー増えてるし。

同じ改変してる Fedibird はフォローできたな…

とりあえず、改造部分が影響してる可能性もあるので明日（今日）調べてみるわ

でも他のインスタンスとは疎通できてるんだよな…

あれぇ〜〜？ｗ

どこから隔たりが出来たんだろうか

一応タグは切られてるのか

思い出すシリーズ: pawoo.net は 2.4.0

そんなはずは…

署名周りがおかしくなってるのかな

Pawoo から 401 が帰ってきてるな

今何回か試せる？

んー？？ログ見てみるか

なにか起きてる？

マストドン雲しんでるやんけ