@moonpaste 帰宅後対応します！

復旧した

d払い落ちてるのか

お、そろそろMastodon v3.0出そうや！

そろそろはんドンの本番をmasterに上げちゃうかな。

今日帰ったらdevをmaster追従します。また動作テストにご協力くださいね。もし問題なさそうであれば本番もmaster追従します。

増税前にせんべい買いだめ

前回のdev解放テストでわかってた3つのバグはそれぞれ修正コミット入ったので。

ついに#177がクローズされてる 〜！ Support account migration · Issue #177 · tootsuite/mastodon · GitHub
https://github.com/tootsuite/mastodon/issues/177

三連休だー！！

@supistar わかりみがある…

This account is not set to public on notestock.

551買いにきた

目の前で電車行った泣きそう

@yuhina ​​​​

職場近くに551があるの、QoLが上がって仕方がない

@yuhina ないときー！

@non117 明日予定通り大丈夫でしょうか？どこにしましょう。

はー，５５１おいしかった

@yuhina はやく

うわ全角数字投稿してる　死にたい

@seibe 懐かしすぎ笑う

@highemerly

【お知らせ】https://dev.handon.club を数時間運用します。バグ出しにご協力ください。また，カスタム絵文字の分類も仮運用していますので，ご意見を下さい。
なお，こちらのサーバのアカウント作成は承認制です。アカウント作成ははんドンクラブ利用者に限ります。アカウント作成希望者は，意気込み欄にはんドンクラブのIDを記載ください。#handon_info

@moonpaste

あ。はい。データは全部残してます。

ひきつづきデバッガー募集中です。

@yuhina 最近これ渡される確率高くなってきた

A~~~~

あ，ラグビーみたい

ラグビーはルールさえ理解すれば何やってるかわかりやすくて見るの楽しい競技だと思う

鯖鯖式

@gomama 福岡の文化

@yuhina 買ったものが私とまったく同じで草

@gomama うちは一応元強豪校だったという理由だったけど…

@yuhina 551のシュウマイうまいからなぁ…

レモンドロップずるい

じゃあメンテしようかな。

のんさんが酔ってるの珍しい，良い日だ

せいべさんも来てね

【運営情報】メンテナンスを予定しています。サービス影響はほぼない予定です。詳細はステータスページをご参照ください。 https://status.handon.highemerly.net/ #handon_info

手順は，
Step1: web1へのトラヒック片寄せStep2: web2バージョンアップ
Step3: DBマイグレ＆web2へのトラヒック片寄せ
Step4: web1バージョンアップ
Step5: ロードランス再開
となっております。よろしくお願いします。

完全に仕事のメール

いや。普段はバージョンアップもっと楽ですよ。今回はDBマイグレがあるので，DB不整合が起きないように一斉切り替えになります。

手順書の1つめが間違っていて工事止まった

ゴメン全然分からん

git branch -D で消したのに何で残ってるの

え，ほんとなんで

ねえホント分からん

強制的にremoteに合わせたいんだけど，手順テストのときどうしたんだっけ？
git branch -D ほげほげ
git checkout -b ほげほげ origin/ほげほげ
してるのに昔の状態に戻るんだけどなんで？

腹が立ったので
git checkout -b temp
git checkout FETCH_HEAD
git checkout -b ほげほげ
した。

originはfetchしてます。。。。

みんなありがとう！

Step0が完了しました。工事継続判定会議を行います。

行いません。

Step1。片寄せします。

トラブル発生につき切り戻しを行いました。

（なんでこんな仕事みたいなことしてるんだろう）

手順ミスるとかマジであり得ないし聞いたことないな。

なぜ切り替えがうまくいかなかったのか不明なのでもう一回Step1チャレンジします。

Step1成功しました。Step2，web2のバージョンアップを開始します。

Step2，web2バージョンアップ完了。Step3，現用系切り替え前の最終バックアップを取得します。

Step3，DBマイグレいきます。マイグレ完了後一瞬だけ全サービスを止め，新バージョンに切り替えます。その間数秒止まります。ご容赦ください。

動作テスト

バグってますよね？

回復する手段は分かっているので。時間かかりますがちょっと待ってください。

現状 https://web2-pa-tk2.handon.club でアクセスして頂ければ正常に動くのではないかと

なんでstreamingぶっ壊れているのかは分からない

現状，DNSラウンドロビンの運により，動く人と動かない人が居ます。

テスト

よし復帰したぞ

Webがおかしい方はブラウザの強制リロードをお願いします。たぶん復帰したと思います。これから各種点検を行います。

いまなんかおかしい人いる？

@gomama 3.0はまだ出てないです。これはmasterブランチの最新コミットです。

動作テスト​​

みんなありがとう。正常動作確認出来ましたのでメンテ明けます。

【運営情報】メンテナンスの過程で予期せぬトラブルが発生し，サービスが停止しました。ご迷惑をおかけいたしました。原因究明に努めます。
・日時： 2019/9/20(金) 22:55〜23:16
・影響範囲： 一部ユーザが接続出来ない
・原因： メンテナンス過程でのDBエラー
・解決方法： サービスを停止した状態でメンテナンスを継続 #handon_info

よくみたら検索が古くまで遡れるようになってる！！これは一気に検索結果として出力する数を増やす必要ないね。戻そうかな。

今回発生したトラブルですが，DBのマイグレーション中にそのプロセスがHung upしてしまい，DBのロックを取ったままなにも出来なくなった･･･というものです。でも何とかしました。

検証環境ではDBにたいしたレコード数無かったので余裕でしたが，本番DBでは止まっちゃう見たいでした。。本番でだけ起こるトラブルあるあるみたいな事故。。

うーん。APIのレスポンスはむっちゃ安定してるんだけどWebだけなんかご機嫌ナナメな気がするなあ･･･

てへぺろ☆

全部web1サーバに片寄せされてた☆