体力レッドゾーンのためちゃんと障害対応できない

うわあ障害中なのにjp復旧で更に負荷が

待機ジョブ2k

いや駄目だろこれ

stack deployし直しでもして見るか?

気休めだけどsidekiqコンテナ2つにした

適当にsidekiq眺める

だめだ減る速度よりも増える速度のが大きい

G1BKq6N2IT3FoQ.png

ひどい…

どぼじでぞういうごどずるのお

2019-09-23 00:09:47 わんせた@12時以降起床部の投稿 ars42525@odakyu.app

mstdn.jpからめっちゃ飛んでくる→Wasabiが死んでてリトライに落ちる→無駄に試行して他の処理が止まる

まさにこれで泣いています……

現在mstdn.asterism.xyzは40分遅れで進行中です

ちょっとCPUクレジット見てscale=3までやっちゃうか

sidekiqコンテナ3つにスケール

減り始めたか……?

あっそんなことはなかった

sudo docker service scale mastodon_sidekiq=4

4倍にしたらpl巻き込んで鯖落ちちゃったあ

とりあえず3つにして動かしとこ

まだ全然落ち着く気配がない

まだ増える

LtDMItSVbJMlIQ.png

4倍再挑戦

んじゃ後放置で寝るね
朝までには直ってるやろ多分…

2019-09-23 01:20:26 エセ賢者の投稿 MulticolorWorld@mstdn.maud.io

このアカウントは、notestockで公開設定になっていません。

そうだね×1

もうちょっとどうにかするか

ノード増やすか?

多分wasabi障害と被らなきゃ大丈夫だったと思うんだけどなー

じゃーなんで同じくわさび使ってるぷれろま息してるのっていうのはあるんじゃが

2019-09-23 01:24:54 kphrxの投稿 kPherox@pl.kpherox.dev

ぷれろま、リモートの画像はオブジェクトストレージに送ってないのでは…?

あーそれか

なるほどなぁっ

コソコソ

してなさそう

何度コンテナ上げ直してもうまく行かずふと :nginx: 再起動したら直ったっぽい

結構長い時間止まってたので時空の乱れが激しい

原因これもう分かんねぇな

色々重なったせいなのは確定的に明らか

2019-09-23 10:46:49 :is: :is: :is: :is: :is: :is: :is: :is: :is: :is:の投稿 coke@msk.kirigakure.net

努力不足

根性論サーバ運用こわ

@mohemohe あのですねっ

おっまた処理速度よりジョブが貯まるほうが早くなってきたな

wasabiで止まっちゃってるとタイムアウトするまでずっと待ってるから全然処理が進まないんやな

なんかいきなり待機ジョブが300増えて詰まったので逃げてきました

またですか

ittainaniga

5zmkf8BeSG3Kyg.png

2画面二つ折りスマホの何が良いかって左右で推しカプを壁紙にできるっていうのがですね

2019-09-23 20:24:32 1日24時間睡眠健康法の投稿 yakitama@mstdn.yakitamago.info

このアカウントは、notestockで公開設定になっていません。

指が足りなそう

効率曲ならばあるいは……?

ミリシタもそうなのか
デレステも放置編成あるし同時に走れるな!

うわーまた待機ジョブ増えてる
しばらくあっちで投稿するのはやめとこ

なんか妙だ

2019-09-23 20:33:18 出雲伊月の投稿 itsukia@pl.istukiy.com

このアカウントは、notestockで公開設定になっていません。

pleromaのconfig変わったやつまだ完全に対応させてないからなおさなきゃ

成人式行ってないから未成年です

2019-09-23 20:36:26 umikaki5017の投稿 umikaki5017@mstdn.maud.io

このアカウントは、notestockで公開設定になっていません。

成人式行ってないどころか招待状自体来てないのでそもそも私の戸籍が存在してない可能性がある

再試行に
Seahorse::Client::NetworkingError: Net::ReadTimeout with #<TCPSocket:(closed)>
ってなってるのが多いのは一体

相手のインスタンスばらばらだからこっちの問題だと思うんじゃがなぁ

わーかーにはグローバルIP持たせてるしアウトバウンドの通信許可してあるしなー

相手側普通に動いてるしmaster追従勢かというとそうでもないし

@mayaeh あっクライアントアプリの通知サーバの問題か
そういえばtootle前にそんな問題ありましたね…

@mayaeh エラーメッセージそのものは同じですねー
ただジョブの種類が「ActivityPub::ProcessingWorker」なのでそもそも通知関係ないやっていうのに先程の投稿後気づき…

メッセージにてるけど別やんけ何を話しているんだ私は

@mayaeh リンクありがとうございます
となると明らかにwasabiですねぇ……
お騒がせ申し訳ないです…

タイムアウトしたなら何に対してのリクエストがタイムアウトになったのか程度はGUIから見れるメッセージに出して欲しい…

jsonべたっと書いてあるの読むの辛いすぎるのであまりsidekiqコンテナのログ読みたくないのがな…

2019-09-23 21:00:47 ぐすくま@わかりみの投稿 guskma@abyss.fun

このアカウントは、notestockで公開設定になっていません。

一日くらいで直るんじゃないかな―とか思ってたけど全くそんなことはなかった

ちょっとこれは対処しようがない
再試行溜まったらkillする以外手を出せぬ

移行するにも障害中の今は無理じゃろ多分

@noellabo @mayaeh ん~~~~~~~~~~~~~~~~
まぁケチった以上しゃーなしですねぇ

私物データのバックアップをgoogle driveとwasabiで二重に取るのやめて、donとplのメディアをdigital oceanとかに移すのがいいかもね
やっても年内は月$6持ってかれちゃうからそこまでやるかは迷いどころだけど

障害中で画像アップできないのでアレですがART556, Five-seven, PM-06掘り終えました
今回の限定ドロップは掘り終えたので1-9攻略終えたらあとは毎日10周くらいイベントエリア回ってヴァルハラコラボ終了です

2019-09-23 21:14:37 国見小道の投稿 kunimi53chi@pl.komittee.net

鯖缶工場のPleromaページ難も書いてないから何か書いてあげようかな

Installing on Debian Based Distributionsを嫁ぐらいしか書けない(???)

develop追従するならちょいちょいconfigの書き方変わるから気をつけようねとか

OTPリリースバージョンの運用についてはきっと国見さんが書いてくれるはず

2019-09-23 21:19:05 国見小道の投稿 kunimi53chi@pl.komittee.net

ごめんOTPの正式名称なんですか
ワンタイムパスワードしかひっかからない

Elixirの文脈でのこれなんなんだろうね…

ほんとに動くんですかねあれ(疑心暗鬼)

ライブラリコレクションとしてリリースできるようにしたよ!ってことかな

Open Telecom Platformだそうですが

名前の由来はwikipediaくらいしか情報がなく、ただまぁこれが何かって言うと「環境作らなくてもとりあえず動くバイナリだよ」みたいな話でしょ

2019-09-23 21:28:35 kphrxの投稿 kPherox@pl.kpherox.dev

OTP、名前の意味がわからなさすぎてOTPはOTPなんだよで終わってしまう

こんな名前だから広まらないんじゃい

2019-09-23 21:29:46 国見小道の投稿 kunimi53chi@pl.komittee.net

いま初めてちゃんとPleromaのOTPリリースドキュメント読んでるけど、思ってたのと違う。

2019-09-23 21:29:58 国見小道の投稿 kunimi53chi@pl.komittee.net

コマンド打ちすぎだろ。

そうでもなくない?

インスコ終わったらアプデはすぐみたいだけど

まぁ公式のdocker対応が良くなるとOTPリリースとかお役御免なのでは……のお気持ち

一時間おきにbuildしてlatestにpushするだけとかガバガバすぎるしCircleCIの設定ファイル書き直さなきゃなと思いすでに3ヶ月近く経過している

2019-09-23 21:33:23 なかやばしの投稿 eniehack@misskey.io

このアカウントは、notestockで公開設定になっていません。

最近しようとしているっぽい

試してないため動くのか走らん

でも一ヶ月くらい前のあの後動きが見えない…

そろそろgitlabのdockerリポジトリにpushしてくれるようになってほしい
手元でbuildするの面倒くさい

2019-09-23 21:35:40 kphrxの投稿 kPherox@pl.kpherox.dev

prod.secret.exsを/etc/pleroma/config.exxにコピーしてpleroma startを叩いてみたのですがMix.Configが見つからないと言われて怒られました。なんで…?

@kPherox
Replaced pleroma_job_queue and Pleroma.Web.Federator.RetryQueue with Oban (see docs/config.md on migrating customized worker / retry settings)
https://git.pleroma.social/pleroma/pleroma/blob/develop/CHANGELOG.md
この辺ですかね

CHANGELOG.md · develop · Pleroma / pleroma

wasabi障害+jp復旧+pleromaのconfig書き方いつの間にか変わってたことにより今朝ないてた

2019-09-23 21:36:47 なかやばしの投稿 eniehack@misskey.io

このアカウントは、notestockで公開設定になっていません。

mastodonより楽では

いやどっちも面倒それはそうなんだけど

@mohemohe 障害に障害に微妙なアップデート重ねられたら泣いちゃうわ

アプデ後はこんな感じ
config :pleroma, Oban,
queues: [
federator_incoming: 200,
federator_outgoing: 200,
web_push: 50,
mailer: 10,
transmogrifier: 20,
scheduled_activities: 100,
background: 50
]

元は
config :pleroma_job_queue, :queues,
にfederator_incoming: 200,
...
とか書いてた

@kPherox あれ、そうですかね
こっちはcnofig書き換えなきゃ動かなかったんですがねー
メッセージ具体的には覚えてませんが、何かがなくて1or2をタイプしてね、みたいな

2019-09-23 21:41:36 kb10uyの投稿 kb10uy@mstdn.maud.io

ベアメタルWindowsでMasotodon運用してる猛者おらんの

これ絶対buildで憤死するゾ

お仕事柄掃いて捨てるほどMS系のプロダクトキー持ってるけどたまに出所不明のものまで出てくる

2019-09-23 21:46:38 sublimer@あすてろいどん鯖管の投稿 sublimer@mstdn.sublimer.me

このアカウントは、notestockで公開設定になっていません。

azureとの連携が強いのはwindows server自身のサービスを使う場合に限るからにゃー

OSS入れてどうこうとか、独自ソフト入れるとかそういうのは別にうん…

動くけどそれ動かしてる人いるのかな

そこまでして.NETとなるとLDAPじゃ満足できねぇぜ!ADを使いたいんだ!みたいな場合なんだろうか

窓鯖の利点は別にコマンドとかわからなくても割となんとかなるっていうのがあり、これが実は超スーパー大きな利点
世の中Linuxわからない人のが大多数なわけで

2019-09-23 21:51:44 shibafu528の投稿 shibafu528@social.mikutter.hachune.net

コマンドが分からなくても何とかなるけど手順書がドくそぶ厚くなるのはいいんかな……まあそっちのが分かる人のほうが多数派なんだよなと諦めてはいる

それはそう

下に合わせるしかない以上どうしようもないのじゃ

あーこれServer Core Installとかは別の話ね

あれ使うとPowerShellだけで頑張ることになるので情報の少なさを考えるとLinuxよりきつそう

多分Hyper-Vノード用とかなんだろうか……?

@nieein56 IISどこに何があるのかなにもわからない…
なんかWebサーバ以外も建てられて謎が謎を呼ぶ

@nieein56 自分で色々やるというよりも既製品を使って楽をするっていう使い方なのよねやっぱり

Linxuやらあるいはその他だと運用者を用意しづらいからとりあえずパソコン触れる人なら「運用できます!」と言い張らせて人売りしやすいからじゃないですかね

たいぽばっかり

はずかちい