00:01:03 @aries@pl.asterism.xyz
icon

体力レッドゾーンのためちゃんと障害対応できない

00:04:06 @aries@pl.asterism.xyz
icon

うわあ障害中なのにjp復旧で更に負荷が

00:04:51 @aries@pl.asterism.xyz
icon

待機ジョブ2k

00:05:00 @aries@pl.asterism.xyz
icon

いや駄目だろこれ

00:05:24 @aries@pl.asterism.xyz
icon

stack deployし直しでもして見るか?

00:10:26 @aries@pl.asterism.xyz
icon

気休めだけどsidekiqコンテナ2つにした

00:11:30 @aries@pl.asterism.xyz
icon

適当にsidekiq眺める

00:12:40 @aries@pl.asterism.xyz
icon

だめだ減る速度よりも増える速度のが大きい

G1BKq6N2IT3FoQ.png
Attach image
00:14:08 @aries@pl.asterism.xyz
icon

ひどい…

00:14:27 @aries@pl.asterism.xyz
icon

どぼじでぞういうごどずるのお

00:15:25 @aries@pl.asterism.xyz
2019-09-23 00:09:47 Posting わんせた ars42525@odakyu.app
icon

mstdn.jpからめっちゃ飛んでくる→Wasabiが死んでてリトライに落ちる→無駄に試行して他の処理が止まる

00:15:31 @aries@pl.asterism.xyz
icon

まさにこれで泣いています……

00:16:08 @aries@pl.asterism.xyz
icon

現在mstdn.asterism.xyzは40分遅れで進行中です

00:17:46 @aries@pl.asterism.xyz
icon

ちょっとCPUクレジット見てscale=3までやっちゃうか

00:21:09 @aries@pl.asterism.xyz
icon

sidekiqコンテナ3つにスケール

00:23:17 @aries@pl.asterism.xyz
icon

おっ

00:23:31 @aries@pl.asterism.xyz
icon

減り始めたか……?

00:23:43 @aries@pl.asterism.xyz
icon

あっそんなことはなかった

00:25:58 @aries@pl.asterism.xyz
icon

sudo docker service scale mastodon_sidekiq=4

00:47:16 @aries@pl.asterism.xyz
icon

4倍にしたらpl巻き込んで鯖落ちちゃったあ

00:48:01 @aries@pl.asterism.xyz
icon

とりあえず3つにして動かしとこ

00:55:38 @aries@pl.asterism.xyz
icon

まだ全然落ち着く気配がない

00:57:35 @aries@pl.asterism.xyz
icon

まだ増える

LtDMItSVbJMlIQ.png
Attach image
00:59:15 @aries@pl.asterism.xyz
icon

4倍再挑戦

00:59:32 @aries@pl.asterism.xyz
icon

おけ

01:03:24 @aries@pl.asterism.xyz
icon

んじゃ後放置で寝るね
朝までには直ってるやろ多分…

01:20:42 @aries@pl.asterism.xyz
2019-09-23 01:20:26 Posting エセ賢者 MulticolorWorld@mstdn.maud.io
icon

This account is not set to public on notestock.

01:21:17 @aries@pl.asterism.xyz
icon

そうだね×1

01:21:30 @aries@pl.asterism.xyz
icon

もうちょっとどうにかするか

01:22:02 @aries@pl.asterism.xyz
icon

ノード増やすか?

01:23:37 @aries@pl.asterism.xyz
icon

多分wasabi障害と被らなきゃ大丈夫だったと思うんだけどなー

01:24:07 @aries@pl.asterism.xyz
icon

じゃーなんで同じくわさび使ってるぷれろま息してるのっていうのはあるんじゃが

01:25:04 @aries@pl.asterism.xyz
2019-09-23 01:24:54 Posting kphrx kPherox@pl.kpherox.dev
icon

ぷれろま、リモートの画像はオブジェクトストレージに送ってないのでは…?

01:25:13 @aries@pl.asterism.xyz
icon

あーそれか

01:25:20 @aries@pl.asterism.xyz
icon

なるほどなぁっ

10:39:48 @aries@pl.asterism.xyz
icon

コソコソ

10:40:42 @aries@pl.asterism.xyz
icon

してなさそう

10:41:43 @aries@pl.asterism.xyz
icon

何度コンテナ上げ直してもうまく行かずふと :nginx: 再起動したら直ったっぽい

10:45:42 @aries@pl.asterism.xyz
icon

結構長い時間止まってたので時空の乱れが激しい

10:46:35 @aries@pl.asterism.xyz
icon

原因これもう分かんねぇな

10:47:10 @aries@pl.asterism.xyz
icon

色々重なったせいなのは確定的に明らか

10:47:20 @aries@pl.asterism.xyz
2019-09-23 10:46:49 Posting :is: :is: :is: :is: :is: :is: :is: :is: :is: :is: coke@msk.kirigakure.net
icon

努力不足

10:47:35 @aries@pl.asterism.xyz
icon

根性論サーバ運用こわ

11:17:13 @aries@pl.asterism.xyz
icon

@mohemohe あのですねっ

11:29:27 @aries@pl.asterism.xyz
icon

おっまた処理速度よりジョブが貯まるほうが早くなってきたな

11:30:09 @aries@pl.asterism.xyz
icon

wasabiで止まっちゃってるとタイムアウトするまでずっと待ってるから全然処理が進まないんやな

20:20:29 @aries@pl.asterism.xyz
icon

なんかいきなり待機ジョブが300増えて詰まったので逃げてきました

20:20:47 @aries@pl.asterism.xyz
icon

またですか

20:22:57 @aries@pl.asterism.xyz
icon

ittainaniga

5zmkf8BeSG3Kyg.png
Attach image
20:24:04 @aries@pl.asterism.xyz
icon

2画面二つ折りスマホの何が良いかって左右で推しカプを壁紙にできるっていうのがですね

20:25:03 @aries@pl.asterism.xyz
2019-09-23 20:24:32 Posting 藤田ことねのちびども yakitama@mstdn.yakitamago.info
icon

This account is not set to public on notestock.

20:25:10 @aries@pl.asterism.xyz
icon

指が足りなそう

20:25:42 @aries@pl.asterism.xyz
icon

効率曲ならばあるいは……?

20:26:42 @aries@pl.asterism.xyz
icon

ミリシタもそうなのか
デレステも放置編成あるし同時に走れるな!

20:31:58 @aries@pl.asterism.xyz
icon

うわーまた待機ジョブ増えてる
しばらくあっちで投稿するのはやめとこ

20:32:11 @aries@pl.asterism.xyz
icon

なんか妙だ

20:33:54 @aries@pl.asterism.xyz
2019-09-23 20:33:18 Posting 出雲伊月 itsukia@pl.istukiy.com
icon

This account is not set to public on notestock.

20:33:59 @aries@pl.asterism.xyz
icon

名探偵

20:35:52 @aries@pl.asterism.xyz
icon

pleromaのconfig変わったやつまだ完全に対応させてないからなおさなきゃ

20:36:05 @aries@pl.asterism.xyz
icon

成人式行ってないから未成年です

20:37:49 @aries@pl.asterism.xyz
2019-09-23 20:36:26 Posting umikaki5017@mstdn.maud.io umikaki5017@mstdn.maud.io
icon

This account is not set to public on notestock.

20:38:02 @aries@pl.asterism.xyz
icon

🍻

20:39:27 @aries@pl.asterism.xyz
icon

成人式行ってないどころか招待状自体来てないのでそもそも私の戸籍が存在してない可能性がある

20:41:15 @aries@pl.asterism.xyz
icon

再試行に
Seahorse::Client::NetworkingError: Net::ReadTimeout with #<TCPSocket:(closed)>
ってなってるのが多いのは一体

20:42:00 @aries@pl.asterism.xyz
icon

相手のインスタンスばらばらだからこっちの問題だと思うんじゃがなぁ

20:45:02 @aries@pl.asterism.xyz
icon

わーかーにはグローバルIP持たせてるしアウトバウンドの通信許可してあるしなー

20:46:24 @aries@pl.asterism.xyz
icon

相手側普通に動いてるしmaster追従勢かというとそうでもないし

20:48:09 @aries@pl.asterism.xyz
icon

@mayaeh あっクライアントアプリの通知サーバの問題か
そういえばtootle前にそんな問題ありましたね…

20:53:51 @aries@pl.asterism.xyz
icon

@mayaeh エラーメッセージそのものは同じですねー
ただジョブの種類が「ActivityPub::ProcessingWorker」なのでそもそも通知関係ないやっていうのに先程の投稿後気づき…

20:56:38 @aries@pl.asterism.xyz
icon

メッセージにてるけど別やんけ何を話しているんだ私は

20:59:00 @aries@pl.asterism.xyz
icon

@mayaeh リンクありがとうございます
となると明らかにwasabiですねぇ……
お騒がせ申し訳ないです…

20:59:44 @aries@pl.asterism.xyz
icon

タイムアウトしたなら何に対してのリクエストがタイムアウトになったのか程度はGUIから見れるメッセージに出して欲しい…

21:00:39 @aries@pl.asterism.xyz
icon

jsonべたっと書いてあるの読むの辛いすぎるのであまりsidekiqコンテナのログ読みたくないのがな…

21:01:12 @aries@pl.asterism.xyz
2019-09-23 21:00:47 Posting ぐすくま@わかりみ guskma@abyss.fun
icon

This account is not set to public on notestock.

21:01:40 @aries@pl.asterism.xyz
icon

💧

21:02:49 @aries@pl.asterism.xyz
icon

一日くらいで直るんじゃないかな―とか思ってたけど全くそんなことはなかった

21:04:52 @aries@pl.asterism.xyz
icon

ちょっとこれは対処しようがない
再試行溜まったらkillする以外手を出せぬ

21:05:03 @aries@pl.asterism.xyz
icon

移行するにも障害中の今は無理じゃろ多分

21:06:57 @aries@pl.asterism.xyz
icon

@noellabo @mayaeh ん~~~~~~~~~~~~~~~~
まぁケチった以上しゃーなしですねぇ

21:08:30 @aries@pl.asterism.xyz
icon

私物データのバックアップをgoogle driveとwasabiで二重に取るのやめて、donとplのメディアをdigital oceanとかに移すのがいいかもね
やっても年内は月$6持ってかれちゃうからそこまでやるかは迷いどころだけど

21:10:28 @aries@pl.asterism.xyz
icon

障害中で画像アップできないのでアレですがART556, Five-seven, PM-06掘り終えました
今回の限定ドロップは掘り終えたので1-9攻略終えたらあとは毎日10周くらいイベントエリア回ってヴァルハラコラボ終了です

21:15:38 @aries@pl.asterism.xyz
2019-09-23 21:14:37 Posting 国見小道 kunimi53chi@pl.komittee.net
icon

鯖缶工場のPleromaページ難も書いてないから何か書いてあげようかな

Installing on Debian Based Distributionsを嫁ぐらいしか書けない(???)

21:16:01 @aries@pl.asterism.xyz
icon

develop追従するならちょいちょいconfigの書き方変わるから気をつけようねとか

21:16:23 @aries@pl.asterism.xyz
icon

OTPリリースバージョンの運用についてはきっと国見さんが書いてくれるはず

21:20:31 @aries@pl.asterism.xyz
2019-09-23 21:19:05 Posting 国見小道 kunimi53chi@pl.komittee.net
icon

ごめんOTPの正式名称なんですか
ワンタイムパスワードしかひっかからない

21:20:41 @aries@pl.asterism.xyz
icon

Elixirの文脈でのこれなんなんだろうね…

21:21:20 @aries@pl.asterism.xyz
icon

ほんとに動くんですかねあれ(疑心暗鬼)

21:21:53 @aries@pl.asterism.xyz
icon
Web site image
Elixir初心者がOTPって結局なんなのか調べてみた - Qiita
21:23:18 @aries@pl.asterism.xyz
icon

ライブラリコレクションとしてリリースできるようにしたよ!ってことかな

21:24:18 @aries@pl.asterism.xyz
icon

Open Telecom Platformだそうですが

21:28:15 @aries@pl.asterism.xyz
icon

名前の由来はwikipediaくらいしか情報がなく、ただまぁこれが何かって言うと「環境作らなくてもとりあえず動くバイナリだよ」みたいな話でしょ

21:28:54 @aries@pl.asterism.xyz
2019-09-23 21:28:35 Posting kphrx kPherox@pl.kpherox.dev
icon

OTP、名前の意味がわからなさすぎてOTPはOTPなんだよで終わってしまう

21:29:21 @aries@pl.asterism.xyz
icon

こんな名前だから広まらないんじゃい

21:30:08 @aries@pl.asterism.xyz
2019-09-23 21:29:46 Posting 国見小道 kunimi53chi@pl.komittee.net
icon

いま初めてちゃんとPleromaのOTPリリースドキュメント読んでるけど、思ってたのと違う。

21:30:25 @aries@pl.asterism.xyz
2019-09-23 21:29:58 Posting 国見小道 kunimi53chi@pl.komittee.net
icon

コマンド打ちすぎだろ。

21:30:31 @aries@pl.asterism.xyz
icon

そうでもなくない?

21:30:41 @aries@pl.asterism.xyz
icon

インスコ終わったらアプデはすぐみたいだけど

21:31:04 @aries@pl.asterism.xyz
icon

まぁ公式のdocker対応が良くなるとOTPリリースとかお役御免なのでは……のお気持ち

21:33:09 @aries@pl.asterism.xyz
icon

一時間おきにbuildしてlatestにpushするだけとかガバガバすぎるしCircleCIの設定ファイル書き直さなきゃなと思いすでに3ヶ月近く経過している

21:33:28 @aries@pl.asterism.xyz
2019-09-23 21:33:23 Posting 301 Moved Permanently eniehack@misskey.io
icon

This account is not set to public on notestock.

21:33:46 @aries@pl.asterism.xyz
icon

最近しようとしているっぽい

21:34:04 @aries@pl.asterism.xyz
icon

試してないため動くのか走らん

21:34:27 @aries@pl.asterism.xyz
icon

WIPか

21:34:49 @aries@pl.asterism.xyz
icon

でも一ヶ月くらい前のあの後動きが見えない…

21:35:46 @aries@pl.asterism.xyz
icon

そろそろgitlabのdockerリポジトリにpushしてくれるようになってほしい
手元でbuildするの面倒くさい

21:35:52 @aries@pl.asterism.xyz
2019-09-23 21:35:40 Posting kphrx kPherox@pl.kpherox.dev
icon

prod.secret.exsを/etc/pleroma/config.exxにコピーしてpleroma startを叩いてみたのですがMix.Configが見つからないと言われて怒られました。なんで…?

21:36:29 @aries@pl.asterism.xyz
icon

@kPherox
Replaced pleroma_job_queue and Pleroma.Web.Federator.RetryQueue with Oban (see docs/config.md on migrating customized worker / retry settings)
https://git.pleroma.social/pleroma/pleroma/blob/develop/CHANGELOG.md
この辺ですかね

Web site image
CHANGELOG.md · develop · Pleroma / pleroma
21:37:10 @aries@pl.asterism.xyz
icon

wasabi障害+jp復旧+pleromaのconfig書き方いつの間にか変わってたことにより今朝ないてた

21:37:16 @aries@pl.asterism.xyz
2019-09-23 21:36:47 Posting 301 Moved Permanently eniehack@misskey.io
icon

This account is not set to public on notestock.

21:37:24 @aries@pl.asterism.xyz
icon

mastodonより楽では

21:37:31 @aries@pl.asterism.xyz
icon

いやどっちも面倒それはそうなんだけど

21:38:23 @aries@pl.asterism.xyz
icon

@mohemohe 障害に障害に微妙なアップデート重ねられたら泣いちゃうわ

21:38:56 @aries@pl.asterism.xyz
icon

アプデ後はこんな感じ
config :pleroma, Oban,
queues: [
federator_incoming: 200,
federator_outgoing: 200,
web_push: 50,
mailer: 10,
transmogrifier: 20,
scheduled_activities: 100,
background: 50
]

21:39:56 @aries@pl.asterism.xyz
icon

元は
config :pleroma_job_queue, :queues,
にfederator_incoming: 200,
...
とか書いてた

21:41:52 @aries@pl.asterism.xyz
icon

@kPherox あれ、そうですかね
こっちはcnofig書き換えなきゃ動かなかったんですがねー
メッセージ具体的には覚えてませんが、何かがなくて1or2をタイプしてね、みたいな

21:42:43 @aries@pl.asterism.xyz
2019-09-23 21:41:36 Posting kb10uy kb10uy@mstdn.maud.io
icon

ベアメタルWindowsでMasotodon運用してる猛者おらんの

21:42:59 @aries@pl.asterism.xyz
icon

これ絶対buildで憤死するゾ

21:44:09 @aries@pl.asterism.xyz
icon
21:45:21 @aries@pl.asterism.xyz
icon

お仕事柄掃いて捨てるほどMS系のプロダクトキー持ってるけどたまに出所不明のものまで出てくる

21:46:56 @aries@pl.asterism.xyz
2019-09-23 21:46:38 Posting sublimer@あすてろいどん鯖管 sublimer@mstdn.sublimer.me
icon

This account is not set to public on notestock.

21:47:19 @aries@pl.asterism.xyz
icon

azureとの連携が強いのはwindows server自身のサービスを使う場合に限るからにゃー

21:47:40 @aries@pl.asterism.xyz
icon

OSS入れてどうこうとか、独自ソフト入れるとかそういうのは別にうん…

21:48:34 @aries@pl.asterism.xyz
icon

動くけどそれ動かしてる人いるのかな

21:49:46 @aries@pl.asterism.xyz
icon

そこまでして.NETとなるとLDAPじゃ満足できねぇぜ!ADを使いたいんだ!みたいな場合なんだろうか

21:51:08 @aries@pl.asterism.xyz
icon

窓鯖の利点は別にコマンドとかわからなくても割となんとかなるっていうのがあり、これが実は超スーパー大きな利点
世の中Linuxわからない人のが大多数なわけで

21:51:51 @aries@pl.asterism.xyz
2019-09-23 21:51:44 Posting shibafu528 shibafu528@social.mikutter.hachune.net
icon

コマンドが分からなくても何とかなるけど手順書がドくそぶ厚くなるのはいいんかな……まあそっちのが分かる人のほうが多数派なんだよなと諦めてはいる

21:52:01 @aries@pl.asterism.xyz
icon

それはそう

21:52:26 @aries@pl.asterism.xyz
icon

下に合わせるしかない以上どうしようもないのじゃ

21:53:35 @aries@pl.asterism.xyz
icon

あーこれServer Core Installとかは別の話ね

21:54:01 @aries@pl.asterism.xyz
icon

あれ使うとPowerShellだけで頑張ることになるので情報の少なさを考えるとLinuxよりきつそう

21:54:21 @aries@pl.asterism.xyz
icon

多分Hyper-Vノード用とかなんだろうか……?

21:54:50 @aries@pl.asterism.xyz
icon

@nieein56 IISどこに何があるのかなにもわからない…
なんかWebサーバ以外も建てられて謎が謎を呼ぶ

21:55:59 @aries@pl.asterism.xyz
icon

@nieein56 自分で色々やるというよりも既製品を使って楽をするっていう使い方なのよねやっぱり

21:57:47 @aries@pl.asterism.xyz
icon

Linxuやらあるいはその他だと運用者を用意しづらいからとりあえずパソコン触れる人なら「運用できます!」と言い張らせて人売りしやすいからじゃないですかね

21:58:13 @aries@pl.asterism.xyz
icon

たいぽばっかり

21:58:51 @aries@pl.asterism.xyz
icon

はずかちい