09:01:50 @aries@mstdn.asterism.xyz
icon

ぐえ超腹痛いAMずっと会議なんじゃが

09:01:52 @aries@mstdn.asterism.xyz
icon

ひー

09:18:45 @aries@mstdn.asterism.xyz
icon

毒素出していくらか回復した

11:05:44 @aries@mstdn.asterism.xyz
icon

さくらのレンサバ最安プラン遅い遅いって言われてるけど去年か一昨年あたりにインフラがっつり更新入った後はどうなのかってのがあまり情報見つからない
体感そんなに記事表示自体は遅く感じないんだよな
管理画面はちょい遅いかなぁとは感じるけど

11:06:55 @aries@mstdn.asterism.xyz
icon

バカ安いしこれで考えるか…
移行に必要なのはあとなんだ
google analyticsなりsearch consoleなりである程度流入多い記事だけリストアップして、リダイレクトの設定試せばあとは泣きながら移すだけか

11:08:48 @aries@mstdn.asterism.xyz
icon

試したOK
見た目作るのも必要だな忘れてたが

11:49:59 @aries@mstdn.asterism.xyz
icon

バケットサイズ減らないんだけど????????
メトリクス取られるのがJSTだと9時、削除したのは昨日の午後1時くらいだからこの数字はおかしい……

Attach image
11:50:10 @aries@mstdn.asterism.xyz
icon

えマジで一体なんなんだ…

11:51:42 @aries@mstdn.asterism.xyz
icon

なんなの……このままじゃ破産してしまうー

11:58:49 @aries@mstdn.asterism.xyz
icon

えー詳細メトリクス取るか…?

11:59:39 @aries@mstdn.asterism.xyz
icon

……

Attach image
12:05:33 @aries@mstdn.asterism.xyz
icon

確かにそこは動いてそうなのよね
ログでもsidekiqがdeleting cache/hogefugaうんたらとか出てるし

12:06:07 @aries@mstdn.asterism.xyz
icon

んー、もへエディションでのなんかか?

12:06:42 @aries@mstdn.asterism.xyz
icon

remove-orphansは何度も動かしてるけど消えないからリストアップできてなくね?という怪しさはあるね

12:08:32 @aries@mstdn.asterism.xyz
icon

バニラのイメージでmedia usage実行してみるかぁ

12:09:27 @aries@mstdn.asterism.xyz
icon

media usageは変わらない

Attach image
12:09:38 @aries@mstdn.asterism.xyz
icon

remove-orphansもっかい試す

12:11:16 @aries@mstdn.asterism.xyz
icon

昨日の今日なのにorphan生まれてて泣いとるよ

12:14:00 @aries@mstdn.asterism.xyz
icon

S3から見ると110万オブジェクトあるらしいので、これとremove-orphansのスキャン数との差が気になるな

12:17:01 @aries@mstdn.asterism.xyz
icon

ふむ

Attach image
Attach image
12:17:24 @aries@mstdn.asterism.xyz
icon

30万ファイルも忌み子がいるらしい

12:20:40 @aries@mstdn.asterism.xyz
icon

削除作業バニラでやっても変わらんな

12:24:07 @aries@mstdn.asterism.xyz
icon

12:27:27 @aries@mstdn.asterism.xyz
icon

github.com/mastodon/mastodon/i
これかなと思ったけど、バケットの構成上そうはなってないんだよなー

Web site image
tootctl media remove-orphans fails with "The specified key does not exist" (S3 storage) · Issue #22981 · mastodon/mastodon
Attach image
12:40:32 @aries@mstdn.asterism.xyz
icon

cache/accountsの中にめっちゃ古いファイルも残ってるけど消えてないのが見えてきた
ほんとに使われてんのかこいつら…

12:43:03 @aries@mstdn.asterism.xyz
icon

accounts/
cache/accounts/

custom_emojis/
cache/custom_emojis/

media_attachments/
cache/media_attachments

これ上下どっちか消しても良い????

12:44:40 @aries@mstdn.asterism.xyz
icon

なのかな

12:45:13 @aries@mstdn.asterism.xyz
icon

cache/って付いてない側にもいっぱいファイルあるのよねローカル以外の

12:45:46 @aries@mstdn.asterism.xyz
icon

naruhodo

12:47:14 @aries@mstdn.asterism.xyz
icon

となると、cache/ついてない方に残ってるリモートメディアで、かつリモートのアクセスできなくなったアカウントの都合上avatarsとheadersにいっぱい残ってる説?

12:48:03 @aries@mstdn.asterism.xyz
icon

tootctl accounts cullで解決できるよね多分それだと

12:48:12 @aries@mstdn.asterism.xyz
icon

やるか…?あんまりやりたくなかったんだけど

12:48:57 @aries@mstdn.asterism.xyz
icon

なんかcull以外に繋がらない外部サーバーのキャッシュデータ消すコマンドあったっけ…

12:50:23 @aries@mstdn.asterism.xyz
icon

tootctl accounts pruneか

12:52:07 @aries@mstdn.asterism.xyz
icon

pruneしてみるかぁ

12:55:44 @aries@mstdn.asterism.xyz
icon

AWS CLIから見た時
accounts/ 5.5GB
cache/ 60GB
custom_emojis/ 500MB
media_attachments/ 5.4GB
site_uploads/ 90KB

cache/がおかしいのかな

13:06:49 @aries@mstdn.asterism.xyz
icon

OK, pruned 21852 accounts

13:08:31 @aries@mstdn.asterism.xyz
icon

cache/の容量確認してみましょ

13:09:42 @aries@mstdn.asterism.xyz
icon

2GBくらいしか減ってないや

13:10:48 @aries@mstdn.asterism.xyz
icon

cache/preview_cardsに何ヶ月も前のファイルが残っている
preview_cards removeはしたが

13:10:55 @aries@mstdn.asterism.xyz
icon

オプション明示してみるか

13:11:47 @aries@mstdn.asterism.xyz
icon

ああいやデフォ180日か
ならまぁ
cache/preview_cardsの容量は8GBだから大した話ではないし

13:12:16 @aries@mstdn.asterism.xyz
icon

cache/がデカすぎなのはわかったからその中やね次は

13:12:21 @aries@mstdn.asterism.xyz
icon

API課金が怖くなってきた

13:20:18 @aries@mstdn.asterism.xyz
icon

cache/accounts/ 26.7GB
cache/custom_emojis/ 3.9GB
cache/media_attachments/ 20.2GB
cache/preview_cards/ 8GB

13:20:28 @aries@mstdn.asterism.xyz
icon

tootctl media remove --prune-profiles試してみよう

14:12:50 @aries@mstdn.asterism.xyz
icon

tootctl media remove --prune-profile

Attach image
14:14:02 @aries@mstdn.asterism.xyz
icon

これ結局media usageに出てくるファイルが消えただけであって統計とかremove-orphansに引っかからないファイルがいるってのとは関係ないんだよなぁ

14:14:04 @aries@mstdn.asterism.xyz
icon

悲しみ

14:15:03 @aries@mstdn.asterism.xyz
icon

一応cache/accountsが26GB合った所1.7GBになった

14:16:18 @aries@mstdn.asterism.xyz
icon

いやまてこれがまずおかしい
メトリクスがおかしいなんで昨日段階でほぼこれだったはずなのに今朝のメトリクスが136GBなんだよ

14:16:53 @aries@mstdn.asterism.xyz
icon

aws cliで見てこの容量だからなんか全てがおかしい

14:16:59 @aries@mstdn.asterism.xyz
icon

明日見ましょう…

20:25:23 @aries@mstdn.asterism.xyz
icon

aws s3 ls s3://秘密のバケット/ --summarize --recursive --human-readable
40GB

20:26:04 @aries@mstdn.asterism.xyz
icon

メトリクスおかしいだろうが昨日の14時段階で80GBか70GB程度になってたのになんで今朝のメトリクスが136GBなんだよ