icon

@O4A@calckey.7ka.org 1回自分の方で両方開いてみないとなんも分からんですね… 無関係なら無関係で下手に関係あるかもーと言っても良くないですし 後でさっきの時間のログも見て見ます

icon

@O4A@calckey.7ka.org 気のせいかも分からないのですがその時間の前後にちらのーとさんあての疎通処理が上手くいってないログが割とよく出てるんですよね 無関係かもしれないんですけど 多分村が落ちる時間と似たくらいかな…?私もその時間帯でアクセスできそうなら覗いてみようかと思います こちらが落ちるのはまあ間違いないのですが他鯖に影響あるならよくないので

icon

BLEACHの時間に流してしまったな感ある

icon

ソドワ、多分初心者卓で使うのはどっちかかなというキャラシ
今のところ最終更新版

セシルさん(プリーストシュータースカウト)
https://yutorize.2-d.jp/ytsheet/sw2.5/?id=H9cREd
ネクスさん(プリーストフェンサースカウト)
https://yutorize.2-d.jp/ytsheet/sw2.5/?id=QJW2ym
※パーティバランスみてレンジャーとスカウトは入れ替え予定

セシル・ローゼンリリー・イロース - ゆとシートⅡ for SW2.5 - ゆと工公式鯖
ネクス・ファロン - ゆとシートⅡ for SW2.5 - ゆと工公式鯖
icon

落ちる直前のログが記録されているのこれくらいかもなあ 後は時差がある気がする

icon

何でこんな変な時間に???

icon

なんか気のせいじゃなければ落ちてる時間帯にチャート生成している…???

icon

まあ今までなんか私がぶっ壊したときも色んなエラーが起こった時も原因があったので今回もあるとは思うんだけどねー VPSがわでなんかしてましたとかそういうオチならまだいいんですが

icon

追記:2時間ではなく4時間に1回落ちてることがわかりましたがわかったところで何なのだろうなと言う感じ

icon

4時間に1回のサイクルで動くものってよくわからないかもしれない

icon

分かったところでどうにかなるかってならないんだなこれが

icon

2時間に1回じゃないや 4時間に1回の奇数だこれ

icon

スタンバってたけど何も起きなかった…

icon

大丈夫そうだ…?

icon

9時は平気…?

icon

あれ?なんも起きないな…?

icon

そろそろ落ちるのでよろしくねー(事前通告)

icon

フォーク独自の機能でこの辺影響出る奴あっただろうか…?
ちょっとあとでちまちま確認してみるけども
https://github.com/Lhcfl/sharkey-stelpolva/commits/stelpolva/?author=Lhcfl

icon

いややっぱ8分から急上昇しているな 8分15秒から
以下10秒程度ごとに
RESが1.9G→3.7→6.1→8.2→9.3と上昇

icon

仮に00分から重くなっているのであれば定時処理でなんか引っかかってる可能性もあるし(ただその後落ちるのが数分後で固定されているのはまあまあ謎)

icon

それはいま私が再起動したやつです!すいません!

icon

ログ見てると落ちるのは8分頃だけどメモリ使用率自体は7分頃の時点でももうかなり高いなあ…

icon

まあ時間わかってるし次のエラーを確認したらcronでその時間に再起動をかけるか…

icon

いざとなれば本家鮫にすぐ戻せるように作ってるみたいなのでそれを試すことはできるかな〜とは思ってますね なんだろなあ…

icon

結局よくわからんのでSharkey側にもなんか知ってる人居ないかなで投げるけどこの問題が自環境でしか発生してないと思われるせいでどうにもならない…

icon

既に問い合わせしてそう言う変更はしてないって言われてますね 上流では?みたいな

icon

リモートのチャート生成はオフにしてたはず

icon

@Porlam@mi.starlamp.su 出てないです!重すぎてログに記録されるはヒープ領域が不足してクラッシュしたということくらいです…

icon

redisは無罪かもしれない?

icon

たしかにMisskey本体のみが異常にバカ重くなっててほかはそうでも無いんですよね…

icon

この変更はSharkeyに入ってるはずなんだよね?それはそうと結局Redisのキャッシュ爆破した方いいんですか?

icon

最新の変更に含まれるリーク対応なのかな…?見てこよ

icon

時間がわかってるなら読み込み負荷状態が起こる前にあらかじめ落とせばいいってワケみたいな ほんまか?

icon

症状を軽減させる可能性があるなら毎時この時間帯にこっち側で再起動かけるのもありか?

icon

ただの破壊になるため…

icon

破壊しても何も解決しない可能性があるところが怖いんだよな

icon

それかあれかなbullダッシュボードのよくわからないsystemキューを飛ばす… 飛ばしていいのか…?

icon

破壊が好きな人が現れちゃったな

icon

やるなら今日はやめとこう 危ない

icon

だいぶ怖いコマンドなので押してサーバー死んだらどうしようって奴過ぎる

icon

ちょっとサーバー落としてredis空っぽにしてみるか…と思ったけどタイムラインの内容吹き飛ぶかもしれん…?

icon

redis-cli FLUSHDBってそんな気軽にやっていいコマンドではないよな…?

icon

redisのデータリセットとか何もわからんので調べてみよう

icon

@ponapalt@ukadon.shillest.net ありがとうございます!検索にはpgroongaを使用しているのですがredisの辺りは全然見ていなかったのでちょっと自分でも確認してみようと思います…!

icon

シンVPSに問い合わせしてきます

icon

VPS側にも確認したほういいやつなんですかね?なんだろうなこれ…

icon

負荷が大きすぎてログにも記録されないんですよこの時間帯…

icon

ここまで分かればワンチャンなんかわからんか… Sharkeyのdiscordに投げてこようかな… なんもわからん…つらい…

icon

時刻まで分かってたのはいいけどこれ何が起こってるかさっぱりわかりません…

icon

4時間おきに奇数時刻(3時、7時、11時、15時、19時、23時)の8分ごろから10分ごろにかけてMisskey(Sharkey) masterプロセスのメモリ使用率(画像のRESの値)がいきなり爆増することが判明してこの2分間のうちに負荷でサーバーがクラッシュするんですがこれ何でだかわかる人いたら助けてください…
なにがおこってるのこれ…

Attach image
icon

なんやねんこれ…

icon

普段のメモリ使用率は数百MBとかなんですがこの時間だけメモリ使用率が12GBとかになってる

icon

この時間帯に確実に落ちる 奇数時の8分から10分にかけてメモリ使用率があり得ない高さになってる

icon

頭から煙出たのでなんか思い当たる天才がいたらおしえてください アクセスログ見てもなんもそういうの無さそうなので内部かなあ…と思ったけど…

icon

まあ落ちる時間帯がわかったのはいいじゃないですか アハハ その時間帯は不安定になるってわかってればいつものかーてなりますからね よくはないけど よくね~~~ 何

icon

ただ動いているだけならともかく瞬間的に高負荷って言うのも謎だ…

icon

ここまで分かってるのにな~???傾向に気づいたのは偉いけど結局何なんすかね…なんだ…ぜんぜんわからん…奇数時8-10分頃に動くプログラムって何… しらん… なに…

icon

タイミングの定時性が高すぎるのでなんかのbotかなあ…と思うけど何だか全然わかんない あいちゃん…ではないよな…本人も落ちてるし…前から動いているしてなるし

icon

ここまで分かったのはいいけどこの時間帯何かしている覚えがなくて頭を抱えている

icon

ですねえ 自分で動かしてるbotかなんかが引っかかってるのか…?ってなっている とりあえず絵文字ボットを止めてみたけどこれはただ正確にエラーが起こっている時間帯を記録しているだけな気もするなあ…

icon

次落ちるかもしれないなら19時9分頃、21時9分頃、23時9分頃ということです なんだ

icon

えっ ガチで時間帯に傾向ある~なにこれ~この時間帯に一体何が起こっているというの~????なに????なんだこれ…

icon

なんかcronか何かで走ってる時刻だろうか

icon

えっとねえ 奇数時の10分前後に落ちてますね…?

icon

強いて言うなら落ちてる時間に傾向があるな…?今気づいた なんだろうこれ

2024-11-09 01:25:54 くろいぬ@ブルーマーケット14 C-24の投稿 96ENU@misskey.io
icon

このアカウントは、notestockで公開設定になっていません。

2024-11-09 13:05:31 ka92の投稿 ka92@misskey.design
icon

このアカウントは、notestockで公開設定になっていません。

icon

実際にサイズが小さめだから大きいの頼むべきな店ってレコメンドされない印象ある 小さいから

2024-11-09 13:44:21 とかぷる:xflest_chance:みんたろうの投稿 tokaplmi@fle.st
icon

このアカウントは、notestockで公開設定になっていません。

icon

多分棺姫のチャイカと混同していた説が濃厚

icon

名前を見た覚えはあるためオカマだったの…???!という衝撃を受けている 多分なんか字面で知らない作品の美少女キャラのなんかだろうと思っていたため

icon

チャイ 誰 検索して美味しそうなチャイティーの写真が出てきて奇遇だね今俺もそうなってるんだよねってなってた

icon

かわいすぎ〜

2024-11-09 10:31:14 にじやすの投稿 for20minute@mstdn.jp
icon

このアカウントは、notestockで公開設定になっていません。

icon

設定調整した副作用なのかわからないけど通常時のメモリ使用率がめっちゃ下がってそう

icon

@ponapalt@ukadon.shillest.net いえいえありがとうございます!他に少しでも解決策がないかなーと思って聞いてることなので解決策になりそうなことをご提示いただけるのがありがたいです!今後も様子見つつ良さそうな対応はないか考えてみます…!

icon

続いてちょっと調整したんのでソフトウェアの再起動をしてみます~

icon

@ponapalt@ukadon.shillest.net すいません そちらも記載漏れてますが設定済みです… それでも改善されないので何が原因かわからずお手上げになっています 何か類似の症状があるとも聞かないのでこちらの環境でやらかしているのかなあ…とも思いつつこれ以上のログも出ないためよくわからず…​:blobelephant_cry:

icon

ちょっとだけサーバ本体の再起動してみます

icon

@ponapalt@ukadon.shillest.net 既に--max-old-space-sizeはsystemctlの起動ファイルに設定済みでかなり多めに割り当てても落ちるという状態で…ちょっと原因がそこ以外の可能性が高いので困っています

icon

ヒープサイズ増えるようにいろいろやってるけどそれでも落っこちるからなにしたらいいかわからん それともうちのデータかなんかが重すぎるんだろうか

icon

昨日ご相談したところMisskeyの上流の不具合の影響ではないだろうか?て言われたけどMisskeyでこの手のHeap系のエラー出て落ちてるよーって症状やサーバーに心当たりある方っていますか?

追記:
・max-old-space-sizeは既に設定済み(多めにしても何してもうまくいかない)
・build中ではなく通常の起動中に発生する

<--- JS stacktrace --->
FATAL ERROR: Reached heap limit Allocation failed - JavaScript heap out of memory
----- Native stack trace -----

icon

今のパソコン正直壊れる兆候がややあるからいきなり死んでもあっ…ついに…みたいなとこはややあるんだよな​:blobcat_frustration:​ パソコン買うなら来年かなとは思ってるので来年まで持って欲しい

icon

さすがに昨日はスマホ、今日はパソコン!だったら真顔になってたのでよかった〜

icon

タコ足した訳でも無く壁のコンセントに差し直しただヶなのでなんか抜けかけてたとかか…?

icon

コンセント抜き差ししたら起動した!!ありがとう… そういう症状もあるのか

icon

パソコン死んでる…?昨日の夜更新してシャットダウンしたのがダメだったか そうかも

icon

朝起きたらWindowsも起動しない(asrockの画面で止まった)し本格的に自宅のなにもかも終わりつつある

icon

@n@premis.one ありがとうございます!このようなシステムがあるんですね…?私の場合まだGoogleアカウントをスマホ単体で利用するみたいなことがないので余程の状況でない限りなんとかなりそうですが、両親が他デバイスを使わずにひとつの端末のみでログインしてる状況でそれでスマホ壊してパスワード紛失してたら終わりだな…と思ってたためバックアップコードの扱いについて連絡しとこうかなと思います!助かります

2024-11-09 08:12:59 tori:meow_cloroxsip:の投稿 n@premis.one
icon

このアカウントは、notestockで公開設定になっていません。

icon

村が時々落ちる不具合ですがやれる範囲のことはほぼ全部試したその上で原因不明で対応不可能なのでお知らせにも書いておきます