仕事のコードをちゃんと動いていないところがあったので追いかけて行ったら、呼び出し先の関数を見れば確かに動かなくて当たり前だったんだけど、同じような処理を他でもしていて、そちらがなぜちゃんと動いているのか分からない謎にぶち当たってしまった。
仕事のコードをちゃんと動いていないところがあったので追いかけて行ったら、呼び出し先の関数を見れば確かに動かなくて当たり前だったんだけど、同じような処理を他でもしていて、そちらがなぜちゃんと動いているのか分からない謎にぶち当たってしまった。
昨日のembulkが8時間で失敗してしまう件、教えてもらったoptionの設定で上手く動いた。> 37212.34 seconds (10,519,158 rows)
そろそろSSD壊れるかなーと思って、データベースのインデックスだけSSDに置くようにして、実体はRAIDストレージに移動させたんだけど、やっぱり日次バッチが遅くなった。
あ、バッチ遅いのはHDDのせいじゃないわ。以前embulkが転けたときに、データ投入だけは成功しているからUPDATEで時間が掛かってたんだ。別のデータも同じように1000万件単位でコピーしたら1時間ぐらいで終わった。
UserStreamサーバを外に出して、AWSと自宅サーバ両方に送りつつ、毎日AWSから自宅サーバに下ろしている分がなくなれば、かなり削減できるのだが。
「NTFSはデフラグ要らん。気になる人向けにツールが用意してあるだけ」ってツイートを見て確認してみたら、NTFSだけどデフラグしろって言われた。 gyazo.com/492ae0c33f7212…