EC2とMySQLとダンプリストア

EC2上のMySQLで、大量データをダンプリストアしようとしたらとんでもない時間がかかりましたという話。

EC2で運用してるサイトのMySQLのibdata1が結構なサイズに膨らんでしまったので、ダンプリストアして縮小＋ibdata1を分割しようとした。

7000万件、50Gぐらいのダンプを出すのに1hかかった。これは想定内。

ただ、インサートに8時間かかった。勿論--opt付きで。

勿論メンテ時間オーバーで大変悲しい目にあった。

EC2(EBS)への書き込みって平均25MB/secぐらいしかでてないっぽい。

加えて単なる書き込みじゃなくてインサートだったので更に遅くなったっぽい。

インサートでの復旧は断念して、バックアップからファイルコピーで復旧。

こっちは２時間ぐらいで終わった。

EC2でそういうことするのはやめましょう。

というかクラウド全般でI/O速度がネックになるような作業をするなという話ですね。わかります・・・

今回みたいなことをしたい場合は

という感じで。

いい勉強になりました。