今年もISUCONに参戦してきました
昨年は社外の人と組んで3人チームで参加したのですが、今年はそういった話も特になかったのもありソロでの力を試してみたくソロ参戦してきました。
得点は17767点で235位（？XPathで適当に調べたけど合ってるはず）でした。 要は半分より上ですﾔｯﾀｰ
やったこと
こちらのリポジトリにコミットしてあることだけです、本当にこれだけ。
今年は3台構成が可能だったのですが、それを試す時間もなく1台のアプリケーションをいじっていくだけの感じになりました。
git管理
差し戻しが出来るようにってことで今回ガッツリいじっていくGoのディレクトリとその他必要なディレクトリや、ミドルウェアの設定の管理をしました。
いい感じのMakefileを配置
2週間ほど前に練習した時に使ったMakefileを配置して、覚えるコマンドを減らしていきました。 これからはこのMakefileを育てていこうかなと思っています。
Goのバージョンアップ
Go 1.16系が使われていたので最近出たどうも速いと言われている1.17系を使うようにしました。 シュッとバージョン上げることが出来るのはGoの利点ですね。
User情報のキャッシュ
まずはINSERTやUPDATEがかかっているかみたいなことをざっくり見てキャッシュするのが簡単そうなやつからスタート。
Userのcache · yamachu/isucon11-qualify@b8c485f · GitHub
キャッシュできるものはやってしまえな考えから…この時はまだ計測とかはしていない。
getIsuListのN+1の解消
alp見たらこのエンドポイントがめちゃくちゃSUMで見たら大きかったので対処していこうってことで始めた。
サブクエリで一気に取る · yamachu/isucon11-qualify@fbb2e13 · GitHub
そもそもGo書いてないからどうやってStructにマッピングするんだよとかキレながら実装。
SQLも書けないのでググりながらやりたいことの単語を入れてそれっぽいSQLを パクって 参考にして実装。
割とこの施策で上がった。
Icon画像をDBに入れるのをやめてファイルに落とし込む
DBにBlobを突っ込んでるのをやめる · yamachu/isucon11-qualify@32303f7 · GitHub
Revert "DBにBlobを突っ込んでるのをやめる" · yamachu/isucon11-qualify@ecf5301 · GitHub
Bye 画像 · yamachu/isucon11-qualify@148b715 · GitHub
一回リバートを挟んだ施策。 alpで見たらちょっとリクエスト多めかな…？と思えたので試してみた。 昔のISUCONでもDBからBlobを排除したら負荷が落ちたみたいのがあった記憶があったのもあり試した。
リバートをするのに至った理由としてはベンチで404とか302とかが返ってきて欲しいのに200が返ってきたみたいなログが見えてダメそうだと思ったから。 けどその意味をその時にちゃんと理解していればリバートいらなかったんじゃ…
ということで終了直前にこれpostIsuでロールバックかかってるじゃんに気づき（SlowQueryみてもその辺りの処理が多かったのが気になっていた）画像もロールバック（削除）したら200にならないじゃんになり試したら通った。
正直あまりスコアは上がらなかった（上がったのは1000点ぐらい）。
Bulk Insertを試す
bulk insert一番いい · yamachu/isucon11-qualify@70ce3d7 · GitHub
毎回数十件以上のINSERTするPayloadが飛んできていて、DBのロック時間がめちゃくちゃ取られるだろうなって想像してBulk Insertに変更。 2〜3000点ぐらい上がった記憶がある。
最新のISUのConditonをキャッシュする
早くなるはず（ベンチ回せない） · yamachu/isucon11-qualify@e6f1843 · GitHub
getIsuListでも行われていた最新のisuConditionを見てごにょごにょする処理。 同じクエリを使いまわしても良かったのだけれども、これテーブルに分けたほうが楽ではと思ったのでテーブル分けて実装。
getTrendはこれを採用したら一気にスコアが上がったけれども、getIsuListで使ったらスコアが10000以上落ちて何も分からなかったのでこのキャッシュはTrendだけで採用した。
反省
結局これしか出来なかった。
必死にクエリ書くのを1時間ぐらい頑張っていたけれども、最初っからテーブル分けるかRedisやOnMemoryキャッシュ試すとかに移れればよかったなと思った。 判断が遅い。
あとMariaDBのConfigにSlowQuery吐き出すためのフラグのやつがなくて出ない出ない！！！！！で騒いでたのがアホだった。
show variables like '%slow%';
でOFFになっているのを何度も見ているんだからONにするのを一回書こうねっていう………。
あと最初にコメントアウトでこの辺り数字変えると上がるはずだから変えろっていうのも忘れていたり、INDEX貼り忘れがあったりと初歩的なミスが多かった。 これやれば上がるは早めに頭を使わなくても出来るように練習をもうちょっとしておこうと思った。
後はベンチ回せない時にレスポンス合っているのかを自分で試せる施策を今後は試していきたい。
来年は頑張ろう！！！！！！来年も個人スポンサーやって応援しよう。
