そのコード、本当に速くなった!? Excelでお手軽t検定 - Qiita

そのコード、本当に速くなった!? Excelでお手軽t検定 - Qiita

パフォーマンス改善を意図したコーディングにおいて、「 実行速度を計測した上でものを言え 」とは耳に...概要を表示 パフォーマンス改善を意図したコーディングにおいて、「 実行速度を計測した上でものを言え 」とは耳にタコができるほど言われることです。ではその計測結果、どう評価していますか？ バラツキを抑えるためルーチンを1000回、1万回、100万回と回して計測したとして、どんなにループ回数を増やしたって計測結果は毎回少しずつ違います。それでも誤差が気にならないくらい大差を付けての勝敗が付いたならいいものの、どちらの勝ちか微妙な感じだったら…？ 都合の良い測定結果だけ採用するなんて研究不正ですからね。誤差を含んだ測定結果群から結論を導いてこその評価です。 自然科学の世界では 検定 によって測定結果を評価します。われわれエンジニアもこれにならいましょう。 t検定 2群の標本がそれぞれ正規分布に従っていると仮定して、2群の母集団に有意差はあるかを求める手法がt検定です。 t検定の結果は検定統計量という、一種の