https://xainome-blog.beeskynohito.workers.dev/tags/%E3%82%B9%E3%82%B3%E3%82%A2/Recent content in スコア on Xainome BlogHugojaFri, 22 Mar 2024 00:00:00 +0000https://xainome-blog.beeskynohito.workers.dev/posts/2024/03/improving-kaggle-competition-score/Fri, 22 Mar 2024 00:00:00 +0000https://xainome-blog.beeskynohito.workers.dev/posts/2024/03/improving-kaggle-competition-score/<p>前回から4日ほど空いてしまったのですが、Kaggleでどうやってスコアを上げるか四苦八苦してました。</p> <p>そもそも前のスコアが低すぎたので少し改善するだけで上がるかなと思ってたのですが、なぜか上がらず少し結果を見てたら自分のコードミスだったというオチです（笑）</p> <p>前回の予測コードがこちら</p> <p><img loading="lazy" src="https://xainome-blog.beeskynohito.workers.dev/posts/2024/03/improving-kaggle-competition-score/images/%E3%82%B9%E3%82%AF%E3%83%AA%E3%83%BC%E3%83%B3%E3%82%B7%E3%83%A7%E3%83%83%E3%83%88-2024-03-22-090949.png"></p> <p>で修正したコードがこちら</p> <p><img loading="lazy" src="https://xainome-blog.beeskynohito.workers.dev/posts/2024/03/improving-kaggle-competition-score/images/%E3%82%B9%E3%82%AF%E3%83%AA%E3%83%BC%E3%83%B3%E3%82%B7%E3%83%A7%E3%83%83%E3%83%88-2024-03-22-091019.png"></p> <p>for文を使って目的変数が変わるたびモデルの学習を行った後、予測を行っています。ちなみに私は訓練データを8:2に分割して実行しています。</p> <p>前の時は全ての目的変数の学習が終わったとモデル予測を行っていました。本来であれば目的変数1つに対して学習して予測を行うのですが、全て学習した後予測してたので最後の目的変数の学習をしたモデルになってたので、想定していた結果にはならなかったみたいです。</p> <p>というわけで修正した後のスコアがこちら</p> <p><img loading="lazy" src="https://xainome-blog.beeskynohito.workers.dev/posts/2024/03/improving-kaggle-competition-score/images/%E3%82%B9%E3%82%AF%E3%83%AA%E3%83%BC%E3%83%B3%E3%82%B7%E3%83%A7%E3%83%83%E3%83%88-2024-03-21-235750.png"></p> <p>すごい！だいぶ上がった！というかこれが普通のスコアっぽい（笑）</p> <p>よくなったので今度はもう少しデータと向き合いつつ、より良い加工方法とモデルの作り方を見てみようと思います。またDiscussionを見つつ、他の人のNotebookを見てみました。他人のコードをChat-GPTに解説してもらいつつ、不明な点を聞いてみようと思います。</p> <p>余談ですが何もしないときとワンホットエンコーディングを行った時の結果を見てみます。AUCが上がったものもあれば下がったものもありますね。大幅に改善されたわけではないので、元のデータに対して加工したほうがよさそうです。外れ値とか入ってるかもしれないですね。</p> <p><img loading="lazy" src="https://xainome-blog.beeskynohito.workers.dev/posts/2024/03/improving-kaggle-competition-score/images/%E3%82%B9%E3%82%AF%E3%83%AA%E3%83%BC%E3%83%B3%E3%82%B7%E3%83%A7%E3%83%83%E3%83%88-2024-03-22-090502.png"></p> <p><img loading="lazy" src="https://xainome-blog.beeskynohito.workers.dev/posts/2024/03/improving-kaggle-competition-score/images/%E3%82%B9%E3%82%AF%E3%83%AA%E3%83%BC%E3%83%B3%E3%82%B7%E3%83%A7%E3%83%83%E3%83%88-2024-03-22-094827.png"></p> <p>というわけでKaggleいろいろ試してるという話でした。ではでは</p>