How to Win a Data Science Competition Week2のValidation、Data leakageを視聴 ・Validation データをtrain、testに分割する方法
validationの中の分割の種類
データを分析するときは、ドメインを意識してみると良い。 Underfitting ↔︎ Overfitting ValidationとPublicで2つ結果を出すと比較ができる。 leader board をシャッフルする理由
・Data leakage Data leakage:ただの数字でなく、意味を持つ。例)学籍番号、タイタニックのチケット →現実だと…「匿名化したのにバレていいの??」印象はあまり良くない。 |