b belajar.myudak

Feature engineering tanpa data leakage

Terapkan praproses dengan statistik yang dihitung dari data pelatihan saja.

dasar #sains data

Yang akan kamu pahami

Identifikasi kapan informasi evaluasi ikut memengaruhi model sebelum diuji.

Konsep inti

Transformasi seperti imputasi, penskalaan, dan pemilihan fitur belajar dari data. Bagi data sebelum fitting transformasi, lalu gunakan parameter yang sama untuk data validasi dan uji. Pemisahan berdasarkan waktu atau kelompok diperlukan bila baris terkait satu sama lain.

Coba langkahnya

Latih model pada dua nilai 10 dan 20, kemudian evaluasi pada nilai 100.

Pemusatan dengan statistik train saja
0-201102403704100NilaiKelompok 1–2 train · 3 testtraintraintest
1/3Pisahkan dulu. Data evaluasi disimpan untuk akhir.train = [10,20] · test = [100]

Cek pemahaman

Cek pemahaman
  1. Apa yang salah jika memakai rata-rata seluruh data?