Kapan informasi tersedia merupakan batas pertama
Setiap input membutuhkan tanggal berlaku (as-of) sekaligus waktu informasi tersedia bagi model. Laporan yang baru terbit Selasa tidak boleh digunakan untuk membenarkan keputusan Senin, walaupun periode data berakhir Senin. Normalisasi zona waktu, revisi data, publication lag, dan penutupan bursa harus terdokumentasi.
Histori harga saja tidak cukup untuk model yang memakai peringkat kapitalisasi pasar, status listing, circulating supply, likuiditas, atau klasifikasi sektor. Mengambil klasifikasi terkini untuk periode lama dapat memasukkan informasi masa depan secara diam-diam.
Survivorship bias dan universe yang berubah
Survivorship bias terjadi saat hanya token yang masih bertahan atau sukses hari ini dimasukkan ke pengujian masa lalu. Aset delisting, perdagangan terhenti, migrasi ticker, dan bursa yang tutup dapat mengubah hasil. Universe harus dibangun dari catatan pada masa tersebut, termasuk aset yang kemudian gagal.
Portofolio berbasis ranking memerlukan market cap point-in-time, aturan eligibility, dan batas likuiditas yang eksplisit. Token berperingkat tinggi hari ini tidak boleh ditambahkan mundur ke kelompok top-100 pada masa sebelumnya. Data yang tidak lengkap harus diberi label.
Urutan pengujian yang dapat dipertanggungjawabkan
Mulailah dari hipotesis yang bisa diuji, kumpulan informasi yang dibekukan, kalender keputusan, dan konvensi eksekusi. Bentuk universe yang eligible pada waktu t; gunakan hanya input yang tersedia hingga t; simpan output model dan alasan kandidat ditolak; eksekusi tidak boleh terjadi lebih awal daripada waktu yang sah.
Setelahnya ukur pertumbuhan setelah biaya, drawdown, exposure risiko, dan turnover. Simpan versi konfigurasi serta sumber data. Bedakan rekonstruksi historis retrospektif dari pengujian out-of-sample dengan parameter yang ditetapkan sebelum evaluasi.
Biaya, harga usang, dan sejarah pasar yang tidak lengkap
Fee, spread, slippage, dan market impact memengaruhi return aktual. Saat tekanan pasar naik, slippage bisa membesar justru ketika strategi risk-control diuji. Untuk lintas aset, tuliskan perlakuan imbal hasil kas, seri emas/perak, proxy stablecoin, dan sinkronisasi kalender.
Kutipan harga yang hilang, outlier, dan histori token yang berhenti harus memiliki aturan penanganan. Missing data tidak boleh otomatis menjadi return nol atau asumsi exit menguntungkan. Bila valuasi tidak reliabel, beri keterangan pada metrik dan simpan interval kosong.
Perbedaan in-sample, OOS, dan live forward
In-sample digunakan untuk pengembangan; out-of-sample menguji data yang tidak digunakan dalam desain; live forward lebih kuat secara operasional karena output diterbitkan sebelum pergerakan harga berikutnya diketahui. Semuanya tetap memiliki ketidakpastian regime dan tidak menjamin masa depan.
M.A.I.C. membedakan Final Mode Authority, constraint governance, rekonstruksi historis, dan protected PAS. Penjelasan metode publik tidak membuka bobot, sinyal privat, fitur internal, ataupun ranking token yang dilindungi. Klaim performa produk harus dikaitkan ke bukti bertanggalnya sendiri.
Pertanyaan penting
Apakah backtest panjang sudah cukup memvalidasi model crypto?
Belum. Histori panjang masih bisa tercemar informasi masa depan, survivorship, pemilihan parameter, atau asumsi likuiditas yang keliru.
Apakah lolos OOS menjamin strategi sukses secara live?
Tidak. Operasi forward membawa risiko tambahan: revisi data, perubahan market microstructure, latency, dan constraint eksekusi.
Lanjutkan dari konsep ke bukti
Halaman ini menyediakan riset mandiri, bukan angka kinerja langsung atau sinyal pembelian. Bandingkan dengan metodologi dan bukti yang benar-benar dipublikasikan.
