Why
The PoC contrasts random k-fold with time-aware splitting on the same forecasting task and shows the optimism that leakage manufactures.
How it works
Not yet built.
Workspace Index › Dev Notes › Cross-validation — the honest way to fail before you ship
#180PoC
Cross-validation — the honest way to fail before you ship
Cross-validation estimates out-of-sample error before deployment, but time-series and grouped data break the i.i.d. assumption behind vanilla k-fold, leaking the future into the past.
교차검증 — 배포 전에 정직하게 실패하는 법
교차검증은 배포 전에 표본 외 오차를 추정하지만, 시계열과 그룹 데이터는 기본 k-겹 뒤의 i.i.d. 가정을 깨뜨려 미래를 과거로 새게 합니다.
왜
이 PoC는 같은 예측 과제에서 무작위 k-겹과 시간 인지 분할을 대조해, 누수가 만들어 내는 낙관을 보입니다.
동작 방식
아직 만들지 않음.