Feature #1122
closedFeature #980: [2026 OIBC] 공모전 참가 준비 및 접수 완료
[OIBC] Feature Availability 및 Leakage 점검
Added by 수아 황 22 days ago. Updated 19 days ago.
100%
Description
예측 시점에 실제 사용할 수 있는 Feature와 사용할 수 없는 Feature를 구분하고 Leakage 위험요소 정리
Files
| feature_availability_report.md (7.85 KB) feature_availability_report.md | 수아 황, 10/27/2026 02:33 AM | ||
| oibc_1122_evidence.zip (23.2 KB) oibc_1122_evidence.zip | 수아 황, 10/27/2026 02:33 AM |
수황 Updated by 수아 황 22 days ago Actions #1
- File feature_availability_report.md feature_availability_report.md added
- File oibc_1122_evidence.zip oibc_1122_evidence.zip added
- Status changed from New to Resolved
- % Done changed from 0 to 100
[결과]
예측 시점 입력 가용성과 미래 정보 누수 위험 점검을 수행했습니다. 실제 10개 파일의 컬럼 118개를 출처별로 분류하고 사용 가능·제외·조건부 정책과 누수 체크리스트를 작성했습니다. 점검·정책 초안 작성 및 자체 검증 완료 기준으로 Resolved / 100%로 기록합니다. 튜터 검토는 대기 중이며 전체 모델 파이프라인의 누수 없음이나 실제 데이터 수신 지연을 증명한 것은 아닙니다.
[확인된 기준·입력 정책]
공식 상세 페이지의 대회 규정/제공 데이터와 ZIP README를 대조했습니다.
https://dataen.ai/challenge/2026
- 10시·17시 예보는 모두 공식 허용: A/B 예보 값 30종을 허용 후보로 분류
- 설비용량·제공 좌표·거리, 달력/태양 위치 파생값은 입력 후보로 구분
- 발전량 energy는 정답 전용, 예측 대상 시각 기상 실측은 입력 제외
- SMP는 기본 정산·평가 전용으로 두고 예측 입력 허용 여부는 미확인으로 기록
- current_group은 참고 배정 전용, 과거 실적/실측 lag는 가용성·공급 경로 확인 전 기본 제외
- 파일에 수신/가용 timestamp가 없어 실제 지연은 미확인. 공식 회차 허용과 실제 received_at 측정을 구분
[예제 코드 정적 검토]
baseline.py를 실행하지 않고 AST/소스로 검토했습니다. FEATS 24개 중 예보 값 15개를 실제 스키마와 대조했습니다. 학습 시작 하한은 있지만 최초 예측 기준에 맞춘 정답 종료 상한은 없어 명시적 fit cutoff를 제안했습니다.
제공 발전량 중 첫 공식 예측 기준(2025-05-31 17:00) 뒤 정답은 1,771행이며, #1121의 더 보수적인 00시 cutoff 뒤는 6,072행입니다. 정의가 다르므로 구분했습니다. 이것만으로 공식 제공 코드의 규정 위반을 단정하지 않습니다. 코드의 train MAE도 독립 검증 성능과 구분했습니다.
[산출물·검증 근거]
첨부: feature_availability_report.md, oibc_1122_evidence.zip
- 파일·컬럼별 정책 CSV, 12개 누수 위험 체크리스트, feature_policy.json, 재현 코드, 실행 QA 포함
- 스키마·출처·회차·기준 코드 목록·시간 guard 검사 60건 통과 / 실패 0건
- 17시 회차 허용, 늦은 수신·미확인 운영 수신 시각·실측 출처·잘못된 회차·시간대 누락 거절 사례 확인
- 원본 ZIP은 #1120/#1121과 동일하며 실행 전후 SHA-256 불변
[미확인·다음 행동]
실제 실적·실측 수신 지연, 미래 SMP의 예측 입력 허용, 공식 학습 구간과 최초 예측 시점 해석은 추가 확인이 필요합니다. #1121의 00시 cutoff는 보수적 제안으로 유지하며 지연 검증 완료로 표시하지 않습니다. 전체 학습·전처리·최적화 파이프라인 실행 및 성능 평가는 미실행입니다.
다음 #1123에서 이상재에게 품질 결과·split_config·feature_policy·미확인 목록·실행 절차를 함께 인계합니다.
수황 Updated by 수아 황 21 days ago Actions #2
[D01/D03 수신자 합의 반영 v2]
수아님이 전달한 상재님 답변을 근거로 정책 JSON과 입력 표를 갱신했습니다.
D01: 17시가 없으면 동일 제공사·관측소·대상시각·변수의10시로 대체하고 원래 결측/대체 표시. 향후 양 회차 실험에서는 반대 방향도 동일 규칙. 동시 누락의 구체 대체법은 아직 합의하지 않았습니다.
D03: 예보·설비·달력으로 시작. 발전량 lag는 평가 발전량 미제공으로 제외 확정. 학습 구간에서만 계산한 발전소별 고정 통계는 허용하며 같은 fold 검증/평가 정답으로 업데이트하지 않습니다. SMP는 기본 예측 입력 제외를 유지합니다.
wa_temp_max/min은 첫 모델 제외하되 원본 열은 보존합니다. 직접 재계산 결과 A학습 전체244행/최근4행은 wa_temp와 하나 이상 달랐고 평가예보는0행이므로 완전 동일하다고 기록하지 않습니다. feature_policy의 원본 forecast_value_columns와 실제 baseline_forecast_feature_columns를 구분했습니다.
최신 자료: #1123 첨부 oibc_1123_handoff_v2.zip 및 https://github.com/GilbertMoon/icn-solar-cad-agent/pull/191
실데이터21개/배포본95개 검사 통과. 정책을 실제 입력 생성·모델에 연결하는 실행과 수신 지연 검증은 미완료이며 모델 성능·누수 전체 PASS를 뜻하지 않습니다. 상태·진척률·담당·일정은 유지합니다.
수황 Updated by 수아 황 19 days ago Actions #3
- Status changed from Resolved to Closed
[2026-10-29 완료 상태 정리]
사용자 요청에 따라, 기존 Resolved / 100%로 기록된 입력 가용성·누수 위험 점검 및 D01/D03 합의 반영 범위를 Closed / 100%로 정리합니다. 기존 검증·산출물과 #1123 댓글 7의 인수인계 완료 기록을 근거로 합니다. 실제 수신 지연과 최종 cutoff는 #1158(D04), 공식 정산은 #1159(D05)에서 별도로 검토하며, 이번 종료가 해당 항목 승인이나 전체 모델 누수 없음의 인증을 뜻하지 않습니다. 담당자·일정·첨부는 유지합니다.