Project

General

Profile

Actions

Feature #1452

closed
상이 상이

Feature #980: [2026 OIBC] 공모전 참가 준비 및 접수 완료

Feature #1467: [OIBC][11/04] 오늘 결과 도출 및 제출 후보 CSV 2개 생성

[OIBC][Track A-5] 겨울 한낮 과대예측 원인 분석 및 bias 보정 (그룹 합계 기준)

Feature #1452: [OIBC][Track A-5] 겨울 한낮 과대예측 원인 분석 및 bias 보정 (그룹 합계 기준)

Added by 상재 이 14 days ago. Updated 13 days ago.

Status:
Closed
Priority:
High
Assignee:
Start date:
11/04/2026
Due date:
11/05/2026
% Done:

100%

Estimated time:

Description

핵심 질문

발전소별 오차가 줄어도 그룹(G1·G2) 합계 점수가 나빠지는 원인인 "겨울 한낮 과대예측"을 예측 쪽에서 줄일 수 있는가

근거 (11/03 그룹 합계 확인, 탐색용)

  • 공식 벌점은 그룹 합계 오차에 붙음. 같은 방향 오차는 합계에서 상쇄되지 않고 쌓임
  • baseline → FS2: 발전소별 −3.4%, 그룹 합계 −5.9% (실제 점수 +6,526,605원과 방향 일치). 단 JAN 그룹 합계 악화(−0.0019)
  • FS2 → FS2+L1: 발전소별 −2.3%(4/4) / 그룹 합계 −1.4%(2/4), JAN −0.0035·FEB −0.0014 악화
  • E4 bias (11~15시, 예측 − 실제): FS2 1월 +3.7, L1 1월 +4.6·2월 +2.2 kWh / 여름(7월)은 과소

할 일

  1. 원인 분석 (Track A 자체 분석)
    • 잔차를 월 × 시간대로 분해 (FS2·L1)
    • 발전소별 bias 방향이 같은지 (그룹 합계에서 쌓이는 정도)
    • 해당 시간대 예보(운량·기온 등)와 실제 발전량 관계: 예보 쪽 문제인지 모델 학습 쪽 문제인지
  2. bias 보정 후보 (사전 등록 후 실행)
    • 보정 단위: 월 × 시간대 등 단순한 형태만, 후보를 미리 등록
    • 보정값은 fold 밖 데이터로 정하고 해당 fold에 적용(같은 DEV로 정하고 평가하지 않음)
    • FS2 3-seed 평균, FS2+L1 3-seed 평균 각각에 적용
  3. 모델 쪽 개선 가설 (분석 결과에 따라): 겨울·한낮 정보 Feature, 계절별 학습 가중 등. 별도 사전 등록

비교 기준

FS2 3-seed 평균 (현재 제출 02): 발전소별 DEV 0.239870 / 그룹 합계 DEV 0.139369 (#990 배정)

PASS 조건 (사전 등록)

  • 그룹 합계 DEV가 기준보다 좋고, JAN·FEB(253곳 전체 fold) 그룹 합계 악화 없음
  • 발전소별 DEV 악화 없음
  • fold 밖 보정 규칙 준수, HOLDOUT 미사용, 평가 기간에 없는 정보 미사용
  • 예측값 음수·NaN 없음 (보정 후 0 미만은 0으로, 용량 초과 금지 규칙 명시)
  • Codex PASS, 제출 시 제출 게이트(QA·validator·PM GO)

산출물

분석 요약(월×시간 bias 표 등), 보정 규칙·값, 보정 후 DEV OOF와 비교 결과(발전소별 + 그룹 합계)

Actions

Also available in: PDF Atom