영우 조 wrote:
[PM 실행 지시]
#1303을 D05 공식 Source of Truth 확인 전용 일감으로 진행합니다.
담당:
- 주담당: 황수아
- 구현/대조 협력: 조영우
- 필요 시 Forecast 영향 검토: 이상재
- 최종 승인: 문길래 PM
확인 대상:
- 음수 actual 처리
- rounding 단계 / 방식 / 자리수
- tie 처리
- 추가 invalid 조건
- 공식 scorer와 내부 계산기 parity
- 공식 Revenue 정의
진행 순서:
- 참가 계정 내부 최신 문제정의서 확인
- 공식 공지 / FAQ / 제출 화면 확인
- scoring.py 또는 공식 scorer 제공 여부 확인
- 확인 가능한 항목은 근거 위치/버전과 함께 확정
- 자료에 없거나 애매한 항목은 UNVERIFIED로 표시
- UNVERIFIED 항목은 주최 측 1:1 문의 초안 작성 후 발송
- 공식 답변 수신 시 조영우님이 #991 계산기와 대조
- 차이 발생 시 코드/테스트 수정
- 황수아님 독립 재검증
- PM D05 최종 승인
각 항목 상태는 아래 중 하나로 기록합니다.
CONFIRMED_BY_OFFICIAL_SOURCE
CONFIRMED_BY_OFFICIAL_RESPONSE
UNVERIFIED
현재 D05는 HOLD 상태를 유지합니다.
D05=HOLD
OFFICIAL_SCORING_APPROVED=NO
OFFICIAL_REVENUE_APPROVED=NO
FINAL_SUBMISSION_GATE=HOLD
단, Forecast / VPP / 내부 DEV 실험 및 첫 Baseline 제출 준비는 계속 진행합니다.
1차 목표:
- 11/01까지 공식 자료 내부 확인 완료
- 미확정 항목은 주최 측 문의 여부 확정 및 필요 시 문의 발송
[PM 공식 근거 조사 결과 요약 — 2026-10-31]
DataEn 로그인 세션을 통해 2026 OIBC Challenge 관련 공식 페이지, 공지, Q&A, validator, 설명회 자료를 순회 조사했고 결과를 GitHub에 문서화했습니다.
GitHub:
PR #203 MERGED
Merge SHA=6c2a509ba9123e2053edbbe011e59e67b42c93be
문서 경로:
docs/oibc/official-source-review/2026-10-31/
주요 결과:
SITE_AUDIT_RESULT=PARTIAL
OFFICIAL_DOCUMENTS_FOUND=YES
SCORER_FOUND=NO (공식 미배포 결정 확인)
SUBMISSION_SPEC_FOUND=YES_PARTIAL
API_DOCUMENTATION_FOUND=UNVERIFIED
[D05 핵심 6항목]
-
음수 actual 처리
D05_01_NEGATIVE_ACTUAL=UNVERIFIED
-
rounding 단계/방식/자리수
D05_02_ROUNDING=UNVERIFIED
-
tie 처리
D05_03_TIE=CONFIRMED_BY_OFFICIAL_SOURCE
공식 확인:
정산금 → 비가중 절대오차 합이 작은 팀 → 최고점을 낸 제출 시각이 이른 팀
- 추가 invalid 조건
D05_04_INVALID_RULES=CONFIRMED_BY_OFFICIAL_SOURCE
확인된 제출 관련 주요 조건:
- 하루 최대 3회
- 전체 최대 20회
- 형식 오류 무효 제출도 횟수 차감
- KST 자정 기준 일일 횟수 초기화
- 마감: 2026-11-13 23:59:59 KST
- 공식 scorer parity
D05_05_SCORER_PARITY=UNVERIFIED
공식 Scoring.py는 참가자에게 배포하지 않는 것으로 확인.
공개 validator는 형식 검사용이며 공식 점수 parity 근거는 아님.
- 공식 Revenue 정의
D05_06_OFFICIAL_REVENUE=CONFIRMED_BY_OFFICIAL_SOURCE
공식 평가 기준은 정산금 S이며,
매전수익 - 예측 오차 페널티 구조로 확인.
[NEW_CRITICAL_FINDINGS]
-
외부 데이터/사전학습 모델 관련
기본 규정의 금지 문구와 2026-10-28 최신 공지의 조건부 허용 문구가 함께 존재함.
일반적인 우선순위는 아직 UNVERIFIED.
-
전체 평가기간의 예보 정보를 미리 모아 정규화하거나 VPP 그룹 구성에 사용하는 방식은 최신 공지 기준 금지로 확인.
-
생성형 AI 보조는 허용되지만 대회 데이터를 외부 AI 서비스에 입력하는 것은 금지.
-
공식 scorer는 미배포, 공개 validator는 형식 검사 목적.
[추가 확인 필요]
- 음수 actual 처리 정책
- rounding 적용 단계/방식/자리수
- 공식 scorer parity 검증 방법
- 규정 충돌 시 우선 적용 기준
- 실제 포털의 추가 invalid/업로드 제한
- 2026 공식 API/자동 제출 관련 문서 존재 여부
[주최 측 문의 필요]
HOST_INQUIRY_REQUIRED=YES
문의 대상:
- 음수 actual 공식 처리
- rounding 기준
- 공식 scorer parity 확인 방법
- 규정 충돌 시 우선 적용 기준
- 추가 invalid / 포털 제한
문의/답변 추적 파일:
docs/oibc/official-source-review/2026-10-31/09_HOST_INQUIRY_RESPONSE.md
현재 상태:
INQUIRY_SENT=NO
RESPONSE_RECEIVED=NO
[PM 현재 판정]
D05_RESULT=HOLD
OFFICIAL_SCORING_APPROVED=NO
OFFICIAL_REVENUE_APPROVED=NO
FINAL_SUBMISSION_GATE=HOLD
단, 공식 근거가 확인된 tie / invalid / Revenue 정의는 확정 근거로 사용할 수 있습니다.
다음 조치:
- 주최 측 문의 발송
- 공식 답변 수신
- 필요 시 #991 Settlement 계산기와 대조
- 황수아 독립 재검증
- PM이 #1303 및 #1159에서 D05 최종 재판정