buildrisk-radar

ADR-017 경보 백테스트 — 규칙 품질을 데이터로 점검

왜 규칙 임계값(부채비율 300% 등)은 사람이 정했다. 경보가 실제로 의미가 있었는지 확인할 방법이 없으면 규칙은 주장일 뿐이다. 금융위원회 주식시세로 경보 뒤 주가가 같은 업종보다 약했는지를 본다. 투자 신호가 아니라 규칙 검증 도구다.

데이터 stockPriceJob — 유니버스 상장사 일별 시세 3년(43종목, 약 3.1만 행). 종목별 마지막 저장일 다음 날부터 받는다. 원천 종가(clpr)는 수정주가가 아니다 → 상장주식수(lstgStCnt)를 함께 저장하고, 창 안에서 주식수가 2% 넘게 바뀐 종목(사건·비교군 모두)은 제외한다. 수정 계수를 추정해 넣지 않는다.

방법 (point-in-time)

• 사건일 = 경보 근거 공시 접수번호(앞 8자리 = 접수일) 중 가장 늦은 날 — 그날 전에는 조건을 알 수 없었다. 배치를 돌린 날(first_seen_at)이 아니다.
• 진입 = 사건일 다음 거래일 종가(공시 시각을 모르므로 보수적), 청산 = h(20·60·120) 거래일 뒤 종가.
• 초과수익률 = 종목 − 같은 기간 나머지 유니버스 동일가중 평균(비교군 5종목 미만이면 제외).
• 같은 규칙·종목의 겹치는 창은 앞 사건만(같은 신호 중복 집계 방지). 규칙 변경·데이터 정정으로 닫힌 경보(RULE_CHANGED · RESOLVED)는 제외.
• 비교 기준(baseline) = 신호와 무관하게 모든 종목을 h 간격으로 자른 창의 분포. 평균 · 중앙값 · 음수 비율 · t 값을 함께 보여 준다.

한계 (화면에 그대로 표시) 수정주가 아님 · 임계값을 지금 정한 사후 선택 편향 · 정정된 재무로 만든 과거 경보 · 작은 표본 · 지역 규칙과 현재 시점만 평가하는 R-X01 은 대상 아님.

검증 EventStudyTest — 다음 거래일 진입, 동일가중 비교군, 주식수 변동·겹침·미경과 제외, baseline 창 수.