M4 — RTB 시뮬레이션

M4 — RTB 시뮬레이션 시험 안내

이 페이지는 실거래 입찰을 붙이지 않고도, RTB 의사결정 로직이 시간 제한과 예산 제약 안에서 제대로 동작하는지 재현 가능한 방식으로 점검한다. 입력은 replay pack과 정책 preset으로 고정된다. 연구개발 목표치는 CTR 상승 알고리즘 성공률 85% 이상이며, 화면과 리포트에는 uplift proxy 기준 성공률이 함께 표시된다.

무엇을 테스트하나요?

bid request replay와 campaign budget fixture를 사용해 입찰 성공률, timeout 비율, 응답시간, 예산 소진 오차를 확인한다. 동시에 uplift proxy oracle을 두고 bid/no_bid 결정이 CTR 상승 가능 요청을 얼마나 잘 골라내는지도 측정한다. 즉, 입찰 의사결정이 빠르고 안정적이며 CTR 상승 후보를 충분히 잘 선별하는지를 본다.

어떻게 진행되나요?

Preset을 선택하고 Run을 누른다.
preset에 연결된 replay_pack, policy_mode, budget_profile, time_window를 로드한다.
각 bid request에 대해 timeout 판정, 자격 판정, bid price 계산, 예산 차감을 순서대로 수행한다.
bid_success_rate, timeout_rate, p95_response_ms, budget_consumption_error를 계산한다.
같은 request fixture에 uplift proxy oracle을 적용해 ctr_uplift_success_rate를 계산하고 85% 연구개발 목표와 비교한다.

어떤 결과가 나와야 하나요?

대표 기준은 bid_success_rate가 충분히 높고, timeout_rate와 budget_consumption_error가 낮으며, p95_response_ms가 허용 범위 안에 들어오는 것이다. 여기에 ctr_uplift_success_rate >= 0.85도 동시에 만족해야 PASS다.

실행 후 어디를 보면 되나요?

결과 pane에서는 방금 실행한 시뮬레이션 요약을 바로 볼 수 있다. 최근 runs 표에서는 bid_succ / CTR uplift success / timeout / p95 ms 값을 비교할 수 있고, report에서 상세 의사결정 산출물을 열 수 있다.

모든 시험은 자유 입력 대신 preset 기반의 controlled input으로만 실행된다. 따라서 같은 preset을 다시 실행하면 같은 조건에서 결과를 비교할 수 있다.