엔진 A/B/C를 “느낌”으로 비교하지 않도록, 올코드 랩이 쓰는 고정 변수 규칙과 데모 런 로그입니다. 데모 숫자는 교육용 예시이며 실측 보장이 아닙니다.
고정해야 할 것 (한 실험에 하나만 변경)
- URL 세트 (최소 20개, 동일 순서)
- 시간대 (같은 요일·같은 2시간 창)
- 프록시 풀 (A/B/C에 동일 할당)
- UA·리퍼러 정책 (켜짐/꺼짐 통일)
- 변경 변수: 엔진 종류만
필수 측정 필드
| 필드 | 정의 |
|---|---|
| http_ok_rate | 2xx~3xx 비율 |
| block_page_rate | 차단·캡차·빈 본문으로 분류된 비율 |
| p50_ms / p95_ms | 응답·로드 시간 중앙·상위 |
| cost_unit | 성공 1건당 상대 비용(시간·프록시) |
데모 런 로그 예시 (Run 2026-08-A)
아래는 양식 채움 예시입니다. 실제 고객 환경 수치로 오해하지 마세요.
| 엔진 | n | http_ok | block | p50 | p95 | 메모 |
|---|---|---|---|---|---|---|
| A | 200 | 0.94 | 0.02 | 180ms | 620ms | 대량 sweep에 유리 |
| B | 200 | 0.88 | 0.06 | 1.9s | 4.8s | 렌더 이후 확인용 |
| C | 200 | 0.91 | 0.04 | 0.7s | 3.1s | A70%+B30% 혼합 예시 |
해석 규칙
- http_ok만 보고 엔진을 우열 가리지 않는다 (block_page와 함께 본다)
- p95가 목표 SLA를 넘으면 처리량을 줄인다
- 순위 변화는 본 실험 KPI에서 제외한다
엔진 개념: A/B/C 비교 글 · 도구: 상위노출 프로그램 · 시작 숫자: 운영 기준표