학습 본문으로 건너뛰기
VAIRODE
비교 실험 Evidence Foundry49번째 작은 수업
오늘은 질문 하나만 해결해요49 / 72

따라 해보기 · 직접 바꿔보기

느리다는 증거가 생긴 뒤 어디가 느린지 봐요

오늘의 질문

망원경으로 넓은 하늘의 위치를 정한 뒤 초점을 좁혀 별을 찾는 것과 같아요.

아직 답을 몰라도 괜찮아요. 아래 작은 예시를 보고 먼저 예상해 보세요.
왜 배우는지 쉬운 설명 보기

“느리다는 증거가 생긴 뒤 어디가 느린지 봐요”에서 무엇을 먼저 확인해야 할까요?

01 · 같이 연습해요

작은 문제부터 하나씩 직접 풀어봐요

먼저 예상하고, 한 단계씩 확인하고, 막힌 곳을 고쳐 봐요. 도움을 열어도 괜찮아요. 도움을 본 문제는 나중에 모양을 바꿔 다시 풀어보면 됩니다.

연습에서 작성 중인 답0 / 8
  1. 01

    찾아보기 · 기초

    bm49-recognize: 안정적인 차이 뒤 hotspot 찾기에서 profiling은 재현 가능한 성능 차이의 원인 후보를 찾는 별도 관찰이며 우열 판정 자체가 아니다. uninstrumented benchmark를 먼저 통과한 run과 같은 workload로 profile run을 별도 수집한다.

    이 문제는 주어진 내용과 정답 기준을 더 만드는 중이에요. 지금 적은 답은 연습 메모로만 저장돼요.

    정답 대신 4단계 힌트 보기
    1. 먼저 볼 것

      bm49: 집계 숫자를 가리고 benchmark decision gate 뒤 profile branch가 열리는 SVG에서 candidate 외에 달라진 조건과 raw point를 표시한다.

    2. 뜻 풀기

      benchmark는 빠른 숫자 모음이 아니라 반증 가능한 claim·동일 output·versioned workload·공정한 측정·불확실성·bounded decision의 계약이다.

    3. 다음 도움

      내 생각을 먼저 적고 ‘내 답과 맞춰 볼 기준 보기’을 누르면, 풀 순서와 더 자세한 도움을 열어 드려요.

    정답과 비교

한꺼번에 여덟 문제를 펼치지 않아요. 내 생각을 적고 맞춰 볼 기준을 확인하면 다음 문제 하나만 열립니다.

8개 답이 남았습니다.

02 · 막힌 곳을 찾아요

틀린 답에서 생각이 갈라진 첫 지점 찾기

전부 다시 풀지 않아도 돼요.괜찮아요. 가장 빠른 숫자는 잠시 가리고 “느리다는 증거가 생긴 뒤 어디가 느린지 봐요” 그림에서 서로 다른 조건 한 곳만 다시 찾아봐요.

막히는 이유와 고치는 방법 자세히 보기같은 곳에서 다시 막혔을 때 필요한 설명만 펼쳐 보세요.
헷갈림 01

결과를 본 뒤 metric·workload·threshold·포함 단계를 바꾼다.

겉으로 보이는 막힘
sealed claim과 최종 결론의 대상·분모·범위가 달라진다.
막힌 까닭
실행 전 protocol version을 봉인하지 않았다.
다시 해보는 방법
기존 run을 탐색 evidence로 격리하고 새 version claim·protocol로 전체 조합을 다시 실행한다.
헷갈림 02

한 번의 flame graph만 보고 후보가 느리거나 수정이 빨라졌다고 결론 내린다.

겉으로 보이는 막힘
후보 순서나 raw spread가 setup·warmup·state·environment와 함께 바뀐다.
막힌 까닭
equivalent work·measurement boundary·runtime control 중 하나가 깨졌다.
다시 해보는 방법
첫 divergence와 manifest diff를 보존하고 한 축만 수정해 paired raw run을 다시 수집한다.
헷갈림 03

raw·uncertainty·guardrail·claim boundary를 숨기고 항상 빠름 결론을 만든다.

겉으로 보이는 막힘
다른 estimator·seed·environment에서 승자가 바뀐다.
막힌 까닭
사람 판정보다 winner card를 강제했다.
다시 해보는 방법
immutable raw와 모든 gate를 복원하고 approve·revise·reject·inconclusive를 다시 판정한다.

03 · 내게 맞는 도움 고르기

같은 목표를 원하는 도움만큼 연습해요

안내 받으며

한 단계씩

네 단계 중 지금 필요한 한 단계만 열어 천천히 따라가요.

도움을 봐도 괜찮아요.
혼자 해보기

내 힘으로

도움을 보지 않고 새 그림에서도 “느리다는 증거가 생긴 뒤 어디가 느린지 봐요”의 비교 계약과 보류 조건을 한 번 만들어 보세요.

이름과 숫자만 바뀐 작은 문제부터 시작해요.
더 도전하기

하나 더 바꾸기

시작점이나 선 하나를 더 바꾸고, 답이 달라지는지 먼저 예상해요.

한 번에 한 가지만 바꿔요.
내게 맞는 연습 방법 자세히 보기한 단계 도움, 혼자 하기, 한 걸음 더를 쉬운 말로 나눴어요.

한 단계 도움: 그림에서 지금 볼 한 곳만 짚고, 내 생각을 먼저 고른 뒤 다음 칸을 열어요.

혼자 해보기: 도움을 보지 않고 새 그림에서도 “느리다는 증거가 생긴 뒤 어디가 느린지 봐요”의 비교 계약과 보류 조건을 한 번 만들어 보세요.

한 걸음 더: 한 번에 약속 하나만 바꾸고 답이 어떻게 달라지는지 먼저 예상한 뒤 확인해요.