방법론
아직 공개된 순위가 없습니다. 지수는 방문자 50명이 6개 항목 이상을 평가하면 열립니다. 아래는 그때 순위가 어떻게 계산될지에 대한 설명입니다 — 보고할 표본 수치는 아직 없고, 지어내는 것은 이 페이지의 존재 이유와 정반대입니다.
- 누가 답하나
- 이 사이트의 방문자 — 무보수, 자기선택. 이것은 확률표본이 아니라 편의표본입니다: 한국 문화를 검색해서 찾아온 사람들은 한국에 다녀온 모든 사람의 무작위 추출이 아니며, 결과에는 그 왜곡이 실려 있습니다.
- 측정 축
- 모든 항목은 독립된 두 축으로, 각각 1–5 척도로 평가됩니다: 얼마나 놀라웠는지, 얼마나 좋았는지. 놀랍지만 불쾌할 수도 있으므로 두 축은 분리해 두고 마지막에만 결합합니다.
- 어떤 응답이 순위를 만드나
- 6개 항목 이상을 평가한 세션만입니다 (“코어 표본”). 순위가 의미를 가지려면 항목들이 같은 잣대로 측정돼야 하고, 그러려면 같은 사람이 여러 항목을 평가해야 합니다. 그보다 적게 평가한 방문자의 점수는 각 항목 페이지에 표시되며, 순위에 반영되지 않는다는 라벨이 붙습니다.
- 산식
index = round((surprise_avg / 5) × (goodness_avg / 5) × 100, 1)- 버리는 응답
- 코어 표본 중 모든 항목에서 두 축 모두 동일 점수를 준 세션, 그리고 대부분의 제출이 3초 미만에 들어온 세션을 제외합니다. 두 규칙 모두 데이터 수집 전에 고정했고, 사후에 조용히 조정해 더 좋은 결과를 만들 수 있는 임계가 없습니다.
- 동률 처리
- 순위는 strict입니다(공동 순위 없음). 지수 점수가 가까운 항목들은 표본오차 안에서 통계적으로 동률일 수 있습니다 — 작은 순위 차이를 의미 있게 읽기 전에 각 항목의
valid_n을 확인하세요.
인용하기 전에 알아야 할 한계
- 공개 임계를 런칭 후에 코어 응답 200건에서 50건으로 낮췄습니다. 원래 숫자는 데이터가 없을 때 고정한 값이고, 여러분이 나중에 알게 되기 전에 우리가 먼저 말합니다. 측정 자체는 아무것도 바뀌지 않았습니다 — 같은 2축, 같은 산식, 같은 제외 규칙이며 모든 수치는 여전히 실제 응답에서 나옵니다. 바뀐 것은 순서를 보여주기 전에 요구하는 증거의 양이고, 표본이 작을수록 오차는 커집니다: 이 크기에서는 항목당 대략 25건의 평가에 기대므로, 점수 차가 작은 항목들은 동률로 읽어야 합니다.
- 6개 항목 임계는 통계적 도출이 아니라 판단입니다. 항목을 비교하려면 같은 사람이 여러 항목을 평가해야 하지만, 개인 기준선을 세우는 데 몇 개가 필요한지에 정답은 없습니다. 12의 절반이라서 6를 골랐고, 수집 전에 고정했습니다.
- “한국에 다녀왔다”는 자기신고이며 검증할 수 없습니다. 가 본 적 없는 사람도 체크할 수 있습니다. 검증하는 척하는 대신 답을 그대로 보고합니다.
- 중복 방어는 의도적으로 기본만 합니다. 브라우저 세션당 항목별 1회 평가. 시크릿 창, 다른 기기, 쿠키 삭제로 우회할 수 있습니다. 이것은 부주의가 아니라 의도된 한계입니다 — 대안(계정, CAPTCHA, 기기 지문)은 어뷰징이 우리에게 입히는 비용보다 방문자에게 더 큰 비용을 지웁니다. 실질적 억제력은 순위를 왜곡하려면 매번 6개 이상 항목을 평가해야 한다는 사실입니다.