Egger’s test, 포함 연구가 10편 미만이면 하지 않는 게 원칙인가요?

메타분석에서 포함 연구가 10편보다 적으면 Egger’s test 같은 깔때기 그림 비대칭 검정을 하지 않는다는 권고가 있다고 들었습니다. 이것이 실제로 정해진 원칙인가요?

Claude Sonnet 5.5의 답변

연구 10편 미만이면 비대칭 검정을 하지 말라는 것은 Cochrane 등이 권고하는 널리 받아들여진 경험칙이지만, 엄격한 규칙은 아닙니다.

권고의 출처

  • Sterne 등(2011, BMJ)은 깔때기 그림 비대칭 검정을 연구가 최소 10편 이상일 때만 쓰라고 권고했습니다.
  • Cochrane Handbook도 같은 취지로 기술하고 있어 사실상 표준 지침처럼 인용됩니다.

이유

  • 연구 수가 적으면 검정력(실제로 있는 비대칭을 찾아낼 확률)이 낮습니다. 비대칭이 없다는 결과가 나와도 출판 편향이 없다는 증거가 되기 어렵습니다.
  • 반대로 우연한 변동이 비대칭처럼 보일 수도 있습니다.
  • 10편이라는 숫자는 시뮬레이션 연구와 전문가 합의에 바탕을 둔 경험적 기준입니다. 그 지점에서 성질이 갑자기 달라지는 것은 아닙니다.

알아둘 점

  • 이 기준은 절대 규칙이 아닙니다. PRISMA는 출판 편향 평가를 보고하라고 하지만 10편 기준을 강제하지 않습니다. 다만 일부 저널과 심사자는 이 기준을 요구하기도 합니다.
  • 10편 이상이어도 연구 간 이질성이 크거나 모든 연구의 크기가 비슷하면 검정 해석이 어렵습니다. 비대칭의 원인도 출판 편향 외에 이질성, 우연 등으로 다양합니다.
  • 이분형 결과(오즈비 등)에서는 기본 Egger 검정의 1종 오류(실제로 없는 비대칭을 있다고 판단하는 오류)가 부풀 수 있어 Harbord, Peters 검정 같은 대안이 제안되어 있습니다.

실무 권장

  • 10편 미만이면 검정을 생략하고, 한계로 명시하세요. 예를 들어 "연구 수가 적어 출판 편향 검정의 검정력이 부족해 시행하지 않았다"고 쓰면 됩니다.
  • 깔때기 그림의 육안 확인, 등록 데이터베이스(임상시험 등록 등) 검색, 미출판 연구 탐색 같은 질적 평가를 병행하는 편이 낫습니다.
  • 검정을 꼭 해야 한다면 결과를 탐색적으로만 해석하고 한계를 분명히 밝히세요.

정확한 문구와 쪽수는 Cochrane Handbook 최신판의 "Reporting biases" 장에서 확인하시길 권합니다.

GPT-6.1 Sol의 답변

‘10편 미만이면 금지’라는 절대 규칙은 아니지만, 검정력이 낮아 일반적으로 시행을 권하지 않는 지침은 맞습니다.

‘10편’은 의무적 기준이 아니라 경험적 권고입니다

Cochrane Handbook은 깔때기 그림 비대칭 검정을 일반적으로 메타분석에 연구가 10편 이상 있을 때만 사용하도록 권고합니다. 따라서 근거 없는 관행은 아니지만, 9편과 10편 사이에 통계적 타당성이 갑자기 달라지는 것은 아닙니다. 여기서 연구 수는 체계적 문헌고찰 전체가 아니라 해당 결과의 메타분석에 기여하는 연구 수입니다.

왜 적은 연구에서는 권하지 않나요?

Egger 검정은 효과 추정치와 그 정밀도의 관계를 이용해 깔때기 그림의 비대칭을 평가합니다. 연구가 적으면 검정력—실제 비대칭을 발견할 능력—이 낮아, 비대칭이 있어도 유의하지 않게 나올 수 있습니다. 따라서 p>0.05를 “출판편향이 없다”는 근거로 해석하면 안 됩니다. 10편 이상이어도 충분한 검정력이 보장되지는 않습니다.

또한 비대칭은 출판편향뿐 아니라 연구 간 임상적 차이, 방법론적 질 차이 등으로도 생깁니다. Egger 검정은 출판편향의 확진 검사가 아닙니다.

실무적으로는

  • 10편 미만: 보통 검정을 생략하고, 연구 수가 적어 신뢰할 만한 비대칭 평가가 어렵다고 보고합니다.
  • 예외적으로 시행했다면 탐색적 분석임을 밝히고 결과를 신중히 해석해야 합니다.
  • 검정을 생략해도 연구등록 자료·프로토콜 대조 등으로 누락된 연구나 결과의 가능성은 평가해야 합니다.

근거: Cochrane Handbook, 13장; Sterne 등, BMJ 2011;343:d4002.

Gemini 3.8 Flash의 답변

코크란(Cochrane) 지침 등 주요 학술 기준에서 포함 연구가 10편 미만일 때는 통계적 검정력이 현저히 떨어지므로 에거 검정(Egger’s test)을 권장하지 않는 것이 표준 원칙입니다.

에거 검정(Egger’s test)은 메타분석에서 소규모 연구 효과(출판 편향 등으로 표본 크기가 작은 연구일수록 효과 크기가 과장되는 현상)나 깔때기 그림(Funnel plot)의 비대칭성을 정량적으로 확인하는 대표적인 통계 기법입니다.

결론부터 말씀드리면, **포함된 연구가 10편 미만일 때는 에거 검정을 시행하지 않는 것이 학계의 표준 권고사항(Rule of thumb)**이 맞습니다.

1. 원칙의 근거

근거중심의학의 표준 지침을 제공하는 코크란 연합(Cochrane Collaboration) 핸드북과 권위 있는 역학 가이드라인(Sterne et al., 2011)에서는 깔때기 그림 비대칭 검정을 수행하기 위한 최소 조건으로 '포함 연구 10편 이상'을 명시하고 있습니다.

2. 10편 미만일 때 권장하지 않는 이유

핵심적인 이유는 **통계적 검정력(Statistical power)**의 결여입니다.

  • 낮은 검정력과 위음성 위험: 검정력이란 '실제 편향이나 비대칭이 존재할 때 이를 통계적으로 유의하다고 감지해 낼 확률'을 뜻합니다. 연구 수가 10편 미만이면 검정력이 지나치게 낮아져, 심각한 출판 편향이 있더라도 유의확률($p$값)이 유의수준(통상 0.05 또는 0.1)에 도달하지 못합니다.
  • 구분의 어려움: 소수의 연구만으로는 우연한 오차에 의한 비대칭인지, 실제 편향에 의한 비대칭인지를 통계적으로 구별해 내는 것이 사실상 불가능합니다. 따라서 검정 결과가 유의하지 않다고 해서 출판 편향이 없다고 안심할 수 없습니다.

3. 연구 시 권장되는 대처법

통계 패키지(R, Stata, RevMan 등)에서는 연구가 10편 미만이어도 명령어를 입력하면 수치가 계산되어 나옵니다. 하지만 학술 논문 작성 시에는 다음과 같이 처리하는 것이 표준적입니다.

  • 검정 미수행 명시: 방법론(Methods)이나 제한점(Limitations) 섹션에 *"포함된 연구 수가 10편 미만으로 통계적 검정력이 부족하여 Egger's test를 수행하지 않았다"*고 명확히 밝힙니다.
  • 정성적 기술: 필요한 경우 깔때기 그림을 시각적으로만 제시하되, 연구 수가 적어 비대칭 여부를 확정하기 어렵다는 한계를 함께 서술합니다.

비슷한 질문