질적 연구 신뢰도 타당도 확보, 참여자 확인은 전원에게 받아야 해?

질적 연구에서 참여자 확인(member checking)을 할 때, 면담한 참여자 전원에게 분석 결과를 보여 주고 동의를 받아야 인정된다는 말을 들었어. 일부 참여자에게만 받으면 참여자 확인을 했다고 쓸 수 없는 걸까?

GPT-6.1 Sol의 답변

참여자 확인은 전원에게 받을 필요가 없으며, 일부에게 시행해도 대상·절차·결과를 투명하게 보고하면 됩니다.

“모든 참여자가 분석 결과에 동의해야 인정된다”는 보편적인 방법론 규칙은 없습니다. 일부 참여자에게만 시행해도 참여자 확인(member checking)이라고 쓸 수 있습니다. 다만 학술지나 학위과정에 별도 지침이 있는지는 확인해야 합니다.

참여자 확인은 ‘전원 동의’가 아닙니다

참여자 확인은 면담 기록이나 연구자의 해석을 참여자와 공유해, 경험이 적절히 반영됐는지 검토하는 절차입니다. 주로 **신빙성(연구 결과가 참여자의 경험을 설득력 있게 담는 정도)**을 높이는 데 활용하지만, 타당성을 자동으로 보증하는 필수 절차는 아닙니다. 특히 여러 사람의 경험을 종합한 해석에 모든 참여자가 동의해야 하는 것은 아닙니다.

일부에게 시행한다면

  • 선정 근거: 서로 다른 경험이나 주요 관점을 지닌 사람을 포함했는지 설명합니다. 동의할 만한 사람만 골라서는 곤란합니다.
  • 확인 내용: 녹취록의 사실관계를 확인했는지, 주제·해석을 검토했는지 구분합니다. 둘은 같은 수준의 검토가 아닙니다.
  • 결과와 반영: 초청·참여 인원, 피드백, 수정 사항과 이견을 기록합니다. 무응답은 동의로 보지 않습니다.

예를 들어 “전체 15명 중 경험의 다양성을 고려해 선정한 5명에게 주제 요약을 공유했고, 응답한 4명의 의견을 검토하여 ○○를 수정했다”처럼 쓰면 됩니다.

참여자의 이견도 오류 판정이 아니라 추가로 해석할 자료입니다. 연구 접근에 따라 참여자 확인이 적합하지 않을 수도 있으며, 이때는 동료 검토, 성찰 기록, 분석 과정 기록 등으로 연구의 신뢰성을 뒷받침할 수 있습니다.

Gemini 3.8 Flash의 답변

참여자 확인은 반드시 전원에게 받아야 하는 것은 아니며, 목적과 맥락에 따라 일부 참여자에게만 실시하고 그 과정과 한계를 투명하게 밝히면 타당도 확보 절차로 충분히 인정받습니다.

질적 연구에서 **참여자 확인(Member Checking)**은 연구자가 면담 자료를 바탕으로 도출한 분석 내용이나 해석이 참여자의 실제 경험과 의미를 충실하게 반영하고 있는지 당사자에게 되물어 검토받는 절차입니다.

결론부터 말씀드리면, 면담 참여자 전원에게 의무적으로 확인을 받아야 하는 것은 아닙니다. 일부 참여자에게만 진행했더라도 논문에 참여자 확인을 수행했다고 기술할 수 있습니다.

1. 전원 참여가 필수가 아닌 이유

  • 현실적 한계: 질적 연구는 종종 분석에 수개월 이상이 소요됩니다. 이 과정에서 참여자의 연락 두절, 바쁜 일정, 참여 피로도 등으로 전원과 다시 접촉하기 어려운 경우가 흔합니다.
  • 추상화와 통합의 성격: 분석 결과는 개별 참여자의 발언을 모아 더 높은 차원으로 범주화하고 추상화한 결과물입니다. 따라서 특정 참여자 개인이 연구 전체의 종합적 분석 결과를 온전히 평가하기 어려운 측면이 있습니다.
  • 연구 윤리적 고려: 민감한 주제(예: 트라우마, 질병, 폭력 경험 등)를 다루는 경우, 분석 내용을 다시 보여주는 과정이 참여자에게 심리적 부담이나 2차 피해를 줄 수 있어 선별적으로 진행하기도 합니다.

2. 논문에 기술할 때 주의할 점: '투명성'

일부 참여자에게만 확인을 거쳤다면, 심사위원이 납득할 수 있도록 선정 기준과 절차를 명확히 기술해야 합니다.

  • 누구에게 받았는가: 전체 참여자 중 몇 명에게 받았는지 명시합니다. (예: "전체 12명 중 후속 확인에 동의한 핵심 정보 제공자 4명을 대상으로...")
  • 어떤 기준으로 선정했는가: 풍부한 진술을 제공한 참여자, 혹은 상반된 경험을 보여준 대표적 참여자를 목적에 맞게 표집(Purposive Sampling)했음을 설명합니다.
  • 무엇을 확인했는가: 전사본(녹취록 전문)만 확인했는지, 연구자가 도출한 주제(Themes)와 해석 요약본을 확인했는지 명확히 밝힙니다.

3. 보완 전략

일부에게만 참여자 확인을 진행했다면 연구의 신뢰성(진실성)을 높이기 위해 다른 타당도 전략을 함께 병행하여 기술하는 것이 좋습니다.

  • 동료 검토(Peer Debriefing): 질적 연구 경험이 있는 동료나 지도교수에게 분석 과정의 적절성을 검토받는 방법
  • 삼각측정법(Triangulation): 다양한 자료 출처(문헌, 관찰 일지 등)를 함께 교차 검증하는 방법
  • 감사 궤적(Audit Trail): 원자료에서 최종 주제가 도출되기까지의 분석 과정을 상세히 기록해 투명성을 확보하는 방법

질적 연구의 타당도는 '모든 사람의 완벽한 동의'에서 나오는 것이 아니라, 연구자가 해석에 도달한 과정이 얼마나 엄밀하고 투명했는가에서 비롯됩니다.

Claude Sonnet 5.5의 답변

참여자 확인에 전원 동의 요건은 없으며, 일부에게만 받아도 범위와 방법을 투명하게 밝히면 했다고 쓸 수 있다.

결론부터

"전원에게 받아야 인정된다"는 보편적 기준은 없습니다. 일부 참여자만 참여했더라도 몇 명에게, 어떤 방식으로, 어떤 결과를 얻었는지 정직하게 쓰면 참여자 확인을 했다고 기술할 수 있습니다. 다만 학술지나 심사자, 연구 전통에 따라 기대 수준이 다를 수 있습니다.

근거

  • 참여자 확인은 Lincoln과 Guba(1985)가 신뢰성(credibility)을 높이는 전략으로 제안했습니다. 이들은 참여자 전원의 승인을 요건으로 두지 않았습니다.
  • 보고 지침인 COREQ에도 "참여자가 결과에 피드백을 주었는가"를 묻는 항목이 있을 뿐, 비율 기준은 없습니다.
  • 참여자 확인은 "동의 받기"가 아니라 해석의 적절성을 점검하는 과정입니다. 참여자가 반대하거나 수정을 요구하면 이것도 중요한 자료이며, 그 내용과 반영 여부를 보고하면 됩니다.

유의할 점

  • 참여자 확인은 방법론적 논란이 있습니다. 시간이 지나면서 참여자의 생각이 바뀔 수 있고, 여러 사람의 자료를 종합한 주제는 개인에게 낯설 수 있습니다. 그래서 이를 타당도의 필수 조건이 아닌 여러 전략 중 하나로 보는 입장이 많습니다.
  • 응답한 참여자가 특정 성향에 치우쳤을 수 있습니다. 연구의 한계로 짚어 두는 것이 좋습니다.

쓰는 방법 예시

12명 중 7명에게 주제 요약본을 이메일로 보내 의견을 구했으며, 5명이 회신했다. 2명이 표현 수정을 제안했고 이를 반영했다.

회신하지 않은 참여자가 있다면 그 사실과 사유도 적습니다. 요청 방식(전체 전사본, 요약, 면담 등)과 불일치를 처리한 방식도 함께 쓰면 좋습니다.

보완 전략

참여자 확인이 제한적이라면 다음을 함께 사용해 신뢰성을 보강할 수 있습니다.

  • 동료 검토(peer debriefing)
  • 감사 추적(audit trail, 분석 과정 기록)
  • 삼각검증
  • 연구자 성찰 기록
  • 풍부한 기술(thick description)

연구 설계와 투고처에 따라 기대가 다르므로, 대상 학술지의 투고 규정과 선행 논문 사례를 확인해 보시길 권합니다.

비슷한 질문