체계적 문헌고찰 및 메타분석을 수행할 때, 거의 모든 주요 학술지는 논문에 PRISMA 흐름도를 포함하도록 요구합니다. 이는 PRISMA(체계적 문헌고찰 및 메타분석을 위한 선호 보고 항목) 지침의 핵심 도구이며, 심사자들이 문헌고찰의 질을 판단하는 첫 번째 관문입니다.
과학 연구에 처음 참여하는 많은 대학원생이나 의대생들은 PRISMA 흐름도를 그릴 때 혼란스러움을 느낍니다. 흐름도의 각 칸에는 무엇을 써야 할까요? 숫자는 어떻게 계산해야 할까요? 제외 기준은 얼마나 자세하게 작성해야 할까요? 왜 공들여 그린 도표가 심사위원들에게 "불완전한 데이터 루프"라는 비판을 받는 걸까요?
이러한 문제로 어려움을 겪고 계시다면 걱정하지 마세요. 오늘은 PRISMA 순서도에 대해 자세히 설명해 드리겠습니다. 순서도가 무엇인지, 어떤 가치를 지니는지, 핵심 프레임워크는 무엇인지 , 그리고 순서도 도구를 사용하여 어떻게 그리는지 알아보겠습니다.
PRISMA 흐름도는 2009년 Moher 등이 처음 제안했으며 2020년과 2025년에 두 차례 주요 개정을 거쳤습니다. 완전한 메타분석에 "결과"뿐만 아니라 "과정"도 필요한 것처럼, PRISMA 흐름도의 중요성은 바로 여기에 있습니다. 이 흐름도는 연구자들이 "건초 더미에서 바늘 찾기"부터 "결과 선별"에 이르기까지 수행하는 모든 단계를 표준화된 차트로 기록하여, 저널과 동료들에게 연구 논문 작성 방식, 문헌 선별 과정, 각 단계에서 제외된 논문 수, 그리고 제외 사유를 가장 직관적인 방식으로 전달합니다.
PRISMA 흐름도는 엄격한 표준화된 구조를 따르며 네 가지 핵심 구성 요소를 포함합니다.
식별 단계: 문헌이 어떤 데이터베이스 또는 출처에서 검색되었는지, 검색된 논문의 수와 중복된 논문의 수를 보여줍니다.
선별 단계: 중복 제거 후 남은 논문 수와 제목 및 초록을 기준으로 걸러진 논문 수를 보여줍니다.
적격성 평가: 원문 검토 단계에 진입한 후, 몇 편의 논문이 포함되었고 몇 편의 논문이 제외되었으며, 제외 사유는 구체적으로 무엇이었습니까?
포함 단계: 이 단계에서는 최종 분석 및 결과 정리에 포함될 논문의 수를 확정합니다.
이 네 단계는 서로 연결되어 있으며, 완전한 "디지털 폐쇄 루프"를 형성하려면 각 링크의 수가 완벽하게 일치해야 합니다.
PRISMA 흐름도를 그리는 방법을 이해하기 전에 먼저 그 가치를 이해해야 합니다. 많은 학술지 심사위원들은 PRISMA 흐름도가 없는 체계적 문헌고찰이나 메타분석 논문을 반려합니다. 이는 학술지가 의도적으로 까다롭게 구는 것이 아니라, PRISMA 흐름도가 다음과 같은 핵심 기능을 실제로 수행하기 때문입니다.
투명성과 신뢰성 향상: PRISMA 흐름도는 연구 선정 과정을 상세히 기술하여 독자들이 각 단계에서 선정된 논문 수와 제외 사유를 명확하게 확인할 수 있도록 합니다. 저널 편집자와 심사자는 이 흐름도를 통해 연구 선정 과정의 엄격성과 포괄성을 평가하고, 검토의 신뢰성을 판단하며, 중요한 문헌이 누락되었는지 여부를 확인할 수 있습니다.
재현성 확보: 순서도에 각 단계의 실제 진행 과정이 완벽하게 기록되어 있으므로, 다른 연구자들도 동일한 선별 논리를 기반으로 이 연구를 재현하고 결론을 검증하여 궁극적으로 과학적 재현성에 혁명을 일으킬 수 있습니다.
편향 및 잠재적 오류 감소: 흐름도는 각 제외 단계의 이유(논문 전반에 걸친 학술적 부정행위, 결함 있는 연구 설계 또는 불완전한 데이터 등)를 명확하게 보여줍니다. 이러한 투명성은 독자가 검토에 선택적 보고 편향이 있는지 여부를 판단하고 최종 연구 결과의 객관성을 평가하는 데 도움이 됩니다.
엄격한 출판 요건 충족: 많은 학술 저널과 연구 자금 지원 기관에서는 모든 체계적 문헌 검토 및 메타 분석이 PRISMA 가이드라인을 준수해야 한다고 명시적으로 요구합니다. PRISMA 준수 증빙 서류를 제출하지 않은 원고는 초기 편집 검토 단계에서 반려되는 경우가 많습니다.
표준 PRISMA 흐름도는 일반적으로 세로 방향의 다단계 상자 다이어그램과 유사하며, 위에서 아래로 식별, 선별, 적격성 평가 및 포함의 네 가지 핵심 단계를 거칩니다. 다음 섹션에서는 각 단계의 구체적인 의미를 설명합니다.
이 단계에서는 "문헌을 어디에서 찾았는가? 총 몇 개의 논문을 찾았는가?"라는 질문에 대한 답을 찾습니다.
일반적으로 순서도의 맨 위에는 "데이터베이스 검색을 통해 얻은 기록"과 "기타 출처를 통해 얻은 기록"이라고 표시된 여러 개의 사각형이 있습니다. 연구자들은 PubMed, Web of Science, Embase, Cochrane Library와 같이 검색한 데이터베이스를 자세히 나열하고 각 데이터베이스의 검색 결과 수를 괄호 안에 표시해야 합니다.
다음으로, 두 채널은 "중복 제거" 단계에서 합쳐집니다. 동일한 논문이 여러 데이터베이스에 색인될 수 있으므로 EndNote 또는 NoteExpress와 같은 참고문헌 관리 소프트웨어를 사용하여 자동 중복 제거를 수행하고, 그래프에 남은 참고문헌의 총 개수를 명확하게 표시하는 것이 중요합니다. 여기서 참고문헌 개수는 정확해야 합니다. 예를 들어, PubMed에서 1,200개, Web of Science에서 1,100개를 포함하여 총 3,000개의 논문이 검색되었다면, 이를 명확하게 기록해야 합니다. 이는 문헌 검색의 포괄성을 보여주고, 검토자에게 꼼꼼함을 입증하는 데 도움이 됩니다.
이 단계는 "초기 선별"이라고도 하며, "중복 제거된 기사 중 실제로 관련성이 있는 기사는 몇 개나 될까?"라는 질문에 대한 답을 찾는 단계입니다.
연구자들은 제목과 초록 정보를 바탕으로 신속한 필터링 작업을 수행해야 합니다. 이 단계의 목적은 명백히 관련 없는 문헌을 제거하는 것입니다. 예를 들어, "고혈압 치료제"에 대한 임상 시험을 진행하고 싶은데 동물 실험 모델에 관한 연구이거나 연구 주제가 완전히 다른 문헌을 발견하는 경우를 생각해 볼 수 있습니다. 제목과 초록 필터링 후 남은 논문들은 다음 단계인 전문 검토로 넘어갑니다.
이 단계의 수치 또한 오류가 발생하기 쉽습니다. 중복 문서의 총 수에서 거부된 제목 및 초록의 수를 뺀 값이 전문 검토 단계로 넘어가는 문서 수와 일치해야 합니다. 덧셈과 뺄셈이 일관되지 않으면 순서도는 무용지물이 됩니다. 전문가들은 연구자들이 스크리닝 과정에서 기록을 유지하고, 최종적으로 몇 건의 문서가 거부되었는지 기억하려고 하지 말라고 조언합니다.
적격성 평가, 즉 "전문 검토"는 연구 흐름도를 작성하는 과정에서 학문적으로 가장 엄격한 단계입니다. 연구자들은 나머지 문헌의 전문을 다운로드하여 주의 깊게 읽고, 미리 설정된 포함 및 제외 기준에 따라 논문별로 분석해야 합니다. 예를 들어, 체계적 문헌 검토의 포함 기준은 "무작위 대조 시험", "표본 크기 50건 이상", "완전한 결과 측정" 등이 될 수 있습니다.
이 단계에서는 포함 기준을 충족하지 않는 모든 문헌을 명확하게 표시하고 분류해야 합니다. 일반적인 제외 사유로는 "연구 설계 부적합", "연구 대상 부적합", "중재 방법 부적합", "결과 지표 누락" 등이 있습니다. 검토자들은 이 부분을 통해 검토의 제외 기준이 합리적인지, 그리고 제외되어서는 안 될 중요한 문헌이 누락되었는지 판단할 것입니다.
흐름도의 궁극적인 목표는 여러 차례의 선별 과정을 거쳐 최종적으로 질적 종합 분석(체계적 문헌 고찰) 또는 양적 종합 분석(메타분석)에 포함된 논문의 수를 보여주는 것입니다. 흐름도에는 최종적으로 포함된 논문의 총 수를 표시하는 것 외에도 "xx개의 논문이 최종적으로 포함되었습니다."와 같은 각주를 추가하는 경우가 많습니다. 만약 통합 효과 크기를 사용하는 메타분석이라면, 추출된 효과 크기의 개수도 명시해야 합니다.
다음은 준비 단계부터 실제 도면 작성까지의 전체 작업 지침입니다.
문헌 검색을 수행하십시오 . 여러 데이터베이스를 통해 관련 문헌을 검색하고 검색 전략과 결과를 기록하십시오. 검색된 문서의 총 개수도 기록해야 합니다. 단순히 총 개수만 기록하지 말고, 이러한 수치를 각각 따로 기록하여 후속 순서도의 완성도와 논증의 타당성을 확보하십시오.
제거된 중복 항목 수를 정확하게 계산하십시오. 모든 참고 문헌을 EndNote와 같은 참고 문헌 관리 소프트웨어로 가져와 자동 중복 제거를 수행하십시오. 공식 양식에서는 이 두 가지 방법을 별도로 표시하도록 요구하므로 "자동 중복 제거로 제거된 참고 문헌 수와 수동 중복 제거로 제거된 참고 문헌 수"를 기록하십시오.
제외 사유를 상세히 기록하고 코드로 분류하십시오. 선별 또는 전문 검토 단계에서 제외된 문헌에 대해서는 "연구 설계가 일관되지 않음" 또는 "중재 방법이 일관되지 않음"과 같은 내용을 종이 또는 전자 형식으로 기록해 두십시오. 이렇게 하면 최종 요약 단계에서 통계를 직접 작성하고 그래프를 작성할 수 있습니다.
PRISMA 순서도 작성: 선택 결과에 따라 ProcessOn과 같은 도구를 사용하여 PRISMA 순서도를 작성합니다. 템플릿 커뮤니티에서 "PRISMA 순서도"를 검색하여 템플릿을 직접 적용한 다음 텍스트와 숫자를 수동으로 입력하여 수정할 수 있습니다.
내보내기 기능은 PNG/JPG/SVG/PDF 등 다양한 이미지 형식을 지원하며, 이러한 이미지는 문서에 직접 삽입할 수 있습니다. 팀 협업이 필요한 경우, 팀원을 초대하여 함께 순서도를 작성하고, 소통하고, 댓글을 달고, 실시간으로 업데이트할 수 있습니다.
검증 작업
순서도가 완성되면 철저한 데이터 검증이 필수적입니다. 과학 논문 편집에 대한 간단한 지침은 다음과 같습니다. 맨 위의 검색된 총 문헌 수부터 맨 아래의 분석에 포함된 총 문헌 수까지, 이 경로상의 모든 뺄셈 결과가 최종 결과 수와 같아야 합니다. 예를 들어, "검색된 총 문헌 수"와 "중복 제거 후 문헌 수"의 차이에서 "제목/초록으로 제외된 문헌 수"와 "전문으로 제외된 문헌 수"를 뺀 값이 최종 "포함된 연구 수"와 같아야 합니다.
다음은 매우 간단한 자체 점검 과정입니다. PRISMA 흐름도 초안을 받은 후, 먼저 왼쪽 상단의 "잠금됨"(각 데이터베이스의 합계)이 "총 레코드 수"와 일치하는지 확인합니다. 둘째, 초기 중복 제거 검사의 차이 논리를 검증합니다. 그런 다음 전체 텍스트를 제외한 이유를 요약하여 제시합니다. 마지막으로, 상단의 원래 합계에서 제외된 레코드 수를 뺀 값이 하단의 "최종 포함" 숫자와 정확히 일치하는지 확인해야 합니다.
PRISMA 흐름도의 완성도는 어느 정도까지는 체계적 문헌고찰의 방법론적 엄격성을 직접적으로 반영합니다. 메타분석이나 체계적 문헌고찰을 제출할 준비를 하고 있다면, 단순히 필요하다는 이유만으로 파워포인트로 흐름도를 수작업으로 급하게 만들지 마십시오. ProcessOn은 고품질의 PRISMA 흐름도를 쉽게 작성할 수 있도록 지원할 뿐만 아니라, 데이터 시각화 및 버전 기록 추적 기능을 제공하여 공동 수정 작업을 용이하게 하고 변경 로그의 추적성을 보장합니다.
무료 온라인 협업 마인드맵 흐름도
