체계적 문헌고찰의 스크리닝.'읽기'가 아니라 '판정'이다

제목·초록 스크리닝에서 하는 일은 내용 이해가 아니라 선정 기준과의 대조입니다. 대상이 맞는가? 연구 설계가 범위 안인가? 관심 결과가 다뤄졌을 가능성이 있는가?

이 전환만 이루어져도 건당 소요 시간이 크게 줄어듭니다. 내용이 흥미로운지 아닌지는 스크리닝 기준이 아닙니다.

스크리닝은 두 단계로 진행합니다. 제목·초록 단계에서는 명백히 기준 밖인 것만 제외하고 의심스러운 것은 남깁니다. 전문(full-text) 검토 단계에서 본문을 확인해 엄격하게 적격성을 판정합니다.

초록 단계에서 무리하게 걸러 내는 것이 가장 위험한 실패입니다. 초록에 언급이 없었을 뿐 본문에는 기준을 충족하는 정보가 있는 논문을, 알아채지도 못한 채 떨어뜨리게 됩니다.

판정이 애매한 논문마다 멈춰 서면 스크리닝은 끝나지 않습니다. 선택지를 '선정·제외·보류' 셋으로 정하고, 망설여지면 보류에 넣고 다음으로 넘어가세요.

보류 더미는 나중에 한꺼번에 다시 보거나 전문 검토로 넘기면 됩니다. 한 건을 붙들고 고민하는 5분보다 100건을 처리하는 5분이 낫습니다. 이것이 대량 건수를 버티는 리듬입니다.

초록 단계의 제외는 건수 기록으로 충분한 경우가 많지만, 전문 단계의 제외에는 사유가 필요합니다. PRISMA 흐름도와 논문 원고에 들어가기 때문입니다.

사유는 선정 기준에 대응하는 형태로 적습니다. '대상이 기준 밖', '중재가 다름', '결과 미보고'처럼 팀에서 정한 사유 범주에서 골라 기록하면 나중에 집계가 훨씬 쉬워집니다.

긴 스크리닝에서는 자신의 판정 기준이 자기도 모르게 조금씩 달라집니다. 여러 명이 나눠서 하면 그 폭은 더 커집니다.

처음 50~100건을 시험 삼아 판정해 보고, 애매했던 사례를 팀에서 논의해 기준 해석을 맞춘 뒤에 본격적으로 시작하는 것을 권합니다. 2인 독립 스크리닝 같은 엄밀한 절차는 팀과 투고 저널의 방침을 따르세요.

AI에게 초록의 관련성을 평가하게 하고 가능성이 높은 순서로 정렬해 두면 작업 리듬을 만드는 데 도움이 됩니다.

다만 제외 결정을 AI에게 맡기지는 마세요. AI의 점수는 대조 작업의 보조일 뿐이고 판정자는 어디까지나 연구자 본인입니다. AI 활용 전반의 원칙은 체계적 문헌고찰의 AI 활용을 다룬 글에 정리해 두었습니다.

초록 단계는 건수가 많아 전용 도구나 스프레드시트가 잘 맞습니다. Paperfy가 힘을 내는 것은 전문 검토로 넘어간 다음부터입니다.

후보 논문의 PDF를 넣으면 논문 한 편이 한 페이지가 되어 AI 요약·도표·원문이 나란히 놓이고, 적격성 확인 결과를 요약에 직접 적어 기록할 수 있습니다. 제외 사유도 선정 근거도 PDF와 한 세트로 남습니다.