리뷰 논문부터 읽어야 하는 이유

연구질문 초안을 들고 처음 검색창을 열면 결과가 수백 건 뜹니다. 위에서부터 스무 개를 새 탭으로 열고, 하나씩 초록을 읽다가, 세 편쯤 지나면 이런 상태가 됩니다. 논문마다 쓰는 용어가 다르고, 대상도 조건도 제각각이고, A 논문은 효과가 있다고 하는데 B 논문은 없다고 합니다. 두 시간을 썼는데 "그래서 이 분야가 지금 어디까지 왔는가"를 한 문장으로 말할 수 없습니다.

문제는 검색 실력이 아니라 시작한 지점입니다. 원저 논문(original article, 저자가 직접 실험이나 조사를 해서 낸 논문) 한 편은 그 분야의 아주 좁은 한 칸을 보여줍니다. 칸 스무 개를 순서 없이 보면 지도가 그려지지 않습니다. 지도는 따로 있고, 그게 리뷰 논문입니다.

첫 검색 결과 20개를 다 열어보면 생기는 일

원저 논문을 무작정 모으면 세 가지가 동시에 일어납니다.

용어가 통일되지 않습니다. 같은 것을 어떤 논문은 "작업기억", 어떤 논문은 "단기기억", 어떤 논문은 "인지 부하"라고 부릅니다. 어느 것이 내 주제의 표준 용어인지 모른 채 검색어를 계속 바꾸게 되고, 검색 결과는 매번 다른 집합이 됩니다.

결과가 엇갈리는 이유를 모릅니다. A는 효과가 있다고 하고 B는 없다고 할 때, 초보자가 보면 그냥 모순입니다. 사실은 표본 연령이 다르거나 처치 시간이 다르거나 측정 도구가 다른 경우가 대부분인데, 논문 두 편만 봐서는 그 차이가 보이지 않습니다.

중요한 논문과 그렇지 않은 논문이 구별되지 않습니다. 검색 결과 상단에 뜬 논문이 그 분야의 핵심 논문이라는 보장은 없습니다. 한 번도 인용되지 않은 논문과 그 분야의 출발점이 된 논문이 같은 화면에 나란히 있습니다.

리뷰 논문은 이 세 가지를 이미 정리해둔 글입니다. 그 분야 연구자가 수십 편을 읽고 용어를 정리하고, 결과가 갈리는 지점을 짚고, 어느 논문이 기준점인지 밝혀둔 것입니다. 한 편을 읽으면 나머지 서른 편이 어디에 놓이는지가 보입니다.

리뷰 논문은 어떻게 알아보나

검색 결과 목록에서 리뷰인지 아닌지는 세 곳으로 판별합니다.

제목의 표지어. 영어라면 review, systematic review, meta-analysis, a survey of, current perspectives, recent advances, state of the art 같은 말이 들어갑니다. 한국어라면 "고찰", "종설", "문헌 연구", "메타분석", "연구 동향"입니다. 특히 "동향"과 "고찰"은 국내 학술지에서 리뷰를 뜻하는 가장 흔한 표지어입니다.

초록의 구조. 원저 논문의 초록에는 참가자 수와 측정 결과가 숫자로 들어갑니다. "참가자 62명", "유의하게 높았다" 같은 문장이 있으면 원저입니다. 리뷰의 초록에는 그 자리에 "이 논문은 최근 10년간의 연구를 정리한다", "세 가지 관점으로 나누어 검토한다" 같은 문장이 옵니다. 즉 초록에 자기 데이터가 있으면 원저, 남의 연구를 정리한다고 하면 리뷰입니다.

참고문헌 수. 원저는 보통 30~60편, 리뷰는 80편을 넘는 경우가 많습니다. 목록 화면에서 안 보이면 논문을 열어 맨 뒤로 내려가 보면 3초면 확인됩니다.

검색할 때는 처음부터 리뷰만 잡히게 검색어를 만드는 게 빠릅니다. 위 도구 선행연구 검색해보기에 키워드 두 개를 넣고 거기에 review를 한 단어 더 붙여보세요. 예를 들어 "white noise" memory review처럼 넣으면 결과 수가 크게 줄고, 남은 것 대부분이 리뷰이거나 리뷰를 인용한 논문입니다. 한국어 검색이라면 백색소음 기억 고찰 또는 백색소음 연구 동향으로 같은 일을 할 수 있습니다.

리뷰의 어느 부분을 읽나

리뷰는 대개 원저보다 깁니다. 30쪽짜리를 처음부터 읽으면 이 글을 읽는 의미가 없습니다. 세 군데만 봅니다.

서론의 마지막 문단. 저자가 "이 리뷰에서 무엇을 어떤 기준으로 정리했는지"를 밝히는 자리입니다. 여기서 내 주제와 범위가 맞는지 판단합니다. 대상 연령이나 조건이 내 연구와 아예 다르면 그 리뷰는 지금 필요 없습니다.

표. 리뷰의 핵심은 거의 항상 표에 있습니다. 보통 "연구 / 대상 / 표본 수 / 조건 / 주요 결과" 같은 열로 논문 수십 편을 한 장에 늘어놓습니다. 이 표 한 장이 원저 논문 스무 편을 읽은 것과 같은 정보를 줍니다. 표를 캡처하지 말고, 내 주제와 관련 있는 행 3~5개만 골라 따로 옮겨 적으세요.

결론 또는 "향후 연구 과제" 절. 저자가 "아직 밝혀지지 않은 것"을 직접 나열해둔 곳입니다. 갭을 찾는 데 가장 빠른 경로이고, 학생 연구의 주제가 실제로 여기서 많이 나옵니다.

서론 앞부분, 각 연구를 하나씩 서술하는 본문, 이론적 배경 절은 지금 건너뜁니다. 필요해지면 그때 돌아옵니다.

리뷰에서 원저로 내려가기

리뷰만 읽고 보고서를 쓰면 안 됩니다. 리뷰는 남의 요약이고, 요약은 원래 논문의 조건을 지웁니다. 리뷰에서 "A 연구는 효과가 있었다"고 한 줄로 읽은 것이, 원문에 가보면 "성인 남성 20명, 30분 노출 조건에서만"인 경우가 흔합니다. 내 보고서에서 근거로 쓸 논문은 반드시 원저를 직접 열어야 합니다.

내려갈 논문을 고르는 기준은 둘입니다.

1. 리뷰 본문에서 두 번 이상 언급된 논문. 저자가 여러 맥락에서 다시 꺼낸다는 것은 그 분야의 기준점이라는 뜻입니다.
2. 표에서 내 조건과 가장 가까운 행. 대상 연령이나 측정 방법이 내 계획과 비슷한 논문이 방법을 빌려오기에 가장 좋습니다.

이렇게 고른 원저가 3~5편이면 충분합니다. 그 논문들의 참고문헌과 피인용 논문을 따라가면 검색창을 다시 열지 않고도 목록이 계속 늘어납니다 — 그 방법은 인용된 논문 따라가기에서 이어집니다.

리뷰가 없는 주제라면

리뷰가 안 나오는 경우는 대개 셋 중 하나입니다.

범위가 너무 좁습니다. "고등학생 백색소음 암기력 리뷰"는 없어도 "소음과 인지 수행 고찰"은 있습니다. 내 조건을 하나씩 떼어내면서 한 단계 넓은 개념으로 다시 검색하세요. 넓힌 리뷰에서 다시 내 조건으로 좁혀 내려오면 됩니다.

분야가 리뷰를 잘 안 쓰는 분야입니다. 이때는 리뷰 대신 학위논문의 이론적 배경 장을 쓰세요. 석사·박사 학위논문은 앞부분 20~40쪽이 사실상 그 주제의 리뷰이고, 국내 학위논문은 원문이 공개된 경우가 많아 접근도 쉽습니다. 한국어 학위논문을 찾는 방법은 RISS·KCI에서 한국어 논문 찾기에 있습니다.

정말로 새 주제입니다. 이 경우는 드물지만 있습니다. 그러면 인접 분야의 리뷰 두 편을 읽고 그 둘을 잇는 자리에 내 주제를 놓습니다. 이건 오히려 좋은 신호입니다.

교과서와 전문 서적의 해당 장도 리뷰 역할을 합니다. 다만 교과서는 정리가 잘 되어 있는 대신 최근 결과가 빠져 있으므로, 배경과 정의는 교과서에서 가져오고 최근 5년의 결과는 논문에서 따로 채워야 합니다.

리뷰 한 편으로 만드는 첫 종합표

리뷰를 읽었으면 그날 안에 다음 세 가지를 남깁니다. 종합표를 만드는 방법 자체는 2단계: 선행연구 조사에 정리되어 있으니, 여기서는 리뷰 한 편에서 그 표의 첫 행들을 어떻게 뽑아내는가만 봅니다.

1. 표준 용어 목록 — 리뷰가 쓰는 용어를 그대로 5~8개 적습니다. 이게 앞으로의 검색어가 됩니다.
2. 표에서 옮겨온 행 3~5개 — 리뷰의 표에서 내 조건과 가까운 행만 골라 내 종합표의 첫 행으로 넣습니다. 이때 출처 칸에는 리뷰가 아니라 원래 논문의 저자와 연도를 적습니다.
3. 갭 후보 한 줄 — 결론 절에서 저자가 남겨둔 과제 중 내가 할 수 있어 보이는 것 하나.

끝까지 읽기로 정한 원저는 위 도구 내 레퍼런스 목록에 저자·연도·제목과 함께 저장해두세요. 리뷰 자체도 한 줄로 저장합니다 — 서론을 쓸 때 "이 분야의 연구는 대체로 이러이러하다"를 인용할 근거가 됩니다.

다음에 할 것 — 점검표

리뷰 한 편을 읽고 아래 여섯 개에 모두 답할 수 있으면 이 단계는 끝난 것입니다.

• 내가 읽은 것이 리뷰가 맞는가 (제목 표지어 · 초록에 자기 데이터 없음 · 참고문헌 다수)
• 이 분야의 표준 용어 5개를 적었는가
• 리뷰의 표에서 내 조건과 가까운 행 3개 이상을 옮겼는가
• 원저로 내려갈 논문 3~5편을 골랐고, 고른 이유를 한 줄로 말할 수 있는가
• 저자가 남긴 "향후 과제" 중 내 크기에 맞는 것을 하나 찾았는가
• 종합표의 출처 칸에 리뷰가 아니라 원 논문이 적혀 있는가

여섯 개가 채워졌다면 다음 순서는 고른 원저를 실제로 여는 것입니다. 영어 논문이라면 영어 논문, 처음부터 끝까지 읽지 않는 법의 순서를 그대로 쓰면 한 편에 10분이면 됩니다.