4종류의 논문 리뷰 유형: 나에게 도움이 되는 리뷰 유형은 무엇일까?

학술저널투고



피어리뷰

올바른 저널을 선택하는 방법에 대한 포스팅에 이어, 이번에는 저널들이 논문을 평가하는데 사용하는 리뷰 유형들에 대해 살펴보도록 하겠습니다. 타겟 저널들의 목록을 만들때, 저널들의 목적과 주제 뿐만 아니라 해당 저널들의 리뷰 유형에 대해서도 고려해보아야 합니다. 리뷰의 유형은 크게 두 가지 주요 범주로 나눌 수 있습니다. 바로 에디토리얼 리뷰(editorial review) 와 피어리뷰 (peer review)입니다. 후자의 피어리뷰를 몇 가지 유형으로 더 세분화 할 수도 있는데요. 이번 포스팅에서 각각의 유형에 대한 정의와 이러한 유형들이 성공적인 투고 확률에 어떻게 영향을 미치는지에 대해 설명할 것입니다.

에디토리얼 리뷰 (editorial review)란?

이름에서 알 수 있듯이, 에디토리얼 리뷰란 저널의 에디터들이 투고된 논문이 저널의 요구조건을 충족하는지를 결정하는 리뷰 유형을 뜻합니다. 일반적으로, (논평 혹은 저자의 견해에 대한 글과 같이) 자신의 논문이 연구를 기반으로 하지 않는 경우에는 해당 저널의 에디터들만 논문을 심사할 것입니다. 하지만 논문이 연구를 기반으로 하는 경우 (아마도 여러분들이 이 포스팅을 읽고 계신 이유겠지요)에는, 저널의 에디터들이 저널 심사 과정의 첫 단계에 관여한 후, 여러 요소를 고려하여 논문을 추가 심사 단계를 위해 피어 리뷰어에게 투고 논문을 전달할지 여부를 결정합니다. 이에 관해, 에세이리뷰에서는 이전 포스팅에서 논문이 거절되는 가장 일반적인 이유를 비롯하여 여러 요소에 대해 살펴보았습니다.

논문이 첫 번째 심사 단계를 통과할 경우, 해당 저널의 에디터들은 소수의 피어리뷰어들 (일반적으로 두명 혹은 세명)에게 연락을 한 후 심사를 위해 해당 논문을 전달할 것입니다.

피어리뷰 (peer review)란?

저널들은 피어리뷰의 여러 방법들을 사용하고 있습니다. 일부 저널들은 한 유형의 피어리뷰를 고집하는 반면, Nature와 같은 저널들은 저자들이 싱글블라인드(single-blind) 와 더블블라인드(double-blind) 리뷰 중 선택할 수 있도록 하고 있습니다. 어떤 선택이 여러분에게 최선일까요? 좀 더 자세히 살펴보도록 하겠습니다.

anonymous-300x190

싱글블라인드 (single-blind) 리뷰란 무엇이며 이에 따라 어떻게 논문을 준비해야 할까?

싱글블라인드 리뷰에서, 리뷰어들은 저자가 누군지 알지만, 리뷰어들은 익명으로 남아있습니다. 이 리뷰 유형에서, 논문의 저자들은 논문 투고 서류에서 저자 식별 정보를 삭제할 필요가 없습니다. 싱글블라인드 피어리뷰의 장점과 단점에 대해 상세히 알기를 원하시면 아래 “어느 방법이 나에게 적합한가?” 표를 참고하시길 바랍니다.

더블블라인드 (double-blind) 리뷰란 무엇이며 이에 따라 어떻게 논문을 준비해야 할까?

더블블라인드는 관련 당사자의 신원이 모두 익명이라는 것을 의미합니다. 이 리뷰 유형에서, 저자들은 리뷰어의 이름을 모르고, 리뷰어들도 저자들이 누군지 모릅니다. 더블블라인드 과정을 통해 논문을 제출하는 경우, 본인의 논문에서 모든 저자 식별 정보를 삭제해야합니다. 이 경우에, 타겟 저널에서 제공하는 모든 지침을 준수하도록 주의하셔야 합니다. 일반적으로, 상기 익명화 과정 (anonymization process)은 아래의 단계를 포함합니다.

더블블라인드 리뷰과정을 준비하기 위한 체크리스트

  • 논문 투고 파일의 메타데이터에서 저자, 기관, 제휴 기관 이름 및 기타 식별 정보를 삭제해야 됩니다. 파일 속성을 확인하여 “저자”, “관리자”, “기관”, “최종 사용자”, 사용자 지정 필드와 같은 속성에 저자의 이름, 기관등이 포함되어 있지 않은지 확인하셔야 합니다.

  • 식별 정보는 논문과 별도의 파일에 포함되어야합니다. 하드 카피로 논문을 제출하는 경우, 개인 정보를 포함하는 별도의 제목 페이지 (title page)를 제출해야합니다.

  • 논문이 아닌 커버레터 혹은 감사의 말 (Acknowledgement)에 저자와 기여자 (contributor) 정보를 포함해야 합니다. 리뷰 절차가 완료된 후에, 의도적으로 생략한 정보를 다시 포함할 수 있습니다.

  • 저자 및 기관 이름이 그림이나 레전드 (legend)에 기재되어 있지 않은지 확인하셔야 합니다.

  • 머리글과 바닥글을 두번 확인하여 개인 정보를 삭제해야합니다.

  • 인용할 때, 자기 자신을 인용할 때에는 3인칭을 사용해야 합니다. 예를 들어, “We have previously…” 대신 “Jones and Thompson (2015) have…” 라고 말해야 합니다. 또는, “…has been shown before [Anonymous, 2015]”와 같이 작성할 수도 있습니다. 마찬가지로, 참조 목록에, “Jones and Thompson, 2015″ 혹은 “[Anonymous, 2015]”로 기재할 수도 있습니다. 투고 관련 서류에서 일관되게 3인칭 혹은 “Anonymous”를 적용해야 합니다.

  • 아직 게재 승인 (accept) 되지 않은 참고 문헌은 포함하지 않아야 합니다.

오픈 리뷰 (open review) 및 하이브리드 리뷰 (hybrid review)란?

오픈 리뷰 과정에서는, 모두가 저자와 리뷰어의 이름을 알고 있습니다. 하지만, 논문에 대한 코멘트는 대중에게 공개될수도 그렇지 않을수도 있습니다.일부 저널들은 하이브리드 리뷰 과정을 제공하기도 합니다. 예를 들면, “Electronic Transactions on Artificial Intelligence” 저널이 하이브리드 리뷰 유형을 제공하는데요. 하이브리드 리뷰는 다음과 같습니다.

  • 이 하이브리드 유형에서는, 해당 저널의 에디터들이 먼저 논문이 적절한 주제를 갖고 있으며 실질적으로 타당한지 결정하는 일반적인 에디토리얼 리뷰과정으로 시작합니다.

  • 논문이 첫 번째 관문을 통과하면, 그 논문은 모든 피어리뷰어들의 오픈 리뷰를 위해 토론 게시판에 게시됩니다.

  • 몇 달 동안 모든 사람들은 해당 논문에 관한 질문과 의견을 볼 수 있습니다. 해당 저널의 에디터들은 논문들의 모든 내용이 서로 관련있고 논문들의 품질이 최소한의 수준을 만족할 수 있도록 해당 포럼(forum)을 관리합니다.

  • 이 과정이 완료된 후, 저자들은 공개된 피드백에 기초하여 자신의 논문를 수정할 수 있습니다.

  • 이 수정된 논문은 싱글블라인드 리뷰 시스템을 통해 선별된 전문가에게 전달됩니다. 이 마지막 단계에서, 심사자들은 (피어리뷰어들은) 논문의 게재의 승인 여부를 결정합니다. 이 시점에서, 광범위한 코멘트들이 이미 오픈 리뷰 과정 동안 만들어졌기 때문에 논문 게재 승인에 대한 더 이상의 실질적인 논의는 이루어지지 않습니다.

어느 리뷰가 나에게 적합할까?

지금까지 다양한 피어리뷰 시스템을 살펴보았는데, 적합한 저널을 찾을 때 어느 리뷰유형을 선택할지 어떻게 결정해야 할까요? 에세이리뷰가 아래 표에 각 리뷰 유형의 장점과 단점을 정리하였습니다. 표에서 볼 수 있는 것처럼, 고려해야 할 우선 사항들은 다음과 같습니다: 오픈 리뷰 시스템을 통해 제기된 어려운 질문에 대답할 준비가 되었는지, 자신이 누구인지 그리고 어디 출신인지 공개할 생각이 있는지와 자신의 명성이 피어 (peer)들이 자신의 논문을 평가할 때 긍정적으로 혹은 부정적으로 영향을 미치는지가 그 예입니다. 만약 자신이 인기있는 분야에 신규 진입한 연구원일 경우, 블라인드 리뷰 시스템이 오픈 리뷰 시스템보다 더 유리할 수 있는데, 이는 자신의 연구가 다른 어떤 요소의 영향을 받지 않고 오직 자신의 연구의 가치만으로 평가받을 수 있기 때문입니다. 만약 자신이 아직 많이 알려져 있지 않은 분야에서 연구하는 경우에는, 해당 저널의 리뷰어들은 더블블라인드 리뷰유형에서도 자신이 누구인지 금방 알아볼 수 있을 겁니다. 이런 경우에, 오픈 유형의 리뷰가 자신에게 더 유리할 수 있는데 이는 대중들에 의해 평가 받음으로써 자신에 대한 편견이 줄어들고 논문 심사의 객관성이 증가하기 때문입니다.

 

리뷰유형 장점 단점
싱글블라인드
  • 리뷰어들은 압력이나 이의를 받지 않고 자유롭게 심사하는 논문에 대해 비판할 수 있습니다.
  • 저자가 누구인지 아는 것만으로도 연구 주제에 대한 문맥을 알 수 있으며 리뷰어들이 투고된 논문을 평가하는데 필요한 많은 정보를 얻을 수 있습니다.
  • 개인적 편견: 리뷰어가 객관적으로 논문에 중점을 두지 않고 저자에 대해서만 평가를 내릴 수 있습니다.
  • 성별 혹은 지역에 대한 편견과 같은 다른 차별요소가 논문의 운명을 결정할 수 있습니다 (예를 들어, 일부 사람들은 개발 도상국에서 수행된 연구에 대해 회의적일 수도 있습니다).
더블블라인드
  • 지역이나 성별 편견 및 저자의 배경에 따른 차별요소가 현저하게 줄어들 수 있습니다.
  • 저자와 리뷰어 둘 다 개인의 공격 혹은 압력의 대상이 되지 않습니다.
  • 저자의 배경을 아는 것이 실제로 심사하는 연구를 이해하는데 도움이 될 수 있습니다.
  • 더블블라인드 시스템이 완벽하게 구축되어 있지는 않습니다. 따라서, 리뷰어들은 연구 주제, 문체등을 기반으로하여 저자의 신원을 추측할 수도 있습니다.
  • 저자의 배경을 아는 것이 실제로 심사하는 연구를 이해하는데 도움이 될 수 있습니다.
  • 더블블라인드 시스템이 완벽하게 구축되어 있지는 않습니다. 따라서, 리뷰어들은 연구 주제, 문체등을 기반으로하여 저자의 신원을 추측할 수도 있습니다.
오픈
  • 투명성 (Transparency)을 갖춤으로써 조작의 위험성과 편견을 줄일 수 있습니다.
  • 리뷰어들은 대중들이 만족할 만한 회신을 제공해야 된다는 것에 압박감을 느끼거나 부정적인 비판을 해야 함에도 불구하고 이를 자제할 수도 있습니다.
  •  리뷰어들은 대중들이 만족할 만한 회신을 제공해야 된다는 것에 압박감을 느끼거나 부정적인 비판을 해야 함에도 불구하고 이를 자제할 수도 있습니다.
하이브리드
  • 투명성을 갖춤으로써 조작의 위험성과 편견을 줄일 수 있습니다.
  • 리뷰어들은 장기간에 걸쳐 논문에 대한 광범위한 코멘트를 제공하고 저자와 소통할 수 있습니다.
  • 저자들은 자신의 논문이 오픈 시스템에 공개된 날을 자신의 논문의 우선 출판일 (publication priority)로 지정할 수 있습니다.
  • 저자들이 그들의 연구에 필요한 것이 모두 갖춰져 있는지 혹은 연구 방법이 타당한지를 논문 투고 전에 신중하게 결정하기 때문에 게재 거절 확률이 줄어듭니다.
  • 오픈 리뷰 동안, 저자들은 피할 수 없는 대답하기 어려운 질문들에 직면할 수 있습니다. 그럼에도 불구하고 이 때문에 저자들은 미완성 논문의 투고 확률을 줄일 수도 있습니다.
  •  오픈 리뷰 동안, 저자들은 피할 수 없는 대답하기 어려운 질문들에 직면할 수 있습니다. 그럼에도 불구하고 이 때문에 저자들은 미완성 논문의 투고 확률을 줄일 수도 있습니다.

English简体中文, 繁體中文Türkçe 버젼도 이용 가능합니다.

태그: , , , , , , , , ,

Leave a Reply

Be the First to Comment!

Notify of

wpDiscuz
실시간 견적 & 문서 제출