저널 편집자를 위한 인용 검증: 동료 심사 전에 잘못된 참고 문헌을 찾아내는 방법

편집자로서 여러분은 이런 패턴을 보셨을 겁니다. 잘 작성된 원고가 도착했는데, 언뜻 보기에 전문적으로 보이는 참고 문헌 목록이 있습니다. 30~40개의 인용문이 적절하게 형식화되어 관련 문헌을 다루고 있습니다. 여러분은 이를 심사자에게 보냅니다. 3주 후, 한 심사자가 참고 문헌 17번이 존재하지 않고, 참고 문헌 23번이 철회된 논문을 인용했다고 지적합니다. 이제 여러분은 심사자의 시간을 낭비하고, 신뢰도를 손상시키며, 저자와의 어색한 교환을 초래했습니다.

2026년에는 이러한 시나리오가 그 어느 때보다 흔해졌습니다. AI 글쓰기 도우미는 저자들이 — 심지어 선의의 저자들조차도 — 조작되거나, 왜곡되거나, 구식인 참고 문헌을 포함하는 것을 매우 쉽게 만들었습니다. 문제는 악의적인 행위자에게만 있는 것이 아닙니다. 그럴듯해 보이는 인용을 생성하는 것이 검증하는 것보다 쉬운 출판 생태계에 문제가 있습니다.

이 가이드는 작업량을 두 배로 늘리지 않고도 데스크 리뷰 워크플로에 참고 문헌 심사 단계를 추가하고자 하는 편집자를 위한 것입니다.

문제의 규모

여러 연구에서 제출된 원고에서 조작된 참고 문헌의 증가를 기록했습니다.

• 2025년 중급 의료 저널에 제출된 500개 원고에 대한 분석 결과, 12%가 CrossRef 또는 PubMed에서 확인할 수 없는 참고 문헌을 최소 하나 이상 포함하고 있었습니다.
• Retraction Watch는 2023년에서 2025년 사이에 "신뢰할 수 없는 참고 문헌"을 인용한 철회 건수가 340% 증가했다고 보고했습니다.
• 여러 컴퓨터 과학 분야의 편집자들은 AI 지원으로 생성된 원고의 조작된 참고 문헌 비율이 15%에서 30% 사이라고 보고했습니다.

이 수치는 저자 자신의 검토를 통과한 원고를 나타냅니다. AI 도구에 의한 가짜 인용의 실제 생성률은 훨씬 높습니다. 여러분의 책상에 도달하는 것들은 저자들이 발견하지 못한 것들입니다.

편집자가 데스크 리뷰에서 현실적으로 확인할 수 있는 것

모든 제출물의 모든 참고 문헌을 확인할 필요는 없습니다. 하지만 목표를 정한 심사는 가장 심각한 문제를 찾아냅니다.

1단계: 자동화된 일괄 검증 (원고당 2분)

참고 문헌 목록을 Citely의 Citation Checker와 같은 자동화된 검사기에 복사합니다. 이 도구는 각 참고 문헌을 구문 분석하고 CrossRef에 대해 DOI를 확인합니다. 이 한 단계로 다음을 찾아낼 수 있습니다.

• 해결되지 않는 DOI (조작되거나 오타)
• 설명된 것과 다른 논문을 가리키는 DOI
• 존재해야 하지만 누락된 DOI
• 주요 메타데이터 불일치 (잘못된 연도, 잘못된 저널)

40개의 참고 문헌이 있는 원고의 경우, 처리 시간은 약 60초입니다. 전체 워크플로(복사, 붙여넣기, 결과 검토)는 2분 미만입니다.

2단계: 철회 확인 (원고당 1분)

DOI를 철회 데이터베이스와 교차 확인합니다. CrossRef 메타데이터에는 많은 출판사의 철회 통지가 포함되어 있습니다. Retraction Watch 데이터베이스도 또 다른 출처입니다.

인용된 철회된 논문은 데스크 리뷰에서 발견할 수 있는 가장 심각한 무결성 문제 중 하나입니다. 또한 원래 출판되었을 때는 논문이 존재했고 유효했기 때문에 놓치기 가장 쉬운 문제 중 하나이기도 합니다.

3단계: 고위험 참고 문헌 스팟 체크 (원고당 5분)

일부 참고 문헌은 수동으로 주의를 기울여야 합니다.

• 현재 연도에 출판된 논문에 대한 참고 문헌 — 데이터베이스에 아직 색인되지 않았을 수 있으므로 조작될 가능성이 더 높습니다.
• 출판 연도가 둥근 숫자 (2020, 2015)인 참고 문헌 — AI 도구는 둥근 연도에 약간의 편향을 보입니다.
• 자체 인용 — 저자의 실제 출판물을 가리키는지 확인합니다.
• 모호하거나 약탈적인 저널에 대한 참고 문헌 — 저널이 존재하고 색인되어 있는지 확인합니다.

편집 워크플로에 통합하기

편집 보조원이 있는 저널의 경우

편집 보조원에게 모든 제출물을 여러분이 보기 전에 자동화된 검증을 거치도록 훈련시키십시오. 보조원은 문제가 있는 원고에 플래그를 지정하고 검증 보고서를 포함합니다. 여러분은 심각도에 따라 편집 결정을 내립니다.

• 1-2개의 사소한 메타데이터 오류 → 결정 서신에 메모하고 저자에게 수정 요청
• 조작된 참고 문헌 → 설명과 함께 데스크 거절
• 철회된 논문 인용 → 무결성 검토를 위해 플래그 지정

모든 것을 직접 처리하는 편집자의 경우

초기 검토 후, 그리고 심사자에게 보낼지 여부를 결정하기 전에 3분 단계를 추가하십시오.

1. 참고 문헌 목록 복사 (60초)
2. 자동 검사 실행 (처리 60초)
3. 보고서에서 위험 신호 스캔 (60초)

이 작은 시간 투자는 심사자의 불만, 저자와의 서신, 출판 후 잠재적인 수정이라는 훨씬 더 큰 시간 비용을 방지합니다.

정책을 설정하는 편집 위원회의 경우

제출 지침에 참고 문헌 검증을 추가하는 것을 고려하십시오.

"저자는 제출 전에 CrossRef 또는 동등한 데이터베이스에 대해 모든 참고 문헌을 확인할 것으로 예상됩니다. 확인할 수 없는 참고 문헌이 포함된 원고는 검토 없이 반환될 수 있습니다."

이는 저자에게 일부 책임을 전가하는 동시에 저널이 인용 무결성을 진지하게 받아들인다는 신호를 보냅니다.

참고 문헌 목록의 위험 신호

자동화된 도구가 찾아내는 것 외에도, 숙련된 편집자들은 이러한 패턴에 대한 안목을 키웁니다.

의심스러울 정도로 균일한 형식. 모든 참고 문헌이 완벽하게 동일한 스타일로 완벽하게 형식화되어 있고, 변형이나 특이한 점이 없다면, 목록은 시간이 지남에 따라 편집된 것이 아니라 생성되었을 수 있습니다. 몇 달간의 연구를 통해 작성된 실제 참고 문헌 목록은 일반적으로 작은 불일치를 보입니다.

모든 참고 문헌이 매우 관련성이 높음. 실제 문헌 검토에는 주변적이고 배경적인 참고 문헌이 포함됩니다. 모든 인용이 논문의 주제와 완벽하게 일치하는 키워드라면, 참고 문헌은 연구를 통해 발견된 것이 아니라 적합하게 생성되었을 수 있습니다.

분야와 일치하지 않는 저자 이름. 계산 언어학에 대한 논문이 Journal of Computational Linguistics에 "Smith et al."을 인용하지만, 해당 저널에 출판하는 유일한 Smith는 완전히 다른 하위 분야에서 일합니다. 이 패턴은 AI 생성 키메라 참고 문헌의 특징입니다.

2020년 또는 2023년 참고 문헌의 클러스터링. AI 훈련 데이터에는 자연스러운 마감 시점이 있으며, 생성된 참고 문헌은 이러한 날짜 주변에 집중되는 경향이 있습니다.

핵심 요약

• 최근 연구에서 제출된 원고의 12%가 최소 하나의 확인할 수 없는 참고 문헌을 포함하고 있었으며, 대부분은 의도적인 조작이 아닌 AI 글쓰기 지원으로 인한 것이었습니다.
• 자동화된 일괄 검증은 원고당 2분 미만이 소요되며, 심사자의 시간을 낭비하기 전에 조작된 DOI, 메타데이터 오류, 철회된 논문을 찾아냅니다.
• 3단계 심사 시스템 (자동 검사 → 철회 확인 → 고위험 참고 문헌 스팟 체크)은 데스크 리뷰 워크플로에 상당한 시간을 추가하지 않고도 적합합니다.
• 제출 지침에 참고 문헌 검증 요구 사항을 추가하는 것을 고려하십시오. 이는 저자에게 책임을 전가하고 편집 기준을 알리는 역할을 합니다.
• 수동으로 스팟 체크해야 할 가장 위험한 참고 문헌은 당해 연도 출판물, 둥근 연도 출판물, 모호한 저널에 대한 인용입니다.

제출물을 심사하세요 → citely.ai/citation-checker