생성형 AI에게 "이 주제의 선행연구를 알려줘"라고 하면, AI는 놀랍도록 그럴듯한 논문 목록을 내놓습니다. 저자명, 학술지명, 연도, 페이지, 심지어 DOI까지. 문제는 그중 상당수가 세상에 존재하지 않는 문헌일 수 있다는 것입니다.
AI 환각은 참고문헌에서 가장 위험합니다
AI 환각(Hallucination)은 AI가 사실이 아닌 내용을 사실처럼 생성하는 현상입니다. 본문의 환각은 읽다가 걸러낼 수 있지만, 참고문헌의 환각은 다릅니다. 형식이 완벽해서 눈으로는 구별이 거의 불가능합니다. 실존 학자의 이름과 실존 학술지를 조합해 존재하지 않는 논문을 만들어내기 때문입니다.
가짜 문헌의 전형적인 특징은 다음과 같습니다.
- 제목이 내 주제와 지나치게 딱 맞습니다. "찾던 바로 그 논문"이 나왔다면 오히려 의심하세요.
- DOI 형식은 맞는데 접속하면 다른 논문이 나오거나 페이지가 없습니다.
- 검색엔진과 학술 데이터베이스 어디에서도 제목이 검색되지 않습니다.
왜 치명적인가
심사자와 편집자는 참고문헌을 확인하는 사람들입니다. 가짜 문헌이 하나라도 발견되는 순간, 심사자는 이렇게 판단합니다. "이 저자는 인용한 문헌을 읽지 않았다. 그렇다면 본문은 누가 쓴 것인가." 논문 전체의 신뢰가 무너지고, 기관에 따라 연구부정 검증 절차로 이어질 수 있습니다. 학위논문이라면 문제가 수년 뒤에 불거질 수도 있습니다.
3분 DOI 검증법
모든 참고문헌은 제출 전에 실물을 확인해야 합니다. 방법은 간단합니다.
1. DOI 접속 확인 — doi.org 주소 뒤에 DOI를 붙여 접속했을 때, 내가 인용한 바로 그 논문이 나오는지 확인합니다. 2. 제목 검색 교차 확인 — 학술 검색(구글 스칼라 등)에서 제목을 따옴표로 묶어 검색합니다. 결과가 0건이면 존재하지 않는 문헌일 가능성이 큽니다. 3. 서지정보 대조 — 저자, 연도, 학술지명, 권·호가 원문과 일치하는지 확인합니다. AI는 실존 논문의 서지를 미묘하게 틀리게 재조합하는 경우도 많습니다. 4. 본문 인용 내용 확인 — 문헌이 실존하더라도, 내가 인용한 내용이 실제 그 논문에 있는지 원문으로 확인해야 합니다. 이것까지가 검증입니다.
문헌 검증과 AI 유사도 점검은 한 세트입니다
AI를 활용한 원고에서 가짜 문헌과 AI 문체는 함께 발견되는 경우가 많습니다. 제출 전 점검 루틴을 만들 때 참고문헌 실물 검증과 AI 유사도 확인을 한 세트로 묶으세요. AI 유사도는 위원회 제휴 서비스 카피클린에서 문장 단위로 확인할 수 있습니다.
AI에게 문헌 탐색을 시키는 것 자체는 유용한 활용법입니다. 다만 AI가 알려준 문헌은 '후보'일 뿐, 원문을 내 눈으로 확인하기 전까지는 참고문헌이 아닙니다. 이 원칙 하나가 논문의 신뢰를 지킵니다.