주석 달린 참고문헌(annotated bibliography)은 출처 인용 목록 뒤에 각 출처를 요약, 평가 또는 어떻게 사용될 것인지 설명하는 짧은 메모가 붙어 있는 것입니다. 일반적인 참고문헌과 달리, 각 출처에서 무엇을 배웠고 왜 그 출처가 프로젝트에 포함되어야 하는지를 기록합니다.
가장 안전한 AI 지원 워크플로우는 모델이 인용을 발명하거나 기억에서 최종 항목을 작성하도록 요청하지 않습니다. 추출된 모든 주장은 원본 논문 및 PDF 페이지로 추적 가능하게 유지합니다. Ponder는 동일한 질문으로 여러 논문을 읽고 인용된 출처 페이지로 돌아가는 데 도움을 줄 수 있습니다. Zotero 또는 Word는 여전히 APA, MLA 또는 기타 필요한 인용 형식을 처리해야 합니다.
주석 달린 참고문헌에 포함되는 내용
모든 항목은 완전한 인용과 주석의 두 부분으로 구성됩니다. 인용은 출처를 식별합니다. 주석은 출처에 대한 이해를 보여줍니다. 강사는 한 가지 기능 또는 세 가지 기능의 조합을 요청할 수 있습니다.
- 기술적 주석(Descriptive annotation): 출처를 판단하지 않고 연구 질문, 범위, 방법 및 주요 발견을 명시합니다.
- 평가적 주석(Evaluative annotation): 특정 주장에 대한 신뢰성, 증거 품질, 한계 또는 유용성을 평가합니다.
- 성찰적 주석(Reflective annotation): 출처가 자신의 연구 방향을 어떻게 변경, 지지 또는 복잡하게 만드는지 설명합니다.
강력한 항목은 종종 그 순서대로 진행됩니다. 즉, 출처가 무엇을 했는지, 결론을 얼마나 잘 뒷받침하는지, 그리고 어떻게 사용할 것인지입니다. 이러한 구조는 주석을 복사된 초록으로 만들지 않고 분석적으로 유지합니다.
참고문헌 vs. 주석 달린 참고문헌
| 비교 항목 | 참고문헌 | 주석 달린 참고문헌 |
|---|---|---|
| 출처 요약 | 일반적으로 포함되지 않음 | 보통 질문, 범위 및 핵심 발견을 명시함 |
| 신뢰성 평가 | 포함되지 않음 | 증거, 권위, 편향 및 한계를 평가할 수 있음 |
| 방법 또는 증거 | 인용 자체에서 명시될 때만 보임 | 관련성이 있을 때 연구 설계, 표본 또는 증거를 식별함 |
| 일반적인 길이 | 하나의 인용 항목 | 각 인용 뒤에 약 100–200단어 정도이지만, 과제에 따라 다름 |
| 주요 목적 | 독자가 인용되거나 참조된 출처를 찾도록 도움 | 각 출처가 무엇을 기여하고 프로젝트에 포함될 가치가 있는지 보여줌 |
| 서식 책임 | Zotero, Word 또는 수동 스타일 확인 | 동일한 인용 서식과 연구자가 작성하고 검증한 분석 |
길이 범위는 계획을 돕기 위한 것이지 규칙이 아닙니다. 교수는 75단어, 250단어 또는 별도의 요약 및 평가 단락을 요청할 수 있습니다. 잘못된 과제를 해결하지 않도록 작성하기 전에 루브릭을 확인하십시오.
주석 달린 참고문헌을 작성하는 6단계
1단계: 과제 및 인용 스타일 확인
요구되는 스타일 판본, 출처 수, 출처 유형, 주석 길이, 그리고 강사가 설명, 평가, 성찰 중 무엇을 원하는지 또는 이 세 가지 모두를 원하는지 기록하세요. MLA Works Cited 항목과 APA 참조는 동일한 사실을 다르게 배열하지만, 증거를 평가하는 지적 작업은 여전히 여러분의 몫입니다.
2단계: 초안 작성 전에 실제 출처 수집
모든 출처에 대한 발행인 페이지, DOI, 전체 텍스트 및 전체 인용 메타데이터를 저장하세요. DOI가 있는 경우 안정적인 식별자를 제공하므로 DOI를 선호하세요. 챗봇만으로 생성된 인용으로 시작하지 마세요. 636개의 참조에 대한 인용 감사 결과 GPT-3.5 인용의 55%와 GPT-4 인용의 18%가 조작된 것으로 나타났습니다(Walters and Wilder, PDF p. 1).
3단계: 모든 논문에서 동일한 필드 추출
각 출처에 대해 연구 질문, 연구 설계, 표본 또는 코퍼스, 주요 결과, 한계 및 주제와의 관련성을 파악하세요. 일관된 증거 표는 출처를 비교 가능하게 만듭니다. 더 많은 자료를 다루는 경우, 문헌 검토 도구 워크플로가 산문 작성을 시작하기 전에 해당 필드를 정리하는 데 도움이 될 수 있습니다.
4단계: 모든 중요한 주장을 논문과 대조하여 확인
추출된 각 문장 뒤에 있는 원본 페이지를 여세요. 특히 숫자, 한계 및 저자의 주의 사항에 대해 메모 옆에 PDF 페이지를 기록하세요. 페이지 표시는 여러분에게 작동하는 증거이며, 최종 인용에 자동으로 포함되지는 않습니다. 이 출처 우선 습관은 증거 보존 논문 요약의 핵심이기도 합니다.
5단계: 자신의 말로 주석 작성
목적과 방법에 대한 한 문장으로 시작하고, 가장 관련성 있는 결과를 추가하고, 한 가지 강점 또는 한계를 평가하고, 프로젝트에서 출처의 역할로 끝맺으세요. 평가는 구체적으로 유지하세요. "동료 검토됨"만으로는 평가가 아닙니다. "작은 표본과 적은 수의 검토자가 일반화를 제한한다"는 연구에서 보고된 실제 제약을 식별합니다.
6단계: 요구되는 인용 스타일 적용 및 항목 감사
확인된 메타데이터를 Zotero 또는 Word로 옮기고, 요구되는 스타일을 선택한 다음, 출력물을 현재 스타일 가이드와 비교하세요. 인용 소프트웨어는 기계적인 작업을 줄여주지만, 올바른 논문, DOI, 판본 또는 해석이 캡처되었는지 여부를 결정할 수는 없습니다. 관리자를 비교하는 경우, 서식 워크플로를 변경하기 전에 Zotero 대안 간의 실제적인 차이점을 검토하세요.
동일 논문에 대한 APA 7 및 MLA 9 예시
아래 예시는 Gao et al.의 오픈 액세스 논문을 인용합니다. 두 예시 모두 해결 가능한 URL로 DOI를 포함하며, 대문자 사용, 저자 처리, 저널 표기 및 구두점에서 차이가 있습니다.
APA 7:
Gao, C. A., Howard, F. M., Markov, N. S., Dyer, E. C., Ramesh, S., Luo, Y., & Pearson, A. T. (2023). Comparing scientific abstracts generated by ChatGPT to real abstracts with detectors and blinded human reviewers. npj Digital Medicine, 6, Article 75. https://doi.org/10.1038/s41746-023-00819-6
MLA 9:
Gao, Catherine A., et al. “Comparing Scientific Abstracts Generated by ChatGPT to Real Abstracts with Detectors and Blinded Human Reviewers.” npj Digital Medicine, vol. 6, 2023, article 75, https://doi.org/10.1038/s41746-023-00819-6.
이것들을 구조적 예시로 사용한 다음, 귀하의 과정 또는 출판사 요구 사항을 따르십시오. MLA 스타일 센터는 현재 DOI를 사용할 수 있는 경우 퍼머링크 또는 일반 URL보다 DOI를 선호합니다.
실제 논문을 기반으로 한 세 가지 완성된 주석
1. 서술적 및 평가적 주석
Gao et al. (2023). 이 연구는 50개의 원본 의학 연구 초록과 ChatGPT가 제목과 저널에서 생성한 50개의 초록을 비교했습니다. 자동 감지기는 AUROC 0.94로 그룹을 구별했습니다(PDF p. 1). 맹검 인간 검토자는 생성된 초록의 68%를 올바르게 식별했지만, 원본 초록의 14%를 생성된 것으로 잘못 분류하기도 했습니다(PDF p. 2). 이 디자인은 탐지기와 인간의 판단을 결합하여 어느 한쪽을 완벽한 테스트로 취급하지 않기 때문에 유용합니다. 저자들이 PDF p. 2에서 인정한 바와 같이, 작은 샘플과 제한된 검토자 그룹은 모든 분야나 모델에 대한 광범위한 주장을 제한합니다. AI 지원 학술 작문 프로젝트의 경우, 이 논문은 유창한 텍스트가 여전히 안정적으로 분류하기 어려울 수 있다는 측정된 증거를 제공합니다.
2. 평가적 주석
Walters, W. H., and Wilder, E. I. (2023). 저자들은 84개의 논문에 대해 생성된 636개의 인용을 감사했습니다. 그들은 GPT-3.5 인용의 55%와 GPT-4 인용의 18%가 조작되었다는 것을 발견했습니다(PDF p. 1). 실제 작품을 참조하는 인용에서도 정확성 문제가 계속되었습니다. GPT-3.5의 실제 인용 중 43%가 실질적인 오류를 포함했으며, GPT-4의 경우 24%였습니다(PDF pp. 4–5). 이 직접적인 인용 수준 감사는 언어 모델이 때때로 환각을 일으킨다는 일반적인 주장보다 주석이 달린 참고 문헌 작업 흐름에 더 유용합니다. 이는 존재하지 않는 출처와 손상된 메타데이터를 모두 정량화합니다. 이 연구는 엄격한 규칙을 지지합니다. 모든 출처를 독립적으로 찾아 열고, 주석을 달기 전에 저자, 제목, 장소, 연도 및 DOI를 확인해야 합니다. DOI: 10.1038/s41598-023-41032-5.
3. 서술적 및 성찰적 주석
Salvagno, M., Taccone, F. S., and Gerli, A. G. (2023). 이 기사는 경험적 벤치마크가 아닌 관점입니다. 이 기사는 전문가 검토, 인간의 판단, 표절 또는 부정확한 콘텐츠와 관련된 위험을 강조하면서 논문 구성, 초기 초안 작성 및 교정에서 AI의 가능한 역할을 설명합니다(PDF p. 1). 이 기사는 이러한 용도를 실험적으로 테스트하지 않으므로 AI가 글쓰기 품질을 향상시킨다는 증거로 인용되어서는 안 됩니다. 그 가치는 개념적입니다. 책임 있는 업무 분담을 정의하는 데 도움이 됩니다. 이 작업 흐름에서 소프트웨어는 추출된 증거를 정리하는 데 도움이 될 수 있지만, 연구원은 해석, 귀속 및 최종 산문에 대한 책임을 유지합니다. DOI: 10.1186/s13054-023-04380-2.
연구 무결성 체크리스트
- 인용된 모든 논문을 DOI, 출판사 페이지 또는 도서관 기록을 통해 열어볼 수 있습니까?
- 모든 숫자와 제한 사항을 원본 PDF 페이지와 비교하여 확인했습니까?
- 주석이 저자들이 발견한 것과 당신이 추론한 것을 구별하고 있습니까?
- 관점, 검토 또는 해설을 실험으로 제시하지 않고 정확하게 분류했습니까?
- 이름, 대문자 사용, 날짜, DOI 형식을 포함하여 지정된 판에 대한 인용 스타일이 올바릅니까?
- 자신의 말로 주석을 작성하고 필요한 인용 부호와 페이지 인용을 보존했습니까?
깔끔하게 주석이 달린 참고 문헌은 미니어처 증거 지도와 같습니다. 각 항목은 출처, 주장, 지원 품질 및 중요성을 보여줍니다. 형식을 다듬기 전에 이 연결망을 구축하십시오.