오늘의 논문
오늘의 Editor's Pick 전체 분야 Crossref 실존 확인 2026-11-21 회차 지난 회차

ChatGPT 코드 생성의 비결정성에 관한 실증 연구

An Empirical Study of the Non-Determinism of ChatGPT in Code Generation
Shuyin Ouyang, Jie M. Zhang, Mark Harman 외 · ACM Transactions on Software Engineering and Methodology · 2025년 · 조회 8
왜 이 논문인가 — 선정 기준
오늘의 Editor's Pick · 전체 분야에서 그날 가장 주목할 논문 1편
2025-01 발표 · 피인용 684회 · 분야 내 인용 영향력 상위권 · 동년 인용 상위 1% · 원 분야 IT
전체 분야에서 인용 상위 1%에 오른 높은 인용 영향력과 LLM 비결정성이라는 최신·핵심 이슈를 다뤘기에 Editor’s Pick으로 선정되었다.
논문 요약
본 연구는 코드 생성 작업에서 널리 사용되는 ChatGPT의 결과가 동일 프롬프트에서도 크게 달라지는 비결정성 문제를 조사하였다. 829개의 코드 생성 문제를 CodeContests, APPS, HumanEval 세 벤치마크에 걸쳐 실험하였다. 실험을 통해 비결정적인 출력이 빈번히 발생하며, 이는 생성 코드의 정확성과 일관성에 부정적 영향을 미친다는 것을 확인하였다.
후속 연구설계에 활용하기
후속 연구에서는 비결정성 정도를 정량화하는 지표를 도입하고, 동일 프롬프트에 대한 다중 실행을 설계에 포함시켜 재현성을 체계적으로 평가할 수 있다.
핵심어
ChatGPT코드 생성비결정성재현성
실존 확인
이 논문은 OpenAlex에서 후보로 수집한 뒤, Crossref에 등록된 DOI와 제목 일치를 확인해 노출합니다. SSRA가 문헌연구에서 인용 논문의 실재 여부를 검증하는 원칙과 같습니다.
2026-11-21 확인 · 2026-11-21 선정
같은 회차의 다른 논문
HOT PAPER 경영·경제 7
인공지능 기술과 기업가정신: 혼합 문헌 고찰
NEW PAPER 경영·경제 7
관료적 관리가 직원 건강에 미치는 영향: 정서적 소진 매개·혁신적 롤모델링 조절
RESEARCH PAPER 경영·경제 7
직무 요구–자원 이론: 현황 정리와 미래 전망
HOT PAPER 사회과학 8
생성 AI 리터러시: 12가지 핵심 역량
RESEARCH PAPER 사회과학 7
다음 빅 파이브 인벤토리 (BFI-2): 15가지 하위요인을 갖는 계층모형 개발 및 평가
HOT PAPER 교육 7
생성 AI 리터러시: 12가지 핵심 역량
NEW PAPER 교육 8
질적 연구: 핵심 설계 결정들
RESEARCH PAPER 교육 7
질적 연구에서 포화: 개념화와 운영화 탐색
HOT PAPER 간호·보건 8
마그네슘 L-트레오네이트(Magtein®)가 성인의 인지능력 및 수면 질에 미치는 효과
NEW PAPER 간호·보건 7
의대생 번아웃: 학습장애와 재정적 안정감의 역할
RESEARCH PAPER 간호·보건 8
복합중재 개발·평가 프레임워크 업데이트: 격차분석·워크숍·컨설팅 기반
HOT PAPER IT 7
LLM4TS: 사전학습 대형 언어모델을 데이터 효율적인 시계열 예측기로 맞추기
NEW PAPER IT 7
4사이클 없는 그래프의 스타 커버 최적화 문제
RESEARCH PAPER IT 7
생성적 적대 신경망
HOT PAPER 자연과학 6
지속 가능한 폐수 처리 혁신 접근법: 기존·신규 기술 종합 탐색
NEW PAPER 자연과학 8
비교가능성 없는 다중 에이전트 시스템의 평균장(limit) 이론: 무한 차수 초그래프 모델
RESEARCH PAPER 자연과학 7
언어 모델 기반 딥러닝으로 RNA 3D 구조를 정밀 예측하는 RhoFold+
HOT PAPER 예체능 8
능동학습이 EFL 학습자의 동기, 불안, 태도에 미치는 영향: 이란 사례 연구
NEW PAPER 예체능 6
문서를 인식론적 인프라로 재구성하기
RESEARCH PAPER 예체능 8
정중함 이론을 대체하는 커뮤니케이션 모델과 이념