한국어 프롬프트가 결과를 흔드는 이유

LLM으로 논문을 쓸 때 한국어 프롬프트가 오역과 편차를 키운다는 실험 영상 소개입니다. 복잡한 프롬프트는 영어로 쓰는 편이 안정적입니다.

https://www.youtube.com/watch?v=eqFsOie_JHE

논준모 연구소 채널에서 아주 간단한 LLM에 관한 실험을 한 내용입니다. 어떻게 보면 너무 당연한 이야기겠지만 간과했던 사실이어서 공유합니다~

영상의 요점은 LLM 모델로 논문을 쓸 때 겪는 어려움인데 문제 중 하나로 한글로 사용할 때 오는 어려움을 꼽으시고 실험으로 보여주신 것입니다. LLM의 번역은 문법을 기반으로 직역한 번역이 아니라 아무래도 번역하는 방식이 다르다보니 오역이 생기고 복잡한 프롬프트일수록 그 오차가 심해지면서 결과물에서도 디테일의 차이가 생기게 된다는 점입니다.

2~3주 전 카톡방에서 정확히 같고 프롬프트 엔지니어링을 통해 작성한 상세한 프롬프트로 Gemini에 여러번 물어봤을 때 상반된 의견을 내놓는다고 흥미로운 주제 말씀해주셨을 때는 Temperature과 같은 파라미터에 관한 이야기 나눴었던 거 같은데, 영어로 같은 프롬프트를 쓰면 오차가 줄어드는지도 실험해 볼 만합니다.

아무튼 그냥 영어로 쓰는게 마음 편할 거 같네요

---

주제: 프롬프트 · 실험
카톡방 공유 2025-09-15