아래로 당겨서 돌아가기
764번의 호출, 8개 모델 실험: 너무 많은 세부사항은 소형 모델을 망치고, 불필요한 단어는 실제로 중요하며, 형식 선호도는 환상이다

764번의 호출, 8개 모델 실험: 너무 많은 세부사항은 소형 모델을 망치고, 불필요한 단어는 실제로 중요하며, 형식 선호도는 환상이다

764 calls across 8 models: too much detail kills small models, filler words are load-bearing, and format preference is a myth

인터넷에서 자주 보는 프롬프트 팁들이 정말 소형 로컬 모델에 효과가 있을까요? '구체적으로 써라', '예시를 넣어라', 'XML 태그를 써라'는 조언들 말이에요. 그래서 직접 실험해봤습니다. 764번의 호출을 8개 모델로 테스트했거든요. 로컬 모델 6개(M2 96GB와 RTX 5070 Ti를 Ollama로 실행)와 최신 API 2개(GPT-4.1-mini와 Claude Haiku 4.5)로 검증했습니다. API 비용은 단 0.03달러였어요. 로컬 모델 사용법을 바꿀 3가지 발견이 나왔는데요. 먼저, 세부사항이 너무 많으면 소형 모델에 해가 됩니다. 같은 작업을 4가지 구조 복잡도 수준으로 테스트해봤더니.

키워드

prompt engineeringsmall modelslocal modelsLLM behaviormodel comparisonprompting techniquesXML tagsexamples