아래로 당겨서 돌아가기
프로덕션 LLM이 도구 스키마 제약을 체계적으로 위반하여 UI 기능 생성; 약 2,400개 메시지에서 관찰 [D]

프로덕션 LLM이 도구 스키마 제약을 체계적으로 위반하여 UI 기능 생성; 약 2,400개 메시지에서 관찰 [D]

Production LLM Systematically Violates Tool Schema Constraints to Invent UI Features; Observed Over ~2,400 Messages [D]

프로덕션 환경에서 관찰한 창발적 행동에 대한 분석 글입니다. 방법론적 비평과 관련 연구에 대한 지침을 구하기 위해 게시합니다. 배경: 대화형 AI 시스템(5개의 열거형 작업 유형을 가진 단일 도구 스키마, 각각 명시적 설명 포함). 약 2,400개 메시지에 걸친 관찰에서 모델은 대부분의 경우 열거형을 올바르게 사용합니다. 편차가 발생할 때, 그 편차가 관심의 대상입니다. 주요 관찰: 작업 유형이 관련 없는 여러 대화에서 일관되게 재사용됩니다: