아래로 당겨서 돌아가기
Gemma 4 vs Qwen3.5: Go 코딩을 위한 양자화 로컬 LLM 벤치마킹

Gemma 4 vs Qwen3.5: Go 코딩을 위한 양자화 로컬 LLM 벤치마킹

Gemma 4 vs Qwen3.5: benchmarking quantized local LLMs on Go coding

Framework13 노트북에서 로컬 LLM 실험을 계속하고 있습니다. 메모리 대역폭과 처리 능력이 제한적이어서 40B 이하의 파라미터를 가진 MoE 양자화 모델을 탐색 중입니다. 놀랍게도 GPT-OSS-20B는 Go 코딩 작업에서 꽤 좋은 성능을 보였습니다.

키워드

local LLMsquantized modelsbenchmarkingGo codingMoEmodel optimizationedge computing