Redditr/LocalLLaMALocalLLaMA
Harness showdown: Claude Code vs OpenCode vs Pi with DeepSeek V4 Flash
2026년 7월 26일 오후 07:17Error 추천0 댓글
#LLM_Benchmark#Claude_Code#DeepSeek#LLM#AI
요약
DeepSeek V4 Flash 모델을 사용하여 Claude Code, OpenCode, Pi 세 가지 하네스를 비교 테스트한 결과, 코드 품질은 모두 동일했으나 작업 시간과 토큰 소모량에서 큰 차이가 나타났습니다. 각 도구의 프롬프트 구조와 도구 호출 방식에 따라 효율성이 결정되며, 품질 차이보다는 하네스 자체의 동작 방식이 성능 차이를 만드는 핵심 요소임을 확인했습니다.
주요 내용
- 동일한 모델을 사용하더라도 하네스(Claude Code, OpenCode, Pi)에 따라 작업 시간과 토큰 사용량이 크게 달라지지만 최종 코드 품질은 일정하게 유지되었습니다.
- Claude Code는 코드베이스 탐색에 많은 시간을 소비하는 반면, Pi는 추론 중심, OpenCode는 위임 중심으로 동작하는 등 각 도구의 구조적 차이가 효율성을 결정합니다.
- 하네스의 시스템 프롬프트와 도구 호출 구조가 모델의 작업 경로를 결정하며, 이는 품질보다는 작업 속도와 비용에 직접적인 영향을 미칩니다.