Qwen 3.8 27B 모델이 전문 분야 테스트에서 도구 활용 시 성능이 크게 향상됐어요. 부동산, 사모펀드 등 금융 분야 테스트에서 도구 사용 시 평균 점수가 98.05%로 상승했어요. 특히, 전문적인 검색 정보 활용 힌트를 제공하면 점수가 98.44%까지 높아져요. vLLM 0.27.1 환경에서 5090 GPU를 사용해 테스트를 진행했어요.
초기 테스트에서는 95.25%의 점수를 기록했지만, 도구 사용과 검색 힌트 적용을 통해 점수가 향상됐으며, 특히 핵심 전문 분야에서 100% 점수를 기록하기도 했어요. 테스트는 전문 자격증 기반의 600개 문제로 구성됐으며, 금융 계산기, 웹 검색, 날짜/시간 기능 등의 도구를 활용했어요.
Qwen 3.8 27B는 기본적으로도 뛰어난 성능을 보이지만, 도구 활용과 검색 힌트 제공을 통해 더욱 전문적인 업무 수행 능력을 갖추게 된다고 offgridai 사용자가 분석했어요.