Google이 OKF(Open Knowledge Format)를 공개한 후, 사용자가 벡터 RAG와 OKF 형식, 그리고 두 가지를 결합했을 때의 성능을 테스트했어요. 테스트 환경은 qwen3:8b + nomic-embed-text + ChromaDB를 사용했고, 60개의 회사 문서로 구성된 테스트 코퍼스를 활용했어요.
결과적으로 OKF+RAG 조합이 가장 높은 정확도를 보였지만, 토큰 사용량도 증가했어요. 특히 '수익 계산 방법' 질문에서 오래된 문서가 우선적으로 검색되는 문제점이 발견됐고, 이는 날짜 정보가 chunk에 포함되지 않아 발생했어요.
테스트 코드는 GitHub에서 공개됐으며, 더 큰 모델을 사용했을 때 결과가 달라질 수 있다는 의견도 나왔습니다.