참고Reddit
Basalt Labs 벤치마크 조작 의혹 제기…커뮤니티 검증으로 드러난 실체
Qwen 기반이라 홍보한 모델이 실제로는 DeepSeek 모델로 서빙됨이 적발됨. 벤치마크 수치 및 모델 출처 검증의 중요성 강조.
원문 제목 "Basalt Labs" pulling a generationally dumb scam. Incredibly stupid lmao. Claiming 99.44% on HLE with tools. Model they released is based on Qwen2.5-7B-Instruct and the model they're serving on their website is DeepSeek.
원문 보기 ↗