ArtificialAnalysis
아이폰에서 실제로 돌려보니, 소형 AI는 벤치마크 점수대로 똑똑하지 않았다
벤치마크 상위권 소형 모델도 내 폰에선 점수만큼 똑똑하지 않습니다. Artificial Analysis와 Liquid AI가 아이폰에서 실제로 도는 모델을 다시 쟀고, 같은 이름의 모델이 양자화·기기·런타임에 따라 딴판이 되는 이유를 짚습니다.
Written by

최신 AI 쉽게 깊게 따라잡기⚡
벤치마크 상위권 소형 모델도 내 폰에선 점수만큼 똑똑하지 않습니다. Artificial Analysis와 Liquid AI가 아이폰에서 실제로 도는 모델을 다시 쟀고, 같은 이름의 모델이 양자화·기기·런타임에 따라 딴판이 되는 이유를 짚습니다.
Written by

최신 게시물 요약과 더 심층적인 정보를 이메일로 받아 보세요! (무료)