Kimi K3.1, Artificial Analysis에서 55점 기록하며 파레토 선에 위치

1 hour ago 3

Kimi K3.1 Pro는 Artificial Analysis Intelligence Index에서 55점을 기록해 유사 가격대 모델의 중앙값인 27점을 크게 웃돎 과제당 평가 비용은 2.11달러이며, Kimi API 기준 100만 토큰당 입력 2달러, 출력 10달러임 출력 속도는 초당 57.5토큰으로 비교군 중앙값 82.3토큰보다 느리지만, 첫 토큰까지의 시간은 3.07초로 중앙값 3.90초보다 짧음 Intelligence Index 평가에서 출력 토큰 1억 5,000만 개를 생성해 비교군 중앙값 8,700만 개보다 출력량이 많음 100만 토큰 컨텍스트를 지원하는 추론 모델로, 텍스트와 이미지를 입력받아 텍스트를 출력하며 모델 가중치는 공개하지 않음 모델 특성과 이용 범위 Kimi K3.1 Pro는 Kimi가 개발한 2조 8,000억 매개변수의 독점 모델이며, 가중치는 공개하지 않음 복잡한 문제에 답하기 전에 확장된 사고 또는 사고 사슬을 사용하는 추론 버전을 평가한 결과임 비추론 변형이 별도로 존재할 수도 있음 텍스트와 이미지 입력, 텍스트 출력을 지원하며 이미지 분석, 설명, 질의응답이 가능함 컨텍스트 창은 100만 토큰으로, 12포인트 Arial 기준 A4 약 1,500쪽에 해당함 컨텍스트 한도는 입력과 출력 토큰을 합한 최대치이며, 출력 토큰 한도는 일반적으로 이보다 훨씬 낮고 모델마다 다름 큰 컨텍스트 창은 대량의 데이터를 검색하고 추론하는 검색 증강 생성(RAG) 작업과 관련이 있음 2개 API 제공업체를 통해 이용할 수 있으며, 제공업체별 가격은 API 제공업체 비교에서 확인 가능함 지능 점수와 비교 기준 Artificial Analysis Intelligence Index 55점으로 유사 가격대 비교군 중앙값 27점을 크게 웃돎 Intelligence Index v4.3.2는 추론, 지식, 수학, 코딩을 아우르는 10개 평가를 통합함 AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1을 포함함 평가별 구성과 실행 방식은 지능 벤치마킹 방법론에 정리돼 있음 비교군은 모델 유형과 가격대에 따라 달라짐 비추론 모델은 비추론 모델끼리 비교하고, 추론 모델은 추론 및 비추론 모델 모두와 비...

Read Entire Article




피플앤툴즈 네트워크
🛍 샵