Anthropic, 한국어로는 앤트로픽이라는 회사가 있습니다. 현재 인공지능 최첨단을 달리는 OpenAI 출신 인물들이 2021년에 설립하여 3년 만에 누적투자액이 수십억 달러에 이르는 회사입니다. 무려 나무위키에 문서가 존재하네요.
앤트로픽에서 OpenAI ChatGPT, 구글의 Gemini의 성능을 넉넉히 상회하는 Claude-3, 클로드 3 모델을 출시했습니다. 출사표가 무려 "인공지능"의 새로운 standard이네요. 모델은 크기에 따라 Haiku, Sonnet, Opus 3가지가 존재하고 가장 큰 Opus 모델의 벤치마크 성능은 GPT-4에 비해서도 압도적이네요.
이미 80~90%가 넘는 대부분의 벤치마크에서는 성능이 어느 정도 포화된 것처럼 보이나 두드러지게 띄는 벤치마크는 유일하게 50%를 넘긴 GPQA인데, 이것은 생물학, 물리학, 화학의 박사급 전문가들의 정답율도 80%도 채 안 되는 극악의 데이터셋입니다. 숙련된 비전문가들에게 30분 시간을 주고 구글링까지 하게 해 주었음에도 정답률이 34%였다는군요...
Vision 측면에서도 기존 모델에 비해 큰 마진은 아니지만 상회하는 수준입니다.
하지만 가장 똑똑한 Claude-3 Opus는 100만 토큰 당 15달러로 ChatGPT4 보다 비싸네요... Context length는 기본이 200K지만 1M 토큰도 가능하다 하네요.
인공지능 모델 시장이 날로 치열해지네요. 더욱 빠르고 똑똑하게 말이죠.
Claude 3 Haiku 모델이 배포되었습니다.
References
'Generative Models > Recent Trends' 카테고리의 다른 글
Claude 3 Haiku 공개 (0) | 2024.03.14 |
---|---|
스토리 입력하면 웹툰 만들어주는 AI, Lore Machine (0) | 2024.03.10 |