Claude 3.7 Sonnet, 훈련 비용은 "수천만 달러" 수준
Anthropic의 최신 AI 모델인 Claude 3.7 Sonnet이 훈련 비용으로 "수천만 달러"를 사용한 것으로 알려졌다. 또한, 이 모델의 훈련에 사용된 계산 능력은 10^26 FLOP 미만이라는 점이 밝혀졌다. 이러한 내용은 와튼스쿨의 교수 Ethan Mollick이 X(구 트위터)를 통해 공개한 정보에서 확인됐다. 그는 Anthropic의 PR팀으로부터 받은 설명을 공유하며, Claude 3.7 Sonnet이 10^26 FLOP 모델로 분류되지 않는다는 점을 강조했다.
최신 모델 개발 비용, 점차 낮아지는 추세
Claude 3.7 Sonnet의 훈련 비용이 수천만 달러 수준이라면, 최신 AI 모델을 개발하는 비용이 감소하는 흐름을 보이는 것으로 해석될 수 있다. 이는 이전 모델인 Claude 3.5도 비슷한 수준의 비용이 들었다는 점을 고려하면 더욱 주목할 만하다. Anthropic의 CEO 다리오 아모데이(Dario Amodei)는 최근 발표에서 이 같은 사실을 언급한 바 있다.
과거 대비 저렴하지만, 향후 비용 급증 예상
현재 Claude 3.7 Sonnet의 훈련 비용은 상당히 경쟁력이 있는 수준으로 보인다. 예를 들어, OpenAI의 GPT-4 모델은 개발 비용이 1억 달러 이상으로 추정되며, Google의 Gemini Ultra 모델은 약 2억 달러에 달한 것으로 알려져 있다. 이에 비하면 Anthropic의 최신 모델은 상대적으로 저렴한 비용으로 훈련되었음을 알 수 있다.
그러나 장기적으로 AI 모델 훈련 비용이 급증할 가능성이 크다. 아모데이는 앞으로 AI 모델 개발 비용이 수십억 달러에 이를 것으로 예상하고 있으며, 여기에 안전성 테스트 및 기초 연구 비용은 포함되지 않는다고 언급했다. 특히 AI 산업이 더 정교한 "추론" 모델을 개발하려는 방향으로 나아가면서, 모델을 실행하는 데 필요한 연산 비용은 점차 증가할 전망이다.
Anthropic의 Claude 3.7 Sonnet이 비교적 낮은 비용으로 훈련되었다는 점은 AI 모델 훈련의 효율성이 높아지고 있음을 보여준다. 하지만 장기적으로는 더욱 복잡하고 강력한 AI를 개발하기 위해 비용이 증가할 가능성이 높다는 점에서 업계의 지속적인 연구와 투자가 필요할 것이다.