아티피셜 애널리시스

아티피셜 애널리시스는 AI 모델을 재서 순위를 매기는 회사입니다. 2023년 호주에서 두 사람이 시작했고, 지금은 샌프란시스코에 있습니다.

이 회사가 하는 일은 모델을 만드는 게 아니라 채점하는 것입니다. 여러 시험을 치르게 해서 하나의 점수로 묶고, 얼마나 빠른지, 얼마를 받는지까지 함께 잽니다. 새 모델이 나올 때마다 기사에 인용되는 「지수 몇 점」이 대개 여기서 나온 숫자입니다.

그래서 이 이름이 기사에 나오면 방향을 헷갈리지 말아야 합니다. 점수가 높다고 이 회사가 그 모델을 만든 게 아닙니다. 심판이지 선수가 아닙니다. 또 이 지수는 하나의 시험이 아니라 여러 시험을 합친 값이라, 「어떤 시험에서 잘했나」까지 봐야 정확합니다.

「아티피셜 애널리시스 지수에서 1위」 — 여러 평가를 합친 종합 점수에서 앞섰다는 뜻이지, 모든 항목에서 최고라는 뜻은 아닙니다.