OfficeQA Pro V2

OfficeQA Pro V2는 데이터브릭스가 2026년 8월 6일 내놓은 시험지 같은 평가 도구다. AI에게 계약서나 분기 실적표, 발표 슬라이드 같은 회사 문서 뭉치를 던져주고, 그 안에서 근거를 찾아 정확히 답할 수 있는지를 채점한다.

흔한 지식 시험이 '이미 아는 걸 얼마나 잘 외웠나'를 묻는 시험이라면, 이 시험지는 반대로 두꺼운 서류철을 펼쳐놓고 '이 안에서 찾아서 풀어봐'라고 요구하는 오픈북 시험에 가깝다. 답이 한 문서에 딱 나와 있지 않고 여러 자료에 흩어져 있어도, 형식이 PDF·표·슬라이드로 제각각이어도 정확히 찾아 계산까지 맞히는지를 확인한다. 이름 뒤의 V2는 이전 판을 손봐서 내놓은 두 번째 버전이라는 뜻이다.

이런 문항은 사람이 손으로 만들면 품질은 좋지만 개수가 금방 바닥난다. 데이터브릭스는 AI로 문항을 대량으로 만들어내는 방법도 함께 공개해, 시험지 규모를 키우면서도 정답이 실제 자료 안에서 확인되도록 신경 썼다고 밝혔다.

기사에는 "기업 문서 추론 능력을 측정하는 새 벤치마크 OfficeQA Pro V2를 공개했다"처럼 등장한다. 오해하기 쉬운 점은 이것이 특정 AI 모델의 이름이 아니라는 것이다. 데이터브릭스가 만든 모델이 아니라, 여러 회사의 AI 에이전트들을 불러다 이 시험지로 채점하는 평가 기준일 뿐이다.