검색 정밀도
search precision
AI가 찾아온 결과물 중에서 실제로 쓸모 있는 것이 차지하는 비율을 뜻하는 지표다.
쉽게 말하면
검색 정밀도란 무언가를 찾아달라고 시켰을 때, 실제로 가져온 결과물 중에서 정말 필요한 것이 몇 개나 되는지를 나타내는 비율이다. 서랍에서 원하는 서류를 찾는 상황을 떠올리면 쉽다. 서랍 안에 문서가 5개뿐이면 원하는 걸 금방 집어낼 수 있지만, 문서가 100개로 늘어나면 제목이 비슷한 엉뚱한 서류를 집어올 확률이 훨씬 높아진다.
AI 에이전트도 똑같은 문제를 겪는다. 미리 저장해둔 작업 지침이나 참고 자료가 몇 개 없을 때는 필요한 걸 정확히 골라내지만, 저장해둔 자료가 많아질수록 이름이나 설명이 비슷한 것들이 뒤섞이면서 엉뚱한 자료를 꺼내 쓰는 일이 늘어난다. 이때 검색 정밀도가 낮아졌다고 말한다.
그래서 자료를 무조건 많이 쌓아두는 것이 항상 좋은 전략은 아니다. 아무리 좋은 지침서를 만들어둬도 필요한 순간에 정확히 꺼내 쓰지 못하면 소용이 없기 때문에, 최근에는 얼마나 많이 저장하느냐보다 얼마나 정확하게 찾아내느냐가 더 중요한 문제로 다뤄진다.
기사에서 이렇게 나와요
기사에서는 "스킬 보관함이 5개짜리일 때는 실제 검색 정밀도가 29.6%였는데, 100개로 늘어나자 3.3%까지 떨어졌어요"라는 식으로 쓰인다. 이는 저장된 자료(스킬)가 많아질수록 AI가 필요한 것을 정확히 찾아내는 비율이 급격히 낮아진다는 뜻이다. 흔히 하는 오해는 자료를 많이 쌓을수록 AI가 더 똑똑해진다는 생각인데, 실제로는 자료가 늘어날수록 오히려 엉뚱한 것을 골라올 위험이 커질 수 있다는 점을 이 지표가 보여준다.