네모 가드레일즈
NeMo Guardrails
엔비디아(Nvidia)가 기여한 오픈소스 도구로, AI가 정해진 안전 규칙을 지키도록 돕는다
쉽게 말하면
네모 가드레일즈는 AI가 답하기 전에 거치는 안전 검문소 같은 도구다. 식당 주방에 위생 규칙이 붙어 있듯, AI가 대화하거나 작업을 수행할 때 특정 주제는 피하고, 정해진 절차만 따르도록 미리 세운 규칙을 자동으로 적용해준다.
예를 들어 회사가 만든 AI 상담원이 엉뚱한 약속을 하거나 위험한 정보를 알려주지 않도록, 개발자가 이 도구로 미리 울타리를 쳐 두는 식이다. 사람이 매번 감시하지 않아도 규칙이 자동으로 걸러주는 역할을 한다.
엔비디아가 만들어 공개한 도구로, 최근에는 AI 보안 사고를 함께 기록하고 공유하는 업계 차원의 움직임 속에서 이런 안전 도구 중 하나로 언급되고 있다.