주제 78 / 91· AI 가속화

AI 품질 지표

AI 품질 지표는 모델 출력의 정확성, 신뢰성, 그리고 안전성을 측정합니다: 정밀도, 재현율, 환각률.

왜 중요한가

높은 처리량의 AI 시스템도 품질이 낮으면 하류 수정 비용이 절감액을 초과할 수 있습니다.

수식

F1 점수 = 2 × (정밀도 × 재현율) / (정밀도 + 재현율)

계산 예시

임상 코딩 보조 AI: 정밀도 0.85, 재현율 0.78 = F1 0.81.

소프트웨어 공학과의 연관성

임상 AI 평가의 기초가 되는 일반 소프트웨어 품질 지표입니다.

함정

  • 정확도만 보고 클래스 불균형을 무시하기.

출처

  • Google, ML evaluation best practices.
  • Ji Z, et al., Survey of Hallucination in Natural Language Generation.