Klinisk KI-evaluering

Klinisk KI-evaluering er prosessen med å verifisere om KI-systemer er trygge og effektive i faktiske kliniske miljøer.

Hvorfor det er viktig

Generelle KI-kvalitetsmål fanger ikke opp potensialet for klinisk skade.

Matematikken

Netto klinisk gevinst = (sanne positive × gevinst) − (falske positive × skade) − (falske negative × skade)

Gjennomarbeidet eksempel

KI for tidlig sepsisvarsling: 100 sanne positive × gevinst 10 − 20 falske positive × skade 2 − 5 falske negative × skade 20 = 860.

Kobling til programvareutvikling

Kobler KI-kvalitetsmål til kliniske utfall og er en forutsetning for KI-regulatorisk evaluering.

Fallgruver

• Å sidestille laboratorieytelse med faktisk ytelse ved innføring.

Kilder

• FDA, Software as a Medical Device guidance.
• NICE, Evidence Standards Framework for digital health technologies.