Organisaation on laadittava virallinen ohjelma tekoälyn hallintajärjestelmänsä (AIMS) suorituskyvyn ja tehokkuuden seuraamiseksi, mittaamiseksi, analysoimiseksi ja arvioimiseksi.

Tämän ohjelman toteuttamiseksi organisaation on määriteltävä ja dokumentoitava:

• Mitä on seurattava ja mitattava (esim. tekoälyjärjestelmien suorituskyky, riskienhallinnan tehokkuus, edistyminen tekoälytavoitteiden saavuttamisessa).
• Seurannassa, mittauksessa, analysoinnissa ja arvioinnissa käytettävät menetelmät, joilla varmistetaan, että tulokset ovat päteviä ja luotettavia.
• Näiden toimien ajoitus, mukaan lukien se, kuinka usein seuranta ja mittaaminen suoritetaan ja milloin tulokset analysoidaan ja arvioidaan virallisesti.

Organisaation on säilytettävä dokumentoitua tietoa (tallenteita) kaikista näiden toimien tuloksista todisteena tekoälyn hallintajärjestelmän suorituskyvystä ja tehokkuudesta.

Organisaation on otettava käyttöön ja ylläpidettävä virallista prosessia tekoälyn hallintajärjestelmänsä (AIMS) jatkuvaa parantamista varten.

Prosessin tavoitteena on parantaa ennakoivasti ja järjestelmällisesti hallintajärjestelmän yleistä soveltuvuutta, riittävyyttä ja tehokkuutta ajan myötä. Parantamistoimien olisi perustuttava muiden tekoälyn hallintajärjestelmänprosessien tuloksiin, mukaan lukien:

• Seuranta- ja mittaustoimien tulokset.
• sisäisten ja ulkoisten auditointien tulokset.
• ylimmän johdon katselmuksissa havaitut päätökset ja mahdollisuudet.
• vaatimustenvastaisuuksien analysointi ja korjaavien toimien tehokkuus.