Acolad
Tee tilaus Ota yhteyttä

RIVM: WHO:n termipankin ripeä päivitys turvallisen tekoälyn ja asiantuntijoiden suorittaman validoinnin avulla

Miten RIVM ja Acolad käänsivät WHO:n ICD-11-luokituksen hollanniksi käyttämällä tarkoitusta varten kehitettyä tekoälymoottoria ja asiantuntijoiden tarkistuksia.

Toimiala ja palvelut

Tietoa RIVM:stä

RIVM (Rijksinstituut voor Volksgezondheid en Milieu) eli kansanterveyden ja ympäristön kansallinen instituutti on Alankomaiden hallituksen tutkimuslaitos, joka toimii terveys-, hyvinvointi- ja urheiluministeriön alaisuudessa. Se harjoittaa tutkimusta ja tarjoaa riippumatonta tieteellistä neuvontaa kansanterveyden, terveydenhuollon ja ympäristönsuojelun aloilla. 

Osana tätä työtä RIVM ylläpitää kansainvälisten terveysluokitusten hollanninkielisiä versioita, mukaan lukien WHO:n Kansainvälinen tautiluokitus (ICD). Vastuu kattaa Alankomaat, Alankomaiden Karibian alueet ja muut hollanninkieliset alueet. Yhdenmukainen luokitus mahdollistaa vertailukelpoisten terveystilastojen laatimisen eri alueilta. 

Haaste

Kansallisen tautiluokituksen päivittäminen kansainväliseen määräaikaan mennessä

ICD on maailmanlaajuinen standardi sairauksien, terveydentilojen ja kuolinsyiden kirjaamiseen ja luokitteluun. WHO:n ylläpitämän järjestelmän ansiosta maat voivat tuottaa kansainvälisesti vertailukelpoisia terveystilastoja. WHO on asettanut vuoden 2027 lopun määräajaksi, johon mennessä jäsenvaltioiden on viimeistään alettava raportoida kuolleisuus- ja sairastavuustilastot käyttäen uusinta versiota, ICD-11:tä.

Siirtyminen ICD-10:stä ICD-11:een on merkittävä muutos: päivitys tuo mukanaan noin 1,5 miljoonaa sanaa uutta ja tarkistettua sisältöä, rakenteellisia muutoksia ja kokonaan uusia osioita. Aikaisemmat versiot käännettiin täysin ihmisasiantuntijoiden voimin pitkän ajan kuluessa. Tämä menetelmä toimii edelleen, mutta sen käyttöä rajoittaa asiantuntijoiden kapasiteetti. Kiinteän määräajan ja määritetyn budjetin puitteissa RIVM:n oli löydettävä tasapaino nopeuden ja tarkkuuden välillä. Etusijalla oli tarkkuus: ICD on luokitusjärjestelmä eikä tavanomaista tekstiä, joten yksikin väärä termi voi johtaa diagnoosin luokitteluun väärän koodin alle ja vääristää tuloksena saatavia tilastoja.

Luotettava hollanninkielinen versio on tärkeä myös Alankomaiden ulkopuolella. Lääkärit kirjaavat tiedot ja käyvät kirjeenvaihtoa hollanniksi, ja RIVM vastaa luokittelusta kaikilla hollanninkielisillä alueilla. Se on perusta, johon vertailukelpoiset terveystiedot nojaavat. 

doctor on tablet during clinical research study
square-60
Lähestymistapa

RIVM:n oman tekoälymoottorin kehittäminen ihmisten asiantuntemuksen avulla

RIVM ja Acolad näkivät ICD-11-päivityksen tilaisuutena soveltaa tekoälyä laajamittaisesti projektissa, jossa käytetään pitkälle erikoistunutta terminologiaa. Ratkaisussa yhdistyivät automaattinen käännös ja asiantuntijoiden suorittama tarkistus, jotta voitiin varmistaa tarkkuus, johdonmukaisuus ja käytettävyys.

Erityinen turvallinen tekoälymoottori. Kehitimme projektikohtaisen moottorin, joka koulutettiin RIVM:n olemassa olevalla terminologialla ja jota käytetään Acoladin omassa suojatussa ympäristössä. Näin voidaan taata julkisen sektorin edellyttämä tietoturva.

Skaalautuva työnkulku. Menetelmää testattiin ensin otoksella termeistä, joiden RIVM arvioi olevan vaikeimpia, ennen kuin sitä alettiin soveltaa koko luokitukseen.

Asiantuntija-arvio. Kieliasiantuntijat, joilla oli alakohtaista terminologiaosaamista, tarkistivat tekoälyn tuottaman tuloksen kielellisen laadun. Tämä oli lisävarmistus, jota ei voitu tuottaa pelkällä automaattisella pisteytyksellä. 

1,5 miljoonaa sanaa

käännetty englannista hollanniksi

100 000 synonyymiä

tuotettu tekoälyllä hakutoiminnon tueksi

2 vuoden

asiantuntija-arviointi käynnissä
Tulos

Ensimmäinen hollanninkielinen luonnos on toimitettu, ja se muodostaa perustan asiantuntija-arvioinnille

Hankkeen lopputuloksena saatiin päivityn luokituksen ensimmäinen hollanninkielinen luonnos, jonka kielellinen laatu on tarkistettu ja joka on valmis RIVM:n asiantuntijoiden vahvistettavaksi.

RIVM tarvitsi vankan ja laadukkaan peruskäännöksen – ei valmista tekstiä, vaan luotettavan perustan asiantuntija-arviointia varten, jota näin tärkeä luokittelu edellyttää. Juuri tähän projektissa päästiin. Laitos toteaa avoimesti, että kokonaiskuva tehokkuudesta on vielä muodostumassa. Koska laatu on ensisijaisen tärkeää, tuotos tarkistetaan perusteellisesti, ja lopullisiin nettosäästöihin vaikuttaa tämä työ.

Arvokasta tekoälykokemusta molemmille organisaatioille

Hanke merkitsi sekä RIVM:lle että Acoladille tärkeää askelta tekoälyn soveltamisessa laajamittaisessa terminologiatyössä. Se antoi selkeän käsityksen siitä, miten turvallinen automaatio ja asiantuntijoiden suorittama manuaalinen tarkistus voivat toimia yhdessä: tekoäly tarjoaa nopeuden ja suuren kapasiteetin, kun taas ihmisen asiantuntemus varmistaa tarkkuuden, kontekstin huomioimisen ja luokittelun luotettavuuden.

Kaksi oppia jäi erityisesti mieleen. Ensinnäkin näin vaativassa projektissa ihmisen suorittama tarkistus osoittautui korvaamattomaksi, sillä automatisoitu laadunarviointi ei aina toimi parhaalla mahdollisella tavalla termipankkien kaltaisen sisällön kohdalla. Toiseksi tekoälyn avustama prosessi toimii eri tavalla kuin vakiintunut manuaalinen käännöstyö. Alkuvaihe etenee hitaammin, kun esituotantovaiheessa luodaan projektin perusta: kerätään ja siivotaan tietoja, rakennetaan käännösmuisti, suunnitellaan kehotteet ja kehitetään räätälöity käännösmoottori. Kun tämä vaihe on valmis, työ etenee nopeammin ja laajemmassa mittakaavassa. Lopuksi seuraa välttämätön perusteellinen arviointi.

Katse tulevaisuuteen

Hankkeen laajuus käy hyvin ilmi seuraavasta työvaiheesta: RIVM:n asiantuntija-arviointi on nyt käynnissä, ja sen arvioidaan kestävän noin kaksi vuotta. Osa tästä työstä on tekoälyn tuottamien synonyymien tarkentamista: vaikka ne olisivat kieliopillisesti päteviä, synonyymien sijoittumista hierarkiassa voidaan joutua muuttamaan, jotta sairaudet koodataan ja lasketaan tilastollisen luokittelun edellyttämällä tarkkuudella.

RIVM:lle tärkeää on hankkeesta saatu kokemus – selkeämpi käsitys siitä, missä tekoäly on avuksi ja missä ihmisen asiantuntemus on välttämätöntä, sekä arvokas tieto siitä, miten nämä voidaan parhaiten yhdistää.

”Jokainen organisaatio hyödyntää yhä enemmän tekoälyä, ja mitä enemmän projekteja toteutamme, sitä enemmän saamme oppia ja kokemusta siitä. Voimme jakaa kokemuksemme ja oppia uutta organisaationa.”

Joost Wammes
Projektipäällikkö, RIVM
freelancer-avatars-centered 1

Haluatko yhdistää tekoälyn tehokkuuden ja asiantuntijoiden tekemän tarkistuksen seuraavassa projektissasi?

Ota yhteyttä