Terveydenhuolto
Mielenterveyshäiriöiden diagnosointi tekoälyn kasvonilmeanalyysillä

Keskeiset kohdatOEG käyttää konenäköä erottamaan masennuksen skitsofreniasta kasvonilmeiden perusteella.
Näytä lisää
- OEG käyttää konenäköä erottamaan masennuksen skitsofreniasta kasvonilmeiden perusteella.
- Menetelmä saavutti 0,82:n korrelaation potilaan tilan suhteen, mutta suoriutui paremmin kuin tavanomainen diagnostiikka häiriötyypin osalta.
- Tutkijat ehdottavat OEG:tä mahdolliseksi korvaajaksi mielenterveyshoitoprosessien arviointiosuuksille.
Saksalaiset tutkijat ovat kehittäneet menetelmän mielenterveyshäiriöiden tunnistamiseksi konenäöllä tulkittujen kasvonilmeiden perusteella.
Uusi lähestymistapa voi erottaa sekä terveet henkilöt että häiriöistä kärsivät henkilöt ja myös erottaa masennuksen skitsofreniasta sekä määrittää, kuinka paljon potilas on tällä hetkellä sairauden vaikutuksen alaisena.
Tutkijat ovat tarjonneet yhdistetyn kuvan, joka edustaa heidän testien vertailuryhmää (kuvan vasemmalla puolella) ja potilaita, jotka kärsivät mielenterveyshäiriöistä (oikealla). Useiden ihmisten identiteetti on sekoitettu edustuksiin, eikä kumpikaan kuva esitä yksittäistä yksilöä:
Mielialahäiriöistä kärsivillä esiintyy usein kohonneita kulmakarvoja, raskas katse, turvonneet kasvot ja alaspäin vetäytyneet suupielet. Potilaiden yksityisyyden suojaamiseksi nämä yhdistetyt kuvat ovat ainoat, jotka on julkaistu uuden tutkimuksen tueksi.
Toistaiseksi kasvojen ilmeiden tunnistaminen on ollut lähinnä mahdollinen väline perustason diagnosoinnissa. Uusi lähestymistapa tarjoaa mahdollisen menetelmän potilaiden edistyksen arviointiin hoidon aikana tai mahdollisesti heidän omassa kotiympäristössään avohoidon seurannassa, vaikka artikkeli ei itse esitä tätä käyttötapaa.
Artikkelissa todetaan*:
‘Edeten pidemmälle kuin affektiivisen laskennan masennuksen konediagnostiikka, jota on kehitetty aiemmissa tutkimuksissa, osoitamme, että konenäöllä arvioitu mitattava tunnetila sisältää paljon enemmän tietoa kuin pelkkä kategorinen luokittelu.’
Tutkijat ovat nimeäneet tämän tekniikan Opto Electronic Encephalography (OEG), joka on täysin passiivinen menetelmä mielentilan arvioimiseksi kasvojen kuvan analyysin avulla ilman paikallisia antureita tai säteilyyn perustuvia lääketieteellisiä kuvantamistekniikoita.
Tutkijat päättävät, että OEG voisi olla paitsi diagnosoinnin ja hoidon lisäapu myös pitkällä aikavälillä mahdollinen korvaaja tietyille arviointiosuuksille hoidon prosessissa, ja se voi lyhentää potilaiden seurannan ja alkuvaiheen diagnosoinnin aikaa. He huomauttavat:
‘Yleensä ottaen tulokset, jotka kone on ennustanut, korreloivat paremmin verrattuna pelkästään kliiniseen havaintoon perustuviin kyselyihin ja ne ovat myös objektiivisia. Tietokoneavusteisen lähestymistavan suhteellisen lyhyt mittausaika, joka kestää vain muutamia minuutteja, on myös merkittävä, kun taas kliiniset haastattelut voivat kestää useita tunteja.’
Kuitenkin tutkijat korostavat, että potilaiden hoito tällä alalla perustuu useisiin eri tietolähteisiin, ja siinä on otettava huomioon useita muita potilaan tilan osoittimia kuin vain heidän kasvojen ilmeitä, ja että on liian aikaista ajatella, että tällainen järjestelmä voisi korvata perinteiset lähestymistavat mielenterveyshäiriöiden hoitoon. Kuitenkin he pitävät OEG:ta lupaavana apuvälineenä, erityisesti menetelmänä arvioida lääkehoitojen vaikutuksia potilaan määrättyyn hoitosuunnitelmaan.
Tutkimus artikkeli on nimeltään Affektiivisten häiriöiden kasvot, ja se on peräisin kahdeksalta tutkijalta laajasta joukosta instituutioita yksityiseltä ja julkiselta lääketieteelliseltä tutkimusalalta.
Data
(Uusi tutkimus käsittelee pääasiassa eri teorioita ja menetelmiä, joita käytetään potilaiden mielenterveyshäiriöiden diagnosoinnissa, ja vähemmän huomiota on kiinnitetty itse tekniikoihin ja prosesseihin, joita käytetään kokeissa ja eri kokeissa)
Datakeräys tapahtui Aachenin yliopistosairaalassa, jossa osallistujina oli 100 sukupuolitasapainotettua potilasta ja 50:henkinen vertailuryhmä, johon kuului terveitä ihmisiä. Potilaiden joukossa oli 35 skitsofreniaa sairastavaa ja 65 masennuksesta kärsivää.
Potilasosuuksien osalta alkumittaukset tehtiin sairaalahoitoon otettaessa, ja toiset ennen heidän sairaalasta poistumistaan, ja keskimääräinen väliaika oli 12 viikkoa. Vertailuryhmän osallistujat rekrytoitiin satunnaisesti paikallisen väestön joukosta, ja heidän aloitus- ja loppumittauksensa ajoitettiin vastaamaan potilaiden sairaalaan tuloa ja kotiutusta.
Tosiasiallisesti tärkein “todellinen totuus” tällaiselle kokeelle on diagnoosit, jotka on saatu hyväksytyillä ja standardoiduilla menetelmillä, ja tämä oli tapaus myös OEG-kokeissa.
Kuitenkin datakeräysvaiheessa saatiin myös lisää tietoa, joka soveltuu koneelliseen tulkintaan: keskimäärin 90 minuutin haastattelut tallennettiin kolmessa vaiheessa Logitech c270 -kuluttajakameran avulla 25 fps:llä.
Ensimmäinen vaihe koostui standardista Hamiltonin haastattelusta (joka perustuu noin vuonna 1960 tehtyyn tutkimukseen), kuten mitä yleensä annetaan sairaalaan otettaessa. Toisessa vaiheessa potilaita (ja heidän vertailuryhmänsä) pyydettiin katsomaan videoita, joissa oli eri kasvojen ilmeitä, ja pyydettiin matkimaan niitä ja kertomaan omasta arviostaan mielentilastaan silloin, mukaan lukien emotionaalinen tila ja voimakkuus. Tämä vaihe kesti noin kymmenen minuuttia.
Kolmannessa ja viimeisessä vaiheessa osallistujat saivat katsella 96 videota, joissa näyttelijät kertoivat voimakkaita emotionaalisia kokemuksia, ja kestivät hieman yli kymmenen sekuntia. Osallistujilta pyydettiin arvioimaan emotionaalisuutta ja voimakkuutta videossa, sekä heidän omaa vastaavaa tunnettaan. Tämä vaihe kesti noin 15 minuuttia.
Menetelmä
Tallennettujen kasvojen keskimääräisen muodon muodostamiseksi (ks. ensimmäinen kuva yllä) toimittiin seuraavasti:
EmoNet-kehyksellä havaittiin emotionaaliset merkkipaikat. Sen jälkeen määritettiin kasvojen muodon ja keskiarvon (keskiarvoistetun) kasvojen muodon välinen vastaavuus paloittaisella affiinimuunnoksella.
Tunteiden ulottuvuuspohjainen tunnistaminen ja katseen suunnan ennustaminen suoritettiin jokaisella edellisessä vaiheessa tunnistetulla merkkipaikalla.
Tässä vaiheessa äänipohjainen emotionaalisuuden arviointi osoitti, että opetettava hetki on saavutettu potilaan mielentilassa, ja tehtävä on havainnoida vastaava kasvokuvaa ja kehittää sen mukaista ulottuvuutta ja aluetta heidän affektiivisessa tilassa.
(Yllä olevassa videossa nähdään työ, jonka dimensional emotion recognition -tekniikoiden kehittäjät ovat kehittäneet uutta tutkimusta varten).
Materiaalin muodon geodesia laskettiin jokaiselle kehykselle, ja sovellettiin singulaariarvohajotelmaan (SVD) perustuvaa ulottuvuuksien vähennystä. Tulokset muodostivat aikasarja, joka mallinnettiin VAR-prosessina, ja sitten edelleen vähennettiin SVD:llä ennen MAP-mallin sovittamista.
Myös EmoNet-verkossa olevat valenssi- ja vireystila-arvot käsiteltiin samalla tavoin VAR-mallinnuksella ja jono-ytimen laskennalla.
Kokeet
Kuten aiemmin selitetty, uusi tutkimus on pääasiassa lääketieteellinen tutkimusartikkeli eikä tavanomainen konenäkötutkimus. Viittaamme lukijaa itse artikkeliin, jossa on tarkka kuvaus monista OEG-kokeista, joita tutkijat ovat suorittaneet.
Kuitenkin tiivistämällä osaa niistä:
Affektiivisten häiriöiden vihjeet
Tässä 40 osallistujaa (ei vertailuryhmästä tai potilasryhmästä) pyydettiin arvioimaan keskiarvoa kasvojen ilmeistä (ks. yllä) useiden kysymysten suhteen ilman tietoa datan kontekstista. Kysymykset olivat:
Mikä on kahden kasvon sukupuoli?
Onko kasvoilla viehättävä ulkonäkö?
Ovatko kasvot luotettavien henkilöiden kasvoja?
Miten arvioit kykyä toimia?
Mikä on kahden kasvon emotionaalinen tila?
Mikä on kahden kasvon ihon ulkonäkö?
Mikä on katseen vaikutelma?
Onko kasvoilla alakuloisia suunurkkia?
Onko kasvoilla kohotettuja kulmakarvoja?
Ovatko nämä henkilöt kliinisiä potilaita?
Tutkijat totesivat, että nämä sokeat arviot korreloivat rekisteröityyn tilaan:
Kliininen arviointi
Tutkijat arvioivat OEG:n hyödyllisyyttä alkuvaiheen arvioinnissa ja miten tehokasta standardi kliininen arviointi on itsessään. He mittasivat paranemisen tasoa induktiosta toiseen vaiheeseen (jolloin potilas on yleensä sairaalassa ja saa lääkitystä).
Tutkijat totesivat, että tila ja oireiden vakavuus voidaan arvioida hyvin tällä menetelmällä, ja se saavutti korrelaation 0,82. Kuitenkin tarkan diagnoosin saaminen joko skitsofreniasta tai masennuksesta oli haasteellisempaa, ja standardimenetelmä sai vain -0,03 pisteen tässä vaiheessa.
Tutkijat kommentoivat:
‘Itse asiassa potilaan tila voidaan määrittää suhteellisen hyvin käyttämällä normaaleja kyselyjä. Kuitenkin se on kaikki, mitä voidaan siitä päätellä. Onko henkilö masentunut vai sairastaako hän skitsofreniaa, ei voida siitä päätellä. Sama koskee hoitovastetta.’
Koneen prosessoinnin tulokset pystyivät saavuttamaan paremmat tulokset tässä ongelma-alueessa ja vertailukelpoiset tulokset alkuvaiheen potilasarvioinnissa:

Korkeammat numerot ovat parempia. Vasemmalla on standardihaastattelupohjaisen arvioinnin tarkkuustulokset neljässä vaiheessa; oikealla on konepohjaiset tulokset.
Häiriöiden diagnosointi
Depression ja skitsofrenian erottaminen staattisista kasvokuvista ei ole triviaali asia. Ristivalidoitu, konepohjainen prosessi pystyi saavuttamaan korkeat tarkkuustulokset eri kokeiden vaiheissa:
Muissa kokeissa tutkijat saivat näyttöä siitä, että OEG voi havaita lääkehoidon ja häiriön yleisen hoidon aikaansaamaa potilaan tilan paranemista:
‘Aineistonkeruusta saadun empiirisen ennakkotiedon kausaalipäättelyn perusteella lääkehoitoa mukautettiin, jotta kasvojen liikkeissä voitaisiin havaita paluu fysiologiseen säätelyyn. Tällaista palautumista ei voitu havaita kliinisessä lääkemääräyksessä.’
‘Tällä hetkellä ei ole selvää, johtaisiko konepohjainen suositus todella merkittävästi parempaan hoitotulokseen. Erityisesti koska tiedetään, mitä sivuvaikutuksia lääkkeillä voi olla pitkällä aikavälillä.’
‘Kuitenkin tämänkaltaiset potilaskohtaiset lähestymistavat rikkoisivat yleisesti käytössä olevan kategorisen luokittelujärjestelmän esteet.’
* Kirjoittaja on muuttanut tutkijoiden tekstinsisäiset lähdeviitteet hyperlinkeiksi.
Julkaistu ensimmäisen kerran 3. elokuuta 2022.
















