IT-Kehitysjohtaja Mikko Rotonen

HUS-TIETOHALLINTO

KUINKA DIGITALISAATIO

MAHDOLLISTAA

MUUTOKSEN SOTEPALVELUISSA

SISLT

2

1.Lyhyt oppimr tekoly

2.Teknologia ja BigData

3.Ekosysteemit

4.Case Hyksin lastenklinikan keskosteho

5.Digitaaliset palvelut tulevaisuudessa

6.HUSin kyvykkyys digitalisaatioon ja

keinolyn hydyntmiseen

1. LYHYT OPPIMR TEKOLY

3

TEKOLYN TEKNIIKAT

1. Koneoppiminen (machine learning)

2. Neuroverkot (artificial neural networks)

3. Syv neuroverkko (deep learning)

4. Ohjattu oppiminen (supervised learning)

5. Vahvistusoppiminen (reinforcement learning)

6. Ohjaamaton oppiminen (unsupervised learning)

4

A. KONEOPPIMINEN (MACHINE LEARNING)

lyn logiikkaa ei kirjoiteta ksin, vaan rakenne

lytyy dataa analysoimalla ja kokemuksen

kautta.

24.8.2017 5

B . NEUROVERKOT (ARTIFICIAL NEURAL NETWORKS)

Jljittelee aivojen rakennetta ja niiden toimintaa.

Mahdollistaa nopean rinnakkaislaskennan.

24.8.2017 6

C. SYV NEUROVERKKO (DEEP LEARNING)

Neuroverkossa on useita kerroksia, joissa

sytteen abstraktiotaso nousee mit

pidemmlle verkossa syte etenee. Mit

monimutkaisempaa data on, sit syvempi

verkkoja tarvitaan.

24.8.2017 7

D. OHJATTU OPPIMINEN (SUPERVISED LEARNING)

Kone tiet ongelman vastauksen itse ja on

ptellyt ratkaisun massiivisen aineiston

perusteella. Data annetaan syte-

vastauspareina. Tehtv on oppia jljittelemn

annettua oikeaa vastausta mahdollisimman

hyvin.

24.8.2017 8

E. VAHVISTUSOPPIMINEN (REINFORCEMENT

LEARNING)

Koneelle annetaan palautetta eli sille kerrotaan

oliko tulos johon se psi oikea vai vr.

Kone st toimintaansa (algoritmia) ja yritt

uudelle ja tulos paranee.

24.8.2017 9

F. OHJAAMATON OPPIMINEN (UNSUPERVISED

LEARNING)

Koneelle ei anneta oikeita vastauksia eik

palautetta, vaan data annetaan pelkkn

sytteen, jonka sisist rakennetta on

tarkoitus tarkastella.

24.8.2017 10

2. TEKNOLOGIA JA BIG DATA

11

12

Nro 2008->2009 2011->2012 2014->2015 2016->2017

1 Virtualization Media tablets Computing Everywhere Artificial Intelligence and Advanced Machine Learning

2 Cloud Computing Mobile-centric applications and interfaces

The Internet of Things (IoT) Intelligent Apps

3 Servers: Beyond Blades Contextual and social userexperience

3D Printing Intelligent Things

4 Web Oriented Architecture The Internet of Things (IoT) Advanced, Pervasive and Invisible Analytics

Virtual Reality and

Augmented Reality

5 Enterprise Mashups App stores and Marketplaces Context-Rich Systems Digital Twins

6 Specialized Systems Next-generation analytics Smart Machines Blockchains and Distributed Ledgers

7 Social Software& Social Networking

Big Data Cloud/Client Computing Conversational Systems

8 Unified Communications In-memory computing Software-Defined Applications and Infrastructure

Mesh App and Service

Architecture

9 Business Intelligence Extreme low-energy servers Web-Scale IT Digital Technology Platforms

10 Green IT Cloud computing Risk-Based Security and Self-protection

Adaptive Security

Architecture

Lhde: Gartner

GARTNER TOP 10 TECHNOLOGY TRENDS

24.8.2017 13

Cognitive / Deep

learning(IBM Watson)

Potilastietojrjestelmien kypsyystasot ja sukupolvet

Tekoly tarvitaan, jotta voidaan saavuttaa Gartnerin kypsyystasot 4 ja 5

24.8.2017 14

NRT Mynla

ja Tietovarasto

Laaturekisterit

Potilastieto-

jrjestelmt

ja

HealthWeb

Potilaat

Tutkijat

Uranus / Epic

Laboratorio

Kuvantaminen

Anestesia ja teho

Leikkaussali

Lkitys

BCB

Laaturekisterit

Laskutus ja

tietovarasto

HUS TIETOALLAS

(HUS Datalake)

Palveluoperaattori

- Metadata

- Tutkimuslupa

- Tiedon hallinta

- Monitorointi

Hallinto

Integroitavat tietovarannot

Metadata,

Integrointi,

Lataus

Tietoaltaaseen

PACS

XDS

Kuva-arkistot

Genomi

BiopankkiMobiilisovellukset

Analyyttiset

algoritmit ja

ennustava

mallintaminen

Lkrit

Hoitajat

Tutkijat

Hallinto

Potilaan omat mittaukset

- Noona sypseuranta

- Diabetes-seuranta

- EKG-seuranta

Terveyskyl

Potilaat

Watson

Kirontech

Aalto yo

Nokialab

Cortana

DuoDecim

KUINKA PALJON TIETOA TARVITAAN JOTTA

VOI HYDYNT TEKLY?

15

Tiedon mr riippuu kytettvst tekniikasta

Kuva-analytiikassa on sytetarve n. 10 000 kuvaa

Esim. Watson for Oncology

- Perustuu 300 000 lketieteelliseen julkaisun, 200

kirjaan ja 12 miljoonaan kirjoitettuun sivuun aiheesta,

- Opettamiseen on kytetty 15 000 tuntia (=2 000

typiv, = 9 tyvuotta) asiantuntijoiden tyaikaa

3. EKOSYSTEEMIT

24.8.2017 16

Kukaan ei ole riittvn suuri selvitkseen yksin, on pakko

liittoutua ja muodostaa (mikro)palvelujen ekosysteemi

24.8.2017 17

24.8.2017 18

19

20

21

4. CASE HYKS LASTENKLINIKAN KESKOSTEHO

22

23

A. Tekninen ratkaisu

digiConnect/

eboxGE Clinisoft

database

GE Clinisoft

Watson

database

IBM WATSONPhilips

potilasmonitori

Potilaan elintoimintatietojen ksittelyvaihtoehdot ja niiden ajantasaisuus ja validointi Tietojrjestelmarkkitehtuuri ja integraatiot

24

B. KYTETTY ANALYSOINTI- JA ENNUSTETEKNIIKKA

Kytetyt potilaiden elintoimintoja kuvaavat muuttujat

Syke (HR)

Hengitystaajuus (RESP)

Happisaturaatio (SaO2)

SPSS Modelerin avulla ptspuumalli (CR&T) sovitettiin dataan, jossa

sepsispositiivisten dataa piv ennen kliinikon ottamaa veriviljely

verrattiin satunnaistettuun otantaan sepsisnegatiivisten potilaiden datasta

Malli ottaa huomioon mys muuttujien vliset riippuvuudet

Data jaettiin testi- ja mallinnusosioon mallin validointia varten

25

C. Projektin lydkset

- sepsiksen ennustaminen GE Clinisoftin datalla

Ptspuun avulla datasta tunnistaa

korrelaatioita, jotka ennustavat sepsist

Algoritmi valitsee ja optimoi

ptspuussa nkyvt raja-arvot

automaattisesti kytss olevan datan

perusteella

Esimerkiksi ptspuusta voidaan

nhd kuinka alhainen sykkeen

vaihtelu (HR_VAR10) kasvattaa

sepsisriski

Havainto on yhtenev alan muiden

tutkimusten kanssa, joissa kytetty

reaaliaikaista potilasmonitorointi dataa

26

Ehdotus tulevaisuuden analytiikka arkkitehtuuriksi

D. Projektin lydkset

- Teknisen ratkaisun kehittminen tuotantokyttn

IBM

Infosphere

Streams

IBM

BigInsights

for Hadoop

Real-Time Stream Computing

Big Data Watson Analytics

NICU Data Sources

AnalyzeStore & ProcessCollect

Laboratory results

Patient Monitors

Ordered medication &

Procedures

External devices

Electronic Health Records

Millions of Events

per Second / all

kinds of data

Complex analytics:

Everything you can

express via an algorithm

Immediate action in real time

Real-time data correlation, Anomaly

Detection - Event and flow normalization -

context & enrichment

Historical data storage for

research

Integration to production and

existing data sources

Preservation of raw data from

patient monitors

Long-term, multi-PB storage

New and old data sources

Predictive modeling

Anomaly detection

Research

New Models and variables

Text data analytics

Hifi-signals (Audio,

Monitoring data)

Video data

Clinisoft

Legislative compliance

Laboratory results EHR data

27

TIIVISTELM KOKEILUSTA JA SEN TULOKSISTA JA JATKOSUUNNITELMISTA

Ennustekyvykkyys todettu GE Healthcare Centricity Critical Care Clinisoft

sovelluksen datalla jo medianisoidussa datassa nkyy merkkej siit, ett sepsis voidaan ennustaa 24 h ennen kuin kliinikko tilaa

verinytteen

Hoitohenkilkunnan ptksentekoa voidaan helpottaa visualisoimalla tulokset

Ennustetarkkuutta voidaan kehitt Hydyntmll lhes reaaliaikaista potilasmonitorointitietoa (esim. EKG, veren happisaturaatio, hengitystiheys,

verenpaine)

Parantamalla datan laatua (puuttuvien arvojen vhentminen)

Lismll uusia muuttujia (esim. videoanalytiikan avulla mritetty fyysinen aktiivisuus)

Parantamalla analytiikkaympristn laskentatehoa

Seuraavat askeleet Tieteellinen tutkimus (tutkimusluvat, infrastruktuuri yms.) nytist, ett reaaliaikaisella datalla voidaan ennustaa

sepsis. Saatava nytt ennustekyvyst, jonka tuloksen mukaan voidaan edet

Ennustetarkkuuden kehittminen tieteellisen tutkimuksen kautta

Kytntn viemisen suunnittelu

Tuotantoa ja analytiikan kehittmist tukevan ympristn luonti

Menetelmn laajentaminen muihin kytttapauksiin

28

Clinisoft

database

GE Clinisoft Critical Care

Watson

Ennustava analytiikka

GE

Gateway

GE

potilasmonitori

Ajantasaisuus Tiedon validointi,

formaatti

Tiedon sislt

Vaihtoehto 1 60 + 120 sekuntia Arvot mediaaneja, HL7 Laboratoriotiedot sisltyvt, samoin kertomus, ei kytet ennustamiseen

Vaihtoehto 3 2 sekuntia Ei, XML High Speed Laboratoriotiedot tydennetn suoraan ennustemalliin HL7:ll, Muut

tiedot siirretn XML:ll, ei siirret kertomustietoja

11 33

Multilab

Potilaan elintoimintatietojen siirto ja dokumentointi

Video data

Tietoallas

Teksti

BT / Stream Analytics

TuotantoKehitys/DL

BIG DATA SOURCES

SPSS ModelingDevelopment only

SPSS C&DS

TCP

UDP

MQ

HTTP

HDFS

ODBC

Files

EDGE ADAPTERS

EDGE ADAPTERS

STREAMS FILE LANDING ZONE (I/O)

Production Feeds

CONSUMER

INGEST APPS

SIGNATURE DETECTIONSEPSIS IDENTIFICATION

BUSINESS RULES FILTERING

SYSTEMIC MEMORY PATIENT PROFILE &

ANALYTICS SCORING STORE

ECG Scoring

PREDICTION ENGINE

Lab Scoring

Medicine

Treatments, DiagnosHistory

FILES

ODBC

HDFS

HTTP

MQ

TCP SINK

TCP SOURCE

UDP

Demograph

Realtime

Predictive

Dashboard

Medicine

Treatment

Patient

(C) Real-time Treatment action by Care

givers

(B) Real-time Patient Monitoring

Streams + subscription other data

streams ie Lab, Treatment Activity

streams etc.

(D) Real-time Predictive Dashboard

(A) Iterative Analytical model

deployment

Streams Real-time Analytics PlatformD

ata

Re

po

sito

rie

s

GE Gateway

Senosr XYZ

HealthCare Device XYZ

Video Stream

Lab Results

Medicine Hist

Treatments Hist

Symptoms Hist

PatientoDemographi

cs

Patient Account InfoP

atie

nt

Dat

aLa

b D

ata

Dyn

amic

Pat

ien

t A

ctiv

ity

DEV

Landing, Exploration and Archive data zone

Data source samples, Modelling development, Analytic Schema, Systemic Patient Profile

Operative

Clinician

Ennustava sepsisanalytiikka vuonna 2017

32

Informaation

merkitys

Data Informaatio Tietmys Ymmrrys

Mit tapahtui?

Miksi niin tapahtui?

Mit tulee tapahtumaan?

Mik olisi parasta mit voisi

tapahtua?

Raaka

data

Puhdistettu

data

Vakio-

raportti

Kuutiot ja

kyselyt

Kuvaileva

mallinnus

Ennustava

mallinnus

Optimointi

Tiedonjalostus ja sen tasot

BigDataTietovarastoPerus

jrjes-

telmt

BigDatan tiikerin loikka

5. DIGITAALISET PALVELUT TULEVAISUUDESSA

33

24.8.2017 34

24.8.2017 35

24.8.2017 36

24.8.2017 37

24.8.2017 38

24.8.2017 39

https://sundaysky.com/smartvideo-platform/http://www.moneysense.ca/https://chatbotsmagazine.com/

6. HUSIN KYVYKKYYS DIGITALISAATIOON JA

KEINOLYN HYDYNTMISEEN

24.8.2017 40

41

INTEGRAATIOMALLI IBM WATSON PALVELUUN

Pipeline

Operational

Org ID 1:*

Common

Localization

User

Interface

Published

API

Internal API

Gateway

User / Org ID

Management

Multi-Organization SaaS InstancePartner/ResellerOrganizations

EMR

EMR

Watson

Case DataPatient, Case,

User Mapping

Integration

Components

Watson

Integration API

Structured Attribute

Translation

Structured Attribute

Retrieval

Store WO

Case Data

Forward

ProxyOrg ID

User

42

Type System

RulesModels

Indexes

Models

Models

ModelsCorpus

Operational Data Localization

Internal Cognitive Solution API

Inbound Operational Data Published Cognitive Solution API Outbound Operational Data

Question

Analysis

Query

Builder

Primary SearchSearch

Result

Processing

Candidate

Answer Generation ScoringFinal

Merger

User InterfaceClinical Interface Administration Console

Multi-Organization Instance

- HUS on tutkinut kyvykkyytt hydynt Watson Oncology-palvelua

- IBM on kehittnyt 5 sypanalyysi

- Breastcancer (150 muuttujaa)

- Lungcancer (97 muuttujaa)

- Rectalcancer (74 muuttujaa)

- Coloncancer (71 muuttujaa)

- MSKGastricCancer (60 muuttujaa)

- BCB Medical Oy:n syprekisterit kattavat suoraan keskimrin 65%

Watsonin kyttmist tietokentist

- Koska rakenteistamattomien hoitokertomustietojen merkitys on 60%

Watson analyysiss, niin Watsonille tulee opettaa suomenkieli

- Rakenteistettu tieto voidaan knt englanniksi

integraatiovaiheessa ennen siirtoa Pipelineen

HUSin IBM Watson Oncology selvitys

43

44

Kansallinen

Syptautien 4C

Comprehensive

Cognitive Cancer

Center

IBM Watson

Oncology,

Genomics ja

Merge

Noona

(Potilasseuranta)

BCB Medical

(Laaturekisterit)BC Platform

(Genomianalytiikka)

HUS 3C

Comprehensive

Cancer Center

HUSin nkemys syptautien analytiikan ja keinolyn ekosysteemiksi

45

- - - - - - - - - - - - - - - - -

HU

S

PS

HP

EP

SH

P

KH

SH

P

Kym

SH

P

Ekso

te

SatS

HP

PH

SO

TEY

PP

SH

P

KS

SH

P

KP

SH

P

KA

INU

U

PS

SH

P

VS

HP

PK

SS

K

ES

SH

P

ISS

HP

LP

HP

LH

P

VS

SH

P

BCB tekonivelkirurgia

BCB thystyskirurgiaBCB selkkirurgiaBCB murtuma

ORTOPEDIAN REKISTERIT

SYPREKISTERIT

BCB eturauhassyp

BCB rakkosypBCB munuaissypBCB rintasypBCB kolorektaalisyp

BCB ihosypBCB LaNu sypseuranta

BCB pn ja kaulan syvtBCB lymfoomat

BCB gynekologiset syvtBCB haimasyp

BCB keuhkosyp

BCB funkt. neurokirurgia

BCB selkydinvamma

BCB AVHBCB aivovammaBCB hydrogefalus

BCB neuromodulaatioBCB aneyrysma

BCB epilepsia

97% 100%

NEUROLOGIAN REKISTERIT

73% 73%

65% 76%

51% 66%

58% 63%

58% 63%

58% 63%

53% 65%

48% 68%

30% 55%

30% 47%

30% 51%

30% 30%

30% 30%

30% 30%

30% 30%

100% 100%

42% 60%

9% 9%

5% 5%

30% 30%

5% 5%

5% 5%

35% 35%

2016 2017

kytss / toimituksessa / tilattu

budjetoitu vuodelle 2017

muu ratkaisu kytss

SYPTAUTIEN LAATUREKISTERIEN LEVINNEISYYS

46