A review of ten years of ISWC and RampBD strategy for Wearable Computer

A review of ten years of ISWC and RampBD strategy for Wearable Computer

A review of ten years of ISWC and RampBD strategy for Wearable Computer

A review of ten years of ISWC and RampBD strategy for Wearable Computer

Prof Sang-Goog Lee PhD

Dept of Digital Media Eng HCI Lab The Catholic University of Korea

Who Am I

1994년 10월 프랑스 국립 응용 과학원 (INSA France Institut National des Sciences Appliqueacutees) 전자공학박사

Smart Sensor and System 전공

1990년 9월 ~ 1999년 8월

프랑스국립응용과학원(INSA) PSI (Perception System et Information) 연구소 연구원

1995년 9월 ~ 1999년 8월

프랑스 국립 루앙 대학교 (Universiteacute de Rouen France ) 전자공학과 조교수

1999년 9월 ~ 2006년 8월

삼성전자 중앙연구소 Wearable Computer Project 팀장(수석연구원)

삼성종합기술원 IT 부문 1호 MASTER (기술명인) lsquo感性工學分野rsquo

Ubiquitous Computing Lab Interactive Device TG 그룹장

Interaction Lab Mobile Augmented Reality Project 팀장

현 재

가톨릭대학교 디지털미디어학부 미디어공학과 교수

한국 차세대컴퓨팅학회 부회장

한국 정보기술학회 이사

한국 HCI (Human Computer Interaction)학회 이사

(전) 한국 정보처리학회 논문지 편집부위원장

(전) 차세대 PC 산업 표준화 협회 UI (User Interface) 분과 위원장

Scenario-based Technology Roadmap Black Belt

6 Sigma Black Belt 기술경영사 기술평가사

Human Computer Interaction Lab Catholic University of Korea

1994년 10월 프랑스 국립 응용 과학원 (INSA France Institut National des Sciences Appliqueacutees) 전자공학박사

Smart Sensor and System 전공

1990년 9월 ~ 1999년 8월

프랑스국립응용과학원(INSA) PSI (Perception System et Information) 연구소 연구원

1995년 9월 ~ 1999년 8월

프랑스 국립 루앙 대학교 (Universiteacute de Rouen France ) 전자공학과 조교수

1999년 9월 ~ 2006년 8월

삼성전자 중앙연구소 Wearable Computer Project 팀장(수석연구원)

삼성종합기술원 IT 부문 1호 MASTER (기술명인) lsquo感性工學分野rsquo

Ubiquitous Computing Lab Interactive Device TG 그룹장

Interaction Lab Mobile Augmented Reality Project 팀장

현 재

가톨릭대학교 디지털미디어학부 미디어공학과 교수

한국 차세대컴퓨팅학회 부회장

한국 정보기술학회 이사

한국 HCI (Human Computer Interaction)학회 이사

(전) 한국 정보처리학회 논문지 편집부위원장

(전) 차세대 PC 산업 표준화 협회 UI (User Interface) 분과 위원장

Scenario-based Technology Roadmap Black Belt

6 Sigma Black Belt 기술경영사 기술평가사

Contents

I Wearable Computer를 둘러 싼 10년간의 변화와 이슈① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

II Wearable Computer RampBD를 위한 7 大 전략① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

I Wearable Computer를 둘러 싼 10년간의 변화와 이슈① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

II Wearable Computer RampBD를 위한 7 大 전략① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

RampBD(Research and Business Development)

Prologue

처음엔 그냥 따라갔다(follower) 그리고 이내 빠르게 따라 했다(fast follower) 15년 전(前) Wearable Computer와 첫 조우(遭遇 )가

있었던 우리들의 이야기다 그런데 지금은 맨 앞에 서야 한다(first mover) 살아 남으려면

본 강연에서는 지난 10년 동안 ISWC(International Symposium on Wearable Computers)에서 발표된 RampD 사례들로부터lsquoWearable Computer

와 관련한 RampD 이슈와 동향rsquo을 분석해보고 Wearable Computer 분야에서 신 사업 lsquoRampBD 전략 수립rsquo을 위해 무엇을 어떻게 가이드 해야 할지를

아래 와 같은 의문(疑問)으로 논의(論議)한다

첫 째 목표로 하는 대상이 사업 자체인가 제품인가 아니면 서비스 개발인가

둘 째 사업 목표에 업의 성격이나 특성을 제대로 반영했나

셋 째 Wearable Computer 기술이 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출 할 수 있나

넷 째 Wearable Computer 사업이 고객이나 기술을 재정의 할 수 있나

다섯 째 변화의 중요성과 메가트렌드의 방향 그리고 거기에서 파생될 다양한 사업기회를 파악했나

- 실제 사업을 하는 입장에서 어떻게 변화를 인지할 것인가

- 언제 시작해야 하는가

- 무엇을 경쟁요소로 삼아야 하는가

- 남들과 어떻게 차별화를 할 수 있는가

Human Computer Interaction Lab Catholic University of Korea

처음엔 그냥 따라갔다(follower) 그리고 이내 빠르게 따라 했다(fast follower) 15년 전(前) Wearable Computer와 첫 조우(遭遇 )가

있었던 우리들의 이야기다 그런데 지금은 맨 앞에 서야 한다(first mover) 살아 남으려면

본 강연에서는 지난 10년 동안 ISWC(International Symposium on Wearable Computers)에서 발표된 RampD 사례들로부터lsquoWearable Computer

와 관련한 RampD 이슈와 동향rsquo을 분석해보고 Wearable Computer 분야에서 신 사업 lsquoRampBD 전략 수립rsquo을 위해 무엇을 어떻게 가이드 해야 할지를

아래 와 같은 의문(疑問)으로 논의(論議)한다

첫 째 목표로 하는 대상이 사업 자체인가 제품인가 아니면 서비스 개발인가

둘 째 사업 목표에 업의 성격이나 특성을 제대로 반영했나

셋 째 Wearable Computer 기술이 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출 할 수 있나

넷 째 Wearable Computer 사업이 고객이나 기술을 재정의 할 수 있나

다섯 째 변화의 중요성과 메가트렌드의 방향 그리고 거기에서 파생될 다양한 사업기회를 파악했나

- 실제 사업을 하는 입장에서 어떻게 변화를 인지할 것인가

- 언제 시작해야 하는가

- 무엇을 경쟁요소로 삼아야 하는가

- 남들과 어떻게 차별화를 할 수 있는가

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

Human Computer Interaction Lab Catholic University of Korea

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

Human Computer Interaction Lab Catholic University of Korea

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

① Wearable Computer

Smart Clothing It is a computer that is always with you is comfortable and easy to keep and use and is as unobtrusive as clothing (MIT)

Fully functional PCs that are designed from the

outset to be worn and operated on the body (IDC)

The definition of a wearable computer is far more dependent on The definition of a wearable computer is far more dependent on

the applications the system can performthe applications the system can perform rather than rather than

the physical makeup of the hardwarethe physical makeup of the hardware

lt자료 IEEE SPECTRUM Oct 2000gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

① Wearable Computer

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Desktop PCDesktop PCDesktop PCDesktop PC MobileMobile PCPCMobileMobile PCPC WearCompWearCompWearCompWearComp

AttachableAttachableAttachableAttachable

어디서나어디서나 (Mobile)(Mobile)어디서나어디서나 (Mobile)(Mobile)

ActivityActivity--basedbasedActivityActivity--basedbased

HandHand--heldPortableheldPortableHandHand--heldPortableheldPortable

어디서나어디서나어디서나어디서나

제한된제한된 기능의기능의제한된제한된 기능의기능의

FixedFixedFixedFixed

사무실에서사무실에서사무실에서사무실에서

다중다중 기능의기능의다중다중 기능의기능의

지속적인지속적인(Persistent)(Persistent)지속적인지속적인(Persistent)(Persistent)

ActivityActivity--basedbasedActivityActivity--basedbased

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

상황을상황을 인지하는인지하는(Context(Context--aware)aware)상황을상황을 인지하는인지하는(Context(Context--aware)aware)

제한된제한된 기능의기능의제한된제한된 기능의기능의

수동적인수동적인수동적인수동적인

다중다중 기능의기능의다중다중 기능의기능의

수동적인수동적인수동적인수동적인

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Who Am I

1994년 10월 프랑스 국립 응용 과학원 (INSA France Institut National des Sciences Appliqueacutees) 전자공학박사

Smart Sensor and System 전공

1990년 9월 ~ 1999년 8월

프랑스국립응용과학원(INSA) PSI (Perception System et Information) 연구소 연구원

1995년 9월 ~ 1999년 8월

프랑스 국립 루앙 대학교 (Universiteacute de Rouen France ) 전자공학과 조교수

1999년 9월 ~ 2006년 8월

삼성전자 중앙연구소 Wearable Computer Project 팀장(수석연구원)

삼성종합기술원 IT 부문 1호 MASTER (기술명인) lsquo感性工學分野rsquo

Ubiquitous Computing Lab Interactive Device TG 그룹장

Interaction Lab Mobile Augmented Reality Project 팀장

현 재

가톨릭대학교 디지털미디어학부 미디어공학과 교수

한국 차세대컴퓨팅학회 부회장

한국 정보기술학회 이사

한국 HCI (Human Computer Interaction)학회 이사

(전) 한국 정보처리학회 논문지 편집부위원장

(전) 차세대 PC 산업 표준화 협회 UI (User Interface) 분과 위원장

Scenario-based Technology Roadmap Black Belt

6 Sigma Black Belt 기술경영사 기술평가사

Human Computer Interaction Lab Catholic University of Korea

1994년 10월 프랑스 국립 응용 과학원 (INSA France Institut National des Sciences Appliqueacutees) 전자공학박사

Smart Sensor and System 전공

1990년 9월 ~ 1999년 8월

프랑스국립응용과학원(INSA) PSI (Perception System et Information) 연구소 연구원

1995년 9월 ~ 1999년 8월

프랑스 국립 루앙 대학교 (Universiteacute de Rouen France ) 전자공학과 조교수

1999년 9월 ~ 2006년 8월

삼성전자 중앙연구소 Wearable Computer Project 팀장(수석연구원)

삼성종합기술원 IT 부문 1호 MASTER (기술명인) lsquo感性工學分野rsquo

Ubiquitous Computing Lab Interactive Device TG 그룹장

Interaction Lab Mobile Augmented Reality Project 팀장

현 재

가톨릭대학교 디지털미디어학부 미디어공학과 교수

한국 차세대컴퓨팅학회 부회장

한국 정보기술학회 이사

한국 HCI (Human Computer Interaction)학회 이사

(전) 한국 정보처리학회 논문지 편집부위원장

(전) 차세대 PC 산업 표준화 협회 UI (User Interface) 분과 위원장

Scenario-based Technology Roadmap Black Belt

6 Sigma Black Belt 기술경영사 기술평가사

Contents

I Wearable Computer를 둘러 싼 10년간의 변화와 이슈① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

II Wearable Computer RampBD를 위한 7 大 전략① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

I Wearable Computer를 둘러 싼 10년간의 변화와 이슈① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

II Wearable Computer RampBD를 위한 7 大 전략① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

RampBD(Research and Business Development)

Prologue

처음엔 그냥 따라갔다(follower) 그리고 이내 빠르게 따라 했다(fast follower) 15년 전(前) Wearable Computer와 첫 조우(遭遇 )가

있었던 우리들의 이야기다 그런데 지금은 맨 앞에 서야 한다(first mover) 살아 남으려면

본 강연에서는 지난 10년 동안 ISWC(International Symposium on Wearable Computers)에서 발표된 RampD 사례들로부터lsquoWearable Computer

와 관련한 RampD 이슈와 동향rsquo을 분석해보고 Wearable Computer 분야에서 신 사업 lsquoRampBD 전략 수립rsquo을 위해 무엇을 어떻게 가이드 해야 할지를

아래 와 같은 의문(疑問)으로 논의(論議)한다

첫 째 목표로 하는 대상이 사업 자체인가 제품인가 아니면 서비스 개발인가

둘 째 사업 목표에 업의 성격이나 특성을 제대로 반영했나

셋 째 Wearable Computer 기술이 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출 할 수 있나

넷 째 Wearable Computer 사업이 고객이나 기술을 재정의 할 수 있나

다섯 째 변화의 중요성과 메가트렌드의 방향 그리고 거기에서 파생될 다양한 사업기회를 파악했나

- 실제 사업을 하는 입장에서 어떻게 변화를 인지할 것인가

- 언제 시작해야 하는가

- 무엇을 경쟁요소로 삼아야 하는가

- 남들과 어떻게 차별화를 할 수 있는가

Human Computer Interaction Lab Catholic University of Korea

처음엔 그냥 따라갔다(follower) 그리고 이내 빠르게 따라 했다(fast follower) 15년 전(前) Wearable Computer와 첫 조우(遭遇 )가

있었던 우리들의 이야기다 그런데 지금은 맨 앞에 서야 한다(first mover) 살아 남으려면

본 강연에서는 지난 10년 동안 ISWC(International Symposium on Wearable Computers)에서 발표된 RampD 사례들로부터lsquoWearable Computer

와 관련한 RampD 이슈와 동향rsquo을 분석해보고 Wearable Computer 분야에서 신 사업 lsquoRampBD 전략 수립rsquo을 위해 무엇을 어떻게 가이드 해야 할지를

아래 와 같은 의문(疑問)으로 논의(論議)한다

첫 째 목표로 하는 대상이 사업 자체인가 제품인가 아니면 서비스 개발인가

둘 째 사업 목표에 업의 성격이나 특성을 제대로 반영했나

셋 째 Wearable Computer 기술이 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출 할 수 있나

넷 째 Wearable Computer 사업이 고객이나 기술을 재정의 할 수 있나

다섯 째 변화의 중요성과 메가트렌드의 방향 그리고 거기에서 파생될 다양한 사업기회를 파악했나

- 실제 사업을 하는 입장에서 어떻게 변화를 인지할 것인가

- 언제 시작해야 하는가

- 무엇을 경쟁요소로 삼아야 하는가

- 남들과 어떻게 차별화를 할 수 있는가

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

Human Computer Interaction Lab Catholic University of Korea

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

Human Computer Interaction Lab Catholic University of Korea

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

① Wearable Computer

Smart Clothing It is a computer that is always with you is comfortable and easy to keep and use and is as unobtrusive as clothing (MIT)

Fully functional PCs that are designed from the

outset to be worn and operated on the body (IDC)

The definition of a wearable computer is far more dependent on The definition of a wearable computer is far more dependent on

the applications the system can performthe applications the system can perform rather than rather than

the physical makeup of the hardwarethe physical makeup of the hardware

lt자료 IEEE SPECTRUM Oct 2000gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

① Wearable Computer

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Desktop PCDesktop PCDesktop PCDesktop PC MobileMobile PCPCMobileMobile PCPC WearCompWearCompWearCompWearComp

AttachableAttachableAttachableAttachable

어디서나어디서나 (Mobile)(Mobile)어디서나어디서나 (Mobile)(Mobile)

ActivityActivity--basedbasedActivityActivity--basedbased

HandHand--heldPortableheldPortableHandHand--heldPortableheldPortable

어디서나어디서나어디서나어디서나

제한된제한된 기능의기능의제한된제한된 기능의기능의

FixedFixedFixedFixed

사무실에서사무실에서사무실에서사무실에서

다중다중 기능의기능의다중다중 기능의기능의

지속적인지속적인(Persistent)(Persistent)지속적인지속적인(Persistent)(Persistent)

ActivityActivity--basedbasedActivityActivity--basedbased

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

상황을상황을 인지하는인지하는(Context(Context--aware)aware)상황을상황을 인지하는인지하는(Context(Context--aware)aware)

제한된제한된 기능의기능의제한된제한된 기능의기능의

수동적인수동적인수동적인수동적인

다중다중 기능의기능의다중다중 기능의기능의

수동적인수동적인수동적인수동적인

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Contents

I Wearable Computer를 둘러 싼 10년간의 변화와 이슈① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

II Wearable Computer RampBD를 위한 7 大 전략① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

I Wearable Computer를 둘러 싼 10년간의 변화와 이슈① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

II Wearable Computer RampBD를 위한 7 大 전략① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

RampBD(Research and Business Development)

Prologue

처음엔 그냥 따라갔다(follower) 그리고 이내 빠르게 따라 했다(fast follower) 15년 전(前) Wearable Computer와 첫 조우(遭遇 )가

있었던 우리들의 이야기다 그런데 지금은 맨 앞에 서야 한다(first mover) 살아 남으려면

본 강연에서는 지난 10년 동안 ISWC(International Symposium on Wearable Computers)에서 발표된 RampD 사례들로부터lsquoWearable Computer

와 관련한 RampD 이슈와 동향rsquo을 분석해보고 Wearable Computer 분야에서 신 사업 lsquoRampBD 전략 수립rsquo을 위해 무엇을 어떻게 가이드 해야 할지를

아래 와 같은 의문(疑問)으로 논의(論議)한다

첫 째 목표로 하는 대상이 사업 자체인가 제품인가 아니면 서비스 개발인가

둘 째 사업 목표에 업의 성격이나 특성을 제대로 반영했나

셋 째 Wearable Computer 기술이 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출 할 수 있나

넷 째 Wearable Computer 사업이 고객이나 기술을 재정의 할 수 있나

다섯 째 변화의 중요성과 메가트렌드의 방향 그리고 거기에서 파생될 다양한 사업기회를 파악했나

- 실제 사업을 하는 입장에서 어떻게 변화를 인지할 것인가

- 언제 시작해야 하는가

- 무엇을 경쟁요소로 삼아야 하는가

- 남들과 어떻게 차별화를 할 수 있는가

Human Computer Interaction Lab Catholic University of Korea

처음엔 그냥 따라갔다(follower) 그리고 이내 빠르게 따라 했다(fast follower) 15년 전(前) Wearable Computer와 첫 조우(遭遇 )가

있었던 우리들의 이야기다 그런데 지금은 맨 앞에 서야 한다(first mover) 살아 남으려면

본 강연에서는 지난 10년 동안 ISWC(International Symposium on Wearable Computers)에서 발표된 RampD 사례들로부터lsquoWearable Computer

와 관련한 RampD 이슈와 동향rsquo을 분석해보고 Wearable Computer 분야에서 신 사업 lsquoRampBD 전략 수립rsquo을 위해 무엇을 어떻게 가이드 해야 할지를

아래 와 같은 의문(疑問)으로 논의(論議)한다

첫 째 목표로 하는 대상이 사업 자체인가 제품인가 아니면 서비스 개발인가

둘 째 사업 목표에 업의 성격이나 특성을 제대로 반영했나

셋 째 Wearable Computer 기술이 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출 할 수 있나

넷 째 Wearable Computer 사업이 고객이나 기술을 재정의 할 수 있나

다섯 째 변화의 중요성과 메가트렌드의 방향 그리고 거기에서 파생될 다양한 사업기회를 파악했나

- 실제 사업을 하는 입장에서 어떻게 변화를 인지할 것인가

- 언제 시작해야 하는가

- 무엇을 경쟁요소로 삼아야 하는가

- 남들과 어떻게 차별화를 할 수 있는가

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

Human Computer Interaction Lab Catholic University of Korea

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

Human Computer Interaction Lab Catholic University of Korea

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

① Wearable Computer

Smart Clothing It is a computer that is always with you is comfortable and easy to keep and use and is as unobtrusive as clothing (MIT)

Fully functional PCs that are designed from the

outset to be worn and operated on the body (IDC)

The definition of a wearable computer is far more dependent on The definition of a wearable computer is far more dependent on

the applications the system can performthe applications the system can perform rather than rather than

the physical makeup of the hardwarethe physical makeup of the hardware

lt자료 IEEE SPECTRUM Oct 2000gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

① Wearable Computer

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Desktop PCDesktop PCDesktop PCDesktop PC MobileMobile PCPCMobileMobile PCPC WearCompWearCompWearCompWearComp

AttachableAttachableAttachableAttachable

어디서나어디서나 (Mobile)(Mobile)어디서나어디서나 (Mobile)(Mobile)

ActivityActivity--basedbasedActivityActivity--basedbased

HandHand--heldPortableheldPortableHandHand--heldPortableheldPortable

어디서나어디서나어디서나어디서나

제한된제한된 기능의기능의제한된제한된 기능의기능의

FixedFixedFixedFixed

사무실에서사무실에서사무실에서사무실에서

다중다중 기능의기능의다중다중 기능의기능의

지속적인지속적인(Persistent)(Persistent)지속적인지속적인(Persistent)(Persistent)

ActivityActivity--basedbasedActivityActivity--basedbased

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

상황을상황을 인지하는인지하는(Context(Context--aware)aware)상황을상황을 인지하는인지하는(Context(Context--aware)aware)

제한된제한된 기능의기능의제한된제한된 기능의기능의

수동적인수동적인수동적인수동적인

다중다중 기능의기능의다중다중 기능의기능의

수동적인수동적인수동적인수동적인

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Prologue

처음엔 그냥 따라갔다(follower) 그리고 이내 빠르게 따라 했다(fast follower) 15년 전(前) Wearable Computer와 첫 조우(遭遇 )가

있었던 우리들의 이야기다 그런데 지금은 맨 앞에 서야 한다(first mover) 살아 남으려면

본 강연에서는 지난 10년 동안 ISWC(International Symposium on Wearable Computers)에서 발표된 RampD 사례들로부터lsquoWearable Computer

와 관련한 RampD 이슈와 동향rsquo을 분석해보고 Wearable Computer 분야에서 신 사업 lsquoRampBD 전략 수립rsquo을 위해 무엇을 어떻게 가이드 해야 할지를

아래 와 같은 의문(疑問)으로 논의(論議)한다

첫 째 목표로 하는 대상이 사업 자체인가 제품인가 아니면 서비스 개발인가

둘 째 사업 목표에 업의 성격이나 특성을 제대로 반영했나

셋 째 Wearable Computer 기술이 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출 할 수 있나

넷 째 Wearable Computer 사업이 고객이나 기술을 재정의 할 수 있나

다섯 째 변화의 중요성과 메가트렌드의 방향 그리고 거기에서 파생될 다양한 사업기회를 파악했나

- 실제 사업을 하는 입장에서 어떻게 변화를 인지할 것인가

- 언제 시작해야 하는가

- 무엇을 경쟁요소로 삼아야 하는가

- 남들과 어떻게 차별화를 할 수 있는가

Human Computer Interaction Lab Catholic University of Korea

처음엔 그냥 따라갔다(follower) 그리고 이내 빠르게 따라 했다(fast follower) 15년 전(前) Wearable Computer와 첫 조우(遭遇 )가

있었던 우리들의 이야기다 그런데 지금은 맨 앞에 서야 한다(first mover) 살아 남으려면

본 강연에서는 지난 10년 동안 ISWC(International Symposium on Wearable Computers)에서 발표된 RampD 사례들로부터lsquoWearable Computer

와 관련한 RampD 이슈와 동향rsquo을 분석해보고 Wearable Computer 분야에서 신 사업 lsquoRampBD 전략 수립rsquo을 위해 무엇을 어떻게 가이드 해야 할지를

아래 와 같은 의문(疑問)으로 논의(論議)한다

첫 째 목표로 하는 대상이 사업 자체인가 제품인가 아니면 서비스 개발인가

둘 째 사업 목표에 업의 성격이나 특성을 제대로 반영했나

셋 째 Wearable Computer 기술이 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출 할 수 있나

넷 째 Wearable Computer 사업이 고객이나 기술을 재정의 할 수 있나

다섯 째 변화의 중요성과 메가트렌드의 방향 그리고 거기에서 파생될 다양한 사업기회를 파악했나

- 실제 사업을 하는 입장에서 어떻게 변화를 인지할 것인가

- 언제 시작해야 하는가

- 무엇을 경쟁요소로 삼아야 하는가

- 남들과 어떻게 차별화를 할 수 있는가

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

Human Computer Interaction Lab Catholic University of Korea

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

Human Computer Interaction Lab Catholic University of Korea

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

① Wearable Computer

Smart Clothing It is a computer that is always with you is comfortable and easy to keep and use and is as unobtrusive as clothing (MIT)

Fully functional PCs that are designed from the

outset to be worn and operated on the body (IDC)

The definition of a wearable computer is far more dependent on The definition of a wearable computer is far more dependent on

the applications the system can performthe applications the system can perform rather than rather than

the physical makeup of the hardwarethe physical makeup of the hardware

lt자료 IEEE SPECTRUM Oct 2000gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

① Wearable Computer

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Desktop PCDesktop PCDesktop PCDesktop PC MobileMobile PCPCMobileMobile PCPC WearCompWearCompWearCompWearComp

AttachableAttachableAttachableAttachable

어디서나어디서나 (Mobile)(Mobile)어디서나어디서나 (Mobile)(Mobile)

ActivityActivity--basedbasedActivityActivity--basedbased

HandHand--heldPortableheldPortableHandHand--heldPortableheldPortable

어디서나어디서나어디서나어디서나

제한된제한된 기능의기능의제한된제한된 기능의기능의

FixedFixedFixedFixed

사무실에서사무실에서사무실에서사무실에서

다중다중 기능의기능의다중다중 기능의기능의

지속적인지속적인(Persistent)(Persistent)지속적인지속적인(Persistent)(Persistent)

ActivityActivity--basedbasedActivityActivity--basedbased

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

상황을상황을 인지하는인지하는(Context(Context--aware)aware)상황을상황을 인지하는인지하는(Context(Context--aware)aware)

제한된제한된 기능의기능의제한된제한된 기능의기능의

수동적인수동적인수동적인수동적인

다중다중 기능의기능의다중다중 기능의기능의

수동적인수동적인수동적인수동적인

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

Human Computer Interaction Lab Catholic University of Korea

I Wearable Computer를 둘러 싼

10년간의 변화와 이슈

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

Human Computer Interaction Lab Catholic University of Korea

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

① Wearable Computer

Smart Clothing It is a computer that is always with you is comfortable and easy to keep and use and is as unobtrusive as clothing (MIT)

Fully functional PCs that are designed from the

outset to be worn and operated on the body (IDC)

The definition of a wearable computer is far more dependent on The definition of a wearable computer is far more dependent on

the applications the system can performthe applications the system can perform rather than rather than

the physical makeup of the hardwarethe physical makeup of the hardware

lt자료 IEEE SPECTRUM Oct 2000gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

① Wearable Computer

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Desktop PCDesktop PCDesktop PCDesktop PC MobileMobile PCPCMobileMobile PCPC WearCompWearCompWearCompWearComp

AttachableAttachableAttachableAttachable

어디서나어디서나 (Mobile)(Mobile)어디서나어디서나 (Mobile)(Mobile)

ActivityActivity--basedbasedActivityActivity--basedbased

HandHand--heldPortableheldPortableHandHand--heldPortableheldPortable

어디서나어디서나어디서나어디서나

제한된제한된 기능의기능의제한된제한된 기능의기능의

FixedFixedFixedFixed

사무실에서사무실에서사무실에서사무실에서

다중다중 기능의기능의다중다중 기능의기능의

지속적인지속적인(Persistent)(Persistent)지속적인지속적인(Persistent)(Persistent)

ActivityActivity--basedbasedActivityActivity--basedbased

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

상황을상황을 인지하는인지하는(Context(Context--aware)aware)상황을상황을 인지하는인지하는(Context(Context--aware)aware)

제한된제한된 기능의기능의제한된제한된 기능의기능의

수동적인수동적인수동적인수동적인

다중다중 기능의기능의다중다중 기능의기능의

수동적인수동적인수동적인수동적인

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

Human Computer Interaction Lab Catholic University of Korea

① Wearable Computer

② What is Different

③ For What Does It Serve

④ A bit history hellip Pioneers

⑤ Related Emerging Technologies

⑥ 10 years of ISWC

① Wearable Computer

Smart Clothing It is a computer that is always with you is comfortable and easy to keep and use and is as unobtrusive as clothing (MIT)

Fully functional PCs that are designed from the

outset to be worn and operated on the body (IDC)

The definition of a wearable computer is far more dependent on The definition of a wearable computer is far more dependent on

the applications the system can performthe applications the system can perform rather than rather than

the physical makeup of the hardwarethe physical makeup of the hardware

lt자료 IEEE SPECTRUM Oct 2000gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

① Wearable Computer

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Desktop PCDesktop PCDesktop PCDesktop PC MobileMobile PCPCMobileMobile PCPC WearCompWearCompWearCompWearComp

AttachableAttachableAttachableAttachable

어디서나어디서나 (Mobile)(Mobile)어디서나어디서나 (Mobile)(Mobile)

ActivityActivity--basedbasedActivityActivity--basedbased

HandHand--heldPortableheldPortableHandHand--heldPortableheldPortable

어디서나어디서나어디서나어디서나

제한된제한된 기능의기능의제한된제한된 기능의기능의

FixedFixedFixedFixed

사무실에서사무실에서사무실에서사무실에서

다중다중 기능의기능의다중다중 기능의기능의

지속적인지속적인(Persistent)(Persistent)지속적인지속적인(Persistent)(Persistent)

ActivityActivity--basedbasedActivityActivity--basedbased

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

상황을상황을 인지하는인지하는(Context(Context--aware)aware)상황을상황을 인지하는인지하는(Context(Context--aware)aware)

제한된제한된 기능의기능의제한된제한된 기능의기능의

수동적인수동적인수동적인수동적인

다중다중 기능의기능의다중다중 기능의기능의

수동적인수동적인수동적인수동적인

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① Wearable Computer

Smart Clothing It is a computer that is always with you is comfortable and easy to keep and use and is as unobtrusive as clothing (MIT)

Fully functional PCs that are designed from the

outset to be worn and operated on the body (IDC)

The definition of a wearable computer is far more dependent on The definition of a wearable computer is far more dependent on

the applications the system can performthe applications the system can perform rather than rather than

the physical makeup of the hardwarethe physical makeup of the hardware

lt자료 IEEE SPECTRUM Oct 2000gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

① Wearable Computer

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Desktop PCDesktop PCDesktop PCDesktop PC MobileMobile PCPCMobileMobile PCPC WearCompWearCompWearCompWearComp

AttachableAttachableAttachableAttachable

어디서나어디서나 (Mobile)(Mobile)어디서나어디서나 (Mobile)(Mobile)

ActivityActivity--basedbasedActivityActivity--basedbased

HandHand--heldPortableheldPortableHandHand--heldPortableheldPortable

어디서나어디서나어디서나어디서나

제한된제한된 기능의기능의제한된제한된 기능의기능의

FixedFixedFixedFixed

사무실에서사무실에서사무실에서사무실에서

다중다중 기능의기능의다중다중 기능의기능의

지속적인지속적인(Persistent)(Persistent)지속적인지속적인(Persistent)(Persistent)

ActivityActivity--basedbasedActivityActivity--basedbased

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

상황을상황을 인지하는인지하는(Context(Context--aware)aware)상황을상황을 인지하는인지하는(Context(Context--aware)aware)

제한된제한된 기능의기능의제한된제한된 기능의기능의

수동적인수동적인수동적인수동적인

다중다중 기능의기능의다중다중 기능의기능의

수동적인수동적인수동적인수동적인

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① Wearable Computer

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

컴퓨터 기술 뿐만이 아니라

물리 의류 심리 전자 전기 기계 등의

여러 분야와 서로 긴밀하게 협동하여 연구해야만 성공

할 수 있는 미래의 컴퓨팅 시스템이며

사용자가 언제나 컴퓨터를 신체의 일부에 부착하고 다님으로써

ldquo어디에서나 사용될 수 있다rdquo는

요건을 만족시키는 컴퓨팅 시스템

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Desktop PCDesktop PCDesktop PCDesktop PC MobileMobile PCPCMobileMobile PCPC WearCompWearCompWearCompWearComp

AttachableAttachableAttachableAttachable

어디서나어디서나 (Mobile)(Mobile)어디서나어디서나 (Mobile)(Mobile)

ActivityActivity--basedbasedActivityActivity--basedbased

HandHand--heldPortableheldPortableHandHand--heldPortableheldPortable

어디서나어디서나어디서나어디서나

제한된제한된 기능의기능의제한된제한된 기능의기능의

FixedFixedFixedFixed

사무실에서사무실에서사무실에서사무실에서

다중다중 기능의기능의다중다중 기능의기능의

지속적인지속적인(Persistent)(Persistent)지속적인지속적인(Persistent)(Persistent)

ActivityActivity--basedbasedActivityActivity--basedbased

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

상황을상황을 인지하는인지하는(Context(Context--aware)aware)상황을상황을 인지하는인지하는(Context(Context--aware)aware)

제한된제한된 기능의기능의제한된제한된 기능의기능의

수동적인수동적인수동적인수동적인

다중다중 기능의기능의다중다중 기능의기능의

수동적인수동적인수동적인수동적인

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

② What is Different

Desktop PCDesktop PCDesktop PCDesktop PC MobileMobile PCPCMobileMobile PCPC WearCompWearCompWearCompWearComp

AttachableAttachableAttachableAttachable

어디서나어디서나 (Mobile)(Mobile)어디서나어디서나 (Mobile)(Mobile)

ActivityActivity--basedbasedActivityActivity--basedbased

HandHand--heldPortableheldPortableHandHand--heldPortableheldPortable

어디서나어디서나어디서나어디서나

제한된제한된 기능의기능의제한된제한된 기능의기능의

FixedFixedFixedFixed

사무실에서사무실에서사무실에서사무실에서

다중다중 기능의기능의다중다중 기능의기능의

지속적인지속적인(Persistent)(Persistent)지속적인지속적인(Persistent)(Persistent)

ActivityActivity--basedbasedActivityActivity--basedbased

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

미리미리미리미리 대처하는대처하는(Proactive)(Proactive)

상황을상황을 인지하는인지하는(Context(Context--aware)aware)상황을상황을 인지하는인지하는(Context(Context--aware)aware)

제한된제한된 기능의기능의제한된제한된 기능의기능의

수동적인수동적인수동적인수동적인

다중다중 기능의기능의다중다중 기능의기능의

수동적인수동적인수동적인수동적인

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

② What is Different

Human

Computer

Unmonopolizing Unrestrictive

Contro

llableO

bse

rvab

le

CommunicativeAttentive

Steve MANN의 WearComp

Unmonopolizing of the userrsquos attentionUnrestrictive to the usersObservable by the userControllable by the userAttentive to the environment

Communicative to the otherslt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTE

of TECHNOLOGY May 2002gt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

③ For What Does It Serve

중재성(Mediation)

Solitudeand

Privacy

Solitudeand

Privacy

항시성(Constancy)

증대성(Augmentation)

Solitudeand

Privacy

Solitudeand

Privacy

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ A bit history hellip Pioneers

lt자료 Image is a self-portrait of Steve Mann together with other members of the `Safety Netlsquo 1996gt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ A bit history hellip Pioneers

The Walt Disney Internet Group

Professor at University of Toronto WearComp 창시자Humanistic Intelligence 개념 정의Chirplet Transform EyeTap 등 개발

MIT Media Lab (Physics and Media Group)

A research scientist at Ricoh Innovations

Post Doctoral Researcher

in IBM Zurich Professor at GIT MIT(Vision amp Modeling Group)

Vice President at XybernautMIT Media Lab

Human Design Group

The Yenta Multi-Agent Distributed Matchmaking System

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ A bit history hellip Pioneers

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ A bit history hellip Pioneers

Google co-founder spotted on NY subway with lsquowearable computerrsquo

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

Google co-founder Sergey Brin was spotted on the New York subway wearing glasses-cum-smart device ldquoGoogle Glassrdquo US-based IT magazine PC Magazine reported on Monday that Brin caught the eyes of citizens on the subway on Sunday

A New York resident named Noah Zerkinposted a photo of Brin on Twitter spotting the Google co-founder

Zerkin also posted a photo of himself wearing Brinrsquos Google Glass adding that he couldnrsquot operate the device since mobile phone service was not available in New Yorkrsquos subway station

Google is planning to hold a series of developersrsquo events in San Francisco and New York on Jan 28-29 and Feb 1-2 respectively

For the events Google exclusively invited US developers who bought the $1500 ldquoGoogle Glassrdquo at last yearrsquos Google developersrsquo meet

Published 2013-01-22 1502

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ A bit history hellip Pioneers

ScurrytradeScurrytradeWearable VirtualWearable Virtual Input DeviceInput Device

lt자료 COMDEX Las Vegas Nov 19 2001gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

lt자료 Sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ A bit history hellip Pioneers

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

ldquoldquo더더 좋은좋은 것보다는것보다는 맨맨 처음이처음이 낫다rdquo낫다rdquo

Reuters 2001 11 16 Virtual KeyboardsLet You Type in Air15Nov2001 USA Virtual Keyboards Let YouType in Air

LAS VEGAS Nov 14 2001(PCWorld via COMTEX) -Call it air guitar meets

lt자료 BBC Tomorrowrsquos world London May 8 2002gt

lt자료 Sang-Goog Lee ldquoReview of Wearable Computers amp Wearable Virtual Input Device ldquoSCURRYtrade Technical Report SAMSUNG ADVANCED INSTITUTEof TECHNOLOGY May 2002gt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ A bit history hellip Pioneers

lt자료 ldquoInternational Conference on HCI 2005 Tutorial by Sang-Goog LEErdquo Las Vegas July 2005gt

lt자료 sang-Goog LEE et al ldquoA new wearable input device SCURRYrdquo IEEE Transaction on Industrial Electronics Vol52 No6 pp1490-1499 Dec 2005gt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑤ Related Emerging Technologies

lt자료 2012 Hype Cycle for Emerging Technologies Gartnergt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 10 years of ISWC

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 10 years of ISWC

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Year

Category11 10 09 08 07 06 05 04 03 02 Total

HW

System 1 1 1 9 5 2 3 22

Textile 2 5 1 2 2 3 1 16

Sensor 1 2 1 1 2 7

sub total 2 4 5 1 1 2 11 8 5 6 45

UI 1 5 1 5 5 7 5 3 32

⑥ 10 years of ISWC ndash Technology classification

Context awareness 9 8 10 7 5 8 7 4 6 4 68

Low power 1 1 2 1 2 7

Near field communication 2 2

Positioning 1 1 3 1 3 5 3 17

Usability 2 2 2 1 4 4 1 1 17

Application 2 1 2 1 1 1 8

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 10 years of ISWC ndash Session Names

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input Navigationamp

Augmented Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI Output Hardware and Systems

Clothing and Textile

Recording Experiences

HCI Input Augmented Reality Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI Context and

Interruption

ISWC 2003White Plains

USAInfrastructure

User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annotation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 10 years of ISWC ndash Session Names

ISWC 2012New castle UK

Learning About People

Activity Recognition Input

Working with People

Modeling and Learning

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

10 years of ISWC ndash Best paper nominees

ISWC 2011San Francisco

USAUsers

Smartphones as Wearables

Novel Sensing Education Recognition Activity

ISWC 2010Seoul Korea

Textile based System amp Interface

Wearable Recognition

Wearable Systems amp Application

Wearable Sensors

ISWC 2009Linz

Austria

Systems and Applications

Smart Textiles HCI Context

ISWC 2008Pittsburgh

USA

Location Mapping

Mobile Phones and Human Interface

Activity Support

Power and System

Integration

Activity Recognition

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2007Boston

USA

Gesture Recognition

and Interfaces

Activity and Context

Recognition

Applications and Evaluation

Power Considera-

tions

Input NavigationampAugmented

Reality

ISWC 2006Montreux

Switzerland

Activity Recognition

InterfaceEvaluation

LocationsSystems

Input Devicesand Sensors

Wearability ampGarments

ISWC 2005Osaka Japan

HCI OutputHardware and

SystemsClothing and

TextileRecording

ExperiencesHCI Input

Augmented Reality

Context Gesture

ISWC 2004Washington DC

USAWellness Gesture Textiles System HCI

Context and Interruption

ISWC 2003White Plains

USAInfrastructure User Interfaces Indoor Tracking Biosensors

Augmented Reality

Music Memory amp Annontation

Inertial Sensors Dead

Reckoning

ISWC 2002Seattle

USAApplications Clothing Hardware Location Context

An Interdisciplinary Undergraduate Design Course for Wearable and Pervasive Computing ProductsUnsupervised Activity Recognition with Userrsquos Physical Characteristics DataUnsupervised adaptation to on-body sensor displacement in acceleration-based activity recognitionWhos Who with Big-Five Analyzing and Classifying Personality Traits with Smartphones

A Novel Micro-Vibration Sensor for Activity Recognition Potential and LimitationsActiServ Activity Recognition Service for Mobile PhonesLe Festin Shop Sign Recognition Assisted Food Recommendation SystemThe Textile Interface Swatchbook Creating Graphical User Interface-like Widgets with Conductive Embroidery

Clinical Implementation of a Head-Mounted Display of Patient Vital SignsMulti-Graph Based Semi-Supervised Learning for Activity Recognition

Adapting Magnetic Resonant Coupling Based Relative Positioning Technology for Wearable Activity RecognitionPower PACK A Wireless Power Distribution System for Wearable DevicesUsing a complex Multi-modal On-body Sensor System for Activity SpottingVideo-rate Localization in Multiple Maps for Wearable Augmented Reality

Hambone A Bio-Acoustic Gesture InterfaceHandy AR Markerless Inspection of Augmented Reality Objects Using Fingertip TrackingRecognizing Upper Body Postures using Textile Strain Sensors

2011

2010

2009

2008

2007

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 10 years of ISWC

2012 Best paper Christoph Amma Marcus Georgi Tanja Schultz Recognition of 3d-Space Handwriting with Inertial Sensors Cognitive Systems Lab Institute for Anthropomatics Karlsruhe Institute of Technology Germany

The spotting stage uses a Support Vector Machine to identify datasegments which contain handwriting The recognition stage usesHidden Markov Models (HMM) to generate the text representationfrom the motion sensor data

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

II Wearable Computer

RampBD를 위한 7 大 전략

Human Computer Interaction Lab Catholic University of Korea

II Wearable Computer

RampBD를 위한 7 大 전략

RampBD(Research and Business Development)

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

Human Computer Interaction Lab Catholic University of Korea

① 에코시스템을 구축하라

② 타이밍 타이밍 타이밍

③ 감성(感性)을 자극하라

④ 재미있는 이야기로 가치(價値)를 전달하라

⑤ 실제(實際)와 가상(假想)을 넘나들라

⑥ 의미와 맥락(脈絡)을 이해하라

⑦ 영향력(impact)과 불확실성(uncertainty)이 큰 것으로 미래대응전략을 세워라

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

l Always onldquo

ndash U-Healthcare 사업

ndash 4P + 1S (Personalized Predictive Preventive Participator) + Sharing

HCI Lab The Catholic Univ of Korea

lt자료 이상국 외 1인 ldquoAn R-peak detection method that uses an SVD filter and a search back systemrdquo Computer methods and programs in biomedicine No108 pp 1121-1132 Aug 2012 gtlt자료 이상국 외 5인 ldquoECG와 호흡 측정이 가능한 모바일 헬스케어 의류 시스템rdquo 한국정보처리학회 논 문지 A vol17-A no3 pp145-152 June 2010gtlt자료 이상국 외 5인 ldquoPVDF를 이용한 맥박 및 호흡 센서와 디지털실을 이용한 헬스케어 의류 시스템rdquo 한국정보기술학회논문지 Vol8 No3 pp87-96 Mar 2010gtlt자료 이상국 외 5인 ldquo컴퓨터 게임에서 ECG 신호를 이용한 스트레스와 심장상태 위험 예측을 위한 실시간 분석방법rdquo 한국정보기술학회논문지 Vol9 No2 pp215-232 Mar 2010gtlt자료 이상국 외 5인 ldquoBio-signal based emotion evaluation by olfactory display in playing the game and entertainmentrdquo Congress of European Chemoreception Research Organisation Oct 2010gt

Interface Layer

API for Component Interaction

Device Layer

Communication andData Retrieval

using API

SignalCategorization

Layer

Categorization of Datainto Discrete Value

Levels

Algorithm Layer

Arousal and Valence

Userrsquos EmotionEstimation

Synchronization Layer

Raw Data CategoryValues

Configuration ModulesRead Information from Configuration Files

DataRepository

(Files)

Performance Agent for Bio-signal (Wellness Garment System)

CategoryParameters

InitializationData

INI Files orWindows Registry

CurrentUser

Emotion

Arousal

ValenceFile

AccessUpdate

ApplicationStatus

Bio-Signal

Multi-ModalSignal

EmotionRecognitionComponent

lt자료 ldquo나노 섬유 기술 기반의 웰니스 의류 시스템 개발rdquo 지식경제부 기술혁신사업 (기간 20090501~20141230 사업비 105억 원)gt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

l Always onldquo

ndash 요람에서 무덤까지

ndash ldquoSharing easyrdquo amp ldquoEasy to accessrdquo

ndash Giga Korea (ldquo氣加 Koreardquo)

UnitedHealthcare Healthspot at CES2013 Las Vegas

lt자료 공원 컨셉의 Healthcare 서비스 포인트 CES 2013 Las Vegasgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

1 단계 목표 세부 내용 개념도

bull 전도성 나노 섬유 웹

기반 전극과 센서를

이용한 생체신호

측정모듈 개발

bull 전도성 나노 섬유 웹 기반 전극 기반 ECG측정 모듈 (SN비 30 dB)

bull 비(非)통기성 압전 고분자 필름 센서(PVDF) 기반 피부 비(非)접촉식

PSB를 이용한 호흡수 측정 모듈

bull 압전 나노 섬유 웹 기반 센서를 이용한 운동량 측정 모듈

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

lt센서 신호 전송시스템 블록 다이어그램gt

lt 센서모듈 블록 다이어그램gt

[사례 ] Wellness 의류 내장형 생체정보 센서 모듈 및 전송 단말기술 개발

① 에코시스템을 구축하라

bull 생체신호 전송 단말

기술 및 다중 생체신호

통합 측정모듈 개발

bull 모바일 생체정보 전송 기술 개발

(주파수대역 24GHz 전송속도 250Kbps도 전송거리 20m

Sleep Mode 지원 및 저전력 저비용 단말기 및 무선네트워크 구성)

bull 다중 생체정보 분석 기술 개발(4세부와 협업)

bull 모바일 시스템 전원 관리 기술 개발

bull IEEE 11073 기반 프로토콜 구현(상호 운용성 확립 4세부와 협업)

bull 상호운용성이 보장되는

다중 생체신호처리

모듈 설계 기술 개발

bull 다중생체정보의 동시 처리를 위한 재구성 가능한 신호처리 모듈

bull 다중생체정보 실시간 처리 모듈 및 시스템 프로그램 개발

bull Flexible circuit board 기반 초소형 회로 설계 기술 개발

bull 저전력 회로 설계 기술 개발

bull 생체신호감지센서의 상호운용성 보장을 위해 센서 스마트 인터페이스

표준인 IEEE 1451의 표준 인터페이스와 TEDS를 지원하는 생체신호

통합모듈 설계

bull 전도성 나노섬유 센서의 IEEE 14514 표준 ID 승인을 위한 표준화 작업

lt 센서모듈 블록 다이어그램gt

ltDSP기반gtlt웨어러블생체신호처리모듈gt

lt 모바일 생체정보 전송 모델gt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

l Always onldquo

ndash Parkinson 환자들의 FOG(Freezing of gait) 검출

ndash 자폐아(Autism) 이상 행동 검출

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

lt자료 Bachlin M Roggen D Troster G Plotnik M Inbar N Meidan I Herman T Brozgol M Shaviv E Giladi NHausdorff JM ldquoPotentials of enhanced context awareness in wearable assistants for Parkinsonrsquos diseasepatients with the freezing of gait syndromerdquo ISWC 2009gt

lt자료 TracyWesteyn Kristin Vadas Xuehai Bian Thad Starner and Gregory D Abowd ldquoRecognizing MimickedAutistic SelfndashStimulatory Behaviors Using HMMsrdquo ISWC2005gt

Wearable Computing Lab Swiss Federal Institute of Technology College of Computing and GVU Center Georgia Institute of Technology

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

l Persists and provides constant access

ndash Clinical Implementation

The University of Queensland Royal Adelaide Hospital

lt자료 David Liu Simon A Jenkins Penelope M Sanderson ldquoClinical Implementation of a Head-Mounted Display ofPatient Vital Signsrdquo ISWC 2009 Best paper nomineegt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

l 프리미엄(Freemium) 전략

ndash 공짜 생태계 수립

ndash 업의 경계를 무너뜨리고 경험하지 못하던 경쟁 방식을 창출

ndash 기술과 고객을 재정의

WordPress Googlemaps

lt자료 인터넷 컨텐츠 매니지먼트시스템(CMS) 소프트웨어gt

lt자료 구글 지도를 바탕으로 한 다양한 서비스(자동차middot대중교통middot자전거로 길찾기 스트리트뷰 보기 지도 만들기

내비게이션 위치찾기 실내 지도 체크인 등 )gt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

Apple 생태계 iTunes

lt자료 아이폰 아이패드 아이팟 앱스토어 아이튠즈 팟캐스트 아이튠즈 Ugt

애플은 수많은 콘텐츠 제공업체와의 협력을 통해 아이튠스(iTunes)를 만듦으로써 독보적인 경쟁우위를 가짐

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

Apple과 Google의 N-screen 서비스

l 복잡성(complexity) 딜레마에서 책임(accountability) 경계의 명확화

ndash Player Knowledge Communication 간의 Interaction 증가로 불확실성의 폭증

ndash 사업진행을 빠르게 하는 비즈니스 모델 수립이 관건

ndash 업을 바라보는 다양한 시각과 목적으로 인한 lsquo조정 비용 상승 및 주도권 충돌 문제rsquo

lt자료 스마트 TV 서비스 동향분석 및 전망 전자통신동향분석 제26권 제4호 201108gt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash Giga KOREA IT 생태계 전략 구축

ndash N T P C 종합 개발로 모바일 생태계 전반에 걸쳐 세계 시장 선도

Giga KOREA 전략 기획

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 정보통신 미래원천기술 특집 2012gt

G-Korea Generous Global Genuine Glory Great Gee Gold Green Gala Good 굿(무속신앙 공동체 기원 바램 희망) 智 지(福祉)

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

l Wearable Computing이 이끄는 변화의 범위가 지엽적인지 아닌지

전(全)산업에 영향을 미치는지 아닌지의 개념 정의가 필수

ndash AllShare Play AllShare Cast Pop up Play Minimal Organic etc

ndash 독자적인 에코시스템 구성과 고정비(마케팅과 연구개발비) 및 초기비용(생산공장과 인력비용) 절감

갤럭시S III

+ 2

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

① 에코시스템을 구축하라

l 기술과 시장의 경계는 물론 각 부문 내에서의 경계를 허물라

ndash 성능은 도토리 키 재기 ldquo가치사슬 전체를 시장으로 간주rdquo하고 할 일을 분석

ndash 기술과 시장 두 축 모두를 고려하는 lsquo라인업이 중요한 사업rsquo

SRI-C PARC 러시아 전통인형 ldquo마뜨료쉬까rdquo

구기술 신기술

신시장

구시장 1

3

2

4

ldquoNIHNITrdquo 문화를 ldquoPFErdquo의 문화로 변화

Not-Invented-Here Not-Invented-There Proudly-Found-Elsewhere

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

개별 제품의 기술장벽이 거의 없더라도 후발자가 시장에 진입하기가

매우 어려운 lsquo라인업이 중요한사업rsquo을 수립

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

② 타이밍 타이밍 타이밍

l Just-in-time information search retrieval and presentation

ndash Better interfaceergonomics for the collection of typical applications

ndash 손목 착용 Projector를 이용한 Interaction technology

Department of Computer Science Columbia University

lt자료 Blasko G Coriand F Feiner S ldquoExploring Interaction with a Simulated Wrist-Worn Projection Displayrdquo 9thIEEE International Symposium on Digital Object Identifier ISWC 2005gt

Department of Computer Science Columbia University

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

② 타이밍 타이밍 타이밍

l Convergence on the body

ndash GroupWear name tags

ndash Body Area Network 인체통신

ndash Personal life-log

MIT ETRIViconRevue Records Every

Minute of Your Life

lt자료 Media Lab of the Massachusetts Institute of Technology (MIT) KISTEP 10대 미래유망기술 2009gt

MIT ETRIViconRevue Records Every

Minute of Your Life

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

② 타이밍 타이밍 타이밍

l On-site On-time 서비스

ndash 양방향성상호작용성

ndash 체감실감 영상 서비스

ndash 다자용 다시점 디스플레이 amp 홀로그램

MIT media lab 홀로그램 일본 RIKEN 홀로그램MIT media lab 홀로그램 일본 RIKEN 홀로그램

lt자료 Giga KOREA 동향 및 기술 분석 ETRI 전자통신동향분석 제27권 제5호 2012년 10월gt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

② 타이밍 타이밍 타이밍

l Interacts seamlessly

ndash on-body 센서를 부착하여 데이터 스트림 내 의미 있는 행동을 식별위치 측정

ndash Unsupervised identification and modeling of human actions embedded

in a larger sensor stream

College of Computing Georgia Institute of Technology

lt자료 David Minnen Thad Starner Irfan Essa and Charles Isbell Discovering Characteristic Actions from On-BodySensor Dataldquo ISWC 2006 gt

College of Computing Georgia Institute of Technology

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

② 타이밍 타이밍 타이밍

l Hype cycle 분석

ndash 맨 처음 나온 아이디어의 성급한 사업화는 유의

ndash 감성적으로 수용이 되도록

삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰삼성전자 영상 로봇청소기 VC-RL87W 탱고뷰

유용성의 계곡(과학적 발견을 엔지니어링 기술로 제품화하는 것)부터 건너자

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

② 타이밍 타이밍 타이밍

l S-curve 분석

ndash 소득과 지출 비중의 패턴(직선 역U자형 로그함수패턴 지수함수패턴) 변화 분석

ndash 시장과 기술의 벽 (3개의 계곡 ndash 유용성 경제성 수용성의 계곡) 극복

RampBD planning for discontinuous innovationRampBD planning for discontinuous innovation

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

③ 감성(感性)을 자극하라

l 사용자의 잠재적 니즈와 관련 있다

ndash 경험(Experience)의 장

ndash lsquo빠르게 싸게 크거나 작게rsquo를 lsquo스마트 안전 그린rsquo으로

ndash Electronic textile를 통한 communication shirts

Craft Technology Group University of Colorado at BoulderCraft Technology Group University of Colorado at Boulder

lt자료 Leah Buechley A Construction Kit for Electronic Textilesldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

③ 감성(感性)을 자극하라

l 가장 중요한 성공 포인트는 차별화

ndash 우선 눈에 보이는 놀라움

ndash 고객의 시간 절약 공간 확장 등 구체적이고 분명한 가치

ndash 사용자의 감성을 고려한 기능적 측면의 wearable agent interface

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

Advanced Technology Research Laboratories Panasonic -Matsushita Electric Industrial Co Ltd

lt자료 Kostov V Ozawa J Matsuura S ldquoAnalysis of Wearable Interface Factors for AppropriateInformation Notificationrdquo ISWC 2004gt

Wearable notification devices Ubiquitous futurepartner and assistant

웨어러블 제품이 사용자에게 감성을 떠올리게 하는기능들로 차별화

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

③ 감성(感性)을 자극하라

l Smart Textiles

ndash 전도성실과 유연한 전자 제품 모듈로 embroider 개발

ndash Stretchable printed circuit boards(SCBs) mass production

ndash RFID textile에 대한 자동 제조 방법

Ryoko Ueoka Research Center for Advanced Science and Technology University of Tokyo Technische Universitaumlt Berlin

lt자료 Linz T Kallmayer C Aschenbrenner R Reichl H ldquoEmbroidering Electrical Interconnects withConductive Yarn for The Integration of Flexible Electronic Modules into Fabricrdquo ISWC2005gt

lt자료 Ueoka R Masuda A Murakami T Hirose M ldquoRFID Textile and Map Making System for Large AreaPositioningrdquo ISWC 2009gt

lt자료 Vieroth R Loher T Seckel M Dils C Kallmayer C Ostmann A Reichl H ldquoStretchable Circuit Boardtechnology and applicationrdquo ISWC 2009gt

SCB manufacturing process

RFID yarn and textile weaving machineFlexible electronic module connected with conductive

yarn by embroidery

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

③ 감성(感性)을 자극하라

l Usability evaluation

ndash CRS(comport rating scales)를 통한 사용성(usability) 평가

ndash Emotion Attachment Harm Perceived change Movement Anxiety

ndash How conductive embroidery can render GUI-like widgets on fabric

The University of Birmingham GVU Center Georgia Institute of TechnologyThe University of Birmingham GVU Center Georgia Institute of Technology

lt자료 James F Knight Chris Baber Anthony Schwirtz and Huw W Bristow ldquoThe Comfort Assessment ofWearable Computersrdquo ISWC 2002gt

lt자료 Scott Gilliland Nicholas Komor Thad Starner and Clint Zeagler ldquoThe Textile Interface SwatchbookCreating Graphical User Interface-like Widgets with Conductive Embroideryrdquo ISWC 2010 Best papernomineegt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

③ 감성(感性)을 자극하라

l Smart sensors

ndash 착용감의 정량화 및 컴퓨터의 착용성을 결정하는 5단계를 제안

ndash 컴퓨터 착용시 움직임 패턴 자세 그리고 국소 통증의 변화로 인한 신체적 에너지 소비

생체 역학 영향에 대해 평가

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

School of Electronic Electrical amp Computer Engineering The University of Birmingham Birmingham

lt자료 James F Knight Daniel Deen-Williams Theodoros N Arvanitis Chris Baber Sofoklis SotiriouStamatina Anastopoulou and Michael Gargalakos Assessing the Wearability of WearableComputersldquo ISWC 2006gt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

③ 감성(感性)을 자극하라

l 넘쳐나는 것을 소비자 스스로 사용하도록

ndash 써야 할 시간이 넘쳐난다(생명 연장 노령인구의 증가 베이비부머의 은퇴)

ndash 신프로슈머 소셜슈머 큐레이슈머

Chacun son style (十人十色)Chacun son style (十人十色)

수동적인 상품소비를 거부하고 자신만의 스타일을 창출 또는 원래 용도와 무관하게 사용하거나 원하는 사양 적극 요구

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ 재미있는 이야기로 가치를 전달하라

l 재미있으면 서로의 정서를 자동적으로 공유

ndash Science is beginning to look like science fiction

ndash Motion capture

Graduate School of Information Science and Technology Osaka UniversityGraduate School of Information Science and Technology Osaka University

lt자료 Yoshinari TAKEGAWA Tsutomu TERADA and Shojiro NISHIO A Text Input Interfaceusing a Portable Clavier for Pianistsldquo ISWC 2007gt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ 재미있는 이야기로 가치를 전달하라

l 정서 지능 공유 Gesture communication

ndash 손의 제스처를 통해서 물체와 상호작용 하는 방법

ndash 손목밴드를 이용한 터치기반 상호작용

Ambient Intelligence Group MIT Media LaboratoryAmbient Intelligence Group MIT Media Laboratory

lt자료 Feldman A Tapia EM Sadi S Maes P Schmandt C ldquoReachMedia On-the-moveinteraction with everyday objectsrdquo ISWC 2005gt

ReachMedia The three gesturesReachBand including the MITes boardAnd the Skyetek m1-mini RFID reader

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ 재미있는 이야기로 가치를 전달하라

l 3차원 공간 제스처 디자인 모델링 프레임워크

ndash 3차원 공간 제스처의 정합과 평가를 위해 DTW(Dynamic Time Warping)과

HMMs(Hidden Markov Models) 두 가지의 다른 패턴 매칭

Computer Graphics Laboratory ETH Zurich SwitzerlandComputer Graphics Laboratory ETH Zurich Switzerland

lt자료 Doo Young Kwon and Markus Gross A Framework for 3D Spatial Gesture Design and Modeling Using a Wearable Input Deviceldquo ISWC 2007gt

Framework amp input device 3 positions of user 18 gestures diagram

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ 재미있는 이야기로 가치를 전달하라

l Sensor Fusion

ndash 관성센서와 생체 센서 융합한 제스처 인식

ndash Multi DOF(degree-of-freedom) interface

Electronic Science amp Technology Dept University of Science amp Technology of China

lt자료 Xiang Chen Xu Zhang Zhang-Yan Zhao and Ji-Hai Yang Hand Gesture Recognition Research Based on Surface EMG Sensors and 2D-accelerometersldquo ISWC 2007gt

defined hand gestures Placement of sEMG sensors and 2Daccelerometers

Illustration for sEMG and accelerometersignals of six wrist gestures

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

④ 재미있는 이야기로 가치를 전달하라

l Homeground of Scenario Planning

ndash 미래예측은 어렵다 시나리오로 미래대응전략을 수립하라

ndash Scenario-based Technology Roadmap 과 3T(TRM-TT-TRIZ)방법론 연계운용

Scenario-based Technology RoadmapScenario-based Technology Roadmap

Storytelling amp Scenario 비즈니스 이슈가 중심이 되어야 하고 손에 잡히는 변화가 전제되어야 한다일시적이고 지엽적인 변화보다는 누가 봐도 수긍이 가는 큰 변화의 흐름을 포착한다 lsquoMinority report(2002)rsquo에서 Peter Schwartz의 스토리텔링 기반의 시나리오기법 구사

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑤ 실제(實際)와 가상 (假想)을 넘나들라

l Augments and mediates reality

ndash vision-based AR

ndash repairinspectionmaintenance game recognizing face and gesture

Fraunhofer Institut fuumlr Graphische DatenverarbeitungFraunhofer Institut fuumlr Graphische Datenverarbeitung

lt자료 Vassilios Vlahakis John Karigiannis Manolis Tsotros Nikolaos Ioannidis and DidierStricker ldquoPersonalized augmented reality touring of archeological sites with wearableand mobile computerrdquo ISWC 2002gt

System architecture Mobile AR device Avatar athletes competing in the stadium of ancient Olympia

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Milgramrsquos reality-virtuality continuum

ndash Real world interaction vs AR interaction vs VR intertion

ndash 임장감 몰입감

- University of Toronto Dept of Electrical and Computer Engineering- National University of Singapore

lt자료 James Fung Felix Tang and Steve Mann ldquoMediated Reality using Computer Graphics Hardware for Computer Visionrdquo ISWC 02 gt

lt자료 Adrian David Cheok ldquoMicro-Accelerometer based Hardware Interfaces for Wearable Computer Mixed Reality Applicationsrdquo ISWC 02gt

VideoOrbits example

The VideoOrbitsalgorithm The steps shown in solid dark lines have been accelerated using graphics hardware available on common 3D acceleratedcomputer graphics cards

Tilt pad in a 3D map application

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑤ 실제(實際)와 가상(假想)을 넘나들라

Department of Computer Science University of California MIT sixth sense

l Tracking Registration Authoring Rendering Interaction

ndash Natural Feature Tracking

ndash Hybrid Tracking

Department of Computer Science University of California MIT sixth sense

lt자료 Taehee Lee and Tobias Hollerer Handy AR Markerless Inspection of Augmented Reality Objects Using Fingertip Trackingrdquo ISWC 2007gt

Hand segmentation Estimating the camera pose from different viewing angles

Flipping the hand from (a) to (d)

It turns any surface into an interactive display screen

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑤ 실제(實際)와 가상(假想)을 넘나들라

l Augmented NED

ndash vision-based AR out device

ndash Game application amp LBS

LUMUS Google Toronto UniversityLUMUS Google Toronto University

VideoOrbitsProjectGlass Android-based

heads-up display glasses EyeTap of Steve MANN

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑤ 실제(實際)와 가상(假想)을 넘나들라

l 상호작용 방식도 변한다

ndash 2 issues of UI

ndash Easy to use and easy to ignore

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Alexander Romanovich Luria

The Mind of a Mnemonist

⑤ 실제(實際)와 가상(假想)을 넘나들라

SV Shereshevskii a Russianjournalist with a seeminglyunlimited memory 1968 Kim Peek - The Real Rain Man

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 의미와 맥락(脈絡)을 이해하라

l Senses and models context

ndash Sense the users context in order to serve him better

ndash Pro-actively perform tasks for the user

ndash Megatrends smart secure green

TU Braunschweig Karlsruhe Institute of Technology GermanyTU Braunschweig Karlsruhe Institute of Technology Germany

lt자료 Berchtold M Budde M Gordon D Schmidtke HR Beigl M ldquoActiServ Activity Recognition Service forMobile Phonesrdquo ISWC 2010 Best paper nomineegt

lt자료 Dawud Gordon Hedda Rahel Schmidtke Michael Beigl Georg von Zengen ldquoA Novel Micro-VibrationSensor for Activity Recognition Potential and Limitationsrdquo ISWC 2010 Best paper nomineegt

ActiServ service architecture Classification system architecture Subject wearing the Akiba node(top) memory extension and ADXL335 board

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 의미와 맥락(脈絡)을 이해하라

l Activity recognition

ndash 정보 폭발의 시대

ndash 사업기회의 예고탄 lsquo과잉rsquo을 lsquo사용rsquo으로 바꾸라

ndash 변동이 생기면 미리 알려주어 사전에 대비하게 하거나 변동을 줄여준다

Kobe University Japan NTT Communication Science Lab Japan EPFL SwitzerlandKobe University Japan NTT Communication Science Lab Japan EPFL Switzerland

lt자료 Nakajima Y Murao K Terada T Tsukamoto M ldquoA Method for Energy Saving on Context-awareSystem by Sampling Control and Data Complementrdquo ISWC 2010gt

lt자료 Takuya Maekawa Shinji Watanabe ldquoUnsupervised Activity Recognition with Userrsquos PhysicalCharacteristics Datardquo ISWC2011 Best paper nomineegt

lt자료 Hamidreza Bayati Josacutee del R Millacutean and Ricardo Chavarriaga ldquoUnsupervised adaptation to on-bodysensor displacement in acceleration-based activity recognitionrdquo ISWC2011 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 의미와 맥락(脈絡)을 이해하라

l 빅데이터

ndash 스몰 데이터부터 단계적으로 활용역량을 구축

ndash Activity recognition method that combines small amounts of labeled data with

easily obtainable unlabeled data in a semi-supervised learning process

Fraunhofer IGD GermanyFraunhofer IGD Germany

lt자료 Stikic M Larlus D Schiele B ldquoMulti-Graph Based Semi-Supervised Learning for ActivityRecognitionrdquo ISWC 2009 Best paper nomineegt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Collaborative intelligence

ndash Evolutionary intelligence

ndash Emotional intelligence

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이상국 ldquo혼합현실 기술 연구개발 동향 및 전망rdquo 한국컴퓨터그래픽스학회 논문지 vol13no2 pp1~16 20076 gt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑥ 의미와 맥락(脈絡)을 이해하라

l 지능(intelligence) 기술에 IT의 미래가 달려있다

ndash Artificial General Intelligence at Oxford University

ndash Scenario-based selection of key AI technologies

ndash 뇌 연구결과에 대한 비판적 분석 ldquo뇌 과학의 함정rdquo

AGI2012 Oxford University

lt자료 The Fifth Conference on Artificial General Intelligence Dec 2012 Oxford Universitygt

마음을 세포로 설명할 수 없는 것은 춤을 근육으로 설명할 수 없는 것과 마찬가지다 뇌 영상은 마음을 보여주는 사진이 아니다 뇌가 의식의 자리라는 생각은 신경과학자와 고전적 인지과학자의 경솔한 확신이자 착각에 불과하다 뇌가 하는 일은 환경을다루는 일을 조정하는 것이다 우리의 경험을 경험으로 만드는 것은 뇌 자체에서 일어나는 신경 활동이 아니라 우리와 사물(환경)사이에 진행되고 있는 역동적(행위 활동) 관계다 ndash ldquo사용자 경험 디자인의 중요성rdquo 과 ldquo사물(Thing)의 중요성rdquo

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 똑같은 것은 피하라

ndash Brain Computer Interface amp Emotion Recognition

ndash Simulation Sickness

ndash Privacy concern hellip

HCI Lab The Catholic Univ of KoreaHCI Lab The Catholic Univ of Korea

lt자료 이다빛 이상국A movement imagery electroencephalogram classification algorithm utilizing supportvector generation based on a Gaussian mixture modelrdquo Medical Eng amp Physics 2012gt

VOR gain measurement

for simulation sicknessresearch

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l Sensors are easy but mind-reading is hard

ndash Smartphones platform for WeaComp

ndash AR toolkit for Augmented Reality

Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne Idiap Research Institute Centre du Parc Switzerland EPF Lausanne Nokia Research Center Lausanne

lt자료 Gokul Chittaranjan Jan Blom Daniel Gatica-Perez ldquoWhos Who with Big-Five Analyzingand Classifying Personality Traits with Smartphonesrdquo ISWC2011 Best paper nomineegt

- investigate the relationship between behavioral characteristics derived from rich smartphone data and self-reported personality traits- develop an automatic method to infer the personality type of a user based on cellphone usage using upervisedlearning

Big-Five traits and examples of adjectives

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 신사업의 시작은 lsquo변화rsquo로부터

ndash Implantable computer

ndash Cyborg Retina implant Jetman Quadcopter

Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ Toronto University Valve Technology US National Eye Institute Yves ldquoJetmanrdquo Rossy Pennsylvania Univ

lt자료 ldquoValve employee spills the hardware beans wearable computers ahoyrdquo By Sean Buckleyposted Apr 13th 2012 844PM httpwwwengadgetcomgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

l 발산과 수렴의 연속으로 역량을 키우고 미래를 설계한다

ndash 지각된 자유감(perceived freedom)

ndash Internet of things vs Compulsive hoarding vs Meaning of things

ndash 사례연구(양날의 칼)의 함정에 빠지지 말라

Catholic University of KoreaCatholic University of Korea

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

l 서비스의 딜레마를 해소하라

ndash 재미있는 사람은 자기의도대로 세상을 재구성

ndash 회귀방정식(Regression) 사용하면 후회한다(Regret)

ndash 합리적인 사고-gt표준화 가능-gt객관적인 신념(자연과학 발달)-gt미래대응전략 준비

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

⑦ 영향력과 불확실성이 큰 것으로 미래대응전략을 세워라

마리아의 결혼(라파엘로) 수태고지(레오나르도 다빈치)

소실점을 보는사람의 관점으로 변경하여 개별 사용자의기대 수준에 맞도록 서비스 표준편차를 최소화하라

lt자료 이상국ldquoRampBD 기술 전략 개론rdquo 삼성전자 신임부장 PLC 계층교육 교재 2011gt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

httpwwwbusinessinsidercomthe-end-of-the-smartphone-era-is-coming-2012-11ixzz2DfSIHW91

Ref Frazer HarrisonGetty ImagesGoogle Glass

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Microsoft

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

Patent illustration from Samsung

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue The End Of The Smartphone Era Is Coming

Human Computer Interaction Lab Catholic University of Korea

The End Of The Smartphone Era Is Coming

First off something has to Disruption is inevitable

Secondly the trend is obvious

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Epilogue

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

Human Computer Interaction Lab Catholic University of Korea

다시 생각해 볼 일이다 그 동안 너무 바빠서 여기 와 지금에만 매몰되어 있지 않았는지

재미 있게(emotional intelligence) 열어 제치고 (open innovation) 빠르거나 느리게

왕창 계속 변하는 것(three criterions of change)을 읽고 정리하는 자에게

지혜(wisdom)의 박 씨 hellip

This page was last modified on 24 January 2013 at 2354

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt

Thank you for your attention

Human Computer Interaction Lab Catholic University of Korea

Prof Sang-Goog LEE PhD

Director of HCI Lab Dept of Media Tech amp Contents

The Catholic University of Korea 연구실 02-2164-4909

Mobile 010-5279-3585 sgleecatholicackr ltJune 1982 Photo by Sang-Goog LEEgt