2013. 10. 17. ( 제 197 호 ) UI 의미래, 뇌 - 컴퓨터인터페이스 (BCI) 목차 1. 뇌-컴퓨터인터페이스에주목 1 2. 뇌-컴퓨터인터페이스응용분야 4 3. 시사점 10 작성 : 정동영수석연구원 (3780-8221) ksiwss98@samsung.com
요약 두뇌 ( 뇌파 ) 와컴퓨터를직접연결해기기를제어하는뇌-컴퓨터인터페이스 (Brain Computer Interface) 가차세대기술로주목받고있다. 1973년美 UCLA 연구팀의비달 (Vidal) 이처음개념을언급한뇌-컴퓨터인터페이스는 2000년대중반까지는연구개발및시험적용단계에머물러있었는데, 최근헤드셋형태의뇌파측정장치가출시되면서일부실용화되고있다. 뇌-컴퓨터인터페이스는향후여러산업과의연계를통해신체기능대체, 편의성제고, 엔터테인먼트등의부가가치를만들어낼전망이다. 현재뇌파제어기술을활용해휠체어나로봇팔 ( 인공의수 ) 을조종하는연구가진행중인데, 향후산업현장등에서사고를당해사지 ( 四肢 ) 를사용할수없게된환자에게일상생활을가능케하고, 재활에도움을줄것으로예상된다. 또한휴대기기나웨어러블기기의경우사이클링, 요리등양손을사용해야만하는환경에서는터치 동작인식보다뇌파인식이효과적이고더큰편리함을제공할것이다. 오락분야에서는뇌-컴퓨터인터페이스기술을활용하여집중력과몰입도를높이는게임이출시되고있으며, 영화에서는감상하는사람의의지에따라이야기의흐름이바뀌는콘텐츠도현실화되고있다. 영국의영화스튜디오 Treite Labs은 2011년, 영화를시청하는관객의뇌파를분석해그반응에따라스토리가바뀌는인터랙티브영상 < 파라노말마인드 > 를제작했다. 한편, 뇌-컴퓨터인터페이스기술의미래분야로생각이나의도를다른사람의뇌로전달하는 ' 뇌-뇌인터페이스 ' 기술이연구되고있다. 美 DARPA는말이아닌뇌파로상대에게말하고싶은내용을전달하는 ' 사일런트토크 ' 프로젝트를추진중인데, 성공할경우전장 ( 戰場 ) 과같은곳에서발성에의한대화보다명령을정확히전달할수있을것으로예상된다. 뇌-컴퓨터인터페이스를포함한뇌과학기술은아직까지는초기단계이며오랜연구기간과예산이필요하지만당장상용화하기힘든분야이므로국가차원에서기초 협력연구를주도하고긴안목으로투자할필요가있다. 또한, 뇌과학은인지과학, 의공학, 전기 / 전자공학등다양한분야의학문이연계되어있으므로학제적융합연구가필요하며, 분야간네트워크및공동연구를활성화해야한다. 한편, 뇌과학의경영및산업활용은아직까지초기단계이므로기업들역시마케팅, 신기술개발등에활용해경쟁력차이를만들어낼필요가있다.
1 1. 뇌 - 컴퓨터인터페이스 (BCI 1) ) 에주목 뇌파로사용자의의도를파악 최근터치스크린이음성인식과동작인식으로진화하는가운데신체를사용하지않고명령하는 BCI가차세대기술로서주목 - 두뇌 ( 뇌파 ) 와컴퓨터를직접연결해기기를제어함으로써기존인터페이스가가진기술적제약을보완ㆍ음성 / 동작인식의경우명령어세트 ( 특정동작들, 인식가능한음성키워드등 ) 를사용자가기억해야하는인지비용이발생ㆍ두가지이상명령의동시수행, 수행의템포조절에뇌파인식이유리 - 1973년美 UCLA 연구팀의비달 (Vidal) 2) 이처음개념을언급했으며, MIT Technology Review는 2001년 ' 미래를바꿀 10 大기술 ' 에 BCI를선정 3) ㆍIBM은 2011년, '5년내에우리의삶의방식을바꿀 5가지기술 ' 중첫번째기술로 BCI를지목 4) BCI 시스템의실행과정 뇌파인식 디지털변환 신호처리특징추출, 변환알고리즘 작동명령 자료 : Wolpaw, J. R. et al (2002). T. M. Brain-computer interfaces for communication and control. Clinical Neurophysiology, 113. 1) Brain Computer Interface, BMI(Brain Machine Interface) 라고도불림 2) Vidal, J. J. (1973). Toward direct brain-computer communication. Annual Review Biophysics and Bioengineering, 2. 3) 10 Emerging Technologies That Will Change the World. (2001). MIT Technology Review, February. 4) IBM's "5 in 5" Predicts the Launch of Mind-Reading Devices by 2017. (2011.12.20.). DailyTech.
2 뇌과학의역사, 연구분야, 선진국연구동향 뇌에대한연구는고대부터시작되었으며, 1900 년대부터활성화 - 고대이집트에서는두개골에구멍을뚫어두통이나정신질환치료를시도ㆍ1800년대에이르러서야인간의뇌가뉴런 * 으로구성되어있고, 뇌의영역마다각각의기능이존재한다는사실이규명 - 1920년대들어뇌전도 (EEG ** ) 등뇌기능측정기술이도입되었으며, 1990년대부터美, 유럽, 日등이국가차원에서뇌연구에적극투자 뇌과학은기초과학, 의학, 공학, 심리학등여러분야가연관되어있으며, 뇌신경생물학, 뇌질환, 뇌인지, 뇌공학등 4가지분야에서연구가진행중 - 뇌신경생물학 : 뇌신경계의형성및기능에대한생물학적운영원리를규명ㆍ응용 : 신경세포분열 분화의규명, 유전자조작형질전환동물생산등 - 뇌질환 : 뇌구조및기능상결함에기인한신체적 / 정신적질환과장애에대한원인규명, 진단, 치료, 예방연구 ' ㆍ응용 : 경련성 / 정신성뇌질환원인규명및조절, 뇌발달장애연구등 - 뇌인지 : 감각, 지각, 학습, 기억, 의사결정및정서발달의뇌신경기능연구ㆍ응용 : 스트레스조절, 생체주기이해, 고객의심리파악등 - 뇌공학 : 운동기능, 감각등에대한뇌신호처리, 모델링및공학적구현ㆍ응용 : 뇌모방형정보통신기술, 뇌-컴퓨터 ( 또는기계 ) 인터페이스등 선진국정부는뇌질환치료, 혁신기술개발等을위해뇌과학투자를가속화 - 미국은국립보건원산하의 16개연구기관이결성한뇌연구연합체 Blueprint for neuroscience research 를중심으로연구추진ㆍ2013년오바마대통령은뇌지도를작성하는 ' 브레인프로젝트 ' 를차세대 과제로선정 - EU는 2013년, 유럽전역의 86개연구기관이참여해뇌과학을공동으로연구하는 ' 휴먼브레인프로젝트 ' 를시작 ( 향후 10년간 12억유로투자 ) - 일본은과학기술청 (STA) 주도하에 20년간 (1997~2016년) 2조엔을투입하는뇌과학프로젝트 (Brain Science Project) 를추진중 * 뉴런 : 뇌를구성하는신경계의단위로, 외부로부터자극을받으면전기가발생하여다른세포에정보를전달 ** ElectroEncephaloGraphy: 뇌의일부영역이활성화되면발생하는전기신호를두피를통해측정하는장치 ( 자료 : 한일영 (2010). " 뇌과학과경영의만남 "(SERI 경영노트제39호 ). 삼성경제연구소.; 이천무 (2011.9.). " 뇌과학연구동향및시사점 ". 한국과학기술평가원.)
3 신체동작을의도하거나외부자극에뇌가반응할경우뇌일부영역의 뇌파 5) 가변화하는데, 이를측정해의도및상태를분석 - 신체근육의움직임을주로관장하는 전두엽의신경세포활동을전극으로 전두엽 두정엽 측정한후신호패턴을추출ㆍ신체일부를움직일때나타나는뇌파변화의종류, 패턴등을비교 분석하여명령이나의도를파악 측두엽 소뇌 후두엽 자료 : 위키피디아 <http://en.m.wikipedia.org/wiki/ File:Lobes_of_the_brain_NL.svg> - 뇌파측정방법은두개골을뚫고뇌피질에서직접신호를측정하는 침습식과두피외부에서뇌파를측정하는非침습식 2 가지 ㆍ침습식은정확한측정이가능하나, 외과적시술이필요하며관리의 어려움이있어아직연구실단위의 R&D 가진행중 ㆍ최근헤드셋형태의非침습식뇌파측정장치가출시되면서 (2009 년 ), 뇌파를해석해기기를조작하는 BCI 기술에대한연구와실용화가진전 두뇌활동시발생하는전기신호를측정하는헤드셋 - 美뉴로스카이社의 MindWave (80달러) - α파, β파를측정해집중, 편안함, 졸림등의감정상태를파악 - 호주이모티브社의 EPOC (299달러) - 16개센서로뇌파측정 ( 밀기, 들어올리기등에대한감지도가능 ) ( 자료 : 뉴로스카이홈페이지 <http://store.neurosky.com/>; 이모티브홈페이지 <http://www.emotiv.com/store/>) BCI 기술이향후다양한분야에서제공할효용및파급효과를주목할필요 5) 뇌활동에의해발생하는미세전류로이를관찰하여인간의심리변화나뇌질환상태를분석
4 - 신체동작또는음성활용이불가능한사용자가의지대로동작을 할수있게함으로써삶의질을향상 - 사이클링, 요리등다른일을수행하면서 IT 기기를조작할수있게 하는등편의성을제고 - 게임, 영화등의몰입도를증가시키며, 전장 ( 戰場 ) 에서는정확한정보와명령을전달 BCI의효용과응용분야 효용 / 부가가치내용응용분야 신체기능보조 / 대체 편의성제고 신체를사용하지않고원하는동작을기계로수행 다른일을수행하면서기기를조작 의료, 재활, 헬스케어 IT 기기, 자전거, 자동차 엔터테인먼트 정보 / 지식전달, 교류 게임, 영화등의집중력과몰입도를제고 대화보다정확한명령전달, 통제 게임, 영화 국방, 훈련, 교육 2. 뇌 - 컴퓨터인터페이스응용분야 1 신체기능보조 / 대체 : 의료, 재활, 헬스케어 사지 ( 四肢 ) 를사용할수없게된환자에게일상생활을가능케하며, 재활에도움을줄수있는의료 재활의미래연구분야 - 2001 2011 년사이 5,694 명의미군이팔이나다리를잃었는데, 이들의 재활필요성이커지면서美 DARPA 6) 도 BCI 기술개발에적극참여 뇌파제어기술을활용해휠체어나로봇팔을조종하는연구가진행중 - 척추손상등을입은환자의뇌신경활성도를측정해기계를제어하며, 기기의간단한조작뿐아니라원하는동작을수행하는단계까지활용 6) Defense Advanced Research Projects Agency: 美국방부산하의방위고등연구계획국
5 - 스위스로잔工大의톰칼슨박사는 2011 년말, 사용자가원하는방향으로 움직이는전동휠체어시스템을개발 7) ㆍ운동을관장하는뇌부분의두피에연결된센서가뇌파를감지해머릿속으로 ' 왼쪽으로 ' 또는 ' 오른쪽으로움직인다 ' 고상상하면전동휠체어가원하는방향으로이동 자료 : Technovelgy 웹사이트 <http://www.technovelgy.com/ ct/science-fiction-news.asp? NewsNum=3005> - 뇌에이식한칩을통해로봇팔의동작뿐아니라손가락의움직임까지정교하게조종가능케하는연구도진행ㆍ인공손에촉각센서를구현할경우손에쥔물체의촉감을다시뇌로전달해촉감을느끼면서조작할수있는연구도가시화될전망 로봇팔을조종해원하는동작을수행 美피츠버그의대와 UPMC * 연구팀은뇌에 6.4cm2의기기를이식, 이와연결된로봇의동작제어에성공 - 사지마비환자인잔슈어만여사는로봇팔을컨트롤해초콜릿을베어먹음 * University of Pittsburgh Medical Center ( 자료 : Woman With Quadriplegia Feeds Herself Chocolate Using Mind-Controlled Robot Arm. (2012.12.17.). ScienceDaily.) 美 DARPA는몸에이식한로봇팔을뇌파로조종해종이컵을잡거나알루미늄캔을열수있는첨단의수시스템을개발 - 초기에는뇌에이식된칩과전선으로연결했으나, 최근에는무선송신으로진화 ( 자료 : DARPA closer to brain-controlled prosthesis. (2013.3.20.). MarineTimes.) 7) Carlson, T. et al. (2011). Vision-Based Shared Control for a BCI Wheelchair. International Journal of Bioelectromagnetism, 13(1).
6 2 편의성제고 : IT 기기, 자전거, 자동차 운동중이거나다른일을수행하는중에 IT 기기나차량을제어해야하는 경우 BCI 가편의를제고할수있어실용화가기대되는분야 - 휴대기기나웨어러블기기의경우사이클링, 요리등양손을사용해야만하는환경에서는터치 / 동작인식보다뇌파인식이효과적ㆍ수동으로조작하는부분을대체할수있어조작오류를방지하며, 조종자의의도나상태를파악하여 ( 사각 ( 死角 ) 등에 ) 장애물이있거나졸음이오는경우사전에경고하는등예방역할도기대 스마트폰등 IT 기기에서는최근뇌파로조작하거나앱을구동하는 기술을개발중 - 삼성전자는美텍사스大의루즈베자파리 교수와생각만으로 ' 갤럭시노트 ' 를 작동하는기술을개발중 8) ㆍ전원의온 / 오프뿐아니라앱실행, 연락처검색, 음악선곡을수행하며 정확도는 80~95% 수준 자료 : MIT Technology Review 홈페이지 <http://www.technologyreview.com /news/513861/samsung-demos-a-tab let-controlled-by-your-brain/> - 인텔은뇌속에이식한칩을이용해생각으로컴퓨터나휴대기기를 작동하는뇌파컴퓨터기술을개발중 9) - 中하이얼은 IFA( 국제가전전시회 ) 2011 에서리모컨대신뇌파감지 헤드셋으로조작하는차세대스마트 TV 의시제품을공개 8) Samsung Demos a Tablet Controlled by Your Brain. (2013.4.19.). MIT Technology Review. 9) Intel: Chips in brains will control computers by 2020. (2009.11.19.). Computerworld.
7 자전거나자동차운전자의의도를파악해기기속도, 상태, 방향전환 등을제어하는기술개발이진행 - 도요타는 2011 년 8 월, 美팔리사이클社와 뇌파로자동변속되는콘셉트자전거를 공동개발 10) ㆍ운전자가기어변속을생각하면뇌파, 심박수, 페달회전수等을고려해자동으로속도가변하여운전자는운동에집중가능ㆍ관련기술을승용차에도적용할계획 자료 : Global Graphica 홈페이지 <http://globalgraphica.com/ 2011/08/05/toyotas-prius-xparlee-concept-bike/> - 닛산은운전자의뇌파와눈의움직임을측정함으로써방향전환, 가속등운전자의의도를사전에파악하고자동조종하는기술을개발중ㆍ차량의운전환경감지시스템이운전자의뇌파분석시스템과연동해장애물을감지하고, 차량의속도, 위치를최적상태로제어ㆍ스위스로잔工大연구팀과함께 2016년실용화를목표로준비 3 엔터테인먼트 : 게임, 영화 게임은안전성문제가비교적적기때문에 BCI 의실용화가앞선분야 - 게임개발업체들이美뉴로스카이등의뇌파인식헤드셋을게임 캐릭터조종에활용 10) Toyota Prius x Parlee Concept Bike. (2011.8.5.). Complexrides.
8 ㆍ美마텔의 ' 마인드플렉스 ' 게임에서는헤드셋을쓰고집중하면뇌파가전달되어본체의팬이회전하고볼이공중에떠오를뿐아니라상하로움직여장애물코스를통과 ㆍ호주이모티브社는自社의 EPOC 헤드셋을쓰고뇌파를조종하면게임속캐릭터가불덩어리를쏘는뇌파조종게임 'Arena' 를출시 자료 : Gizmodo 홈페이지 <http://gizmodo.com/5396971/ the-mindflex-brainwave-gamegives-me-a-headache> - 뇌파측정센서를부착한환자가집중할수록화살이과녁중앙을맞추는형태의활쏘기게임은아동의집중력결핍치료에활용 영화분야에서는감상하는사람의의지에따라이야기의흐름이바뀌는콘텐츠도개발 - 英영화스튜디오 'Treite Labs' 은 2011년, 뉴로스카이의마인드웨이브헤드셋과 BCI 기술을활용한인터랙티브영상을제작 인터랙티브영화 < 파라노말마인드 (Paranormal Mynd)> 영화를시청하는관객의뇌파를분석해그반응에따라스토리가바뀌는형태 - 영화속출연자에게악령이빙의될때관객들의뇌파가일정량이상높아지면악령이물러나고, 일정수준에못미칠경우악령이관객을한명씩죽이는스토리 WP.PL 홈페이지 <http://tech.wp.pl> fxclub 홈페이지 <http://forum.fxclub.org> ( 자료 : NeuroSky shows off MyndPlay, we control movies with our brainwaves. (2011.3.4.). Engadget.)
9 4 정보 / 지식전달, 교류 : 국방, 훈련, 교육 생각이나의도를다른사람의뇌로전달하는뇌-뇌인터페이스는 BCI 기술이지향하는차세대분야 - 뇌-컴퓨터인터페이스 (BCI) 와컴퓨터로변환된뇌파신호를상대방뇌의운동피질영역에전달하는컴퓨터-뇌인터페이스 (CBI) 로시스템을구성 - 미래학자레이커즈와일은 " 미래에는뇌스캐닝 11) 을통해사람간에지식과노하우를이식하는것도가능해질것 " 으로전망 최근명령이나운동신호를다른사람의뇌로전달하는연구가진행 - 美 DARPA는말이아닌뇌파로상대에게말하고싶은내용을전달하는 'Silent Talk' 프로젝트를추진중 12) ㆍ ' 말이되기전상태 의신호를검출해타인의뇌에전달하는방식으로, 성공할경우전장에서발성에의한대화보다명령을정확히전달가능 - 2013년, 한사람의뇌파를이용해다른사람의신체를제어하는사람간뇌인터페이스실험이성공 ㆍ美워싱턴주립大라제시라오교수팀은한사람의뇌파를다른사람에게보내그의손가락을움직이게하였음 13) 자료 : Researcher Controls Colleague's Motions in First Human Brain-To-Brain Interface. (2013.8.27.). ScienceDaily. ㆍ쥐를이용하여뇌사이에감각 운동신호를공유한실험은이미 행해져왔으나사람간뇌 - 뇌인터페이스성공은최초 11) 뇌에저장된정보를읽어들이는것 12) Pentagon Preps Soldier Telepathy Push. (2009.5.14.). Wired. 13) Researcher Controls Colleague's Motions in First Human Brain-To-Brain Interface. (2013.8.17.).ScienceDaily.
10 3. 시사점 장기적관점과학제간융합연구가필요 뇌연구는많은예산과오랜시간이소요되지만당장상용화하기는힘든 분야이므로, 국가차원에서기초 협력연구를주도하고장기적으로 투자할필요 - 美, 日, 유럽등은 BCI를포함한뇌과학연구를국가중점기술로선정하고 10 20년장기프로젝트로추진중이며공동연구가활성화ㆍ한국에서도정부주도형뇌과학연구가추진되고있으나 14), 시너지효과를극대화하기위한네트워크및공동연구를활성화할필요 뇌공학은물론, 인지과학, 의공학, 전기 / 전자공학, 기계공학등다양한 분야를아우르는학제간융합연구를적극유도 - 현재 BCI 기술은뇌의집중 이완상태를게임에반영하는수준이며, 전후좌우움직임제어등의실용화를위해서는학제간연구가필요ㆍ美국립보건원은 2006년학제간통합연구를지원하는 FIBR 15) 프로그램 3개과제중하나로 ' 복잡한행동을제어하는뇌기능 ' 을선정 UI 뿐아니라혁신기술개발, 제품 / 서비스경쟁력제고에활용 BCI 를포함한뇌과학의활용은아직까지초기단계이므로경영, 신기술 개발등에활용해경쟁력의차이를만들어낼필요 14) 1998 년 뇌연구촉진법 이제정되면서 2007 년까지 '1 차뇌연구촉진기본계획 ' 에 3,096 억원을투자했으며, 2008~2017 년 2 차계획에 1.5 조원을투자할계획이지만美 日의 10 분의 1 에도못미치는수준 15) Frontiers in Integrative Biological Research: 학제간통합연구를통해未해결연구에접근하는혁신적인연구프로그램으로, 도전적인분야에 5 년간 1,400 만달러를지원하며, 美과학재단에서주관
11 - 고객의인지적특성을이해하고새로운사용자경험을발굴해제품및서비스의경쟁력을제고ㆍP&G, 코카콜라, 유니레버, 네슬레, 나이키, LVMH 등글로벌기업들이마케팅에뇌과학을적극활용 16) - 뇌질환치료 17) 는물론혁신기술개발에서도뇌과학을활용ㆍIBM은뇌의신경세포와같이데이터의저장과계산을동일한칩에서처리하는반도체를개발중이며, 구글은컴퓨터가인간의뇌처럼인지, 학습, 추론하는인공지능시스템인 ' 딥러닝 ' 기술을개발중 BCI 관련기술의최근동향을지속적으로모니터링하는한편, 전문기업과의제휴등을적극추진 - 뇌파인식, 오감인식등전문분야는관련기업과의전략적제휴를 강화함으로써핵심요소기술을확보 ㆍ IBM 은 BCI 활용을위해이모티브社와제휴 (2008 년 ) - TV 해상도의효용측정이나게임피로도의정량화등뇌파인식의 새로운응용분야도개척 SERI 16) Haq, A. (2007.10.8.). This Is Your Brain on Advertising. BusinessWeek. 17) 뇌질환은심장질환에이어전세계사망원인 2 위 ( 전체원인의 11%) 로치명적