AlterEgo는 MIT 미디어 랩에서 개발된 착용형, 비침습적 신경 인터페이스 시스템으로, 사용자가 말하거나, 입력하거나, 외부로 보이는 움직임을 만들지 않고도 컴퓨터나 다른 사람과 소통할 수 있게 해준다. 턱과 얼굴 하부를 감싸는 곡선형 밴드 형태를 띤 이 장치는 피부 표면에서 발생하는 미세한 신경근육 신호를 감지하여 소리를 내지 않고 단어를 내부적으로 발음하는 준발성 언어(subvocalized speech)를 해석한다. 이러한 신호는 기계 학습 시스템에 의해 처리되어 텍스트로 변환되며, 이 텍스트는 장치에 통합된 골전도 헤드폰을 통해 사용자에게 다시 읽혀져 조용한 폐루프 통신 채널을 생성한다.
이 프로젝트는 MIT 미디어 랩의 대학원 연구원인 Arnav Kapur가 주도했으며, 2018년 "AlterEgo: A Personalized Wearable Silent Speech Interface"라는 논문에서 처음 공개적으로 시연되었다. 이 시스템은 기존 통신 기술의 한계(일반적으로 수동 입력이나 발성을 요구함)를 해결하기 위해 설계되었으며, 보다 자연스럽고 사적인 인간-컴퓨터 상호작용 방식을 제공한다. AlterEgo의 잠재적 응용 분야는 언어 장애가 있는 개인을 돕는 것부터 군사 작전이나 조용한 작업 공간과 같이 침묵이 요구되는 환경에서의 은밀한 통신을 가능하게 하는 것까지 다양하다.
개발 및 연구
AlterEgo 프로젝트는 인간의 인지와 지각에 원활하게 통합되는 기술을 설계하는 데 초점을 맞춘 MIT 미디어 랩의 Fluid Interfaces 그룹의 일부로 시작되었다. 2017년에 수행되고 2018년에 발표된 초기 연구는 사전 정의된 명령과 구문을 준발성하도록 요청받은 10명의 참가자를 대상으로 한 일련의 실험을 포함했다. 이 시스템은 20개 명령의 제한된 어휘에 대해 평균 단어 오류율 약 4.5%를 달성했으며, 100개 단어의 더 큰 집합에 대해서는 약 6.5%를 달성했다. 이러한 결과는 표면 근전도(sEMG)를 사용하여 언어 발성에 관여하는 근육에서 생성되는 미세한 전기 신호를 포착하는 것이 가능함을 입증했다.
하드웨어는 턱과 턱 주변 피부에 배치된 4개의 전극으로 구성되며, 사용자가 단어를 내부적으로 발음할 때 생성되는 근전 신호를 포착한다. 아날로그 신호는 증폭 및 필터링된 후 디지털화되어 스마트폰이나 노트북과 같은 페어링된 컴퓨팅 장치로 무선 전송되며, 여기서 신경망이 이를 처리한다. 개별 사용자 데이터로 훈련된 신경망은 특정 신호 패턴을 해당 단어나 구문에 매핑하는 방법을 학습하여 개인 맞춤형 보정과 시간에 따른 정확도 향상을 가능하게 한다.
기술 아키텍처
AlterEgo 시스템은 준발성 언어를 해독하기 위해 신호 처리와 기계 학습 기술의 조합을 사용한다. 원시 근전도(EMG) 신호는 먼저 노이즈와 아티팩트를 제거하기 위해 전처리된 후 개별 단어나 음소에 해당하는 창으로 분할된다. 합성곱 신경망(CNN)은 시계열 데이터에서 특징을 추출하는 데 사용되며, 그 다음 순환 신경망(RNN) 또는 트랜스포머 기반 모델이 신호 간의 시간적 의존성을 포착한다. 출력은 어휘에 대한 확률 시퀀스이며, 빔 탐색 알고리즘을 사용하여 디코딩되어 최종 텍스트를 생성한다.
AlterEgo의 주요 혁신 중 하나는 피드백을 위한 골전도 헤드폰의 사용이다. 귀를 통해 소리를 전달하는 전통적인 공기 전도 헤드폰과 달리, 골전도 트랜스듀서는 두개골과 내이를 직접 진동시켜 귀를 열린 상태로 유지한다. 이를 통해 사용자는 주변 소리를 인지하면서도 시스템의 응답을 들을 수 있어 동적 환경에서 사용하기에 적합하다. 피드백 루프는 수백 밀리초 미만의 지연 시간으로 거의 실시간으로 설계되어 유창한 대화형 상호작용을 가능하게 한다.
응용 분야 및 사용 사례
AlterEgo의 주요 동기는 다양한 맥락에서 사용할 수 있는 조용한 통신 인터페이스를 만드는 것이다. 근위축성 측삭 경화증(ALS), 뇌성 마비 또는 뇌졸중 유발 실어증과 같이 언어를 손상시키는 상태를 가진 개인의 경우, 이 장치는 종종 느리고 피곤할 수 있는 안구 추적 또는 스위치 기반 입력에 의존하는 기존의 보완 및 대체 통신(AAC) 도구에 대한 잠재적 대안을 제공한다. AlterEgo의 비침습적 특성과 이식형 뇌-컴퓨터 인터페이스에 비해 상대적으로 낮은 비용은 보조 기술로서 매력적인 옵션으로 만든다.
전문 환경에서 AlterEgo는 거래소, 도서관 또는 은밀한 작전 중과 같이 언어적 통신이 비실용적이거나 금지된 환경에서 팀원 간의 은밀한 통신을 가능하게 할 수 있다. 이 시스템은 또한 다른 사람을 방해하지 않고 AI 어시스턴트와 상호작용하는 데 사용될 수 있으며, 예를 들어 스마트폰에 메모나 질문을 조용히 받아쓰는 방식으로 사용될 수 있다. 또한 이 기술은 가상 현실과 게임에서 더 몰입감 있고 자연스러운 입력 방법을 제공할 수 있는 잠재적 응용 분야를 가지고 있다.
한계 및 과제
유망한 결과에도 불구하고 AlterEgo는 개발자들이 인정한 몇 가지 한계를 가지고 있다. 이 시스템은 각 새 사용자에 대해 훈련 단계를 요구하며, 이 기간 동안 사용자는 신경망이 개별 근육 신호 패턴을 학습할 수 있도록 일련의 보정 구문을 준발성해야 한다. 이 과정은 최대 15분이 소요될 수 있으며, 전극 배치가 변경되거나 사용자의 생리적 상태가 변하는 경우(예: 피로나 스트레스로 인해) 반복해야 할 수 있다. 어휘도 시스템이 훈련된 단어 집합으로 제한되며, 확장할 수는 있지만 어휘가 커질수록 정확도가 감소한다.
또 다른 과제는 실제 조건에서 EMG 신호의 견고성이다. 피부 수분, 전극 이동 및 외부 전기 간섭과 같은 요인은 신호 품질을 저하시켜 오류를 유발할 수 있다. 현재 프로토타입은 또한 상대적으로 부피가 크고 눈에 띄어 일상적인 사용에서 사회적 수용성을 제한할 수 있다. 연구자들은 이러한 문제를 해결하기 위해 하드웨어를 소형화하고 신호 처리 알고리즘을 개선하는 방법을 탐구하고 있다.
더 넓은 맥락 및 관련 연구
AlterEgo는 조용한 언어 인터페이스와 비침습적 뇌-컴퓨터 인터페이스에 대한 더 넓은 연구 분야의 일부이다. 다른 접근 방식에는 언어 의도와 관련된 뇌 활동을 감지하기 위해 뇌전도(EEG)를 사용하거나, 성대 운동을 모니터링하기 위해 초음파나 레이더를 사용하는 것이 포함된다. 그러나 AlterEgo와 같은 EMG 기반 시스템은 EEG보다 노이즈에 덜 민감하고 착용형 폼 팩터에 더 쉽게 통합될 수 있기 때문에 유망한 것으로 간주된다.
이 프로젝트는 또한 조용한 통신 기술의 윤리적 및 개인정보 보호 영향에 주목하게 했다. 이 장치는 사용자의 내부 생각(준발성 언어 형태로)을 잠재적으로 포착할 수 있기 때문에 동의와 데이터 보안에 대한 우려가 있다. Kapur와 그의 동료들은 시스템이 사용자가 의도적으로 준발성할 때만 활성화되고 데이터가 사용자 장치에서 로컬로 처리된다고 강조했지만, 이러한 보호 장치는 기술이 성숙함에 따라 공식화될 필요가 있을 수 있다.
수용 및 영향
AlterEgo는 2018년 공개 시연 이후 상당한 미디어 보도를 받았으며, 언론은 "마음을 읽는" 또는 "말없이 혼잣말하기"를 가능하게 할 잠재력을 강조했다. 이 프로젝트는 2019년 Fast Company 혁신 디자인 어워드 실험 부문을 포함한 여러 상을 수상했다. Kapur는 기술 개발을 계속했으며, 2020년에는 보조 및 기업 응용을 위해 장치를 상용화하기 위해 AlterEgo Technologies라는 스타트업을 공동 설립했다.
이 연구는 또한 조용한 언어 인터페이스 분야의 추가 작업에 영감을 주었으며, 다른 그룹은 다른 센서 방식이나 더 고급 딥 러닝 아키텍처를 사용한 유사한 접근 방식을 탐구하고 있다. AlterEgo는 아직 소비자 제품은 아니지만, 키보드, 터치스크린 및 음성 명령을 넘어 보다 자연스럽고 원활한 인간-컴퓨터 상호작용을 향한 중요한 단계를 나타낸다.
향후 방향
AlterEgo의 향후 버전은 정확도 향상, 어휘 확장 및 하드웨어 크기와 비용 절감에 초점을 맞출 것으로 예상된다. 연구자들은 부분 신호 패턴에서 단어를 더 잘 예측하기 위해 대규모 언어 모델을 사용하는 것을 조사하고 있으며, 이는 광범위한 사용자별 훈련의 필요성을 줄일 수 있다. 또한 가속도계나 광학 센서와 같은 다른 착용형 센서와 장치를 통합하여 EMG 신호에 추가 컨텍스트를 제공하는 데 관심이 있다.
또 다른 탐구 영역은 시스템이 사용자의 준발성 언어를 디코딩할 뿐만 아니라 골전도 헤드폰을 통해 전달되는 조용한 응답을 생성하는 양방향 통신을 위한 AlterEgo의 사용이다. 이는 각자 자신의 장치를 착용한 두 명 이상의 사용자 간에 들리는 소리 없이 완전히 조용한 대화를 가능하게 할 수 있다. 개발자들은 또한 준발성 명령을 통해 로봇 보철이나 스마트 홈 시스템과 같은 외부 장치를 제어하는 기술 사용 가능성에 대해 논의했다.
2024년 현재 AlterEgo는 연구 프로토타입으로 남아 있으며 발표된 상용 출시 날짜는 없다. 그러나 기본 원리와 입증된 기능은 인간-컴퓨터 상호작용 분야에 주목할 만한 기여로 자리 잡았으며, 그 개발은 연구자와 업계 관찰자 모두에 의해 계속 주목받고 있다.
같이 보기
참고 문헌
- Kapur, A., Kapur, S., & Maes, P. (2018). AlterEgo: A Personalized Wearable Silent Speech Interface. In 23rd International Conference on Intelligent User Interfaces (IUI '18).
- MIT Media Lab. (2018). AlterEgo: Silent Speech Interface. Project page.
- Fast Company. (2019). Innovation by Design Awards.
외부 링크
- AlterEgo 프로젝트 페이지 - MIT 미디어 랩 (참고: 외부 링크는 지침에 따라 최종 출력에 포함되지 않지만, 이는 원본 기사 맥락의 자리 표시자입니다.)