투명 햅틱 디스플레이로 가상현실에 촉감을 입히다

- 압력 센서와 결합해 사용자별 일관된 가상 촉각을 구현하는 기술 개발 -

- 촉각 구현 기술로 털부터 유리까지 다양한 실제 질감 완벽 구현 -

모든 사용자가 동일한 촉감을 경험할 수 있는 디스플레이용 가상 촉각 구현 기술이 나왔다. 기초과학연구원(IBS, 원장 노도영) 나노의학 연구단 박장웅 연구위원(연세대 신소재공학과 교수) 연구팀은 세브란스병원 신경외과 정현호 교수 연구팀과 공동으로 압력 센서를 전기 촉각 디바이스에 결합해 디스플레이에서 일관된 촉각을 구현하고, 뇌파를 기반으로 촉각 정보를 분류해 9가지 이상의 다양한 촉감을 구현하는 기술을 개발했다.

가상현실(VR), 증강현실(AR) 등의 기술에서 사용자와 기술 간 밀접한 상호작용이 중요해지면서, 가상 세계와 현실을 연결해 몰입감 있는 사용자 경험을 제공하는 가상 촉각 구현 기술이 등장했다. 그중 물리적 자극을 사용하는 진동 촉각 기술은 진동 액추에이터가 불투명해 디스플레이 위로 배열되다 보니 촉각을 직접 전달할 수 없었다. 이에 전기 자극을 이용해 인공적으로 촉각을 만드는 전기 촉각 기술이 차세대 기술로 주목받고 있다.

우리가 촉각을 느낄 때 피부에 분포된 촉각 감각 세포는 촉각 정보를 전기 신호로 변환해 뇌에 전달한다. 이 촉각 정보를 담은 전기 신호를 인위적으로 발생시키는 것이 전기 촉각 기술의 원리이다. 하지만 기존 전기 촉각 디바이스는 저항이 높아 많은 전류가 필요하다 보니 안전성에 문제가 있었다. 게다가 사용자마다 디바이스를 누르는 힘이 달라 접촉 상태가 불안정해지면, 같은 전기 자극에도 느껴지는 촉감이 달라질 수 있어 일정한 촉감을 구현하기 어려웠다. 또한, 촉각이라는 주관적인 정보를 표준화할 수 없어 상용화에 한계가 있었다.

이를 해결하고자 연구진은 압력 보정이 가능한 ‘투명 간섭 전기 촉각 디바이스’를 제작했다. 디바이스는 전기 촉각을 구현하는 전극 부분과 손가락의 압력을 보정하는 압력 센서로 이뤄졌다. 우선, 투명도를 유지하고 전극의 저항을 낮추기 위해 인듐-주석 산화물1) 기반의 전극 위에 백금 나노입자를 도금했다. 그 결과, 전극의 저항을 5배 이상 낮춰 안전성을 확보했고, 약 90%의 높은 투과율을 보였다. 또한, 압력 센서를 통합시켜 손가락의 압력을 측정 및 보정해 일관된 전기 촉각을 구현해 냈다.

더 나아가 특정 촉감을 실제로 구현하고자 촉각을 표준화할 수 있는 체성감각 유발전위2)(Somatosensory Evoked Potential) 검사를 진행했다. 전기 촉각의 전류 밀도와 진동수가 변화할 때 사용자의 뇌 신호가 어떻게 반응하는지를 분석해 촉각을 분류할 수 있었다. 결과적으로 연구진은 털부터 유리까지 총 9가지 이상의 다양한 전기 촉각을 구현해 냈다.

이번 연구의 핵심은 전기 촉각 기술에 간섭 현상을 도입했다는 점이다. 간섭 현상은 두 개의 전자기장이 중첩됐을 때 진동수와 진폭이 변화하는 현상인데, 기존보다 30% 낮은 전류만으로도 동일한 촉감 강도를 구현했고 자극 위치를 더 세밀하게 제어해 촉각 해상도를 32% 향상했다. 이는 테슬라 슈트(Teslasuit)를 포함한 기존 전기 촉각 기술 중 최고 수준의 촉각 해상도로, 디스플레이 분야뿐만 아니라 VR, AR 기술 혁신으로의 가능성을 열었다. 실제로, 개발된 기술은 스마트폰 디스플레이와 결합돼 동영상 속 물체에 대한 가상 촉각을 구현하는 데도 성공했다.

연구를 이끈 박장웅 연구위원은 “전기 촉각 기술을 통해 디스플레이의 시각 정보와 일치하는 촉각 정보를 통합해 사용자에게 전달할 수 있다”며, “이번 연구는 간섭 자극을 기반으로 한 전기 촉각 기술이 다양한 AR, VR, 스마트 기기 등에서 사용자와 기기 간 상호작용을 더욱 활성화하는 데 기여할 것으로 기대된다”고 밝혔다.

이번 연구결과는 국제학술지 ‘네이처 커뮤니케이션즈(Nature Communications)’에 9월 3일(한국시간) 게재됐다.



그림 설명

[그림 1] 차세대 전기 촉각 구현 기술[그림 1] 차세대 전기 촉각 구현 기술
디지털 미디어에서 시청각을 넘어 다양한 감각을 재현하기 위해 사용되는 가상 촉각 구현 기술. VR, AR, 여러 스마트 기기와 차량용 인터페이스까지 다양한 디스플레이와 대응돼 현실감을 상승시키는 것을 목적으로 한다.
(Image from: CIRRUS LOGIC)


[그림 2] 압력에 따른 촉각 변화[그림 2] 압력에 따른 촉각 변화
압력에 따라 다르게 느껴지는 전기 촉각 기술. 손가락 압력이 강해질수록 접촉면이 넓어지고 수용체와의 거리(d1→d2)가 좁아져, 같은 자극에도 느끼는 강도가 다를 수 있어 기존 전기 촉각 기술은 일관된 촉각 정보를 전달하기 어려웠다.


[그림 3] 압력 보정이 가능한 투명 간섭 전기 촉각 디바이스[그림 3] 압력 보정이 가능한 투명 간섭 전기 촉각 디바이스
압력 보정이 가능한 투명 간섭 전기 촉각 디바이스의 실제 사진. 모두 투명한 재료로 구성돼 약 90%의 투과율을 가져 디스플레이에 적용이 가능하다.


[그림 4] 압력 보정을 통한 일관된 전기 촉각 구현
[그림 4] 압력 보정을 통한 일관된 전기 촉각 구현
압력 보정이 됐을 때와 되지 않았을 때 전류 밀도에 따른 전기 촉각 강도의 변화. 압력 보정이 되지 않았을 때는 사용자마다 느껴지는 촉각의 경향성이 없으나, 압력이 같게 보정될 때는 촉각의 변화가 일관성 있게 나타났다. 손가락 압력이 강할 때는 낮은 전류에도 높은 강도의 촉각을 느낀다는 것을 확인할 수 있다.


[그림 5] 디스플레이와 통합된 디바이스 응용 방안[그림 5] 디스플레이와 통합된 디바이스 응용 방안
투명 디스플레이와 디바이스가 통합돼 동영상 속 물체에 대한 촉각 정보 전달. 디바이스가 작동하면 압력 센싱과 동시에 동영상에 맞는 촉각 정보가 전달되고, 사용자는 눈을 가린 상태로도 손끝에서 구현된 가상 전기 촉각을 통해 공이 굴러가는 것을 인지할 수 있다.


[그림 6] 간섭 촉각 전기 자극으로 인한 고해상도 촉각 구현
[그림 6] 간섭 촉각 전기 자극으로 인한 고해상도 촉각 구현
(위) 전류와 전류를 간섭시켜 생성된 간섭파(Interference wave)를 통한 전기 촉각 기술 원리 및 자극 위치. 간섭 자극을 통해 진폭이 낮은 전류를 진폭이 높은 전기장으로 생성해 낼 수 있으며, 전극이 없는 위치에서도 자극할 수 있다.
(아래) 전기 촉각 디바이스 배열로 구현할 수 있는 고해상도의 불꽃 모양 구현 방식. 간섭 자극과 일반 자극을 선택적으로 배열해 불꽃과 같은 복잡한 모양도 손끝에서 구현할 수 있다.


1) 인듐-주석 산화물: 산화 인듐과 산화주석을 혼합해 만들어진 재료. 높은 전기전도와 광학적 투명성을 동시에 가져 디스플레이용 투명전극으로 활용된다.

2) 체성감각 유발전위: 손이나 발에 자극이 가해졌을 때 활성화된 체성감각에 의해 뇌의 감각피질에서 발생하는 전기적 신호