4. 인터페이스 평가요소
직감성 : 사용 정보를 직감적으로 아는 정도
제약성 : 물리, 문화, 개념적인 제약을 나타내어 유저가 주저 없이 사용할 수 있는 정도
개념 예측성 : 행위의 결과를 예측하여 그것을 설명할 수 있는 정도
사상(mapping)성 : 제어(control)와 그 효과의 관련성
시각화 능력 : 유저에 대해 시스템의 개념과 동작을 이미지화 시켜주는 능력
제시능력 : 행위(action)의 결과를 유저에게 제공하여 주는 정도
6. 뇌파 인식 생체 신호 중의 하나인 뇌파는
안구 인식 졸음이나 긴장 등의 심리적인 상태 및
음성 인식 눈이나 손, 발의 움직임 등 물리적인
신체 반응에 대한 정보를 내포하고
있으므로, 사람이 느끼는 피로감을
정량적으로 분석하는 방법으로 사용될
수 있다(Cavallaroet al., 2010).
동작 인식
촉각 인식
7. Multimodal 리서치1
뇌파 인식
1. 뇌파 응용 기술
- 침습형(Invasive) : 머릿속에 센서칩을 장착
- 비침습형(Non-invasive) : 외부에서 뇌파 등을 측정
2. 관련 회사
호주, Emotive Systems사 : 헤드셋 형태의 인터페이스로
‘Emotive EPOC’을 개발하고 게임 인터페이스, 뇌파를
분석하는 16개의 센서를 통해 30여 가지의 의도 및 감정
인식
미국, 사이버키네틱스사 :전신마비 환자의 머리에 센서칩을
장착하여 TV나 컴퓨터를 조작, 100개의 미세 전극으로
구성된 센서칩이 뇌활동의 변화를 포착해 컴퓨터에 전
송하면, 이를 분석하여 환자의 의도 판별
뇌파를 이용한 오케스트라 연주 손과 발 동작을 생각할 때 다르게 나타나는 뇌의 전류 변화,
뇌파의 진동 폭을 측정하고 작동하는 휠체어이다.
8. 뇌파 인식
안구 인식
음성 인식 컴퓨터가 음향학적 신호 (acoustic
speech signal) 를 텍스트로
mapping 시키는 과정이다. 즉
일반적으로 마이크나 전화를 통하여
얻어진 음향학적 신호를 단어나 단어
집합 또는 문장으로 변환하는 과정을
동작 인식 말한다. 인식된 결과는 명령이나
제어, 데이터 입력, 문서 준비 등의
응용 분야에서 최종 결과로 사용될
수 있으며, 음성이해와 같은 분야에는
언어 처리과정의 입력으로 사용될 수
있다
촉각 인식
9. Multimodal 리서치1
음성 인식
음성인식을 위해서 불특정 다수의 화자로부터의 다양한 발음특성을 모델링하는 작업이 필요하다.
2000년부터 2006년 사이 대화체 음성인식 기술과 오디오와 영상이 결합된 멀티모달 방식이
적용되기 시작하였다. 중요한 정보를 검출, 추출, 요약하는 기술이 개발되었으며 2007년 이후,
유비쿼터스 환경에서 방송뉴스, 미팅, 강의, 발표, 회의 기록, 재판 기록, 음성 메일등에 적용하기
위해 음성으로 정보 전사, 이해, 요약이 가능한 연구가 이루어졌다. 즉, 정보서비스를 액세스하기
위한 대화시스템으로써 음성인지 인터페이스를 사용한다.
음성을 이용한 페인팅
10. 뇌파 인식
안구 인식
음성 인식
동작 인식
촉각 인식 멀티터치는 터치스크린, 터치패드,
터치테이블 등에서 여러 개의 터치
포인트를 동시에 인식, 처리하는
기술이다.
단 하나의 터치 포인트만 인식되던
기존의 터치센서보다 더 직관적이고
자연스러운 조작이 가능해진다.
멀티 터치를 구현하는 방식은
capacitive, resistive, optical,
optical array, FTIR 5가지 방식이다.
11. Multimodal 리서치1
촉각 인식
1. capacitive(커패시티브)방식 2. resistive(저항식)방식 3. OmniTouch방식
capacitive은 이미 아이폰, 갤럭시s를 비롯한 많은 resistive는 초기 터치폰에 많이 사용되었으며, 옴 니터치(OmniTouch)는 어깨에 착용 가능한
스마트폰에서 사용되고 있는 대표적인 멀티터치 터치스크린을 눌렀을 때 평소에는 분리되어 있던 위, 웨어러블 프로젝터 시스템으로써 단거리에서 어떤
방식이다. 터치스크린의 표면 아래에 콘덴서의 아래 저항막이 서로 접촉하여 저항 값이 변하게되어 표면이든 터치스크린을 만들 수 있다. 시스템
양극으로 사용될 ITO극의 패턴을 만들고 교류전압을 전류의 흐름이 변하게되고, 따라서 접촉이 구성은 심도감지 카메라와 레이저기반 피코 (Pico)
넣어서 지속적으로 콘덴서의 전류를 흐르게 하는데, 감지되어지는 방식이다. 장점은 다른 방식들에 비해 카메라로 이루어져있다. 심도감지 카메라는
이때 사람의 손가락이 터치스크린에 닿으면 근처 저렴하며, 어떤 물체의 접촉도 감지 할 수 있다는 마이크로포스프사의 키넥(Kinect)과 비슷한
콘덴서의 정전용량 값이 변하여 콘덴서에 흐르는 점이다. 단점은 감도가 80-85%로 다른 방식에 비해 시스템으로 사용자의 손가락을 깊이를 측정하는
전류가 변하게 되고, 이와 같은 전류 변화를 통해 낮으며, 감지할 수 있는 점 또한 2점으로 제한된다는 방식으로 손가락 움직임을 트래킹하고, 피코카메라를
접촉을 감지하게 된다. 장점은 표면에 사용가능한 점이다. 통해 어떤 표면에서든 레이저 기반 모바일
유리의 제한이 없으며, 감도가 85-90%로 뛰어나다. 프로젝터를 쏠 수 있게 한다.
단점은 다른 방식들에 비해 더 복잡한 방식이며,
손가락같이 전도성이 높은 물체의 접촉만을 감지할
수 있는 방식이라는 점이다.
Microsoft사의 프로젝터를 이용한 멀티터치
12. 뇌파 인식
홍채인식 시스템은 사람의 눈에서 안구 인식
중앙의 검은 동공과 공막(흰자위) 음성 인식
사이에 존재하는 도넛모양의 홍채
무늬 패턴을 이용하여 사용자를
인증하는 기술로서 태어난지 3년
이내에 자신만의 고유한 홍채를 가지게
된다. 다른 어떤 생체 특징보다도
개인간의 변별력이 매우 높다고 알려져
동작 인식
있는 홍채를 생체인식 수단으로 널리
사용하기 위해서는 생체의 특징을
효과적으로 표현하는 방법과 더불어
사용자에게 보다 더 편리한 환경을
제공하는 기술이 요구되고 있다.
촉각 인식
13. Multimodal 리서치1
안구 인식
홍채를 이용한 개인 식별은 홍채 영상획득 부분과 홍채인식 부분으로 이루어져 있다. 영상획득 부분은
홍채인식에 적합한 품질의 눈 영상을 획득하는 기능이고, 홍채인식 부분은 획득된 눈 영상으로 홍채
영역 추출, 홍채 특징 추출, 홍채 코드 생성, 특징 정합 (Matching)등의 기능을 수행한다. 홍채
영상획득에 있어 필요한 입력장치로는 CCD 카메라, 비디오 카메라, 선명한 홍채 무늬 패턴을 얻기
위한 조명, 아날로그 영상을 디지털 영상으로 변환하기 위한 영상획득 장치(Capture Board or Frame
Grabber)등이 있다. Mick Ebeling: 갇힌 예술가를 자유롭게한 발명
스웨덴 회사 Tobii의 Eye-Tracking Technology
14. 뇌파 인식
안구 인식
음성 인식
제스쳐 인식은 일부 신체 동작이나 동작 인식
상태에서도 발생하기도 하지만,
일반적으로 얼굴이나 손에서 이뤄져
왔다. 현재 제스쳐 인식 영역의 초점은
얼굴과 손짓을 인식하고 나아가 감정
인식을 포함하는 것에 맞춰져가고 촉각 인식
있으며, 자세와 걸음걸이 등 다양한
인간 행동을 인지하고 식별하는 것
또한 제스쳐 인식 기술의 대상이기도
하다.
15. Multimodal 리서치1
동작 인식
팔 근육을 이용한 제스처 입력 혀의 움직임을 컴퓨터 입력에 활용하기 방향감지가 가능한 모바일 기기를 활용한 가상 책장 시스템
팔에 근육의 변화를 감지할 수 있는 EMG (Electromyogra- 전신마비 장애인들의 입력장치로는 기존 eye-tracking 이나 모바일 기기에서 좀 더 빠르고 손쉬운 입력을 위해 몸 주변의
phy, 근육이 움질일 때 발생하는 미세한 전기신호를 감지하는 음성인식쪽 연구가 많았었는데 이 연구에서는 혀의 움직임 또 가상책장 개념을 도입한 연구이다. 작은 디스플레이를 보며 버
기술 한 좋은 대안이 될 수 있다. 튼을 누르는 식의 전형적인 입력방식에서 벗어나 몸 주변에 가
상의 책장 (혹은 아이콘) 이 있다 가정하고, 그것을 모바일 기
기로 가리키는 것으로 입력을 가능하게 하고 있다.
