Transcript 컨텐츠
디지털 컨텐츠 특론 - 컨텐츠 설계 - 최진혁, 박대민 국립 한밭대학교 멀티미디어공학과 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB. 목차 1. 콘텐츠 소개 2. 관련 콘텐츠 3. 콘텐츠 설명 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB Multimodal Technique Survey 1 콘텐츠 소개 1. 소개 HANBAT NATIONAL UNIVERSITY 휴먼 디바이스 : Cornea display & nerve modality 각막을 이용한 모달리티(디스플레이) + 신경을 이용한 모달리티(인터페이스) 2개의 모달리티를 이용한 멀티모달 인터페이스 모달리티 : 인체의 감각 VISUAL MEDIA LAB Multimodal Technique Survey 2 관련 콘텐츠 1. 관련 콘텐츠 디스플레이의 종류 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB 1. 관련 콘텐츠 모달리티의 종류 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB 1. 관련 콘텐츠 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB 멀티모달 인터페이스 (MMI) 의 정의 인간의 제스처, 시선, 손의 움직임, 행동의 패턴, 음성, 물리적인 위치 등 인 간의 자연스러운 행동들에 대한 정보를 해석하고 부호화하는 인지기반 기술 동시 여러 모달리티의 입출력을 허용 다수의 모달리티의 조합과 입력신호 통합해석 등을 통해 상호 의사 교환 1. 관련 콘텐츠 HANBAT NATIONAL UNIVERSITY 멀티모달 인터페이스 (MMI) 의 목적 각각의 모달리티가 갖는 부분 정보를 통합하여 불 명확도를 감소 다양한 형태의 결과를 제공함으로써 전달율 증가 사용자 단말 뿐만 아니라 주변의 기기도 이용 가능 기기의 능력에 맞게 다양한 형태로 정보를 가공하여 제공 가능 VISUAL MEDIA LAB 2. 멀티모달 서비스 활용 분야 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB 텔레매틱 서비스 부분 시나리오 상황 운전 중인 상태에 사용자는 배고픔을 느낀다. 근처의 식당에서 식사 하기를 원한다. 하지만 사용자는 식당주소 및 이름을 모른다. 멀티모달 시스템 • 입력 : Speech, Eye Movement, Lip Movement, Gesture, GPS, Context-Aware etc. • 출력 : 사용자와 가장 가깝고, 가장 먹고 싶어하는 식당 2. 멀티모달 서비스 활용 분야 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB 모바일 멀티모달 서비스 부분 ETRI에 전화 좀 걸어줘 시나리오 상황 사용자는 기존의 Touch가 아닌 다른 모달리티로 간편히 전화를 걸거나, 기차표를 예약하고 자 한다. 멀티모달 시스템 • 입력 : Speech, Eye Movement, Lip Movement, Gesture, Touch, Context-Aware, etc. • 출력 : 전화를 걸고자 하는 상대방, 기차표 예약 2. 멀티모달 서비스 활용 분야 HANBAT NATIONAL UNIVERSITY 복지 서비스 부분 시나리오 상황 팔을 자유롭게 사용할 수 없는 사용자는 다양한 컨텐츠를 실행 하고자 한다. 멀티모달 시스템 • 입력 : Speech, Eye Movement, Lip Movement, Brain Activity, Context-Aware, Face-Aware etc. • 출력 : 컨텐츠 VISUAL MEDIA LAB 2. 멀티모달 서비스 활용 분야 의료 서비스 부분 시나리오 상황 사용자는 간편화 된 의료 장비를 이용하여 자신의 건강을 체크하고자 한다. 멀티모달 시스템 • 입력 : 심장 박동수 체크기, 혈압 체크기, 당 체크기, etc. • 출력 : 건강 체크 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB 2. 멀티모달 서비스 활용 분야 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB 교육 서비스 부분 시나리오 상황 사용자는 학생들에게 강의자료를 보여주며 강의를 한다. 사용자는 마우스나, 리모트 컨트 롤 없이 조금 더 자유롭게 강의자료의 페이지를 넘기거나 강의자료에 메모를 하고자 한다. 멀티모달 시스템 • 입력 : Speech, Eye Movement, Lip Movement, Gesture, Face-Aware, etc. • 출력 : 페이지 전환, 메모 Multimodal Technique Survey 3 콘텐츠 설명 1. 콘텐츠 설명 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB AL PLAY (ALL PLAY) => allways display 뇌의 칩과 통신을 하여 정보를 주고 받는 기능. 시신경에 정보를 전달 => 각막을 디스플레이로 삼아 원하는 화면을 출력한다. 손이나 손가락에 소형 정보전달기기를 삽입하여 인터페이스로 사용한다. 1. 콘텐츠 설명 HANBAT NATIONAL UNIVERSITY VISUAL MEDIA LAB AL PLAY (ALL PLAY) => allways display 1. 손 안에 삽입시킨 정보전달기기와 뇌의 칩이 연결 2. 사용자가 행동을 생각할 시 각막에 디스플레이 작동 3. 디스플레이와 정보전달기기의 통신을 통하여 사용자가 원하는 정보 습득