한장의 360도 사진으로부터 몰입형 3차원 영상/음향 공간 재현
2022-11-18
org.kosen.entty.User@63243396
김한성(coolhs99)
▼ 연사소개 : 김한성 (University of Southampton)
현재는 Southampton 대학의 부교수로 재직하며 AI 기술을 이용한 영상 분석 및 복원 기술을 개발중이다. 지난 20여년간 16개의 연구 프로젝트를 수행하며 100편 이상의 학회와 저널 논문을 발표하였으며 주 연구분야는 3차원 영상 복원, 360 파노라마 영상 처리, 가상/증강현실 (AR/VR), 다중 센서처리 (Multi-modal signal processing), 영상/음향 복합 신호처리, 미디어 제작 등이다. 현재 3차원 얼굴 복원을 이용한 비접촉식 마스크 피팅 시스템 개발, 360도 카메라를 이용한 휴머노이드 인터랙션 기술 연구, 360도 파노라마 카메라를 이용한 영상/음향 복합 가상현실 구현 등의 프로젝트를 수행중이다.
▼ 발표 제목
한장의 360？ 사진으로부터 몰입형 3차원 영상/음향 공간 재현
Immersive Audio-Visual 3D Scene Reproduction using a Single 360？ Camera
▼ 발표내용
현재 시판되고 있는 360？ 카메라로 찍은 단 한장의 사진만으로 사진에 찍힌 공간을 시각적/음향적 특성을 모두 갖춘 3차원 가상 모델로 재현하는 기술을 소개한다. 재현된 3차원 모델은 가상현실 속에서 사용자가 시각적/청각적 몰임감을 경험할 수 있도록 렌더링 될수 있다. 이 시스템을 구성하는 한장의 360？ 사진으로부터 3차원 공간 복원, 음향 특성을 구현하기 위한 재질 인식, 실시간 3차원 시청각 공간 렌더링 기술 등이 함께 소개된다.
현재는 Southampton 대학의 부교수로 재직하며 AI 기술을 이용한 영상 분석 및 복원 기술을 개발중이다. 지난 20여년간 16개의 연구 프로젝트를 수행하며 100편 이상의 학회와 저널 논문을 발표하였으며 주 연구분야는 3차원 영상 복원, 360 파노라마 영상 처리, 가상/증강현실 (AR/VR), 다중 센서처리 (Multi-modal signal processing), 영상/음향 복합 신호처리, 미디어 제작 등이다. 현재 3차원 얼굴 복원을 이용한 비접촉식 마스크 피팅 시스템 개발, 360도 카메라를 이용한 휴머노이드 인터랙션 기술 연구, 360도 파노라마 카메라를 이용한 영상/음향 복합 가상현실 구현 등의 프로젝트를 수행중이다.
▼ 발표 제목
한장의 360？ 사진으로부터 몰입형 3차원 영상/음향 공간 재현
Immersive Audio-Visual 3D Scene Reproduction using a Single 360？ Camera
▼ 발표내용
현재 시판되고 있는 360？ 카메라로 찍은 단 한장의 사진만으로 사진에 찍힌 공간을 시각적/음향적 특성을 모두 갖춘 3차원 가상 모델로 재현하는 기술을 소개한다. 재현된 3차원 모델은 가상현실 속에서 사용자가 시각적/청각적 몰임감을 경험할 수 있도록 렌더링 될수 있다. 이 시스템을 구성하는 한장의 360？ 사진으로부터 3차원 공간 복원, 음향 특성을 구현하기 위한 재질 인식, 실시간 3차원 시청각 공간 렌더링 기술 등이 함께 소개된다.