튜토리얼 영상 촬영을 도와주는 로봇
2023-05-26
튜토리얼 영상 촬영을 도와주는 로봇
토론토 대학교의 연구가 대학 강사 및 기타 콘텐츠 제작자가 만드는 튜토리얼 비디오의 제작에 도움이 되는 대화형 카메라 로봇인 Stargazer를 개발했다고 합니다. Stargazer는 관심 영역을 자동으로 추적하여 비디오 피사체와 함께 이동할 수 있는 7개의 독립 모터가 있는 로봇 팔의 단일 카메라를 사용합니다. 시스템의 카메라 동작은 프로토타입의 센서에 의해 감지되는 신체 움직임, 제스처 및 음성과 같은 강사의 미묘한 단서에 따라 조정될 수 있습니다. 강사의 음성은 무선 마이크로 녹음되어 음성 인식 소프트웨어인 Microsoft Azure Speech-to-Text로 전송되며 기록된 텍스트는 사용자 지정 프롬프트와 함께 GPT-3 프로그램으로 전송됩니다. Stargazer의 능력은 6명의 강사가 참여한 연구에서 테스트를 거쳤는데, 로봇을 사용하여 스케이트보드 유지 관리에서 대화형 조각 제작 및 가상 현실 헤드셋 설정에 이르기까지 다양한 주제에 대한 물리적 작업을 시연하는 비디오를 제작할 수 있었으며 피사체 추적, 카메라 프레이밍 및 카메라 각도는 로봇에 의존했습니다. 로봇 카메라 프로토타입이 값비싼 로봇 팔과 일련의 외부 센서에 의존하기는 하지만, 연구팀은 Stargazer 개념이 상용화될 수 있는 정도에 도달하기를 바라고 있습니다.
토론토 대학교의 연구가 대학 강사 및 기타 콘텐츠 제작자가 만드는 튜토리얼 비디오의 제작에 도움이 되는 대화형 카메라 로봇인 Stargazer를 개발했다고 합니다. Stargazer는 관심 영역을 자동으로 추적하여 비디오 피사체와 함께 이동할 수 있는 7개의 독립 모터가 있는 로봇 팔의 단일 카메라를 사용합니다. 시스템의 카메라 동작은 프로토타입의 센서에 의해 감지되는 신체 움직임, 제스처 및 음성과 같은 강사의 미묘한 단서에 따라 조정될 수 있습니다. 강사의 음성은 무선 마이크로 녹음되어 음성 인식 소프트웨어인 Microsoft Azure Speech-to-Text로 전송되며 기록된 텍스트는 사용자 지정 프롬프트와 함께 GPT-3 프로그램으로 전송됩니다. Stargazer의 능력은 6명의 강사가 참여한 연구에서 테스트를 거쳤는데, 로봇을 사용하여 스케이트보드 유지 관리에서 대화형 조각 제작 및 가상 현실 헤드셋 설정에 이르기까지 다양한 주제에 대한 물리적 작업을 시연하는 비디오를 제작할 수 있었으며 피사체 추적, 카메라 프레이밍 및 카메라 각도는 로봇에 의존했습니다. 로봇 카메라 프로토타입이 값비싼 로봇 팔과 일련의 외부 센서에 의존하기는 하지만, 연구팀은 Stargazer 개념이 상용화될 수 있는 정도에 도달하기를 바라고 있습니다.