손이 자유롭지 않지만 큰 소리로 말할 수 없는 상황에 처한 적이 있습니다. 시리 음성 비서도? 소리를 내지 않아도 음성 명령을 이해하는 카메라가 올 수도 있습니다.
코넬 대학의 두 연구원은 소리가 아니라 턱 아래에서 목과 얼굴의 움직임을 측정하여 음성 명령을 감지하는 웨어러블 적외선 스마트 카메라를 만들었습니다.
무음 음성 감지 기능이 있는 웨어러블 스마트 카메라
두 연구원은 웨어러블 카메라를 "SpeeChin"이라고 명명했습니다. 그들은 Cornell Ann S의 정보 과학 조교수인 Cheng Zhang입니다. Bowers College of Computing and Information Science, 코넬 박사 과정 학생 Ruidong Zhang.
영어로 54개, 중국어로 44개를 감지할 수 있는 최초의 목걸이 기반 무음 인식 장치라고 합니다.
Zhang 조교수는 "손이 바쁘거나 단순히 스마트 기기와 상호 작용하기 위해 손을 뻗고 싶지 않을 때 음성 제어를 사용하고 싶을 때를 상상해 보세요."라고 말했습니다. “하지만 시끄러운 장소나 회의 중이라면 음성 제어가 효율적이지 않거나 사회적으로 적합하지 않습니다. 이것이 바로 침묵의 연설이 필요한 곳입니다.”
SpeeCin의 목에 장착된 적외선 카메라는 아래에서 턱의 움직임을 포착합니다. 들리는 소리가 없어도 음성으로 단어를 결정할 수 있습니다.
스피커의 얼굴 근처에 전방 장착 배치보다 목에 착용하는 것이 더 미묘하지만, 카메라는 다른 사람의 사진을 포착할 수 없는 각도에 있기 때문에 사생활 보호 문제를 일으키지 않아야 합니다. 얼굴.
높은 신뢰성, 그러나 특정 조건에서만
기즈모도보고 연구원들은 20명의 참가자와 함께 SpeeChin을 테스트했습니다. 10명은 숫자와 일반적인 음성 지원 명령을 포함하여 54개의 간단한 문구를 영어로 말했습니다. 나머지 10명은 44개의 간단한 단어와 구를 중국어로 말했습니다. "훈련"된 후 카메라는 90.5% 정확도로 영어 명령과 91.6% 정확도로 중국어 명령을 인식할 수 있었습니다.
그러나 카메라는 참가자들이 가만히 앉아 있을 때만 높은 점수를 받았습니다. 움직일 때 보행 보행과 머리 움직임의 변화로 인식 신뢰도가 떨어졌다.
SpeeChin 장치를 안정적으로 사용할 수 있는 장소의 수를 줄이는 것처럼 보입니다. 즉, 움직임을 포함하는 더 긴 훈련 세션 또는 아마도, 더 자세한 감지를 위해 더 높은 해상도와 더 높은 프레임 속도를 가진 고급 카메라 장비.
