YC F26 팀이 전파로 입 안 움직임을 읽어 소리 없이 입력하는 스마트 안경 Subvocal을 공개, 2027년 1분기 출시 목표
- YC F26 소속 Subvocal Company가 입 모양만으로 컴퓨터에 입력하는 스마트 안경을 공개함. 안경이 블루투스와 비슷한 전파를 내보내 혀, 입술, 연구개를 지날 때 생기는 변조를 기반 모델로 텍스트로 복호화하는 구조임
- 처음에는 EMG 전극으로 시작했지만 땀에 따른 신호 변화, 전기 간섭, 부착 위치 편차, 그리고 얼굴에 전극을 붙이기 싫다는 이유로 RF 방식으로 바꿈. 안경 장착 안테나도 처음엔 완전히 실패해 테이프로 얼굴에 붙이는 단계를 거쳤음
- 사용자마다 얼굴 구조와 RF 신호 패턴이 달라 사전학습 데이터 확보가 유일한 해법이었음. 사무실에 부스를 세우고 돈을 주고 안경을 쓴 채 문장을 읽게 해 데이터를 모았고, 데모의 Dave는 20문장 교정만으로 작동함
- 노트북 거치형도 시도했지만 같은 RF는 거리에서 감쇠가 심해 불가능했음. 60GHz mmWave 레이더는 조직 침투가 낮아 입에서 반사되고 spatial resolution이 5cm x 5cm 수준이라 viseme만 보여 오류율을 낮출 수 없었음
- 프로토타입은 분당 200단어 이상을 주장하며, 몇 달간 R&D를 이어 2027년 1분기 출시와 사전예약 접수를 목표로 함. 엣지 케이스 성능을 위해 데이터셋도 계속 키울 계획임
Hacker News 의견들
공공장소에서 그렇게 입을 움직이는 건 좀 어색하고 불편하긴 함. 그래도 붐비는 곳에서 자체 주파수로 통하는 개인용 워키토키 같은 아이디어는 꽤 멋지다고 봄
오픈소스로 만든 게 이미 있음. joeblau/subvox는 다듬어지지 않았고, amywork777/lipflow는 입술을 읽는 방식임. 나는 코워킹 스페이스나 비행기, 도서관에서 쓰려고 직접 만들고 있는데 말 없이 입만 움직이면 시선이 끌리긴 함
나도 원글을 입술 읽기인 줄 알았음. 안경을 써야 한다는 데서 관심이 꺾였음. 폰이나 노트북 카메라로 입술 읽기가 완벽해지면 그게 진짜 승리임. 저커버그처럼 보이길 원하는 사람은 없음
우리도 IMU로 시작했음. IMU는 얼굴 움직임을 뭉쳐서 재기 때문에 세밀한 음소 구분이 안 되고 넓은 단어 정도만 잡힘. 오픈소스 데모도 5단어 분류기 수준이었음. 소프트웨어만 배포할 수 있으면 좋았을 텐데 신호에 정보가 부족했음
컴퓨터한테 말 거는 건 좋아하지 않는데 데모는 멋짐. 나중에 목 근육 버전이 나오면 눈에 보이는 입 근육을 안 움직이고 새로운 방식으로 말하는 걸 배울 수 있을지 궁금함
컴퓨터와 덜 짜증나게 소통하려고 수화를 배울까 생각했는데 이 해법이 훨씬 현실적임
안경 반응은 어땠나? 레이더 센서를 얼굴 기준 고정 위치에 두려고 안경이 필요한 건가? 목 마이크는 생각해봤나
이건 문제를 과잉 엔지니어링한 것임. 타이핑 속도가 문제면 키보드로 빠르게 치도록 훈련하면 됨
풀려는 문제는 타이핑으로 생기는 반복성 긴장 장애임. 그리고 프로토타입이 200+wpm을 주장하는데, 절반만 나와도 최상위 타이피스트 수준임. 200에 가까운 사람은 극소수임
Speaker for the Dead의 Jane 버전을 원함. 귀에 꽂는 기기가 서브보컬라이제이션을 듣고 느끼는 형태 말임. 에어팟 모양이면 딱 좋겠음
랜딩 페이지에서 작동 원리를 못 찾았음. 안경이라는 것도 여기 글을 보고 알았음. FAQ는 카메라를 안 쓴다고만 하고 뭘 쓰는지는 안 밝히고, how it works 링크는 맨 위로 돌아감
30초 동안 스크롤해도 이게 뭔지 알 수 없어서 그냥 나갔음. 맨 위에 한 문장 설명을 넣어야 함
노트북 화면 위나 책상 거치대에 올리는 형태는 안 되나?
같은 RF는 거리에서 감쇠가 심해서 노트북 거치 형태는 안 됨. 60GHz mmWave는 조직 침투가 낮아 입에서 반사되고 viseme만 보임. 게다가 2마이크로미터 움직임을 5cm x 5cm 블록 단위로만 잡아서 복호화가 어려움. 목걸이 형태는 언젠가 시도할 예정
Vekta를 쓰고 있는데 속삭임은 느낌이 안 맞고 목 마이크는 리뷰를 보면 전혀 안 됨. 이건 다른 접근이라 조심스럽게 낙관함
입을 안 벌리고 되면 꽤 관심 있음. 미세한 혀 움직임까지 잡으면 생각에 가까워질 것임
RF가 입 안을 보기 때문에 입을 다문 채 안쪽으로 발음하는 내부 발화로도 미세 조정이 됨. 생각할 때 자동으로 나오는 혀 움직임은 아니고 입을 다문 채 입 모양만 하는 것에 가까움. 우리도 처음엔 이상하다고 안내를 안 했는데 익숙해지면 꽤 잘 됨