macOS companion app
음성 오버레이
음성 오버레이 수명 주기 (macOS)
대상: macOS 앱 기여자. 목표: 웨이크 워드와 푸시 투 토크가 겹칠 때 음성 오버레이가 예측 가능하게 동작하도록 유지합니다.
현재 의도
- 오버레이가 이미 웨이크 워드로 표시된 상태에서 사용자가 단축키를 누르면, 단축키 세션은 기존 텍스트를 초기화하는 대신 _채택_합니다. 단축키를 누르고 있는 동안 오버레이는 계속 표시됩니다. 사용자가 손을 떼면: 앞뒤 공백을 제거한 텍스트가 있으면 전송하고, 없으면 닫습니다.
- 웨이크 워드만 사용하는 경우에는 여전히 침묵 시 자동 전송됩니다. 푸시 투 토크는 손을 떼는 즉시 전송됩니다.
구현됨 (2025년 12월 9일)
- 이제 오버레이 세션은 각 캡처(웨이크 워드 또는 푸시 투 토크)마다 토큰을 가집니다. 토큰이 일치하지 않으면 partial/final/send/dismiss/level 업데이트를 버려 오래된 콜백을 방지합니다.
- 푸시 투 토크는 표시 중인 오버레이 텍스트를 접두사로 채택합니다(따라서 웨이크 오버레이가 표시된 상태에서 단축키를 누르면 텍스트를 유지하고 새 음성을 덧붙입니다). 최종 transcript를 최대 1.5초 동안 기다린 뒤 현재 텍스트로 폴백합니다.
- 차임/오버레이 로깅은
voicewake.overlay,voicewake.ptt,voicewake.chime카테고리에서info로 내보냅니다(세션 시작, partial, final, send, dismiss, 차임 이유).
다음 단계
- VoiceSessionCoordinator (actor)
- 한 번에 정확히 하나의
VoiceSession을 소유합니다. - API(토큰 기반):
beginWakeCapture,beginPushToTalk,updatePartial,endCapture,cancel,applyCooldown. - 오래된 토큰이 포함된 콜백을 버립니다(이전 recognizer가 오버레이를 다시 열지 못하게 함).
- 한 번에 정확히 하나의
- VoiceSession (model)
- 필드:
token,source(wakeWord|pushToTalk), 커밋된/휘발성 텍스트, 차임 플래그, 타이머(자동 전송, 유휴),overlayMode(display|editing|sending), 쿨다운 기한.
- 필드:
- 오버레이 바인딩
VoiceSessionPublisher(ObservableObject)는 활성 세션을 SwiftUI에 미러링합니다.VoiceWakeOverlayView는 게시자를 통해서만 렌더링하며, 전역 싱글턴을 직접 변경하지 않습니다.- 오버레이 사용자 동작(
sendNow,dismiss,edit)은 세션 토큰과 함께 코디네이터로 다시 호출됩니다.
- 통합 전송 경로
endCapture시: 앞뒤 공백을 제거한 텍스트가 비어 있으면 → 닫기; 아니면performSend(session:)(전송 차임을 한 번 재생하고, 전달하고, 닫음).- 푸시 투 토크: 지연 없음. 웨이크 워드: 자동 전송을 위한 선택적 지연.
- 푸시 투 토크가 끝난 뒤 웨이크 런타임에 짧은 쿨다운을 적용하여 웨이크 워드가 즉시 다시 트리거되지 않도록 합니다.
- 로깅
- 코디네이터는
ai.openclaw서브시스템,voicewake.overlay및voicewake.chime카테고리에서.info로그를 내보냅니다. - 주요 이벤트:
session_started,adopted_by_push_to_talk,partial,finalized,send,dismiss,cancel,cooldown.
- 코디네이터는
디버깅 체크리스트
-
고정된 오버레이를 재현하는 동안 로그를 스트리밍합니다.
sudo log stream --predicate 'subsystem == "ai.openclaw" AND category CONTAINS "voicewake"' --level info --style compact -
활성 세션 토큰이 하나뿐인지 확인합니다. 오래된 콜백은 코디네이터가 버려야 합니다.
-
푸시 투 토크에서 손을 뗄 때 항상 활성 토큰으로
endCapture를 호출하는지 확인합니다. 텍스트가 비어 있으면 차임이나 전송 없이dismiss가 예상됩니다.
마이그레이션 단계(제안)
VoiceSessionCoordinator,VoiceSession,VoiceSessionPublisher를 추가합니다.VoiceWakeRuntime을 리팩터링하여VoiceWakeOverlayController를 직접 건드리는 대신 세션을 생성/업데이트/종료하도록 합니다.VoicePushToTalk를 리팩터링하여 기존 세션을 채택하고 손을 뗄 때endCapture를 호출하도록 합니다. 런타임 쿨다운을 적용합니다.VoiceWakeOverlayController를 게시자에 연결하고, 런타임/PTT의 직접 호출을 제거합니다.- 세션 채택, 쿨다운, 빈 텍스트 닫기에 대한 통합 테스트를 추가합니다.