메타(Meta)의 레이밴 메타(Ray-Ban Meta) 스마트 글래스에 몇 가지 새로운 AI 기반 기능이 추가되면서 사용자 경험이 크게 향상될 예정입니다. 주요 업그레이드에는 메타의 AI와 지속적인 대화가 가능해지는 기능과 실시간 언어 번역 기능 등이 포함됩니다.
현재 미국과 캐나다에서 메타의 초기 액세스 프로그램에 참여하는 레이밴 메타 소유자들은 펌웨어 v11을 다운로드하여 '실시간 AI(live AI)' 기능을 사용할 수 있게 되었습니다. 올가을 공개된 실시간 AI 기능은 착용자가 메타의 AI 비서인 메타 AI와 끊임없이 대화하며 이전에 나눈 대화 내용을 참고할 수 있도록 합니다. "Hey, Meta"라는 호출어 없이도 대화를 중단하고 후속 질문을 하거나 주제를 변경할 수 있습니다.
또한, 실시간 AI는 영상과 연동되어 작동합니다. 착용자는 주변 지역 등 실시간으로 보이는 사물에 대해 질문할 수 있습니다.
이러한 레이밴 메타의 실시간 AI 비디오 기능은 올가을 메타의 커넥트(Connect) 개발자 컨퍼런스에서 중점적으로 다루어졌습니다. 이 기술은 OpenAI의 'Vision 기능을 포함한 고급 음성 모드(Advanced Voice Mode with Vision)'와 구글의 유사 기술에 대한 대응책으로 제시되었으며, 메타 AI가 글래스의 전면 카메라에 포착된 사물에 대한 질문에 답변할 수 있게 합니다.
금번 업데이트를 통해 메타는 스마트 글래스에 실시간 AI 비디오 기능을 구현한 최초의 주요 기술 기업 중 하나가 되었습니다. 구글은 최근 유사한 기능을 갖춘 AR 글래스 판매를 계획한다고 밝혔으나, 구체적인 출시 일정은 확정하지 않았습니다.
한편, 메타는 향후 실시간 AI가 사용자가 질문하기도 전에 미리 "유용한 제안"을 할 것이라고 주장했으나, 어떤 종류의 제안일지는 밝히지 않았습니다.
펌웨어 v11에는 실시간 번역 기능도 추가되어, 레이밴 메타 사용자는 영어와 스페인어, 프랑스어, 또는 이탈리아어 간의 실시간 음성 번역을 이용할 수 있습니다. 착용자가 해당 언어를 사용하는 사람과 대화할 경우, 상대방의 발언은 글래스의 오픈 이어 스피커를 통해 영어로 들을 수 있으며, 동시에 연결된 휴대폰에 자막(스크립트)으로 표시됩니다.
레이밴 메타에는 펌웨어 v11부터 샤잠(Shazam) 지원 기능도 추가되었습니다. 사용자는 "Hey, Meta, Shazam this song"이라고 말하여 글래스가 재생 중인 곡을 찾아보도록 요청할 수 있습니다.
메타는 이 새로운 기능, 특히 실시간 AI와 실시간 번역 기능이 항상 정확하지 않을 수 있다고 경고했습니다. 회사는 블로그 게시물을 통해 "최적의 작동 방식을 지속적으로 학습하고 모두를 위한 경험을 개선하고 있다"고 밝혔습니다.
레이밴 메타는 지난 11월에 대규모 업데이트를 단 적이 있으며, 이때 메타는 프랑스, 이탈리아, 스페인 사용자들에게 글래스의 특정 AI 기능을 순차적으로 배포하기 시작했습니다. 이 글래스는 여전히 높은 판매량을 유지하고 있으며, 10월에 레이밴의 소유주인 에실로럭소티카(EssilorLuxottica)는 레이밴 메타가 유럽, 중동, 아프리카 전역의 모든 레이밴 매장 중 60%에서 가장 많이 판매된 글래스 브랜드였다고 전했습니다.
[출처:] https://techcrunch.com/2024/12/16/meta-updates-its-smart-glasses-with-real-time-ai-video