가장 강력한 AR 안경이 여기 있습니다! 메타의 10년 극비 프로젝트, 당신의 다음 휴대폰은 안경이 될지도

미래의 안경은 어떤 모습일까요? 얼마나 많은 사람들이 상상했는지 모르겠습니다.

지금과 크기가 거의 비슷합니다. 네비게이션을 사용하면 움직이는 HUD로 변합니다. 영상 통화 중에는 상대방의 역동적인 이미지가 공중에 떠서 필요한 콘텐츠를 모두 표시할 수 있습니다. 암튼 비슷합니다. Vegeta와 Iron Man이 입는 것까지.

오늘 이른 아침, 메타는 최초의 AR 스마트 안경인 오리온(Orion)을 출시하여 우리를 이 이상적인 제품에 조금 더 가까이 다가가게 했습니다. 지난 몇 년 동안 AR 안경이 속속 출시되었지만 공통점도 분명합니다. 단일 기능을 가지고 있고 모바일 프로젝터일 뿐이거나 부피가 크고 비싸서 대중 시장에 전혀 적합하지 않습니다.

이전 제품에 비해 메타오리온은 부피가 작아진 외관과 AR 기능이 통합되어 다시 한번 AR 글래스 구현에 대한 기대감을 갖게 되었습니다.

또한, Meta Connect 2024는 컨퍼런스 10주년을 기념하는 중요한 노드로서 다음과 같은 새로운 장치도 선보였습니다.

  • Meta Orion 스마트 안경이 AR 경험 업계를 선도하며 놀라운 데뷔를 했습니다.
  • Meta Quest 3S 머리 장착형 MR 안경이 출시되었습니다. Quest 3의 "Youth Edition"은 새롭지는 않지만 가격이 저렴합니다.
  • Meta AI는 헤드 마운트 디스플레이 하드웨어가 더 나은 사용자 경험을 제공할 수 있도록 지속적으로 업그레이드하고 있습니다.
  • Meta Ray-Ban의 새로운 AI 기능: 실시간 번역, 맞춤형 복장 제안, 주차 공간 기억에도 도움이 됨
  • 다중 모드 기능을 갖춘 Meta의 첫 번째 오픈 소스 대형 모델 Llama 3.2가 공개되었습니다.

AI + 하드웨어는 올해 모든 가전 제품에서 피할 수 없는 주제입니다. 그렇다면 Meta는 어떻게 자체 대형 모델과 새로운 하드웨어를 결합합니까? 많은 기대를 모으고 있는 메타오리온 스마트 안경은 어떤 모습일까요? 살펴 보겠습니다.

Meta의 첫 번째 AR 안경이 놀라운 데뷔를 합니다. "올인"하려면 10년이 걸릴 내일의 제품입니다.

Zuckerberg의 생각에 안경은 최고의 "미래적" 장치여야 합니다.

이에 앞서 공동 브랜드 안경 레이밴 메타가 대중시장에 진출해 좋은 성적을 거두며 스마트 안경 시장의 수용성을 성공적으로 검증한 바 있다.

하지만 이 제품은 메타 목표의 절반만 달성했다고 할 수 있습니다. Ray-Ban Meta는 주로 오디오, 사진 및 일부 AI 기능을 제공합니다. 간단히 말해서 여전히 눈에 착용하는 전통적인 장치입니다.

Zuckerberg가 "완벽하다"고 부르는 완성품은 Meta의 첫 번째 AR 스마트 안경 Orion입니다. 10년간의 비밀 개발과 수십억 달러의 투자 끝에 마침내 오늘 Lushan의 진정한 얼굴이 공개되었습니다.

이 안경의 첫인상은 당연히 외관 디자인이 일반 선글라스와 매우 가깝다는 것입니다. 이는 시장에 나와 있는 기존의 "크고 거친" 경쟁 제품과 즉시 큰 격차를 만듭니다.

안경도 좋아 보여야 하니까요.

물론 이는 메타가 모든 구성 요소를 하나의 안경 형태로 통합하는 방식을 선택하지 않았기 때문이기도 합니다. 메타오리온은 안경 본체, 손 추적 손목밴드, 리모컨 크기의 '컴퓨팅 모듈' 세 부분으로 구성된다.

이 "분할" 솔루션은 본체에 사용되는 더 가벼운 마그네슘 소재와 결합되어 Orion 안경 본체가 98g이라는 놀라운 무게를 달성할 수 있게 해줍니다. 비교를 위해 지난주에 출시된 Snap의 새로운 AR 안경 Spectacles의 무게는 226g입니다.

▲위: 메타오리온, 아래: 스냅 스펙타클

더욱 인상적인 점은 얇고 가벼운 본체를 갖춘 오리온의 경우 약 2시간 정도의 배터리 수명을 달성할 수 있는 반면, 더 두껍고 무거운 스펙터클은 45분 정도밖에 지속되지 않는다는 점이다.

안경의 핵심인 AR 프로젝션 역량은 오리온이 여러 면에서 '훨씬 앞서 있다'는 성과를 냈다.

오리온의 렌즈는 유리 디스플레이가 아닌 실리콘 카바이드 렌즈로 프레임 위의 소형 프로젝터가 도파관으로 빛을 발산하고, 도파관이 렌즈에 투사돼 다양한 깊이와 크기의 AR 가상 콘텐츠(자오)를 보여준다. 이를 "파노라마"라고 부릅니다.)

The Verge의 테스트에 따르면 Meta Orion은 최대 70도의 시야각을 제공하며 이는 업계에서 가장 넓은 시야각을 갖춘 AR 안경일 수 있습니다.

기존 시연 영상에 따르면 사용자는 안경을 착용해 멀티태스킹을 위해 여러 개의 Meta Horizon 앱 창을 열거나 Meta AI를 사용해 현실 세계의 사물을 식별하고 라벨을 붙일 수 있습니다.

사용자의 관점이 이 창에서 멀어지더라도 이러한 가상 투영은 항상 "존재"하며 사용자의 시선이 다시 돌아올 때까지 기다립니다.

투사된 이미지 품질과 선명도는 사진과 텍스트를 읽는 데 문제가 없지만 당분간 영화를 보는 데 이 안경을 사용하고 싶지 않을 것입니다.

메타의 좋은 소셜 스킬도 AR 안경과 충돌해 새로운 트릭을 만들어냈습니다. 통화 중인 친구들이 홀로그램 프로젝션 이미지로 눈앞에 나타나기는 하지만 아직은 아직은 상대적으로 힘든 상황입니다.

Orion에는 착용자의 얼굴을 스캔하여 전화 사용자와의 화상 통화를 위한 실시간 모델을 생성하는 내부 카메라도 있습니다.

상호 작용 측면에서 Meta Orion은 시선 추적, 제스처 제어 및 AI 음성 작동을 지원합니다. 일치하는 손목 밴드를 착용하면 보다 정교한 제스처 작동이 가능합니다.

이 손목밴드는 몇 가지 동작을 인식할 수 있습니다. 엄지손가락으로 집게손가락을 집어서 콘텐츠를 선택하고, 가운데 손가락과 엄지손가락을 집어서 애플리케이션 실행기를 호출하거나 숨기거나, 엄지손가락을 닫힌 손바닥에 대고 위아래로 스크롤하는 동작을 합니다. , 전반적으로 매우 자연 스럽습니다.

손목 밴드는 제스처가 성공적으로 인식되었는지 여부를 알려주는 촉각 피드백도 제공하여 현재 MR 상호 작용의 문제점을 해결한다는 점도 언급할 가치가 있습니다.

이 손목 밴드의 원리는 근전도 검사를 통해 몸짓과 관련된 신경 신호를 읽는 것입니다. The Verge는 "마치 마음을 읽는 것과 같다"고까지 말했습니다.

▲ 출처 : 더버지

이 손목밴드를 사용하면 사용자는 시선을 Orion 인터페이스의 포인터로 사용할 수 있고, 핀치를 클릭으로 사용할 수 있습니다. 더 중요한 것은 공공 장소에서 AR 안경을 사용하려는 경우 더 이상 어색하게 사용할 필요가 없다는 것입니다. 공중에 명령을 내린다" 또는 "손가락을 가리키며" 상호작용은 주머니에 손을 넣은 채로도 완료될 수 있습니다.

이미 레이밴 안경에서 빛을 발하기 시작한 메타 AI도 AR과 결합해 새로운 게임플레이를 선보이며, 이제 현실 세계와 더욱 상호작용할 수 있게 됐다.

실제 경험에서 The Verge는 Orion을 사용하여 테이블 위의 재료를 신속하게 식별하고 라벨을 붙인 다음 Meta AI에게 이러한 재료를 기반으로 밀크셰이크 레시피를 생성하도록 요청했습니다.


Zuckerberg는 Meta Orion이 소비자를 위한 제품이라고 말했지만 현재 Orion 장치는 아직 프로토타입이며 오랜 친구인 Jensen Huang을 포함한 일부 개발자 및 경험자에게만 제공됩니다.

Vision Pro의 저렴한 버전인 Meta Quest 3S는 어떤 모습일까요?

등장한 지 10초 만에 저커버그는 퀘스트 3S의 가격을 발표했다. 전자제품 출시 중 흔치 않은 일이지만, 그래도 핵심만 집중적으로 짚어보니 정말 기분이 좋다.

일반적으로 Meta Quest 3S는 실제로 Quest 3의 "청소년 에디션"으로, 128GB의 경우 시작 가격이 US$299.99(약 RMB 2,108), 256GB의 경우 US$399.99(약 RMB 2,810)입니다.

구성으로 볼 때 Quest 3S에는 Quest 3과 동일한 모델인 Snapdragon XR2 Gen 2 프로세서가 장착되어 있으며 핸드 트래킹도 지원합니다.

기자간담회를 보고 나니 퀘스트 3S라고 명명하기보다는 퀘스트 2의 개선된 버전이라고 부르는 것이 더 적절할 것 같다는 생각이 들었습니다. 이전에 보다 "비용 효율적인" 옵션으로 Quest 3S는 여전히 Quest 2와 동일한 렌즈를 사용하고 전체 본체가 Quest 3보다 두꺼울 것이라고 보고되었습니다.

Quest 3S는 하드웨어 구성 측면에서 Quest 3만큼 좋지는 않지만 소프트웨어 생태계 경험 측면에서는 기본적으로 Quest 3S와 동일합니다. Quest 3S는 HorizonOS에서 풍부한 엔터테인먼트 및 사무 기능도 얻을 수 있습니다.

작년에 Quest 3이 출시된 후 리뷰가 엇갈렸습니다. 가장 비판적인 점은 비디오 관점을 활성화한 후의 높은 지연과 심각한 왜곡입니다. Zuckerberg는 1년 간의 최적화와 개선 끝에 현재 경험이 크게 향상되었다고 말했습니다. 특히 VR 기능, 손 추적 및 소프트웨어 적응의 세 가지 측면에서 그렇습니다.

이제 사용자는 Vision Pro와 마찬가지로 두 제품 모두에서 2D 웹 페이지를 몰입형 사무실로 직접 변환하고 장치에서 열린 인터페이스를 공간의 어느 곳에나 배치할 수 있습니다.

또한 Quest 3S의 극장 모드는 별도의 인터페이스를 대형 스크린 극장으로 확장할 수 있으며, 화면 범위를 공간 전체로 확장할 수 있습니다. 몰입형 영화 감상은 헤드 마운트 디스플레이에서 새로운 것이 아닙니다. 얼마나 많은 영화 소스와 플랫폼에 적응할 수 있는지가 각 제품 경험의 핵심입니다.

Quest 3S는 유럽 및 미국의 모든 주요 주류 미디어 플랫폼을 지원하며 Netflix, YouTube 및 Amazon Prime을 모두 사용하여 극장 모드에서 영화를 시청할 수 있습니다.

영화와 게임은 VR 헤드셋의 필수 요소입니다. 이를 기반으로 한 추가 기능은 종종 제품 자체의 성능을 반영할 수도 있습니다. 이번 컨퍼런스에서는 Quest 3S – Hyperscale의 새로운 기능도 발표되었습니다.

사용자는 휴대폰을 사용하여 방의 윤곽 세부 사항과 가구 배치를 스캔한 다음 Quest 3S에서 거의 1:1 복원 장면을 재구성할 수 있습니다.

기자간담회 ​​시연으로 볼 때 장면 복원이 정말 좋고 거친 모서리나 왜곡이 별로 많지 않습니다. 앞으로는 온라인으로 몰입형 주택 관람이나 박물관이나 유적지를 떠나지 않고 방문할 수 있는 또 다른 플랫폼이 나올 것입니다. 집. . 하지만 그 외에 장면 복원의 실용성은 무엇입니까? 각 지역의 다양한 여건에 맞춰 기술을 어떻게 구현하느냐는 앞으로 메타와 퀘스트가 답해야 할 어려운 문제이다.

Meta의 정식 명칭은 Metaverse이며, 이는 메타버스를 의미합니다. Facebook의 이름을 Meta로 변경한 것은 새로운 기술을 탐구하려는 Zuckerberg의 결의를 보여 주었고 Meta는 메타버스에 진입한 최초의 기술 거대 기업이 되었습니다. 따라서 "Metaverse"는 이 분야에서 많은 벽에 부딪혔음에도 불구하고 모든 새로운 Meta 제품 릴리스에서 반드시 언급되는 부분이 되었습니다.

Zuckerberg는 기자회견에서 Meta Quest 3S가 몰입형 소셜 상호작용을 위한 향상된 기능을 출시했다고 소개했습니다. Quest 사용자는 이제 장치에서 아바타를 만들고, 서로 게임을 하거나, 피트니스를 위해 팀을 구성하거나, 온라인 콘서트를 들을 수 있습니다.

Quest 3S 출시와 함께 Quest 2/Pro도 완전히 생산 중단을 발표했습니다. 또한 Quest 3의 가격도 649달러에서 499달러로 인하되었습니다. 신제품은 10월 15일 이후에 출시됩니다.

Llama 3.2 출시, 다중 모드 기능을 통해 안경에 눈이 있음

변경 사항이 거의 없고 사양도 축소된 메타퀘스트 3S에 비해 메타 AI의 새로운 기능은 더욱 혁신적이다.

Zuckerberg는 기자회견에서 Meta AI가 공식적으로 음성 기능을 출시했다고 발표했습니다. 사용자는 메신저, Facebook, WhatsApp, Instagram을 통해 Meta AI에 질문하거나 다른 방법으로 채팅하고 시뮬레이션된 음성 응답을 받을 수 있습니다.

뿐만 아니라 AI 음성의 음색을 독립적으로 선택할 수 있으며 주디 덴치, 존 시나, 아콰피나, 크리스틴 벨 등 유명인사를 포함한 AI 음성을 사용할 수도 있다.

저커버그는 현장에서 음성 기능도 시연했다. 전반적으로 대화의 응답 속도가 상당히 빠르고, 답변 내용도 비교적 정확해 실제 사람의 Q&A에 한 발 더 가까워졌다. 언제든지 중단될 수 있습니다. 새로운 주제나 질문을 삽입하세요.

비록 그 과정에서 몇 가지 실수가 있었지만, 이는 탐구되고 개발되고 있는 기술에서는 정상적인 일입니다. Zuckerberg 자신은 다음과 같이 말했듯이 여러 번 이를 회피하지 않았습니다.

또한 AI Studio 기능을 통해 사용자는 자신의 필요, 취미 등에 따라 해당 AI 캐릭터를 독립적으로 생성할 수도 있습니다. 이모티콘 생성, 여행 제안 제공에 도움이 될 수 있으며 물론 일상 대화도 수행할 수 있습니다.

하지만 효과로 볼 때 차기 AI 번역 기능이 더 실용적이다. 현재 메타AI가 탑재된 단말기는 실시간 음성통역을 지원할 수 있다. 기자회견에 참석한 두 사람은 메타레이밴(Meta Ray-Ban)을 착용해 즉석 교차 언어(영어-스페인어) 대화를 완료했다.

메타레이밴은 마이크를 통해 상대방의 목소리를 모아 빠르게 소유자의 모국어로 번역할 수 있다. 각 언어별 번역 응답 속도는 느리지 않지만, 문장이 조금 길어지고 대기 시간이 조금 어색하다. , Meta AI가 때때로 대화를 포착합니다.

다른 온라인 동영상의 음성 번역 효과는 위의 실시간 번역과 비교하면 더욱 뛰어나다고 할 수 있겠습니다. 이를 '고급 번역 기능'이라고 부르고 싶습니다. Meta AI는 온라인 영상의 음성을 다른 언어의 음성으로 번역할 수 있으며, 더욱 강력한 점은 다른 나라에서 영어로 말할 때 원본 영상에 나온 화자의 음색, 음색, 심지어 억양까지 완벽하게 복원할 수 있다는 점입니다.

기자회견에서 발표된 Meta AI의 일련의 업데이트된 기능에는 실제로 Llama 3.2라는 공통 핵심이 있습니다.

올해 7월 Meta는 Llama 3.1 모델을 발표했습니다. 간단히 말해 초대형 Llama 3.1 405B는 Meta의 현재까지 가장 강력한 모델이자 세계에서 가장 강력한 오픈 소스 대형 모델이기도 합니다. 세상에서 가장 강력한 대형 모델.

단 두 달 만에 Llama 3.2가 출시될 줄은 몰랐습니다.

Llama 3.2는 두 개의 시각적 모델(11B 및 90B)과 두 개의 경량 일반 텍스트 모델(1B 및 3B)을 포함하는 Meta의 첫 번째 오픈 소스 AI 모델입니다. 이는 다중 모드 기능을 갖추고 있으며, 즉 텍스트와 이미지를 처리할 수 있음을 의미합니다. 동시에 경량 일반 텍스트 모델은 사용자가 로컬에서 입력한 콘텐츠를 직접 이해할 수 있습니다.

Llama 3.2의 새로운 기능을 사용하면 대형 모델이 탑재된 많은 장치에서 더 넓은 범위의 실제 시나리오를 사용할 수 있습니다. 앞서 언급한 AI 번역 기능에 더해 시각 기능을 갖춘 메타레이밴(Meta Ray-Ban)은 이제 사람들의 업무와 일상생활에서 더욱 깊이 있게 도움을 줄 수 있다.

아보카도를 활용해 메타레이밴에게 직접 맛있는 음료를 만들어 달라고 요청할 수도 있습니다. 문장에서 아보카도를 언급할 필요도 없고 그냥 '이것' 같은 대명사만 사용하면 보일 수 있습니다.

주차공간 번호를 잊어버리시는 자주 방문하시는 분들이 계시다면, 이제 메타레이밴이 주차공간 번호를 적어두실 수 있도록 도와드리겠습니다. 잊어버린 경우 언제든지 해당 정보를 검색할 수 있습니다.

포스터에 적힌 번호를 누르시고 브로셔에 있는 QR코드를 스캔하시면 일상복에 잘 매치하실 수 있을 거예요… 간단히 말해서, 안경에 장착된 카메라와 새롭게 업그레이드된 비주얼 모델, 기타 AI 기능을 통해 Meta Ray-Ban은 거의 당신의 삶 구석구석에 나타나세요.

비마이아이즈와 메타의 결합이 가능해진 것은 바로 이 카메라의 존재 때문이다. Be My Eyes는 실시간 영상과 인공지능을 통해 시각장애인과 저시력 자원봉사자, 기업을 연결하는 공공복지 플랫폼입니다. 즉각적인 어려움.

기술의 발전은 대다수 사람들의 삶에 가치를 더해줄 뿐만 아니라, 특정 집단의 부족한 부분을 상당 부분 보완함으로써 모두의 삶을 더욱 편리하게 만들어준다. 여기서 기술의 의미가 드러난다.

차세대 컴퓨팅 장치의 새벽이 왔습니다

우리는 오랫동안 Meta Orion 안경을 기대했지만, Zuckerberg가 실제 휴대폰을 꺼냈을 때 그는 여전히 신기술 제품에 대한 오랫동안 잊혀진 "놀라운 느낌"을 우리에게 선사했습니다.

이러한 놀라움은 Meta가 제시한 미래의 청사진이 충분히 매력적일 뿐만 아니라, 이 제품의 실제 효과가 비전에 매우 가깝기 때문에 이를 경험한 후의 The Verge의 평가가 매우 통찰력이 있기 때문입니다.

신기루도 아니고 실제 제품도 아닙니다. 그 사이 어딘가에 있습니다.

이것은 오리온과 메타가 탐구한 많은 환상적인 아이디어의 차이점이기도 합니다. 실험실 밖으로 나가기 어려운 개념이 아니라 메타가 "올인"하기로 선택한 내일의 제품, 완벽한 조합입니다. AI와 MR의

최고의 AI 장치입니다. 사용자가 보는 것을 볼 수 있고, 사용자가 듣는 것을 들을 수 있으며, 사용자의 실제 시나리오를 결합할 수 있으므로 보다 효과적인 답변을 제공할 수 있습니다.

또한 상호 작용하고 연결하는 궁극적인 방법이기도 합니다. 작은 화면에 국한될 필요도 없고, 무거운 헤드셋에 의존할 필요도 없습니다. 가상 세계와 현실 세계가 서로 밀접하게 통합되어 상호 작용할 수 있습니다. 언제 어디서나.

휴대폰과 같은 컴퓨팅 장치가 수명주기의 끝에 도달했으며 Apple, Meta, 심지어 OpenAI에서도 차세대 컴퓨팅 장치를 탐색하고 있다는 것은 이미 업계의 합의입니다.

아직은 프로토타입이지만, 휴대폰에 이어 차세대 주류 스마트 단말기가 될 것인지에 대해서는 아직 미지수가 많지만 주커버그는 이에 대해 자신감이 넘친다고 한다. .

안경과 홀로그램은 유비쿼터스 제품이 될 것입니다. 이미 안경을 소유한 전 세계 모든 사람들이 AI와 MR이 탑재된 안경으로 업그레이드할 수 있다면 이 제품은 세계 역사상 가장 성공적인 제품 중 하나가 될 것이며 더욱 발전할 것이라고 생각합니다.

*Su Weihong도 이 기사에 참여했습니다.

# Aifaner: Aifaner(WeChat ID: ifanr)의 공식 WeChat 공개 계정을 팔로우하신 것을 환영합니다. 더 흥미로운 콘텐츠가 최대한 빨리 제공될 예정입니다.

Ai Faner | 원본 링크 · 댓글 보기 · Sina Weibo


게시됨

카테고리

작성자

태그: