AI 버전의 Siri가 휴대폰을 장악할 수도 있습니다.

시리는 뒤쳐졌다.

New York Report에 따르면 Apple 소프트웨어 책임자인 Craig Federighi와 기계 학습 책임자인 John Giannandrea는 작년에 ChatGPT를 테스트하는 데 몇 주를 보낸 후 이러한 생각을 하여 13세의 음성 비서에게 대대적인 변화를 주기로 결정했습니다.

WWDC 개발자 컨퍼런스가 보름도 채 남지 않은 상황에서 기술 전문 기자인 마크 거먼(Mark Gurman)은 늘 '인위적 장애'라고 불평만 듣던 이 음성 비서가 실제로 시리(Siri)의 AI 버전에 대한 최신 뉴스를 가져왔다. 큰 돌파구.

나쁜 소식: 가장 큰 기능 중 일부가 올해 출시되지 않을 수도 있습니다.

그럼에도 불구하고 Mark Gurman은 Apple이 여전히 iOS 18을 역사상 가장 중요한 업그레이드로 간주하고 있다고 말했습니다. Apple WWDC24는 베이징 시간으로 6월 11일 오전 1시에 개최됩니다. APPSO가 Apple Park에서 최신 보고서를 제공할 예정이니 계속 지켜봐 주시기 바랍니다.

(교체 예정 예열 이미지)

오랫동안 기다려왔지만 유망한 "제어 앱" 기능

보도에 따르면, AI의 지원을 통해 Siri는 "애플리케이션 제어"를 더욱 강화하고 애플리케이션 기능을 정밀하게 제어할 수 있게 될 것입니다.

예를 들어 Siri에게 파일을 한 폴더에서 다른 폴더로 이동하라고 요청하거나 Siri에게 특정 뉴스 기사를 열도록 요청하거나 심지어 Siri에게 기사 요약을 제공하도록 요청하세요.

이제 Siri를 사용하여 문자 메시지를 보낼 수 있고 심지어 WeChat까지 보낼 수 있지만 AI 정밀 검사를 기반으로 하는 Siri는 더 나아가 사람들이 장치를 사용하는 방식을 분석하고 점점 더 많은 자동 작업을 배울 수 있습니다. Apple은 자사가 개발하는 앱에서 "수백"개의 명령을 지원할 계획입니다.

정말 좋은 것 같지만 Gurman은 이 기능이 처음에는 Apple에서 개발한 앱으로 제한될 것이며 올해 출시되지 않을 것이라고 말했습니다. 빠르면 내년에 iOS 18의 후속 업데이트까지 기다려야 할 수도 있습니다.

그리고 구형 모델에는 A17 Pro iPhone 15 Pro만 장착될 수 있으며 M1 이상의 Mac에서는 더 많은 로컬 AI 기능을 지원할 수 있다는 소식도 있습니다.

새로운 Siri는 처음에는 한 번에 하나의 명령만 이해하고 실행할 수 있지만 앞으로는 녹음된 회의 녹음 요약을 생성하는 등 일련의 명령을 지원할 것으로 예상됩니다. iOS 18부터 시작) 이메일을 사용하여 동료에게 보낼 때 일부 텍스트 지침을 직접 추가할 수도 있으며 Siri를 통해 일련의 작업을 한 문장으로 완료할 수도 있습니다.

새로운 시리(Siri) 역시 iOS 18의 다른 AI 기능과 동일할 것으로 예상된다. 컴퓨팅 파워가 필요합니다.

지난 13년 동안의 시리의 발전을 요약한다면 '학생들을 돌보지만 키우지는 않는다'가 가장 적절할 것이다.

2011년 iPhone 4s 출시 컨퍼런스에서 Siri가 최종 모습을 드러내며 청중과 전 세계를 놀라게 했습니다. 당시 시리의 시연은 이렇다. 특정 도시의 날씨가 어떤지, 특정 주가가 어떤지 물어볼 수 있고, 퇴근할 때 자동으로 알림이 팝업되도록 설정할 수 있다. 당시에는 매우 멋지고 미래 지향적인 기능이기도 했습니다.

결과적으로 13년이 지난 지금도 위의 기능은 시리에서 가장 많이 사용되는 시나리오인 것 같습니다. 뛰다.

Google Assistant, Microsoft Cortana, Samsung Bixby 등 다른 후발 음성 비서의 도전에 직면하고 심지어 국내 Xiaomi "Xiao Ai Classmate"도 점점 더 유용해지고 있음에도 불구하고 Apple은 여전히 ​​진전을 원하지 않았습니다. ChatGPT가 등장할 때까지 Siri는 시대에 뒤떨어져 있습니다.

애플이 가끔씩 기자회견을 통해 시리를 소개하는 것 같지만, 시리는 다시 강해졌고, 더 많은 지시를 이해할 수 있고, 더 많은 일을 할 수 있게 됐다. 하지만 많은 경우, 이해할 수 있다고 해서 할 수 있는 것은 아니며, 할 수 있다고 해서 잘 할 수 있다는 뜻은 아니다.

예를 들어, Siri에게 셀카를 찍고 싶다고 말하면 아무 말도 하지 않고 Siri가 카메라와 전면 카메라를 열도록 도와줄 것입니다. 그 후에도 사용자는 손을 뻗어 셔터를 클릭해야 합니다. 때로는 Siri가 전면 모드로 전환하지 않고 자동으로 카메라 응용 프로그램으로 전환하는 경우도 있습니다.

삼성의 빅스비 어시스턴트라면 자동으로 셀카 카운트다운에 들어가며, 전체 프로세스에 사용자 수동 조작이 필요하지 않습니다.

Apple의 기본 카메라 애플리케이션 자체에는 카운트다운 기능이 포함되어 있으므로 이 프로세스를 구현하는 데 AI 요소가 많이 필요한 것은 아니지만 Apple은 경험을 좋게 만들지 않습니다.

시리의 라이벌은 바로가기

"단축 명령" 기능을 사용해보신 적이 있으신가요?

Apple이 Workflow를 인수한 후 해당 제품은 iOS 12에서 "단축 명령"으로 iPhone에 통합되었으며 macOS 12에서는 Mac 플랫폼에서도 출시되었습니다.

이 기능은 DingTalk의 원클릭 기록, 원클릭으로 LivePhoto 및 비디오를 GIF로 생성하는 것, 심지어 "휴일 동안 자동으로 알람 시계 끄기"를 달성하는 자동 작동과 같은 많은 고급 iOS 기능을 실현할 수 있습니다.

하지만 이 기능은 초보 사용자에게는 친숙하지 않습니다. 새로운 단축 명령을 생성하려면 사용자는 스크립트 프로그래밍과 유사한 인터페이스에서 다양한 작업 모듈을 선택하고 이를 "if…then", "as long as…then"과 같은 다양한 로직으로 연결해야 합니다. "휴일 알람시계"와 같은 "이런 단축키 명령에는 다양한 논리적 판단과 자동화된 조작이 포함되어 있습니다. 사용자가 튜토리얼에 따라 설정하더라도 실수하기 쉽습니다.

Apple은 기성 스크립트를 직접 얻을 수 있는 "빠른 명령 센터"를 제공하지만, 제공되는 바로 가기 명령은 간단하고 사용자의 문제점을 해결하는 기능이 거의 없습니다.

이 기능은 매우 강력한 사용자 정의 기능을 제공하는 삼성 갤럭시 휴대폰의 "Good Lock" 모듈과 유사하지만 임계값이 낮지는 않습니다.

AI 대형모델의 가장 중요한 능력 중 하나는 자연어를 이해하는 능력과 논리적 사고 능력이다. 즉, 사용자가 대형모델 AI에게 "퇴근했습니다. 체크인 도와주세요"라고 말하면 AI는 "딩톡 열기"와 "체크인" 작업을 수행하겠다는 뜻임을 알 수 있다. ," 대신에 "듣지 않았다"고 말하는 것.

오늘날의 Siri에는 이러한 기능이 완전히 없는 것은 아닙니다. 퇴사할 때 가족에게 생일 케이크 사달라고 시리에게 요청하는 것은 아이폰4s 컨퍼런스에서 선보인 기능이기도 하다.

그리고 대규모 AI 모델을 지원하는 Siri는 그보다 훨씬 더 많은 일을 할 수 있어야 합니다. 사용자는 자신의 복잡한 요구사항을 자연어로 설명합니다. Siri는 이를 스크립트의 논리로 변환하고 해당 단계를 자체적으로 실행합니다. 이는 사용자가 복잡한 프로그래밍에 직면할 필요 없이 실제 "빠른" 명령입니다.

사용자가 작업을 보다 자연스럽게 맞춤 설정할 수 있을 뿐만 아니라 Siri가 보다 "활성" 보조자가 될 것으로 기대할 수도 있습니다.

iPhone을 충분히 오랫동안 사용하면 가끔 iPhone이 자동으로 추천 팝업을 표시하는 경우가 있습니다. 예를 들어, 사용자가 블루투스 헤드셋을 착용하는 경우 사용 패턴에 따라 NetEase Cloud Music을 켜는 것이 좋습니다. 또는 밤늦게 충전하는 경우 휴대폰은 배터리를 유지하기 위해 자동으로 충전 전력을 줄입니다. 잠들기 전에도 오랫동안 충전하는 습관이 있다는 것을 알게 되었기 때문이기도 합니다.

이는 머신러닝의 결과이자 애플이 연구해온 AI 기능이기도 하다. 현대인들은 매일 휴대폰을 사용하여 많은 시간을 보냅니다. 휴대폰을 사용하여 물건을 사고, 먹고, 일하는 것은 당연합니다.

Apple의 강력한 상황 인식과 휴대폰의 더욱 강력한 자동 작동 기능이 결합되어 Siri의 AI 버전이 사용자가 맡기기 전에 상황을 예측하는 실제 "개인 비서"로 변모할 수 있다고 상상해 보세요. 당신의 필요에.

예를 들어, 예약한 항공권을 통해 목적지 도착 후 자동으로 날씨를 확인할 수 있고, 여행 습관과 실시간 교통 상황을 바탕으로 미리 알람을 설정할 수도 있습니다. 예상 이동 시간을 기준으로 공항에 미리 택시를 타면 자동으로 항공권이 팝업되고, 앱을 이용해 체크인을 할 수 있다. 개인 비서 + 투어 가이드.

이러한 원활한 운영을 실현하려면 개발자와 Apple 모두 양방향으로 진행해야 하는 문제에 대해 생각해 볼 것입니다. 그러나 AI의 발전 속도는 우리의 상상을 뛰어 넘었습니다. 아마도 미래에는 AI가 인간의 행동을 직접적으로 모방할 수도 있을 것입니다.

우리가 이해할 수 있는 UI, AI도 학습한다

새로운 Siri의 지능형 작동은 초기 단계에서 Apple 자체 애플리케이션만 지원하겠지만, 나는 이것이 Apple의 AI Siri 경로의 시작점 또는 중간일 뿐 끝이 아니라고 믿고 싶습니다.

저는 Apple AI의 궁극적인 목표가 다음 시나리오를 실현하는 것이라고 믿습니다. 아침에 일어나 "Siri"로 Siri를 깨운 다음 ​​WeChat 공개 계정 "Aifan'er"를 열고 최신 기사를 소리내어 읽게 하는 것입니다. 손을 전혀 사용하지 않고 다음으로 아이 패너의 아침 리포트를 들어보세요.

"바로가기 명령"은 주로 Apple이 API를 공개했기 때문에 타사 앱의 작동을 지원할 수 있으며, 타사 응용 프로그램 제조업체도 응용 프로그램의 작업을 바로가기 명령으로 실행할 수 있는 모듈로 분할할 수 있습니다.

그러나 이는 애플리케이션 제조업체가 관련 모듈 및 작업을 제공할 의향이 있는지 여부에 따라 다릅니다. 예를 들어 Cainiao 앱이 픽업 코드 표시 작업을 열지 않으면 Siri가 아무리 똑똑하더라도 열 수 없습니다. Cainiao 앱은 자체적으로 픽업 코드를 표시합니다.

한 단계 더 나아가 AI가 픽업코드가 무엇인지, 픽업코드가 앱 내 어디에 있는지 직접 파악하고, 지시를 받은 뒤 스스로 열어볼 수 있게 된다면 어떨까?

다소 공상과학적인 이야기처럼 들릴 수도 있지만 업계에서는 이미 이와 관련된 시도를 하고 있습니다.

지난주 마이크로소프트 빌드 2024 개발자 컨퍼런스에서 마이크로소프트는 라이브 이벤트를 진행했다. GPT-4o가 지원하는 Copliot는 실시간으로 화면의 콘텐츠를 보고 플레이어들이 함께 '마인크래프트'를 플레이하도록 안내할 수 있다는 것이다.

시연에서 Copilot은 감정의 힌트가 있더라도 매우 부드럽고 자연스러운 언어를 사용하여 플레이어에게 게임에서 검을 만들도록 안내했습니다. 이 과정에서 Copilot은 게임을 안내하는 '마스터'처럼 게임 백팩에 들어 있는 아이템을 식별하고 플레이어에게 누락된 재료를 알려줄 수 있습니다.

이는 AI 어시스턴트가 더 이상 "질문하고 대답하는" 단순한 텍스트 로봇이 아니며, 백그라운드에서 데이터를 프로그래밍하고 처리할 수만 있는 것이 아니라 우리 인간이 보는 UI 인터페이스를 진정으로 이해하기 시작할 수 있음을 보여줍니다. 우리가 어떻게 운영하는지 알아요.

올해 한동안 큰 인기를 끌었던 'AI 하드웨어' 래빗 R1은 기본적으로 조작 인터페이스를 버리고 AI 음성 비서를 통해 다양한 서비스의 사용을 완전히 완료했다. LAM(Large Action Model)'의 AI 모델 기술은 사용자의 지시를 이해한 후 서버에서 인간의 동작을 모방하고, 관련 웹페이지와 애플리케이션에서 사용자의 지시를 직접 완성할 수 있다.

Rabbit R1의 성능은 그들이 묘사한 장면과는 거리가 멀지만 비전 자체는 매우 아름답습니다. GPT-4o와 같은 로봇의 시각적 이해력도 뛰어나 인간을 대체할 AI의 미래가 멀지 않았음을 느끼게 합니다. .

개발자들 사이에서 큰 매력을 지닌 기업인 Apple은 스타트업 Rabbit의 "LAM"을 완전히 사용하는 것을 모방할 필요가 없습니다. 관련 인터페이스를 열고 주요 타사 개발자가 자신의 애플리케이션에서 이를 사용할 수 있도록 SDK를 제공할 수 있습니다. 더욱 성숙하고 안정적인 음성 운영 경험을 제공합니다.

Apple 관련 연구에 따르면 Apple의 애플리케이션 UI 디자인 표준과 함께 Siri는 iPhone 화면의 모든 것을 더 쉽게 이해할 수 있습니다.

기술은 인간보다 열등하지만, 사용자 수와 생태 구축에 있어서 애플의 리더십은 매우 강력한 장점이 될 수 있다.

9to5Mac은 Apple의 다가오는 Siri 및 AI 업데이트를 예측하고 논평합니다.

WWDC에서. 우리는 특별히 혁명적인 것을 보지 못할 수도 있지만, 매일 수백만 명의 사람들이 사용하는 시스템과 애플리케이션에 AI를 통합하는 것은 그 자체로 혁명입니다.

Rabbit R1과 같은 최신 하드웨어에 비해 모두가 갖고 있는 스마트폰은 AI를 위한 최고의 통신사일 수 있습니다.

사용자는 자신이 AI 기능을 사용하고 있다는 사실을 알 필요가 없지만 Siri에게 여행 계획 계획 및 항공권 예약을 도와달라고 요청하면 AI가 이미 그의 삶을 근본적으로 변화시키기 시작했습니다.

# aifaner 공식 WeChat 공개 계정: aifaner(WeChat ID: ifanr) 팔로우를 환영합니다. 더 흥미로운 콘텐츠가 최대한 빨리 제공될 예정입니다.

Ai Faner | 원본 링크 · 댓글 보기 · Sina Weibo