Google의 주요 I/O 2024 기조연설에는 Gemini 덕분에 데스크톱과 모바일에 제공될 수많은 새로운 AI 기능이 가득했습니다. 비디오 및 다중 모드 프롬프트 요청을 통해 Google을 검색하는 새로운 방법이 있을 것이며, 스마트폰은 결국 Project Astra를 통해 카메라를 통해 AI 초능력을 갖게 될 것입니다.
하지만 정말 마음에 들었던 기능이 하나 있습니다. 바로 Google 포토의 Gemini로 사진에 질문하기입니다 .
먼저 쌍둥이자리란 무엇일까요?
먼저, 쌍둥이자리 는 무엇인가요? 기본적으로 Gemini Nano, Gemini Pro 및 Gemini Ultra를 포함하는 Google의 AI 모델 제품군입니다. 간단히 말해서 이는 Google의 OpenAI 버전이자 ChatGPT 와 같은 자체 GPT 모델입니다.
Gemini는 OpenAI의 GPT와 같은 다른 LLM(대형 언어 모델)처럼 텍스트를 이해하고 생성할 수 있습니다. 그러나 Gemini는 좀 더 많은 일을 할 수 있습니다. 즉, 이미지, 비디오, 오디오, 심지어 코드와 같은 다른 형태의 정보를 이해하고, 작동하고, 결합합니다.
Android 스마트폰 의 경우 기기 자체에서 로컬로 작동하는 Gemini Nano를 사용합니다. Gemini Nano 모델 덕분에 Circle to Search 와 같은 기존 기능은 학생들의 물리학 및 수학 숙제를 도울 수 있는 능력으로 더욱 향상될 것입니다.
또한 수십 페이지를 스크롤하는 대신 보고 있는 비디오나 검색 중인 긴 PDF에 대해 Gemini에게 질문할 수 있으므로 현재 화면에 있는 내용에 대한 상황을 훨씬 더 잘 인식할 수 있습니다. Gemini Nano는 여러 요청이 하나로 포함된 검색어와 같은 다중 모드 기능을 스마트폰에 제공합니다.
Ask Photos with Gemini는 I/O 2024에서 발표된 많은 새로운 Gemini 기능 중 하나이며 올해 말에 Google 포토에 포함될 예정입니다. 간단히 말해서, 키워드 대신 좀 더 대화적인 접근 방식을 사용하여 방대한 사진 라이브러리를 검색할 수 있습니다.
Google I/O 데모에서 Google은 "내 번호판이 뭐지?"라고 물어볼 수 있음을 보여주었습니다. 또는 “내 딸은 언제 수영을 배웠나요?” 그러한 요청에 응답하는 사진을 가져옵니다.
한 걸음 더 나아가 “내 딸의 수영 실력이 어떻게 발전했는지 보여주세요”와 같은 요청도 있습니다. 이와 같은 쿼리를 통해 Gemini는 적절한 결과를 얻기 위해 날짜와 맥락별로 사진을 되돌아보게 됩니다.
Gemini와 함께 사진에 묻기(Ask Photos with Gemini)가 무대에서 선보였을 때 저는 신이 났고 빨리 손에 넣고 싶었습니다.
부모의 AI 동반자
저는 엄마가 된 지 2년 조금 넘었습니다. 하지만 그 시간 동안 저는 딸의 귀엽고 우스꽝스러운 모습이나 사진이나 비디오에 담아내고 싶은 중요한 순간 등 딸의 모든 작은 순간을 포착하는 것을 좋아하기 때문에 그 어느 때보다 더 많은 사진을 찍었습니다. 1TB iPhone 15 Pro 와 제가 테스트한 수많은 Android 휴대폰으로 저는 항상 딸의 사진을 찍고 있습니다.
당신은 그것이 과잉이라고 생각할 수도 있습니다. 아마도 그럴 것입니다. 하지만 부모님으로부터 어린시절을 담은 사진은 물론 동영상도 많지 않습니다. 그것들은 나의 특별한 순간을 모두 담아내지 못했고, 아주 상세하거나 구체적인 것은 없고 막연한 기억만 갖고 있었습니다. 현재 우리가 갖고 있는 모든 기술을 통해 내 딸이 어린 시절의 시각적 증거를 갖게 되었다는 사실을 확인하는 데 도움이 되었습니다.
가족들과 공유하고 친구를 선택하기 위해 사진과 비디오를 찍기도 하지만, 나중에 되돌아보고 싶기 때문에 주로 이러한 순간을 포착합니다. 단지 얼굴에 미소를 지을 수 있는 짧은 순간을 찾고 있거나, 노인이 되어 추억의 길을 따라 걸어가야 할 때, 나는 시각적 기억을 꽤 많이 살펴봅니다.
Ask Photos with Gemini를 사용하면 다양한 생활 이벤트를 통해 딸의 진행 상황을 보여달라고 빨리 요청하고 싶습니다. 예를 들어, 올해 8월에 아이를 유치원에 다니게 합니다. 나는 Gemini에게 학교 전반에 걸쳐 그녀의 진전 상황을 보여달라고 요청하거나 매 학년도의 "첫 날"을 모두 보여달라고 요청하고 싶습니다. 또는 그녀가 자전거 타는 법을 배울 때 나는 그녀가 보조 바퀴에서 완전한 자전거로 전환하는 모습을 볼 수 있었습니다. 도대체 Gemini는 매년 내 딸이 생일 케이크에 촛불을 끄는 모습을 나에게 보여줄 수도 있습니다.
Ask Photos를 활용하는 데는 많은 가능성이 있지만, 떠오르는 아이디어는 몇 가지에 불과합니다. 자녀의 이정표를 위해 부모에게 도움이 되는 동시에 다른 것에도 좋습니다. 기념일, 명절, 심지어 반려동물에게도 활용하는 모습을 볼 수 있어요.
물론, 이제 모든 사진을 살펴보고 얼굴과 키워드로 검색할 수 있습니다. 하지만 Gemini를 사용하여 사진에 질문하기는 훨씬 더 간단하고 빠르며 자연스러운 방법인 것 같습니다. 그리고 50,000개가 넘는 사진과 비디오로 구성된 사진 라이브러리가 있으면 더 쉽게 검색할 수 있습니다.
나는 이것을 사용하는 것을 기다릴 수 없어
Ask Photos는 Google이 Google I/O 2024에서 선보인 유일한 Gemini AI 기능이 아닙니다. 실용성 때문에 제가 가장 기대하는 기능이지만 확인하고 싶은 다른 흥미로운 기능도 있습니다.
예를 들어 Project Astra는 흥미로워 보였습니다. 나는 식물이나 꽃과 같이 나중에 저장하고 자세히 알아보고 싶은 대상의 사진을 찍기 위해 종종 휴대폰을 사용합니다. 그러나 Astra를 사용하면 AI의 장점을 카메라에 직접 담아 실시간으로 보고 있는 내용을 알려줄 수 있습니다. Google은 스마트 안경을 발표하지 않았지만 Project Astra는 이것이 어느 시점에서는 스마트 안경에 탑재될 놀라운 기능이 될 것임을 보여주었습니다.
또한 Gemini를 통해 제공되는 Google 검색의 다중 모드 프롬프트 요청을 확인하고 싶습니다. 나는 어떤 일이든 계획하는 것을 즐기는 사람이 아니기 때문에 Google이 나를 위해 필요한 일을 해줄 수 있다면 나는 기꺼이 그 일을 할 것입니다. 그리고 실시간 사기 알림이 나에게는 그렇게 유용할 것이라고 생각하지 않지만(나는 어쨌든 전화를 받지 않습니다), 다른 사람들에게는 매우 유용한 기능이 될 것입니다.
Ask Photos with Gemini는 올여름 말에 Google 포토에 도입될 예정이며, 빨리 사용해 보고 싶습니다.