Anthropic의 이미 인상적인 Claude 3.5 Sonnet은 화요일에 생성 AI 스타트업이 새롭고 가벼운 Claude 3.5 Haiku와 함께 향상되고 업데이트된 모델 버전을 출시함에 따라 상당한 성능 향상을 얻었습니다. Sonnet 업데이트에는 AI가 실행 중인 컴퓨터에 대한 기본 제어를 제공하는 공개 베타 기능이 포함되어 있습니다.
Claude 3.5 Sonnet은 코딩 작업 측면에서 이미 성능 선두주자였지만 새 버전은 이전 버전에 비해 전반적으로 상당한 개선을 보여주며 다양한 업계 벤치마크에서 Gemini 1.5 및 GPT-4o 보다 꾸준히 뛰어난 성능을 보여줍니다. Gemini 1.5 Pro는 모든 테스트에서 새로운 3.5 Sonnet을 능가하는 유일한 모델이었으며 MATH 벤치마크 에서도 그렇게 했습니다.
신형 3.5 하이쿠는 작은 크기에도 불구하고 전혀 뒤떨어지지 않습니다. 이번 달 말에 출시될 예정인 3.5 Haiku는 회사의 가장 큰 마지막 세대 모델인 Claude 3.0 Opus보다 성능이 뛰어납니다. 더 큰 버전과 마찬가지로 새로운 Haiku는 코딩 작업에 매우 능숙하여 SWE-bench Verified에서 40.6%의 점수를 얻었습니다. 이는 GPT-40과 원래 3.5 Sonnet보다 높습니다.
더욱 인상적인 점은 새로운 Claude 3.5 Sonnet이 이제 "컴퓨터 사용" API를 통해 데스크톱 앱과 상호 작용할 수 있다는 점입니다. AI는 인간 사용자를 에뮬레이트하는 데 필요한 키 입력, 마우스 클릭 및 움직임을 생성할 수 있습니다. 회사는 현재 시스템이 상당히 실험적이며 오류가 발생하기 쉽다는 점을 재빠르게 지적합니다. 공개 베타 릴리스의 기본 목적은 개발자로부터 피드백을 받아 API 성능을 빠르게 향상시키는 것입니다.
Anthropic은 블로그 게시물에서 “우리는 Claude에게 화면에서 무슨 일이 일어나고 있는지 확인한 다음 사용 가능한 소프트웨어 도구를 사용하여 작업을 수행하도록 교육했습니다.”라고 썼습니다 . “개발자가 Claude에게 컴퓨터 소프트웨어를 사용하여 필요한 액세스 권한을 부여하면 Claude는 사용자에게 표시되는 내용의 스크린샷을 본 다음 클릭하기 위해 커서를 수직 또는 수평으로 움직여야 하는 픽셀 수를 계산합니다. 정확한 장소야.”
본질적으로 AI 에이전트입니다. 즉, 마케팅 리드 생성 및 검증, 의료 데이터의 패턴 및 추세 파악, 특정 웹 사이트로 이동하여 필요한 양식 작성 등 기타 소프트웨어 프로세스를 자동화할 수 있는 AI입니다. 이를 기존 로봇 프로세스 자동화 시스템의 고급 버전으로 생각하십시오.
회사는 Asana, Canva, Cognition, DoorDash, Replit 및 The Browser Company를 새로운 기능의 얼리 어답터로 꼽았습니다. 예를 들어 Replit은 발표에 따라 Computer Control을 사용하여 "Replit Agent 제품용으로 구축되는 앱을 평가하는 핵심 기능을 개발"하고 있습니다.
Anthropic이 설명하는 것처럼 AI가 (아직은) 우리 모두를 Skynet으로 가져가는 것에 대해 걱정할 필요가 없습니다. Anthropic 대변인은 TechCrunch 에 “인간은 '이 양식을 작성하기 위해 내 컴퓨터와 온라인의 데이터를 사용하세요'와 같은 Claude의 행동을 지시하는 특정 프롬프트를 제공함으로써 통제권을 유지합니다."라고 말했습니다. “사람들은 필요에 따라 액세스를 활성화하고 액세스를 제한합니다. Claude는 특정 작업을 수행하기 위해 사용자의 프롬프트를 컴퓨터 명령(예: 커서 이동, 클릭, 입력)으로 분해합니다.”
Anthropic은 또한 컴퓨터 제어가 스팸 생성, 잘못된 정보 확산 또는 사기 행위에 오용될 수 있음을 인정합니다. 이에 대응하여 회사는 API가 사용되는 시기와 해당 사용이 "해를 끼치는지" 여부를 식별하는 새로운 분류자를 개발했습니다 .