방금 xAI는 시리즈 B 자금 조달에서 60억 달러를 유치했다고 공식 발표했으며, 가치도 약 180억 달러로 뛰어올랐습니다.
이번 자금 조달의 주요 투자자로는 Tesla와 SpaceX의 첫 번째 투자자인 Antonio Gracias가 이끄는 Valor Equity Partners, 두바이 투자 회사 Vy Capital, 미국 민간 벤처 캐피탈 Andreessen Horowitz, Sequoia Capital, 벤처 캐피탈 투자 회사 Fidelity Management & Research Company, 사우디아라비아 지주회사인 Kingdom Holding 등
현재 xAI의 가장 유명한 제품은 챗봇 Grok입니다. Grok은 2023년 11월 공식 출시된 이후 OpenAI의 속도를 따라잡기 위해 노력해 왔습니다.
지난 한 해 동안 Grok은 비약적으로 성장했습니다. 올해 3월 Musk는 3월 말에 3,140억 매개변수 하이브리드 전문가 모델 Grok-1의 오픈 소스를 발표했고, xAI는 4월에 128k 길이의 텍스트 Grok-1.5를 출시했으며 xAI는 최초의 다중 모드 대형 모델을 출시했습니다. Grok-1.5V.
현재 xAI는 20,000개의 GPU를 사용하여 Grok 2.0을 교육합니다. 최신 버전의 Grok은 텍스트, 그래픽을 처리하고 실제 개체를 인식할 수 있으며 향후 Grok 모델은 오디오 및 비디오도 인식할 수 있습니다.
Musk는 또한 xAI가 다음 버전의 Grok을 훈련하고 실행하는 데 최대 100,000개의 GPU를 사용할 것이라고 공개적으로 밝혔습니다.
The Information의 최신 보고서에 따르면 머스크는 지난 5월 투자자들에게 한 프레젠테이션에서 xAI가 다음 버전의 Grok에 컴퓨팅 성능 지원을 제공하기 위해 "Gigafactory of Compute"를 구축할 계획이라고 밝혔습니다.
xAI의 새로운 "슈퍼 컴퓨팅 팩토리"는 본질적으로 AI 모델 훈련을 위해 구축된 GPU 클러스터 Meta와 유사한 슈퍼컴퓨터입니다. 클러스터란 단일 데이터 센터 내에서 복잡한 계산을 동시에 효율적으로 수행할 수 있도록 케이블로 연결된 수많은 서버 칩을 의미합니다. 일반적으로 말하면, 더 많은 칩과 더 강력한 컴퓨팅 성능을 갖춘 클러스터가 있다는 것은 더 강력한 AI를 가져올 수 있다는 것을 의미합니다.
xAI는 100,000개의 H100 GPU를 "슈퍼 컴퓨팅 팩토리"에 연결할 계획이며 Oracle과 협력할 수도 있습니다. 이달 중순에는 xAI가 오라클 경영진과 클라우드 서버 관련 문제를 논의하고 있는 것으로 알려졌으며, xAI는 앞으로 몇 년 안에 오라클 서버를 임대하는 데 100억 달러를 지출할 계획이라고 합니다.
현재 xAI는 오라클로부터 약 16,000대의 H100 칩 서버를 임대했으며 오라클의 최대 GPU 고객이 되었습니다.
컴퓨팅 파워 외에도 AI 데이터센터 위치를 결정하는 또 다른 중요한 요소는 전원 공급이다. 100,000개의 GPU를 갖춘 데이터 센터에는 100메가와트의 전용 전력이 필요할 수 있는 것으로 계산되었습니다.
xAI의 사무실은 샌프란시스코 베이 지역에 있지만, 새로운 '슈퍼컴퓨팅 공장' 위치를 선택할 때 전기도 중요한 요소로 고려될 것입니다. 향후 정부와의 추가 협상이 필요할 수도 있습니다.
머스크는 투자자들에게 현 단계에서 xAI가 여전히 경쟁사보다 뒤처져 있다고 말했습니다. 소식통에 따르면 올해 말이나 내년 초까지 OpenAI와 Microsoft는 Musk가 구상한 규모의 클러스터를 보유하게 될 수 있습니다.
OpenAI와 Microsoft는 xAI 크기의 몇 배에 달하는 수백만 개의 NVIDIA GPU를 포함하는 1,000억 달러 규모의 슈퍼컴퓨터 개발에 대해서도 논의하고 있습니다.
머스크는 올해 3월 엔비디아 보도자료를 통해 엔비디아의 인공지능 하드웨어가 '최고'라고 공개적으로 선언했다.
머스크는 또한 지난 4월 투자자 콜에서 테슬라가 자율주행 훈련을 위해 35,000대의 Nvidia H100을 보유하고 있으며 연말까지 그 수를 두 배 이상 늘릴 계획이라고 밝혔습니다.
NVIDIA의 CFO Colette Kress는 xAI를 고객 목록에 포함시켰습니다. 앞으로 xAI는 OpenAI, Amazon, Google 및 기타 회사와 협력하여 NVIDIA의 차세대 주력 생성 AI 아키텍처 Blackwell을 사용하는 데 우선순위를 둘 것입니다.
"컴퓨팅 파워 슈퍼 팩토리"가 NVIDIA 칩을 구매하기 위해 줄을 서고 있지만 xAI는 여전히 자체 Dojo 슈퍼컴퓨터를 개발하고 있습니다.
2022년 Tesla AI Day에서는 자체 개발한 Dojo 컴퓨팅 플랫폼을 시연했습니다. Dojo는 내부적으로 "트레이닝 타일"로 구성됩니다. 각 "타일"에는 25개의 D1 칩이 포함되어 있으며, 이 25개의 칩은 궁극적으로 54P 컴퓨팅 성능과 13.4TB/S의 이등분 대역폭으로 통합됩니다.
Dojo는 캐비닛 형태로도 제공될 수 있습니다. 강력한 하드웨어 스택에서 Dojo 캐비닛은 1.1E 컴퓨팅 성능, 13TB의 고대역폭 메모리 및 1.3TB의 고속 메모리를 제공할 수 있습니다. 4개의 Dojo는 72개의 GPU 랙에 해당하는 컴퓨팅 성능을 제공할 수 있습니다.
그러나 이 단계에서는 Dojo의 안정성과 출력이 보장되지 않았으므로 xAI는 AI 훈련을 위해 NVIDIA GPU만 선택할 수 있습니다.
xAI가 새로 인수한 시리즈 B 파이낸싱은 어느 정도 재정적 부담을 해결하는 데 도움이 되었습니다. 하지만 머스크 자신도 AI 트랙에서 경쟁력을 갖추려면 매년 최소 수십억 달러를 지출해야 한다고 인정한 바 있다.
인간의 뇌에 마이크로칩을 이식하는 뉴럴링크(Neuralink), 휴머노이드 로봇인 옵티머스(Optimus), 지능형 그록(Grok) AI 비서 등 머스크가 적극적으로 추진하고 있는 이들 프로젝트는 최종 목표인 인공일반지능(AGI)을 막연하게 가리키고 있다.
xAI는 아직 갈 길이 멀고 게임 체인저가 되기 위해 열심히 노력하고 있습니다. 그러나 현재로서는 Nvidia가 가장 큰 승자가 될 수 있는 것으로 보입니다.
# Aifaner: Aifaner(WeChat ID: ifanr)의 공식 WeChat 공개 계정을 팔로우하신 것을 환영합니다. 더 흥미로운 콘텐츠가 최대한 빨리 제공될 예정입니다.
Ai Faner | 원본 링크 · 댓글 보기 · Sina Weibo