GPU 거인 Nvidia는 크리스마스 분위기에 빠져들어 메타버스 테마의 아바타를 만들고 있습니다. 동료 메타는매우입니다.
엔비디아 CEO 젠슨 황, 회사 옴니버스 주스 마시고 ‘장난감’으로 변신 인터넷 세상으로.
Huang은 아래에 삽입된 비디오에서 “혼자 노래하기에는 너무 부끄러워서 친구에게 도와달라고 부탁했습니다.”라고 설명합니다.
그것은 “Toy Jensen”이라고 불리며 네, 들리는 것처럼 이상합니다.
그러나 Nvidia가 달성할 수 있었던 것 또한 훌륭합니다.
Huang은 “Toy Jensen, TJ는 AI 아바타로 완전히 상호작용하고, 눈을 마주치고, 많은 주제에 대해 대화하고, 내 목소리로 말하고 노래하며, 말하려는 내용에 따라 얼굴과 몸을 움직입니다.”라고 말했습니다.
TJ는 Nvidia의 AI, Omniverse 및 RTX 기술을 사용하여 구축되었으며 실제 요점은 Nvidia Omniverse Avatar Cloud Engine 또는 ACE 플랫폼의 일부인 핵심 기술을 보여주는 기술 데모가 되는 것입니다.
Omniverse ACE는 개발자가 뷰어와 상호 작용하고 상호 작용할 수 있는 아바타를 구축, 사용자 지정 및 배포할 수 있는 클라우드 네이티브 AI 마이크로 서비스 및 워크플로 모음입니다.
이를 달성하기 위해 Nvidia 팀은 최근에 개발된 오디오 변환 모델을 사용하여 그들이 제공한 샘플에서 전문 가수의 목소리를 추출하고 TJ의 목소리로 변환했습니다. 그들은 해당 샘플의 음표를 사용하여 TJ의 디지털 음성에 적용하여 아바타가 원래 가수와 동일한 음표와 동일한 비트를 부르도록 했습니다.
렌더링은 훌륭하고 노래 자체는 실제로 그렇게 나쁘게 들리지 않습니다. 조심해, Michael Bublé, 우리 엄마가 이걸 먹을거야.
"트위터를 통해 다양한 주제에 대한 생각을 나누는 아 동율은 정신적으로 깊이 있습니다. 그는 맥주를 사랑하지만, 때로는 그의 무관심함이 돋보입니다. 그러나 그의 음악에 대한 열정은 누구보다도 진실합니다."