저는 오늘 Meta의 새로운 홀로그램 아바타 중 하나를 처음 봤을 때 몇 분 전에 만났던 Meta 담당자와의 WhatsApp 통화 중에 제가 아바타와 대화하고 있다는 것을 즉시 확인하지 못했다는 사실을 인정하기가 거의 부끄럽습니다. 이것이 지난 몇 년 동안 회사의 아바타 기술이 얼마나 발전했는지를 보여줍니다.
Meta는 Connect에서 홀로그램 아바타를 새로운 VR 안경과 Meta Ray-Ban 디스플레이 프레임에 도입한다고 발표했습니다. 기조연설에 앞서 두 가지를 모두 경험할 기회를 얻었고, 메타의 오리온 프로토타입에서 처음 경험한 이후 기술이 얼마나 발전했는지 놀랐습니다.
아바타 설정은 사용하는 장치에 따라 약간 다릅니다. 디스플레이 지원 안경을 사용하면 Vision Pro “페르소나” 생성과 유사한 프로세스를 통해 Meta AI 앱에서 아바타를 생성할 수 있습니다. 휴대폰 카메라를 사용하면 머리를 돌려 얼굴의 다양한 각도를 보여 달라는 메시지가 표시됩니다. 그런 다음 다양한 상호 작용에서 목소리가 어떻게 들리는지 파악하기 위한 일련의 질문을 묻습니다.
내 데모에서는 “당신의 완벽한 하루는 처음부터 끝까지 어떤 모습입니까?”, “당신의 취미 중 하나는 무엇이며, 그것을 좋아하는 이유는 무엇입니까?”와 같은 질문을 받았습니다. 데모의 이 부분에는 실제로 결함이 있었습니다. Meta AI 앱은 내 목소리를 감지하지 못한 것처럼 계속 질문을 건너뛰었지만 딸꾹질이 진행에 영향을 미치지는 않은 것 같습니다. 그런 다음 나는 “웃고 이를 보여라”라는 메시지를 받고 놀란 것처럼 문구를 반복했습니다.
전체적으로 디스플레이 안경용 홀로그램 아바타를 만드는 데는 처음부터 끝까지 약 5분 밖에 걸리지 않습니다. 일단 설정하면 WhatsApp이나 Zoom을 통해 채팅하든 디스플레이 지원 안경을 착용한 상태에서 영상 통화에 사용할 수 있습니다.
아바타는 Meta의 새로운 Muse Realtime Avatar 모델로 구동되며 짧은 훈련 기간을 사용하여 말하는 동안 실제 얼굴 표정을 대략적으로 표현합니다. 내 아바타가 말하는 것을 보는 것은 이상한 경험이었습니다. 안경을 쓰고 아바타로 말하는 동안 디스플레이 하단 모서리에 작은 미리보기가 표시되었습니다. 그것은 나와 똑같아 보였지만 내 뇌도 그것이 바로 그것이라는 것을 즉시 인식할 수 있었습니다. 아니었다 나.
하지만 전화기를 들고 아바타와 대화를 나누는 상대방의 경험을 시도했을 때 처음에는 속았습니다. 어쩌면 내가 대화 상대를 만난 지 얼마 되지 않았기 때문일 수도 있다. 그래서 그 사람의 버릇이나 표정은 잘 몰랐지만, 평소 영상통화에서 봤을 법한 모습과 많이 비슷해 보였다. 그의 배경을 좀 더 자세히 관찰한 후에야 영상이 그다지 평범하지 않다는 것을 알 수 있었습니다. 메타는 또한 아바타와의 모든 화상 통화에 투명한 워터마크를 추가하고 있습니다. 처음 봤을 때 나는 이것을 그의 셔츠에 있는 로고로 착각했지만, 무엇을 찾아야 할지 안다면 그것은 분명한 식별자입니다.
새로운 VR 안경에 홀로그램 아바타를 추가하려는 Meta의 계획은 훨씬 더 야심적입니다. 해당 장치의 카메라와 센서가 훨씬 더 발전했기 때문에 전신 아바타를 만들 수 있으며 표정을 “가르칠” 필요가 없습니다. 대신 내부를 향한 카메라와 센서를 사용하여 얼굴 표정을 이해합니다.
VR 안경을 착용한 채 메타 제품 관리자의 풀 사이즈 홀로그램과 대화를 나눌 수 있었습니다. 그리고 생각보다 덜 이상한 느낌이 들었어요. 그것은 나에게 항상 이상할 정도로 매끄럽고 외계인처럼 보였던 Apple의 “페르소나” 아바타보다 확실히 훨씬 더 자연스러워 보였습니다. (또한 하체나 팔이 표시되지 않으므로 도움이 되지 않습니다.)
하지만 내가 대화를 나눈 VR 아바타는 방금 만난 사람과 꽤 비슷해 보였고, 오싹한 느낌도 들지 않았습니다. 특히 방을 돌아다니면 그녀의 발 부분에 약간의 왜곡이 있었고, 그녀의 머리 가장자리로 갈수록 약간의 흐릿함을 볼 수 있었습니다. 아바타는 완전한 3D가 아닙니다. 사람의 정면 모습만 보여주기 때문에 몇 가지 제한 사항이 있습니다. 하지만 VR 아바타를 통해 경험한 다른 어떤 상호 작용보다 훨씬 더 현실감이 있다는 사실에 놀랐습니다(공평하게 말하면 낮은 기준).
홀로그램 아바타는 아직 “초기 미리 보기” 단계에 있으며, 해결해야 할 몇 가지 버그가 분명히 있습니다. 사용 가능 여부는 사용 중인 장치로 제한되므로 Meta Ray-Ban 디스플레이 안경을 착용한 사람은 안경을 착용한 경우에만 다른 사람을 아바타로 부를 수 있습니다. 그리고 디스플레이 안경을 쓴 사람은 VR 안경을 쓴 사람에게 전화를 걸 수 없습니다. VR 아바타는 현재 안경 대 안경 상호 작용으로 제한됩니다.
Meta는 이러한 아바타가 화상 통화 시 사람들이 더 많은 존재감을 느끼는 데 도움이 될 수 있다고 말했고, 저는 데모에서 그것을 확실히 느꼈습니다. 친한 친구나 가족을 내 아바타로 부르는 것에 대해 여전히 이상하고 진실되지 않은 느낌이 들지만 일부 사람들은 다르게 느낄 수도 있다는 것을 알 수 있었습니다. 제가 인터뷰한 Meta 담당자는 자신의 아바타로 업무 회의에 자주 전화한다고 말했습니다. 이는 카메라 준비가 아직 되지 않은 경우 좋은 대안이 될 수 있습니다.
홀로그램은 올 가을 얼리 액세스를 통해 Meta Ray-Ban 디스플레이에 제공될 예정입니다.
관련 정보는 아래 링크에서 확인하세요
