Stability AI, 3D 모델링 AI TripoSR 오픈소스 공개

Stability AI, 3D 모델링 AI TripoSR 오픈소스 공개

부루퉁의AI

이미지를 입력해 3D 모델링을 생성해 주는 AI 모델은 기존에 많이 개발되었습니다. 하지만 이번에 Stability AI에서 공개한 TripoSR은 준수한 성능과 더불어 생성 속도도 빠른데요. 이 모델이 무려 오픈소스로 공개되었습니다.

Stability AI가 공개한 예시 이미지를 확인해 보면, 이전 어도비가 공개했던 3D 모델링 AI LRM보다 안보이는 면을 오브젝트의 특징을 살려 잘 표현한 것을 확인할 수 있습니다. 게다가 TripoSR은 다른 모델보다 생성 속도도 엄청 빠른데요. Nvidia A100 그래픽카드에서 테스트했을 때 약 0.5초 만에 초안 3D 모델링을 출력했습니다.

OpenLRM과 TripoSR 모델링 구현 비교 자료

현재 TripoSR은 데모로 사용해 볼 수 있습니다. 데모 플레이 링크는 글 하단에 남겨두도록 하겠습니다. 데모 플레이를 이용해 직접 3D 모델링을 생성해 보겠습니다.

사용방법은 간단합니다. 이미지 파일을 업로드하고 Generate를 클릭하면 됩니다. 'Remove Background'는 배경을 제거해 주는데 간혹 오브젝트를 침범하기도 하니 상황에 맞춰 사용하면 됩니다. 결과물이 너무 이상하게 나온다면, Foreground Ratio 값을 조절하면 됩니다. Marching Cubes Resolution은 256 고정으로 두면 됩니다. 값을 조절했을 때 모델링이 깨집니다.

미드저니로 생성한 3D 고양이 캐릭터 이미지를 사용했는데요. 뒷 모습은 꽤 준수하게 만들어냈습니다. 모델링이 생성되는 속도도 5초 내외입니다. 하지만 정면에서 고양이의 얼굴이 비대칭으로 찌그러졌습니다. 다른 이미지를 추가로 테스트해 보겠습니다.

다소 복잡한 아이언맨 흉상 이미지를 사용했습니다. 빛 반사 때문에 흰색점이 생기긴 했습니다만, 보이지않는 슈트의 뒷 부분의 각진 디테일을 잘 살렸습니다. 하지만 이미지에 비해 퀄리티가 많이 떨어진 것은 다소 아쉽습니다.

사용할 이미지가 없을 경우 데모 플레이에서 제공하는 예제 이미지를 사용하면 됩니다. 예제 이미지는 배경이 제거된 이미지로 'Remove Background'를 비활성하고 사용하면 됩니다.

간만에 직접 사용해 볼 수 있는 재밌는 생성형 AI 모델이 공개되었습니다. 뉴스레터를 구독해 주시는 에코 멤버님들도 한 번씩 사용해 보는 것을 추천드리며, 이만 글을 줄입니다.

Stability.ai 보도자료: https://stability.ai/news/triposr-3d-generation

TrioSR Report: https://arxiv.org/abs/2403.02151

TripoSR Demo: https://huggingface.co/spaces/stabilityai/TripoSR

부루퉁의AI 블로그: https://blog.naver.com/ldlquddnr


Introduce your service here!

For newsletter banner advertising inquiries, please contact: Bopyo@aikoreacommunity.com

이곳에 서비스를 소개하세요!

뉴스레터 배너 광고 문의: Bopyo@aikoreacommunity.com

Comments