본문으로 건너뛰기
피드

TRELLIS.2: Microsoft의 최신 40억 파라미터 3D 생성 모델

ai-ml 약 3분
vote
0
댓글
북마크

Microsoft가 이미지 한 장으로 고품질 텍스처 3D 에셋을 생성하는 40억 파라미터 모델 TRELLIS.2를 MIT 라이선스로 공개함. O-Voxel이라는 새로운 희소 복셀 표현을 도입해 열린 표면, 비다양체 등 복잡한 토폴로지를 처리하며, H100에서 512³ 해상도 기준 약 3초 만에 PBR 재질이 포함된 3D 에셋을 생성함.

  • 1

    40억 파라미터 모델로 H100 기준 512³ ~3초, 1024³ ~17초, 1536³ ~60초의 생성 속도

  • 2

    O-Voxel 표현으로 열린 표면, 비다양체 기하, 내부 폐쇄 구조 등 임의의 토폴로지 처리

  • 3

    Base Color, Roughness, Metallic, Opacity 등 PBR 재질 모델링 지원

  • 4

    학습 코드까지 MIT 라이선스로 전부 공개

  • Microsoft가 이미지 한 장으로 고품질 3D 에셋을 생성하는 40억 파라미터 모델 TRELLIS.2를 MIT 라이선스로 공개함
  • 핵심 혁신은 O-Voxel이라는 "필드 프리" 희소 복셀 구조로, 기존 iso-surface 방식의 한계를 깨고 열린 표면(옷, 나뭇잎 등), 비다양체 기하, 내부 폐쇄 구조 등 복잡한 토폴로지를 손실 없이 처리함
  • H100 GPU 기준 생성 속도가 인상적임: 512³ 해상도 약 3초, 1024³ 약 17초, 1536³ 약 60초
  • Sparse 3D VAE로 16배 공간 다운샘플링을 적용해 컴팩트한 잠재 공간으로 인코딩하며, vanilla DiT 아키텍처를 사용함
  • 단순 컬러를 넘어 Base Color, Roughness, Metallic, Opacity 등 PBR 재질 속성을 모델링해 포토리얼리스틱 렌더링과 투명도를 지원함
  • 데이터 처리도 극도로 효율적임: 텍스처 메시에서 O-Voxel 변환이 CPU 단일 코어로 10초 이내, O-Voxel에서 텍스처 메시 변환은 CUDA로 100ms 이내에 완료됨
  • 최소 24GB VRAM GPU가 필요하며 A100, H100에서 검증됨. 학습 코드까지 전부 공개되어 커스텀 데이터셋 파인튜닝도 가능함
  • FlexGEMM(Triton 기반 희소 컨볼루션), CuMesh(CUDA 메시 유틸리티), O-Voxel 등 자체 고성능 패키지 생태계 위에 구축됨

텍스트-to-3D가 아닌 이미지-to-3D에 집중하면서 PBR 재질과 복잡한 토폴로지를 동시에 해결한 점이 실용적임. 학습 코드까지 MIT로 공개해 게임/VFX 산업에서의 파인튜닝 활용이 기대됨.

댓글

댓글

댓글을 불러오는 중...

ai-ml

애플 새 음성 인식 API, 온디바이스 영어 전사에서 위스퍼 스몰까지 이겼다

애플의 새 음성 인식 API인 스피치애널라이저가 리브리스피치 벤치마크에서 기존 SFSpeechRecognizer는 물론 위스퍼 스몰보다도 낮은 단어 오류율을 기록했어. 깨끗한 음성에서는 2.12%, noisy 음성에서는 4.56%로, 기존 애플 API 대비 오류율을 3.5~4배 줄였고 위스퍼 스몰보다 약 3배 빠르게 돌았어. 다만 영어·애플 플랫폼·OS 26 조건의 결과라, 다국어와 크로스플랫폼에서는 여전히 위스퍼의 장점이 남아 있어.

ai-ml

AI를 진짜 잘 쓰는 기업, 미국 증시에서 연 30% 프리미엄 받는다는 연구

예일대와 로체스터대 연구진이 기업의 실제 대형 언어 모델 사용 데이터를 분석했더니, AI 활용도가 높은 상위 20% 기업이 하위 20%보다 주당 평균 0.64% 높은 초과수익률을 냈다. 단순히 AI 기업이냐가 아니라, 업무에 AI를 얼마나 깊게 쓰는지가 시장 가치에 반영되고 있다는 얘기다.

ai-ml

ZTE, AI 에이전트폰으로 스마트폰 재도전…진짜 승부처는 앱 생태계

ZTE가 바이트댄스의 더우바오를 탑재한 AI 에이전트 스마트폰으로 시장 재진입을 노린다. 핵심은 사용자가 명령하면 AI가 여러 앱을 직접 열고 조작하는 방식인데, 위챗·타오바오·알리페이 같은 플랫폼과 충돌하면서 생태계 문제가 가장 큰 변수로 떠올랐다.

ai-ml

노벨상 학자들까지 “AI 경제 충격, 지금 제도 안 만들면 늦다”

노벨 경제학상 수상자 15명을 포함한 학자와 기술 업계 인사 약 200명이 AI가 향후 10년 안에 경제를 급격히 바꿀 수 있다며 정책 대응을 촉구했다. 이들은 산업혁명보다 큰 변화가 훨씬 짧은 시간에 올 수 있고, 대규모 일자리 대체와 생활 수준 향상이라는 양면성이 동시에 존재한다고 봤다.

ai-ml

NHN, AI 데이터센터 매출 기대감에 목표주가 5만6000원으로 상향

한국투자증권이 NHN의 목표주가를 4만5000원에서 5만6000원으로 올리고 투자의견 매수를 유지했다. 핵심 근거는 양평 AI 데이터센터 가동, 공공·민간 GPU 클러스터 수주 확대, 클라우드 사업부 신규 매출 반영이다.