생성 AI로 현실감 넘치는 3D 모델 구현: MIT의 혁신적 연구 발표
SeoulMIT 연구진이 생성 AI를 활용하여 보다 현실감 있는 3D 형태를 만들 수 있는 새로운 방법을 개발했습니다. 일반적으로 가상 현실이나 공학에 필요한 정교한 3D 모델을 만드는 데는 많은 시간과 노력이 필요합니다. 텍스트로부터 2D 이미지를 생성하는 기술은 크게 발전했지만, 동일한 품질의 3D 모델을 만드는 것은 더 어려웠습니다. 이번에 개발된 새로운 방법은 점수 증류 샘플링(SDS)이라는 기술을 개선하여 이러한 문제를 해결합니다.
무작위 3D 형상을 선택하여 2D 이미지로 전환하는 과정이 시작됩니다. 그런 다음 AI 모델이 이미지를 선명하게 정리합니다. 이 과정은 3D 객체가 원하는 모습이 될 때까지 계속됩니다. MIT 연구원들은 이미지가 잡음 때문에 흐릿하게 나오는 문제를 발견했습니다. 복잡하고 시간이 많이 걸리는 계산 대신, 그들은 3D 렌더링에서 누락된 부분을 추측하는 간단한 방법을 사용하여 더 선명한 이미지를 얻었습니다.
연구의 주요 요소는 다음과 같습니다:
- 사전 학습된 이미지 확산 모델을 활용하여 효율성을 높였습니다.
- 형태 명료성을 향상시키기 위한 근사 기법을 구현하였습니다.
- 비용이 많이 드는 모델 재훈련을 피함으로써 시간과 비용을 줄였습니다.
- 미래 발전을 위한 생성 AI 기법의 수학적 이해를 향상시켰습니다.
이 새로운 방법은 3D 형태의 품질을 향상시키고, 더 빠르고 간편하게 제작할 수 있게 합니다. 이를 통해 디자이너들은 디지털 도구로서 더욱 세밀하고 생동감 넘치는 디자인을 쉽게 완성할 수 있습니다. 이러한 컴퓨팅 기술의 발전은 게임, 애니메이션, 공학 설계 등 3D 모델링을 사용하는 산업에 있어 중요합니다.
MIT 연구진은 기존의 확산 모델을 활용하여 AI를 개선하고 있습니다. 이 접근 방식은 시스템을 처음부터 다시 구축할 필요 없이 효율적이며 쉽게 확장할 수 있는 방법입니다. 이러한 작업은 시스템을 완전히 재구성하지 않고도 똑똑한 변화를 통해 AI를 향상시키려는 더 큰 흐름의 일부입니다. 그러나 현재 모델을 사용하는 것은 기존의 문제들, 특히 편향성과 부정확성을 그대로 유지한다는 것을 의미합니다. 향후 연구는 이러한 문제를 해결하는 데 중점을 둘 것으로 보입니다.
이 기술은 가상현실 및 유사 기술 분야의 응용을 강화할 예정입니다. MIT, 옥스퍼드, 다양한 기술 회사의 전문가들이 디자인을 위한 AI 도구를 개선하기 위해 협력하고 있습니다. 이는 산업계가 3D 콘텐츠를 창작하고 활용하는 방식을 변화시킬 수 있습니다.
연구는 여기에서 발표되었습니다:
http://dx.doi.org/10.48550/arXiv.2405.15891및 그 공식 인용 - 저자 및 저널 포함 - 다음과 같습니다
Artem Lukoianov, Haitz Sáez de Ocáriz Borde, Kristjan Greenewald, Vitor Campagnolo Guizilini, Timur Bagautdinov, Vincent Sitzmann, Justin Solomon. Score Distillation via Reparametrized DDIM. Submitted to arXiv, 2024 DOI: 10.48550/arXiv.2405.158912024년 12월 10일 · 오전 3:39
영상 속 감춰진 질병을 발견하는 AI의 새로운 역할
2024년 12월 7일 · 오전 3:05
화장품 피부과의 디지털 혁신: AI와 소셜 미디어의 역할 및 도전 과제
이 기사 공유