Modly: 로컬 GPU에서 사진을 3D 메시로 변환하는 오픈소스 데스크톱 앱

로컬 GPU에서 사진을 3D 메시 모델로 직접 변환할 수 있는 오픈소스 AI 데스크톱 애플리케이션 'Modly(모들리)'가 2026년 10월 9일 공개되었습니다. 외부 클라우드 서버나 유료 구독 요금제에 의존하지 않고, 개인 장비의 하드웨어 자원만으로 이미지 기반 3D 생성을 처리하는 개발·제작자용 도구입니다.

이미지 출처: Oliver Prompts (@oliviscusAI) / Modly (lightningpixel)

3D 에셋 생성 AI는 클라우드 SaaS 형태로 서비스되는 경우가 많아 지속적인 구독 비용과 데이터 업로드에 따른 프라이버시 부담이 존재했습니다. Modly는 이를 전면 로컬 오픈소스 환경으로 전환하여, 크리에이터와 개발자가 온디바이스에서 3D 메시 생성부터 씬 구성까지 한 번에 다룰 수 있도록 지원합니다.

로컬 온디바이스 환경과 멀티 플랫폼 지원

Modly는 100% 무료 오픈소스 프로젝트로, 공식 깃허브 저장소(github.com/lightningpixel/modly)를 통해 배포됩니다.

• 지원 플랫폼: Windows, Linux, Apple Silicon(M 시리즈) macOS를 공식 지원합니다.
• 노 클라우드·노 서브스크립션: 모든 AI 추론과 메시 생성 과정이 사용자의 로컬 GPU에서 직접 구동되어 외부 클라우드 연결이나 유료 구독 결제가 필요하지 않습니다.
• 하드웨어 요구사항: 모델 추론과 3D 메시 연산을 로컬에서 온전히 처리하므로, 실사용 수준의 생성 품질과 작업 속도를 확보하기 위해서는 충분한 VRAM을 갖춘 고성능 GPU(NVIDIA 그래픽 카드 또는 Apple Silicon 통일 메모리)가 권장됩니다.

시각적 워크플로우 빌더와 인앱 메시 최적화

Modly는 직관적인 파이프라인 제어를 위해 노드/블록 형태의 시각적 워크플로우 빌더(Visual Workflow Builder)를 내장하고 있습니다.

• 단계별 워크플로우: Image(이미지 입력) → Generate Mesh(메시 생성) → Add to Scene(씬 추가) 구조로 이어지는 전 과정을 한 화면에서 유기적으로 연결하고 관리할 수 있습니다.
• 인앱 메시 편집 기능: 외부 3D 전문 툴(Blender 등)을 번거롭게 거치지 않아도, 생성되거나 임포트된 3D 메시를 프로그램 내에서 직접 부드럽게 다듬는 스무딩(Smooth)과 폴리곤 수를 줄여 경량화하는 데시메이션(Decimate) 최적화를 즉시 수행할 수 있습니다.

외부 모델 확장성과 활용 시 고려사항

단일 알고리즘에 갇히지 않고 다양한 생성 스타일과 파이프라인 요구에 대응할 수 있도록 외부 모델 확장(External model extensions) 구조를 제공합니다.

사용자는 프로젝트 목적에 맞춰 서로 다른 생성 백엔드나 파인튜닝된 외부 모델을 연결하여 다양한 스타일의 3D 에셋을 생성할 수 있습니다. 다만 외부 모델 확장을 연동할 경우 각 모델별 백엔드 종속성이나 추가 환경 구성이 필요할 수 있으며, 초기 릴리즈 오픈소스 프로젝트 특성상 커뮤니티 피드백을 기반으로 세부 사양과 기능이 계속 진화할 것으로 보입니다.

출처

• GitHub 공식 저장소: lightningpixel/modly
• Oliver Prompts (@oliviscusAI): Modly Release Announcement on X