TAU-HOME.COM
LOADING

스토리 입력부터 캐릭터 시트·분경 생성까지 지원하는 오픈소스 AI 만화 제작 도구 2종

프롬프트로 만화 페이지를 생성하는 AI Comic Factory와 JSON 워크플로우 및 Gemini API로 스토리보드와 캐릭터 시트를 제작하는 AI Comic Generator의 핵심 기능과 실행 구조를 정리했습니다.

tau · 2026년 11월 13일

#ai-comic-factory #ai-comic-generator #github #ai-comic #sdxl #gemini

스토리 입력부터 캐릭터 시트·분경 생성까지 지원하는 오픈소스 AI 만화 제작 도구 2종

오픈소스 AI 만화 제작 도구는 프롬프트 한 줄로 페이지를 생성하는 방식부터 JSON 구조로 스토리보드와 캐릭터 일관성을 제어하는 파이프라인까지 서로 다른 아키텍처로 발전하고 있습니다. GitHub 저장소 메타데이터와 공식 문서가 확인된 AI Comic Factory와 AI Comic Generator 2종의 핵심 기능과 로컬 실행 구조를 비교 정리했습니다.

스토리 프롬프트와 JSON 설정으로 AI 만화 패널과 캐릭터 시트를 구성하는 개발 워크플로우 화면

이미지 출처: Official product README: https://github.com/Dapeng960208/AI-Comic-Generator

AI Comic Factory: LLM과 SDXL을 결합한 단일 프롬프트 만화 생성기

jbilcke-hf/ai-comic-factory(Apache-2.0 라이선스, GitHub 스타 1,370개, 포크 325개)는 대규모 언어 모델(LLM)과 SDXL(Stable Diffusion XL)을 결합해 짧은 스토리 설명과 화풍 선택만으로 만화 패널을 생성하는 프로젝트입니다. 2023년 8월 25일 생성된 저장소로 최신 릴리즈 표기는 1.2이며, 설치 없이 바로 테스트할 수 있는 공식 웹 데모(aicomicfactory.app)를 제공합니다.

단일 실행 파일로 즉시 구동되는 구조가 아니라 프론트엔드, 백엔드, LLM 추론 서버, SDXL 렌더링 엔진을 각각 연결해야 하는 모듈형 아키텍처를 취합니다. 로컬이나 자체 서버에서 운영하려면 프로젝트 루트에 .env.local 파일을 생성하고 추론 및 렌더링 백엔드 환경 변수를 설정해야 합니다.

  • LLM 엔진(LLM_ENGINE): INFERENCE_API, INFERENCE_ENDPOINT, OPENAI, GROQ, ANTHROPIC 중 하나를 선택해 스토리 전개와 패널 텍스트 구조를 생성합니다.
  • 렌더링 엔진(RENDERING_ENGINE): INFERENCE_API, INFERENCE_ENDPOINT, REPLICATE, VIDEOCHAIN, OPENAI를 지원하며, 기본 렌더링 모델은 stabilityai/stable-diffusion-xl-base-1.0 및 리파이너 stabilityai/stable-diffusion-xl-refiner-1.0을 기준으로 구성됩니다.
  • 확장성: Hugging Face Inference Endpoint와 TGI(Text Generation Inference)를 연결하거나 저장소를 포크해 자체 Stable Diffusion 파이프라인으로 교체할 수 있습니다.

AI Comic Generator: JSON 워크플로우와 Gemini 기반 스토리보드 제작 도구

Dapeng960208/AI-Comic-Generator(MIT 라이선스, GitHub 스타 27개, 포크 5개)는 2026년 1월 17일 개설된 저장소로, 텍스트 스토리를 입력하면 줄거리를 확장해 만화 스토리보드로 변환하고 캐릭터 설정 시트까지 관리하는 풀스택 웹 애플리케이션입니다. Google Cloud API 키를 통한 Gemini API 연동을 전제로 동작합니다.

백엔드는 FastAPI, SQLite, SQLModel, FastAPI BackgroundTasks로 구성되며, 프론트엔드는 Vue 3, Vite, Element Plus, Pinia 기반입니다. AI 서비스 계층에서는 텍스트 생성과 스크립트 구조화에 gemini-3-flash-preview 모델을, 캐릭터 및 패널 이미지 생성에 gemini-3-pro-image-preview 모델을 사용합니다.

  • JSON 중심 전역 설정(Global Config JSON): 스토리 개요, 캐릭터 설정, 분경 세부 사항을 모두 JSON 데이터로 저장합니다. 화풍, 화면 비율, 색상 팔레트, 패널 여백 및 테두리 스타일을 전역 설정에서 수정하면 전체 스토리보드 패널에 일괄 반영됩니다.
  • 캐릭터 워크숍 및 일관성 유지: 스토리에서 등장인물을 자동 추출해 삼면도(three views) 캐릭터 시트를 생성하고, 패널 작화 시 해당 캐릭터 이미지를 참조(Image-to-Image)해 외형 일관성을 유지합니다. 중복 추출된 동일 인물을 하나로 합치는 병합 기능도 제공합니다.
  • 단일 패널 부분 재그리기: 전체 페이지를 다시 생성하지 않고 특정 패널의 프롬프트나 동작만 수정해 개별 재그리기(single-panel redrawing)와 배치 생성을 실행할 수 있습니다.

로컬 구동 절차 및 환경 구성 차이

두 도구는 타깃 워크플로우만큼이나 설치와 실행 방식에서도 뚜렷한 차이를 보입니다.

AI Comic Factory는 Hugging Face Space 환경을 기반으로 설계되어 .env 기본 설정을 참고해 .env.local에 외부 API 토큰(AUTH_HF_API_TOKEN, AUTH_OPENAI_API_KEY, AUTH_REPLICATE_API_TOKEN 등)을 연결하는 과정이 핵심입니다. 반면 AI Comic Generator는 백엔드와 프론트엔드 서버를 로컬에서 직접 실행한 뒤 웹 UI 상단 'Models' 메뉴에서 Google API 키와 텍스트·이미지 모델을 등록하는 구조입니다.

AI Comic Generator를 로컬에 설치할 때는 Python 3.9 이상, Node.js 16 이상, pnpm 환경이 필요하며 다음 순서로 구동합니다.

# 1. 백엔드 환경 구성 및 마이그레이션 (backend 디렉터리)
cd backend
python -m venv .venv
source .venv/bin/activate
pip install -r requirements.txt
alembic upgrade head
uvicorn app.main:app --reload --host 0.0.0.0 --port 8000

# 2. 프론트엔드 의존성 설치 및 개발 서버 실행 (frontend 디렉터리)
cd ../frontend
pnpm install
pnpm dev

프론트엔드 서버가 실행되면 브라우저에서 http://localhost:5173에 접속해 새 프로젝트를 생성할 수 있습니다. 빠른 아이디어 스케치나 웹 데모 체험이 목적이라면 AI Comic Factory가 적합하고, 캐릭터 삼면도 시트와 컷 단위 수정이 필요한 다중 패널 작업에는 JSON 상태 관리를 지원하는 AI Comic Generator가 구조적으로 유리합니다.

출처

Impact-Site-Verification: 9b3ebd10-6c45-44cf-a014-5b8c19b7b285