마우스 없는 영상 편집: 힉스필드, GPT-6 아스트라 기반 다빈치 리졸브 제스처 제어 데모 공개
힉스필드 AI가 GPT-6 Astra를 활용해 마우스 없이 손동작만으로 다빈치 리졸브 타임라인을 편집하고, 동일 장면의 새로운 카메라 앵글 영상을 즉시 생성하는 제스처 인터페이스 데모를 선보였습니다.
인공지능 비디오 제작 플랫폼 힉스필드 AI(Higgsfield AI)가 2026년 9월 9일, 마우스를 전혀 사용하지 않고 손동작 제스처만으로 비디오 편집 소프트웨어 다빈치 리졸브(DaVinci Resolve)를 제어하는 기술 시연(PoC) 데모를 공식 공개했습니다.
이미지 출처: Higgsfield AI (@higgsfield_ai)
이번 시연은 키보드와 마우스, 전용 콘솔 중심의 전통적인 NLE(Non-Linear Editing) 작업 환경에 차세대 멀티모달 비전 모델을 결합하여, 직관적인 제스처 인터랙션과 실시간 생성형 AI 비디오 파이프라인을 타임라인 편집 흐름 안으로 끌어들인 실험적 시도로 주목받고 있습니다.
GPT-6 아스트라 기반의 비전 제스처 인식과 타임라인 기본 편집
힉스필드가 공개한 데모의 핵심은 OpenAI의 GPT-6 Astra(아스트라)를 활용해 구축한 실시간 비전 제스처 인터페이스입니다.
작업자가 마우스나 키보드에 물리적인 손을 대지 않고 허공에서 손동작을 취하면, 비전 시스템이 이를 즉각 인식하여 다빈치 리졸브의 타임라인 편집 명령어로 변환합니다. 공개된 시연 영상에서는 영상 편집의 가장 핵심적인 기본 조작들이 매끄럽게 수행되었습니다.
- 컷 편집(Cut): 손동작으로 재생 헤드 위치를 지정하고 자르기 제스처를 통해 타임라인의 비디오 클립을 즉각 분할합니다.
- 클립 이동(Move): 허공에서 특정 클립을 집어 올리는 듯한 제스처로 트랙 내 위치를 옮기거나 다른 비디오 트랙으로 자유롭게 이동시킵니다.
- 클립 연결(Join): 분할된 클립들을 양손 또는 한 손 동작으로 끌어당겨 빈틈없이 이어붙이는 시퀀스 정렬을 지원합니다.
이는 기존의 복잡한 단축키 암기나 미세한 마우스 드래그에 의존하던 편집자의 일상적인 타임라인 작업을 직관적인 공간 제스처 인터랙션으로 확장할 수 있음을 보여줍니다.
타임라인 프레임 스와이프와 즉각적인 다각도 씬 생성(GENERATE)
이번 시연이 단순한 NLE 조작 제어 도구를 넘어선 차별점은 힉스필드의 생성형 AI 비디오 엔진과의 양방향 연동 워크플로우에 있습니다.
편집자는 다빈치 리졸브 타임라인에 배치된 기존 영상 클립의 특정 프레임을 손동작 제스처로 선택한 뒤, 이를 힉스필드 인터페이스 영역으로 밀어내는 스와이프(swipe) 동작을 취합니다. 이후 허공에서 'GENERATE' 명령을 뜻하는 제스처를 취하면 다음과 같은 생성 파이프라인이 즉각 구동됩니다.
- 동일 장면의 새로운 카메라 앵글 생성: 선택된 기준 프레임의 피사체 외형, 의상, 조명, 주변 배경의 연속성을 유지하면서 다른 카메라 앵글이나 시점의 영상을 힉스필드 AI 모델이 즉시 합성합니다.
- 타임라인 자동 임포트: 렌더링이 완료된 신규 앵글 컷은 별도의 파일 다운로드나 수동 탐색기 임포트 과정 없이, 다빈치 리졸브 타임라인의 해당 편집 지점으로 자동 배치됩니다.
현장 촬영에서 미처 확보하지 못한 리버스 앵글(reverse angle)이나 다양한 컷을 포스트 프로덕션 단계에서 타임라인 이탈 없이 즉시 보완할 수 있는 새로운 가능성을 제시합니다.
기술 시연(PoC)의 한계와 실무 도입 시 검증 과제
다만 이번 발표는 콘셉트 타당성을 검증하기 위한 기술 시연(PoC, Proof of Concept) 영상 단계라는 점을 명확히 인지해야 합니다.
힉스필드는 현재 해당 제스처 인터페이스를 직접 설치하여 테스트해볼 수 있는 공개 코드 리포지토리나 다빈치 리졸브용 공식 플러그인 패키지를 배포하지 않았습니다. 또한 실무 현장 도입을 위해 필수적인 구체적 요구사항과 일정 역시 아직 베일에 싸여 있습니다.
- 하드웨어 및 센서 요구사항 미공개: 손동작을 정밀하게 감지하기 위한 외부 비전 카메라나 깊이 센서 스펙, 조명 환경 제약 등이 명시되지 않았습니다.
- 반응 속도와 조작 정밀도: 프레임 단위의 미세 트림(fine trim)이나 오디오 싱크 등 극도의 정밀도가 요구되는 전문 편집에서 제스처 인터페이스가 물리적 컨트롤 서페이스(Speed Editor 등)나 마우스를 실질적으로 대체할 수 있을지에 대한 정량적 성능 지표는 제시되지 않았습니다.
- 상용화 일정 부재: 일반 크리에이터나 상용 프로덕션 스튜디오를 대상으로 한 정식 베타 서비스나 상용화 일정은 공개되지 않았습니다.
따라서 이번 데모는 멀티모달 파운데이션 모델과 전문 NLE 소프트웨어가 결합할 미래 인터페이스의 방향성을 확인하는 기술 프리뷰로서 해석하는 것이 합리적입니다.
출처
힉스필드 AI의 GPT-6 아스트라 기반 다빈치 리졸브 제스처 제어 시연 영상 및 관련 발표 내용은 힉스필드 공식 소셜 채널을 통해 공개되었으며, 확인된 1차 공식 출처 링크는 다음과 같습니다.
- Higgsfield AI 공식 X (@higgsfield_ai): 2026-09-09 DaVinci Resolve Gesture Control Demo Announcement