Agnes Video Generator

Jimeng(Dreamina) 워크플로 사용 안내(시험 기능)

「영상 + 네이티브 오디오」만 Jimeng(Dreamina, 바이트댄스의 AI 영상 생성 서비스)에 맡기고, 스토리보드·대사·자막·병합은 이 프로젝트가 담당합니다. Agnes API가 503을 자주 반환할 때의 대체 경로입니다.

Agnes의 무료 영상 대기열은 피크 시간대에 HTTP 503(video queue is full)을 계속 반환하고, 대기는 십여 분에 이릅니다. 그래서 자동 모드는 영상 생성 단계에서 자주 멈춥니다. Jimeng(Dreamina)에는 다른 길이 있습니다. 매일 크레딧을 지급하고, Seedance 계열 영상 모델은 네이티브 오디오를 지원하며, 영상도 안정적입니다. 그래서 v7.6에서 「외부 소재 모드」를 새로 추가했습니다. 스토리보드 → 내레이션 → 자막 → 병합 파이프라인은 그대로 두고, 영상 생성 단계만 Jimeng으로 바꾸는 방식입니다. 영상과 네이티브 오디오는 Jimeng이, 편성·정규화·자막·합성은 이 프로젝트가 맡습니다. 이 기능은 현재도 시험 단계입니다. 직접 써 보시고, 이 과정으로 만든 작품도 보내 주세요.

시험 기능 안내

외부 소재 모드는 v7.6부터 제공되며 아직 다듬는 중입니다(체크포인트 프롬프트, 일괄 가져오기, 자막 정렬은 계속 조정될 수 있습니다). 문제가 생기면 작업 ID를 붙여 알려 주세요. 더 편한 무료 영상 생성 도구가 있다면 그것도 알려 주세요. 지원 도입을 검토하겠습니다.

Jimeng의 장점과 한계

👍

  • ✓매일 크레딧을 지급하므로 먼저 무료로 완성 영상을 시험해 볼 수 있음
  • ✓네이티브 오디오를 지원해 대사와 환경음이 영상과 함께 생성되어 TTS 단계를 하나 줄일 수 있음
  • ✓영상 생성이 안정적이라 대기열에 운을 맡기는 것보다 결과물 확률이 훨씬 높음

⚠️

  • –무료 크레딧이 많지 않아 다 쓰면 결제하거나 다음 날 갱신을 기다려야 함
  • –무료판은 낮은 등급 모델만 쓸 수 있어 화질과 세부 묘사가 유료 등급보다 떨어짐
  • –Jimeng이 화면에 그려 넣는 자막은 자주 깨지므로(오타, 글자 형태 붕괴) 화면 자막을 맡기지 마세요

자동 모드·수동 모드와 다른 점은 한 곳뿐입니다

단계자동 / 수동 모드외부 소재 모드(Jimeng)
스토리보드와 프롬프트이 프로젝트가 생성이 프로젝트가 생성하고, 추가로 「Jimeng에 바로 붙여 넣을 수 있는」 장면별 프롬프트도 제공
영상과 오디오Agnes 영상 모델(API가 자주 503, 내레이션만 이 프로젝트의 edge_tts로 생성)Jimeng이 생성(네이티브 오디오 포함). 장면별로 mp4를 내보낸 뒤 일괄 가져오기
자막내레이션의 단어 단위 타임스탬프에 정렬(비교적 정확)각 스토리보드의 실제 길이로 추정해 정렬(어긋날 수 있으니 자막 체크포인트에서 확인 필요)
병합과 완성이 프로젝트가 병합이 프로젝트가 정규화 + 원본 오디오 트랙 유지 병합 + 자막 입히기

엔드투엔드 흐름

작업을 만들 때 「🌐 외부 소재」를 선택하고 「영상 생성 도구 = Jimeng」으로 지정한 뒤, 파이프라인은 자동에, 생성은 Jimeng에 맡기면 됩니다.

1

작업 생성 후 「외부 소재」 선택

실행 모드는 세 가지입니다. ⚡ 자동 / ✋ 수동 / 🌐 외부 소재. 세 번째를 고르고, 펼쳐진 옵션에서 영상 생성 도구가 「Jimeng(Dreamina)」인지 확인하세요.

2

오디오 소스와 자막 소스 설정

오디오 소스: 동영상에 포함된 오디오 사용(권장. Jimeng의 원본 오디오 트랙을 유지하고 이 프로젝트는 TTS를 생성하지 않음) 또는 이 프로젝트 내레이션 사용(edge_tts 내레이션으로 원본 오디오를 교체). 자막 소스: 내레이션(기본) 또는 인물 대사(자막 텍스트를 각 장면의 대사에서 가져옴).

3

스토리보드 체크포인트에서 프롬프트를 Jimeng으로

이 프로젝트는 먼저 스토리보드를 끝까지 생성합니다. 「🎬 Jimeng 협업」 카드에 영상·오디오·길이 제약이 담긴 창작 지시가 표시되고, 「영상 클립(videos)」 체크포인트의 카드 프롬프트는 이 프로젝트의 확정된 스토리보드 대본이라 【장면 i/N · 길이】로 번호가 붙어 있어 그대로 Jimeng에 붙여 구간별로 생성하면 됩니다.

4

장면별로 영상 내보내기

각 구간을 Jimeng에서 생성한 뒤 mp4로 내보냅니다. Jimeng의 스토리보드 영상 길이는 5s / 10s라서 프로젝트의 길이 등급(4 / 5 / 6 / 8 / 10 / 12초)과 다르면 가져오기 후 실제 길이에 맞춰 정렬하며 완성 영상이 잘리지 않습니다.

5

일괄 가져오기로 되돌리기

영상 클립 체크포인트에서 「일괄 가져오기」로 mp4 여러 개를 한 번에 선택합니다. 시스템이 작업 해상도, 30fps, H.264/AAC로 자동 정규화하고 길이·해상도·프레임 레이트·오디오 트랙 유무를 하나씩 표시합니다(오디오가 없으면 노란색으로 경고하지만 진행을 막지는 않습니다).

6

자막 체크포인트에서 확인 후 합치기

「동영상에 포함된 오디오 사용」을 고르면 내레이션 체크포인트는 자동으로 통과하고(일시정지 없음), 자막은 각 스토리보드의 실제 길이를 누적 오프셋으로 생성됩니다. 자막 체크포인트에서 끊기와 타임라인을 확인하고 확정하면 이 프로젝트가 원본 오디오 트랙을 유지한 채 병합하고 자막을 입혀 final_video.mp4를 만듭니다.

다섯 개 체크포인트의 역할

  1. 1

    스토리보드 scenes

    스토리보드 대본과 내레이션을 확인합니다. 「🎬 Jimeng 협업」 카드가 영상 + 오디오 + 길이 제약이 담긴 창작 지시를 제공하므로 Jimeng이나 아무 LLM에 바로 넘겨 구체화할 수 있습니다.

  2. 2

    참조 이미지 references

    선택 사항입니다. Jimeng이 만든 스토리보드 이미지를 가져오면(scene_1.png 같은 이름으로) 작업 해상도에 맞게 자동 축소·확대하고 중앙에 여백을 채웁니다. 창의 장편 영상에서는 가져온 이미지가 해당 장면의 참조 이미지로 등록됩니다.

  3. 3

    영상 클립 videos

    핵심 단계입니다. 카드의 프롬프트가 바로 Jimeng에 붙여 넣을 수 있는 스토리보드 대본이며, 생성 후 mp4를 일괄 가져옵니다. 확정 전에 시스템이 모든 장면의 영상이 가져와졌는지 검증하고, 빠진 것이 있으면 계속 진행하지 않습니다.

  4. 4

    내레이션 audio

    「동영상에 포함된 오디오 사용」을 고르면 일시정지 없이 자동 통과합니다. 「이 프로젝트 내레이션 사용」을 고르면 수동 모드와 같아지며, 여기서 내레이션을 미리 듣고 다시 생성합니다.

  5. 5

    자막 subtitle

    SRT의 끊기와 타임라인을 확인합니다. 마지막 항목이 오디오 트랙을 넘지 않고, 인접 항목이 겹치지 않으며, 중국어는 한 항목 18자 이내여야 합니다. Jimeng 경로에서 사람이 가장 꼭 봐야 하는 곳입니다.

내보낸 파일 이름을 어떻게 지어야 오류가 없을까

가져올 때 시스템은 파일 이름의 「첫 번째 숫자 N」을 기준으로 파일을 N번째 장면에 매핑합니다. 예를 들어 scene_1.mp4를 내보내면 1번째 구간(scene_0/video.mp4)에 들어가고, scene_3.mp4를 내보내면 3번째 구간(scene_2/video.mp4)에 들어갑니다.

  • →scene_1.mp4 → 1번째 구간(scene_0/video.mp4)
  • →scene_3.mp4 → 3번째 구간(scene_2/video.mp4)

두 가지를 주의하세요. 숫자는 1부터 장면 수 사이일 때만 사용되므로 연도나 타임스탬프가 들어간 파일 이름(예: 20261015.mp4)이 2026번째 장면으로 잘못 매핑되지 않습니다. 쓸 수 있는 숫자가 없는 파일은 업로드 순서대로 매핑됩니다. 직접 지정하려면 가져오기할 때 명시적 매핑(예: 1 → scene_2)을 넘겨 첫 번째 파일을 세 번째 장면에 넣으면 됩니다. 원고 유형 작업은 para_N 폴더를 쓰고, 디지털 휴먼 작업에는 clip/clip.mp4 파일이 하나뿐입니다.

  • •내보낼 때 반드시 오디오 트랙을 남기세요. Jimeng의 「오디오 생성」을 켠 뒤 내보내지 않으면 완성 영상에 소리가 없습니다.
  • •이 프로젝트는 모든 스토리보드의 해상도가 같아야 합니다. Jimeng에서 내보낸 크기가 제각각이어도 괜찮습니다. 가져올 때 일괄로 축소·확대하고 중앙에 여백을 채웁니다.
  • •같은 배치에 다른 작업의 파일을 섞는 것이 가장 쉽게 어긋나는 원인입니다. 가져온 뒤 표시되는 장면 매핑을 한 번 보고 확정하세요.

가장 많이 걸리는 네 가지 함정

1영상에 소리가 없음: 십중팔구 Jimeng에서 내보낼 때 오디오가 빠졌거나 무음 버전을 내보낸 경우입니다. 오디오가 포함된 mp4로 다시 내보내 가져오면 되고, 가져오기 표시에서 has_audio로 바로 확인할 수 있습니다.

2자막이 전체적으로 1~2초 이르거나 늦음: 자막은 각 스토리보드의 「실제 길이」를 누적 오프셋으로 추정하므로 Jimeng의 말 속도나 대사 길이에 차이가 있으면 오차가 쌓입니다. 자막 체크포인트에서 SRT를 직접 고치는 것이 가장 간편하고, Jimeng에서 내보낸 자막을 병합해 되돌려 넣어도 됩니다.

3화면에 깨진 자막이 겹쳐 있음: Jimeng 내부 자막은 자주 깨지므로 자막을 맡기지 마세요. 프롬프트에서 자막 문구를 빼고 프로젝트가 일괄로 입히는 한 층만 남기면 화면이 깔끔해집니다.

4크레딧이 부족함: 먼저 2–3장면짜리 짧은 작업을 끝까지 돌려 프롬프트, 내보내기 이름, 가져오기 흐름이 원활한지 확인한 뒤 긴 작업으로 넘어가세요.

써 보고 작품도 공유하세요

이 흐름은 아직 시험 단계라 실제 사용 사례가 가장 필요합니다. 짧은 창의 장편 영상이나 원고 영상 하나를 끝까지 만들어 완성 영상이나 스크린샷을 GitHub Discussions의 「Show and tell」에 올려 주세요. 사이트의 쇼케이스 섹션에 소개하겠습니다(스토리보드 프롬프트와 Jimeng 설정을 함께 올리면 다른 사람이 재현하기 쉽습니다).

GitHub Discussions예시 →

자세히 알고 싶다면

외부 소재 모드의 전체 설명(체크포인트별 산출물 매트릭스, 일괄 가져오기 인터페이스, 정규화 규칙)은 프로젝트 저장소의 수동 모드 사용 안내 다섯 번째 절에 있습니다. 각 체크포인트의 카드에도 복사할 수 있는 프롬프트와 되돌리는 안내가 함께 표시됩니다.

수동 모드 사용 안내 보기 →

503을 만났을 때의 처리 순서

이 순서대로 시도하면 대부분 세 단계 안에 영상이 나옵니다.

Jimeng 워크플로 자주 묻는 질문(Agnes 503 / queue is full 대처법 포함) →

다른 무료 영상 생성 도구가 있나요? 추천을 환영합니다

이 프로젝트의 도구 목록은 확장 가능한 레지스트리입니다. 도구를 추가하려면 프롬프트 템플릿 한 세트와 되돌리기 안내만 보충하면 되고, 흐름과 합성 계층은 바꿀 필요가 없습니다. 더 나은 무료 영상 생성 서비스(클링, 하이루오, 오픈소스 로컬 모델 등)가 있다면 GitHub에 Issue로 알려 주세요. 도구 이름, 네이티브 오디오 지원 여부, 구간별 길이, 자막 내보내기 가능 여부를 적어 주시면 지원 도입을 검토하겠습니다.

GitHub에서 제안하기 →

지금 하나 돌려 보세요

외부 소재 모드는 데스크톱 버전 기능입니다. 내려받은 뒤 작업을 만들 때 「🌐 외부 소재」를 선택하면 됩니다. 온라인 Demo와 웹 Studio는 자동 모드를 사용합니다.

온라인 Demo로 이동데스크톱 버전 다운로드

관련 페이지

Jimeng 워크플로 자주 묻는 질문(Agnes 503 / queue is full 대처법 포함)

Agnes가 HTTP 503이나 video queue is full을 반환하면 어떻게 해야 할까요? 기다려야 할까요? 다른 길은 없을까요? 그리고 Jimeng 워크플로를 쓰면서 가장 많이 받는 질문들.

수동 모드 사용법 — 자동 vs 수동: 감성 생성 또는 정밀 출력 | Agnes Video

Agnes Video Generator 수동 모드 사용법: 스토리보드, 참조 이미지, 비디오 클립, 내레이션, 자막, 완성본 등의 체크포인트에서 일시 정지하고 각 산출물을 확인·수정한 뒤 계속 진행합니다. 더 강력한 외부 AI나 도구와 함께 명확한 기대 결과물을 구현할 수 있습니다. 자동 모드는 아이디어를 주고 즉흥 생성(vibe video generating)에, 수동 모드는 명확한 출력 기대치를 가진 미세 조정에 적합합니다.

Agnes 생성 오류 해결: HTTP 503 · 401 · 재시도와 이어서 생성

Agnes Video Generator 오류 대처법: HTTP 503 「video queue is full」, 401 「토큰이 유효하지 않음」, 실패·중단된 생성의 체크포인트 재개, 시스템 요구 사항과 API 키 기본.

해설과 자막: 영상에 내레이션과 자막 추가하기

디지털 인구 방송 모드에는 TTS 더빙과 입술 정렬이 포함되어 있어 추가 처리 없이 카피를 입력하여 직접 영화를 제작합니다. 일반 빈생 동영상은 주류 편집 도구를 통해 스스로 자막을 추가할 수 있다. 이 글은 각 모드의 더빙 자막 능력, 구체적인 설정 단계 및 완성 효과 비교를 명확하게 설명하여 해설이 포함된 완전한 비디오를 빠르게 만들 수 있도록 도와줍니다

Sources

This page's description of Jimeng's capabilities, the external-asset checkpoints, and the media normalisation rules is based on the following sources.

  1. 即梦 AI (Dreamina)：AI 图片与视频创作平台ByteDance · 即梦官网 (2025)

    Jimeng (Dreamina) is the tool that generates picture and native audio in this workflow; its site is the basis for the advantages/trade-offs section of this page.

  2. agnes-video-generator — 开源 AI 视频生成项目lcy362 · GitHub (2026)

    The external-asset implementation (checkpoint prompts, batch import, keep-audio concatenation) follows the project source: core/providers.py, web/routes/video_routes.py and utils/video.py.

  3. FFmpeg Documentation — 音视频处理官方文档FFmpeg 项目 · ffmpeg.org (2025)

    Both normalisation on import (scale-and-pad, uniform frame rate, H.264/AAC) and subtitle burn-in concatenation are done by ffmpeg; parameter semantics follow the official documentation.

신뢰할 수 있는 이유

이 글은 주관적인 인상에 의한 결론이 아니라 arXiv 논문, 제조업체 기술 보고서 및 Stanford AI Index와 같은 1차 출처를 교차 확인하여 작성한 일선 실무자에 의해 작성되었다.

S

SandGrid@lcy362

Agnes Video Generator 개발자 · 풀스택 개발자

독립 개발자이자 오픈 소스 AI 비디오 생성 도구인 Agnes Video Generator의 저자입니다. 이 프로젝트는 Agnes AI의 완전 무료 비디오 모델을 기반으로 하며, MIT 프로토콜은 오픈 소스이며, 이미 1,000명 이상의 크리에이터가 무료 비용으로 AI 비디오를 제작할 수 있도록 도왔다. 비디오 생성 모델의 엔지니어링화와 보급에 오랫동안 관심을 기울여 왔으며, 글의 내용은 모두 일선 실천과 직접 연구에서 나왔다

GitHub에서 보기

최종 업데이트：2026-08-21

지금 시작할 준비가 되셨나요?

"세계적 수준의 AI를 모든 사람의 것으로 만들자." - 브루스 양. 완전 무료, 신용 카드, 고성능 그래픽 카드 없음, 비용 제로로 첫 AI 비디오를 만들어보세요. Agnes AI의 무료 비디오 모델을 사용하시겠습니까? 여기서부터 시작하면 됩니다.

온라인 데모무료로 시작하기

GitHub 리포지토리를 클론하고 2분 안에 실행