Guida al workflow Jimeng (funzione sperimentale)
Solo «immagine + audio nativo» passa a Jimeng; storyboard, dialoghi, sottotitoli e montaggio restano a questo progetto — un percorso alternativo quando l’API di Agnes restituisce 503 di frequente.
Nelle ore di punta la coda video gratuita di Agnes restituisce di continuo HTTP 503 (video queue is full), con attese di dieci minuti e più, e la modalità automatica si blocca spesso proprio allo step di generazione del video. Jimeng (Dreamina) offre un’altra strada: crediti gratuiti ogni giorno, i modelli video della serie Seedance supportano l’audio nativo e l’immagine è stabile. Per questo la v7.6 introduce la «modalità materiali esterni»: l’intera pipeline storyboard → voce fuori campo → sottotitoli → montaggio resta invariata, solo la generazione del video passa a Jimeng. Jimeng produce immagine e audio nativo, questo progetto si occupa di orchestrazione, normalizzazione, sottotitoli e compositing. La funzione è ancora in fase sperimentale: provala e inviaci anche i lavori che realizzi con questo flusso.
Nota sulla funzione sperimentale
La modalità materiali esterni è disponibile dalla v7.6 ed è ancora in rifinitura (i prompt dei checkpoint, l’importazione in blocco e l’allineamento dei sottotitoli possono ancora cambiare). In caso di problemi segnalali con l’ID del task; se conosci uno strumento gratuito di generazione video più comodo, diccelo: valuteremo l’integrazione.
Punti di forza e limiti di Jimeng
👍
- ✓Crediti gratuiti ogni giorno, così puoi provare un video finito senza pagare
- ✓Audio nativo: dialoghi e ambiente vengono generati insieme all’immagine, risparmiando uno step di TTS
- ✓Generazione video stabile: la probabilità di ottenere una clip utilizzabile è molto più alta che affidarsi alla coda
⚠️
- –I crediti gratuiti sono pochi; esauriti, occorre pagare o attendere il rinnovo del giorno dopo
- –La versione gratuita consente solo modelli di fascia bassa, quindi qualità e dettaglio restano inferiori ai piani a pagamento
- –I sottotitoli che Jimeng disegna nell’immagine sono spesso sbagliati (refusi, glifi rotti): non contarci per i sottotitoli a schermo
Rispetto alla modalità automatica e manuale cambia una sola cosa
| Fase | Modalità automatica / manuale | Modalità materiali esterni (Jimeng) |
|---|---|---|
| Storyboard e prompt | Li genera questo progetto | Li genera questo progetto, più un set di prompt per scena da incollare direttamente in Jimeng |
| Immagine e audio | Modelli video Agnes (l’API restituisce spesso 503; solo la voce fuori campo viene dall’edge_tts di questo progetto) | Generati da Jimeng (con audio nativo), esportati in mp4 per scena e importati in blocco |
| Sottotitoli | Allineati ai timestamp a livello di parola della voce fuori campo (più precisi) | Allineamento stimato dalla durata reale di ogni storyboard (può slittare, va verificato al checkpoint sottotitoli) |
| Montaggio e video finale | Monta questo progetto | Questo progetto normalizza + monta mantenendo la traccia audio originale + incide i sottotitoli |
Il flusso da inizio a fine
Alla creazione scegli «🌐 Materiali esterni», imposta «Strumento video = Jimeng» e poi affida la pipeline all’automatico e la generazione a Jimeng:
Crea il task e scegli «Materiali esterni»
Le modalità di esecuzione sono tre: ⚡ Automatica / ✋ Manuale / 🌐 Materiali esterni. Scegli la terza e nelle opzioni espanse verifica che lo strumento video sia «Jimeng (Dreamina)».
Imposta l’origine dell’audio e dei sottotitoli
Origine audio: usa l’audio del video (consigliato — mantiene la traccia originale di Jimeng e questo progetto non genera più TTS) oppure usa la voce fuori campo di questo progetto (la narrazione edge_tts sostituisce la traccia originale). Origine sottotitoli: narrazione (predefinita) o dialogo dei personaggi (il testo dei sottotitoli viene dai dialoghi di ciascuna scena).
Copia i prompt in Jimeng al checkpoint storyboard
Questo progetto completa prima lo storyboard. La scheda «🎬 Collaborazione Jimeng» fornisce una consegna creativa con vincoli di immagine, audio e durata; al checkpoint «Clip video (videos)» i prompt nella scheda sono lo script di storyboard definitivo di questo progetto, numerato come [Scena i/N · durata], pronto da incollare in Jimeng e generare segmento per segmento.
Esporta i video scena per scena
Esporta ogni segmento in mp4 dopo averlo generato in Jimeng. Le fasce di durata di Jimeng sono 5s / 10s; se non coincidono con quelle del progetto (4 / 5 / 6 / 8 / 10 / 12 secondi), l’importazione allinea sulla durata reale e non taglia mai il video finale.
Importa in blocco
Al checkpoint clip video usa «Importazione in blocco» per selezionare più mp4 in una volta. Il sistema normalizza automaticamente alla risoluzione del task, 30fps e H.264/AAC, e mostra per ogni file durata, risoluzione, frame rate e se è presente la traccia audio (se manca, compare un avviso giallo ma non ti blocca).
Verifica al checkpoint sottotitoli, poi monta
Con «Usa l’audio del video» il checkpoint voce fuori campo passa da solo (senza pausa) e i sottotitoli vengono generati con uno scostamento cumulativo basato sulla durata reale di ogni storyboard. Controlla interruzioni e timeline al checkpoint sottotitoli; dopo la conferma, questo progetto monta mantenendo la traccia originale e incide i sottotitoli producendo final_video.mp4.
Cosa fa ciascuno dei cinque checkpoint
- 1
Storyboard scenes
Conferma lo script di storyboard e la narrazione; la scheda «🎬 Collaborazione Jimeng» fornisce una consegna creativa con vincoli di immagine + audio + durata che puoi passare direttamente a Jimeng o a qualsiasi LLM per rifinirla.
- 2
Immagini di riferimento references
Facoltativo. Importa le immagini di storyboard prodotte da Jimeng (con nomi come scene_1.png): vengono ridimensionate alla risoluzione del task e centrate con margini. Nei video lunghi creativi l’immagine importata viene registrata come immagine di riferimento di quella scena.
- 3
Clip video videos
Lo step centrale. I prompt nella scheda sono lo script di storyboard da incollare direttamente in Jimeng; dopo la generazione importa gli mp4 in blocco. Prima della conferma il sistema verifica che ogni scena abbia il suo video e non permette di proseguire se ne manca uno.
- 4
Voce fuori campo audio
Con «Usa l’audio del video» non si mette in pausa e passa da solo; con «Usa la voce fuori campo di questo progetto» si comporta come la modalità manuale: qui ascolti e rigeneri la narrazione.
- 5
Sottotitoli subtitle
Controlla interruzioni e timeline del file SRT: l’ultima battuta non deve superare la traccia audio, quelle adiacenti non devono sovrapporsi e una riga in cinese non deve superare i 18 caratteri. È il punto del percorso Jimeng che richiede più uno sguardo umano.
Come nominare i file esportati per non sbagliare
All’importazione il sistema associa ogni file alla N-esima scena in base al «primo numero N» nel nome del file. Per esempio, se esporti scene_1.mp4 finisce nel 1° segmento (scene_0/video.mp4); se esporti scene_3.mp4 finisce nel 3° segmento (scene_2/video.mp4).
- →scene_1.mp4 → 1° segmento (scene_0/video.mp4)
- →scene_3.mp4 → 3° segmento (scene_2/video.mp4)
Attenzione a due cose: il numero viene usato solo se compreso tra 1 e il numero di scene, quindi un nome con anno o timestamp (come 20261015.mp4) non viene scambiato per la scena 2026; i file senza un numero utilizzabile vengono mappati in ordine di caricamento. Per assegnarlo manualmente, passa all’importazione una corrispondenza esplicita (per esempio 1 → scene_2) e metti il primo file nella terza scena. Le attività di tipo copione usano una cartella para_N, mentre quelle con presentatore digitale hanno un solo clip/clip.mp4.
- •Mantieni sempre la traccia audio in esportazione: attiva in Jimeng l’interruttore «Genera audio» prima di esportare, altrimenti il video finale sarà muto.
- •Questo progetto richiede la stessa risoluzione per tutti gli storyboard; non importa che Jimeng esporti in formati molto diversi, perché all’importazione tutto viene riscalato in modo uniforme e centrato con margini.
- •Il modo più semplice per disallineare tutto è mescolare file di un altro task nello stesso blocco: dopo l’importazione dai un’occhiata alla mappatura delle scene mostrata prima di confermare.
Le quattro trappole più comuni
1La clip è muta: nove volte su dieci l’esportazione da Jimeng non includeva l’audio o hai esportato una versione silenziosa. Riesporta un mp4 con audio e reimportalo; la schermata di importazione te lo dice subito tramite has_audio.
2I sottotitoli sono in anticipo o in ritardo di un paio di secondi in blocco: vengono stimati con uno scostamento cumulativo basato sulla «durata reale» di ogni storyboard, quindi ogni differenza nel ritmo di parlato o nella lunghezza delle battute di Jimeng si accumula. La cosa più semplice è correggere l’SRT a mano al checkpoint sottotitoli, oppure unire i sottotitoli esportati da Jimeng e reimportarli.
3Ci sono sottotitoli illeggibili sovrapposti all’immagine: i sottotitoli dentro l’immagine di Jimeng sono spesso sbagliati, quindi non fargli fare i sottotitoli. Togli il testo dei sottotitoli dal prompt in modo che resti solo il livello che il progetto incide in modo uniforme, e l’immagine sarà pulita.
4Crediti insufficienti: fai prima girare un task corto da 2–3 scene per verificare che prompt, denominazione in esportazione e importazione filino lisci, poi passa ai task lunghi.
Provalo e condividi il tuo lavoro
Questo flusso è ancora sperimentale e ciò che gli serve di più sono casi reali. Realizza un video lungo creativo breve o un video di tipo copione dall’inizio alla fine e pubblica il risultato o uno screenshot su «Show and tell» di GitHub Discussions: lo inseriremo nella sezione vetrina del sito (allega i prompt dello storyboard e le impostazioni di Jimeng per facilitare la riproduzione).
Vuoi i dettagli
La descrizione completa della modalità materiali esterni (matrice dei risultati per checkpoint, interfaccia di importazione in blocco, regole di normalizzazione) è nella quinta sezione della guida alla modalità manuale nel repository del progetto; le schede di ogni checkpoint includono anche i prompt copiabili e le indicazioni per la reimportazione.
Vedi la guida alla modalità manuale →Cosa fare in caso di 503
Prova in questo ordine: nella grande maggioranza dei casi avrai un video in tre passi:
Domande frequenti sul workflow Jimeng (incluso come gestire Agnes 503 / queue is full) →Altri strumenti gratuiti di generazione video? I suggerimenti sono benvenuti
L’elenco degli strumenti di questo progetto è un registro estensibile: aggiungere uno strumento richiede solo un set di modelli di prompt e indicazioni per la reimportazione, senza toccare il flusso né lo strato di compositing. Se conosci un canale gratuito di generazione video migliore (Kling, Hailuo, modelli locali open source…), apri una Issue su GitHub e dicci: nome dello strumento, presenza di audio nativo, fasce di durata per segmento e possibilità di esportare sottotitoli. Valuteremo l’integrazione.
Proponilo su GitHub →Lancia subito una prova
La modalità materiali esterni è una funzione desktop: scarica l’app e scegli «🌐 Materiali esterni» durante la creazione di un task. La Demo online e lo Studio web usano la modalità automatica.
Pagine correlate
Domande frequenti sul workflow Jimeng (incluso come gestire Agnes 503 / queue is full)
Cosa fare quando Agnes restituisce HTTP 503 o video queue is full? Conviene aspettare? Si può prendere un’altra strada? E le domande più frequenti durante l’uso del workflow Jimeng.
Guida alla modalità manuale — Auto vs Manuale: generazione spontanea o output preciso | Agnes Video
Come usare la modalità manuale in Agnes Video Generator: pausa ai punti di controllo (storyboard, riferimenti, clip, narrazione, sottotitoli, finale) per rivedere o rifinire ogni artefatto prima di continuare, eventualmente con IA esterna o strumenti più potenti per un risultato preciso. La modalità automatica serve per generare liberamente da un’idea (vibe video generating); quella manuale per output chiaramente definiti con regolazione fine degli artefatti.
Errori di Agnes Video Generator: HTTP 503, token 401 e nuovi tentativi
Come risolvere gli errori di Agnes Video Generator: HTTP 503 «video queue is full», 401 token non valido, generazioni non riuscite o interrotte con ripresa dal checkpoint, requisiti di sistema e chiave API.
Voce fuori campo e sottotitoli: aggiungi narrazione e didascalie
La modalità digitale di trasmissione orale viene fornita con doppiaggio TTS e allineamento delle labbra. Inserisci la copywriting e pubblica direttamente il film senza elaborazione aggiuntiva; I normali video Vincent possono essere sottotitolati tramite strumenti di editing tradizionali. Questo articolo spiega chiaramente le capacità di doppiaggio e sottotitoli di ciascuna modalità, i passaggi di impostazione specifici e il confronto degli effetti del film, aiutandoti a creare rapidamente un video completo con una spiegazione.
Sources
This page's description of Jimeng's capabilities, the external-asset checkpoints, and the media normalisation rules is based on the following sources.
- 即梦 AI (Dreamina)：AI 图片与视频创作平台ByteDance · 即梦官网 (2025)
Jimeng (Dreamina) is the tool that generates picture and native audio in this workflow; its site is the basis for the advantages/trade-offs section of this page.
- agnes-video-generator — 开源 AI 视频生成项目lcy362 · GitHub (2026)
The external-asset implementation (checkpoint prompts, batch import, keep-audio concatenation) follows the project source: core/providers.py, web/routes/video_routes.py and utils/video.py.
- FFmpeg Documentation — 音视频处理官方文档FFmpeg 项目 · ffmpeg.org (2025)
Both normalisation on import (scale-and-pad, uniform frame rate, H.264/AAC) and subtitle burn-in concatenation are done by ffmpeg; parameter semantics follow the official documentation.
Perché puoi fidarti
Questo articolo è stato scritto da professionisti in prima linea. Durante la scrittura, ha controllato fonti di prima mano come documenti arXiv, rapporti tecnici dei produttori e Stanford AI Index. Non si basa su conclusioni basate su impressioni soggettive.
SandGrid@lcy362
Autore di Agnes Video Generator · Sviluppatore Full-Stack
Sviluppatore indipendente e autore di Agnes Video Generator, uno strumento di generazione di Video AI open source. Il progetto si basa sul modello video completamente gratuito di Agnes AI, con il protocollo MIT open source e ha aiutato oltre 1.000 creatori a produrre video AI a costi zero. Da tempo presto attenzione all'ingegneria e alla divulgazione dei modelli di generazione video e il contenuto dell'articolo deriva dalla pratica in prima linea e dalla ricerca di prima mano.
Vedi su GitHubUltimo aggiornamento：2026-08-21
Pronto per iniziare?
“Lascia che l’IA di livello mondiale appartiene a tutti.” – Bruce Yang. Completamente gratuito, nessuna carta di credito o scheda grafica ad alte prestazioni, crea il tuo primo video AI a costi zero. Vuoi usare il modello video gratuito di Agnes AI? Inizia da qui.
Clona il repository GitHub e avvia in 2 minuti