CineGen‑AI : Générateur de manga et de vidéo open source

CineGen‑AI : Générateur de manga et de vidéo open source

Si vous êtes créateur de comics, animateur ou simplement un conteur curieux de technologie, vous avez sans doute constaté à quel point il est chronophage de transformer une simple phrase en une séquence animée polie. CineGen‑AI (disponible sur GitHub à Will‑Water/CineGen‑AI) relève ce défi en proposant un flux de travail orienté keyframes qui maintient la narration serrée tout en accélérant la production.


Qu'est‑ce que CineGen‑AI ?

CineGen‑AI est un studio de production AI de bout en bout construit en TypeScript/React, conçu pour créer des comics animés, de l'anime et de courts drames sans backend dédié. La plateforme combine :

  • Google Gemini 2.5 Flash pour l'analyse de script haute qualité, la génération de prompts visuels et l'inférence image‑à‑image.
  • Veo 3.1‑Fast‑Generate‑Preview pour l'interpolation instantanée de keyframes, transformant des images statiques en vidéos fluides.
  • IndexedDB pour le stockage local, garantissant confidentialité et déploiement sans coût.

Le résultat est un outil de niveau industriel qui permet aux utilisateurs de passer directement d'un brouillon de roman à un fichier MP4 quasi‑final.


Fonctionnalités clés

Phase Description Outils clés
1 – Script & Storyboard Saisir un plan de story; le modèle le découpe automatiquement en scènes, attribue les ambiances et génère un prompt prêt storyboard. Gemini‑flash (texte)
2 – Assets & Casting Génère des fiches de référence de personnages et des concept arts de décors, avec variantes vestimentaires et caractéristiques faciales cohérentes. Gemini‑flash‑image
3 – Table de travail du réalisateur Les utilisateurs conçoivent une grille de prises, spécifient les keyframes Début et Fin, et s'appuient sur une génération contextuelle pour éviter les erreurs de continuité. Veo‑interpolate
4 – Export Aperçu en temps réel, suivi d'avancement et export de keyframes haute résolution ainsi que de bundles clips MP4 prêts pour Premiere ou After Effects. Exportateurs intégrés

Pourquoi orienté Keyframes ?

Les modèles texte‑vers‑vidéo (TTV) traditionnels peinent à gérer la continuité de scène et l'ordre des prises. CineGen‑AI oblige l'utilisateur à dessiner d'abord, animer ensuite :

  1. Dessiner : Générer les images exactes de début et de fin pour chaque prise. Ces images sont verrouillées et respectent la cohérence des personnages et du décor.
  2. Animer : Veo interpolera entre les deux images, produisant une vidéo qui conserve la composition et l'éclairage de chaque keyframe.

Cette approche donne des comics animés qui ressemblent à des mouvements naturels, où chaque frame paraît intentionnel et visuellement cohérent.


Guide rapide de mise en route

  1. Cloner le dépôt
    git clone https://github.com/Will-Water/CineGen-AI.git
    cd CineGen-AI
    
  2. Installer les dépendances
    npm install
    
  3. Configurer votre clé API – Créez un fichier .env à la racine ou définissez GM_API_KEY dans votre shell.
    echo "GM_API_KEY=VOTRE_CLÉ_GEMINI" > .env
    
  4. Lancer l'application
    npm run dev
    
  5. Accéder à l'interface – Ouvrez http://localhost:5173 dans votre navigateur.

Une fois l'application en cours, vous pouvez commencer à rédiger une histoire en phase 1, générer des assets en phase 2, et parcourir le storyboard en phase 3. Quand vous êtes satisfait de la séquence, cliquez sur Export pour obtenir votre MP4 et vos assets PNG.


Cas d’usage

  • Créateurs indépendant de comics – Publiez un récit finalisé sur des plateformes comme Instagram ou Webtoon plus rapidement.
  • Étudiants en animation – Prototypage de scènes et test d'angles caméra avant d'investir dans une animation complète.
  • Créateurs de contenu éducatif – Produisez des histoires visuelles engageantes pour des sujets scientifiques ou historiques.
  • Représentants de démos et pitch decks – Générez rapidement une courte démonstration animée d'un produit ou d'un concept.

Étendre CineGen‑AI

Étant open source, la communauté peut contribuer :

  • Intégrer d'autres back‑ends de modèles (par ex. Stable Diffusion pour d'autres styles artistiques).
  • Créer de nouveaux plugins pour d’avancées rigs de caméras ou de suivi de mouvement.
  • Contribuer aux fichiers de localisation pour davantage de langues.

Si vous trouvez un bug ou avez une idée, ouvrez une issue sur GitHub – le projet accueille les contributeurs !


Réflexions finales

CineGen‑AI est plus qu’une démo ; c’est un studio AI complet, prêt à la production, qui remet le contrôle aux conteurs. Avec un accent sur la cohérence, la rapidité et la confidentialité, il ouvre une nouvelle frontière pour la création de comics et d'animation.

Essayez-le aujourd'hui, partagez vos créations et aidez à façonner l'avenir du storytelling alimenté par l'IA.


Ressources | Ressource | Lien | |----------|------| | Dépôt GitHub | https://github.com/Will-Water/CineGen-AI | | Site demo | https://aniktku.com (en construction) | | Documentation | Fichiers README en plusieurs langues (en, zh, ja, ko) |


CineGen‑AI : Conçu par des créateurs, pour des créateurs.

Original Article: Voir l’original

Partager cet article