
Tech • IA • Robotique • Jeu
Un flux de travail combinant Claude Code, Remotion, Whisper et FFmpeg peut automatiser une grande partie du montage de vidéos courtes en transcrivant la parole, en coupant les silences, en synchronisant les sous-titres mot par mot et en générant des animations à partir de code.
Le montage de formats courts représentait la plus grande part du temps de production, un clip de 50 secondes demandant 2 à 3 heures pour les coupes, les sous-titres, les effets sonores et des animations simples. Une vidéo longue de 20 minutes pouvait prendre un à deux jours complets. Une grande partie de ce travail consistait en tâches répétitives comme couper les silences, supprimer les prises ratées et aligner sous-titres et animations image par image.
Les grands modèles de langage ne produisent pas directement des fichiers vidéo finalisés et n’opèrent pas manuellement des timelines de montage. Leur avantage pratique dans ce flux tient à la génération de code. En décrivant ce qui doit se produire à des moments précis, comme un compteur qui démarre à 3 secondes ou une carte qui entre avec rebond à 4 secondes, le système convertit ensuite ce code en vidéo rendue.
L’outil de rendu central est Remotion, un framework open source qui génère de la vidéo à partir de code et produit un vrai MP4. Des outils similaires existent, notamment Hyper Frames, mais Remotion est ici utilisé comme moteur principal pour l’animation et la mise en page. Comme les visuels sont définis de façon programmatique, le style et le timing peuvent être modifiés rapidement sans refaire le montage à la main.
Plutôt que de demander un nouveau montage depuis zéro à chaque fois, l’installation repose sur un environnement de production personnalisé construit autour d’assets réutilisables. Cela inclut une bibliothèque de plus de 60 animations, plusieurs styles visuels, des règles de rythme et des vérifications automatisées. En pratique, l’étape manuelle restante se réduit largement à l’enregistrement des images.
Le flux de travail repose sur Claude Code, Remotion, Whisper et FFmpeg. Claude Code fonctionne localement sur un ordinateur, crée des fichiers, lance des programmes et coordonne le processus. Whisper, développé par OpenAI, transcrit la parole et fournit un timing au niveau du mot, tandis que FFmpeg gère le traitement technique comme la coupe des silences, le recadrage et le mixage audio. Les outils eux-mêmes sont présentés comme gratuits à utiliser, la partie payante étant l’accès à Claude Code.
La précision du timing des sous-titres et des animations dépend d’une transcription qui marque l’instant exact où chaque mot est prononcé. Ce timing permet aux sous-titres d’apparaître mot par mot et aux éléments visuels nommés de se déclencher sur le mot concerné. Un modèle de transcription plus performant peut être nécessaire pour un timing fiable en français, surtout si l’on vise une sortie entièrement automatisée.
Le processus d’installation met l’accent sur la prudence, notamment la vérification des téléchargements, l’identification de l’origine des paquets et l’exécution d’audits de sécurité. La gestion des paquets se fait avec PNPM, et des fichiers de configuration sont utilisés pour limiter les risques liés à des téléchargements non sûrs ou compromis. L’approche reflète des préoccupations plus larges concernant les malwares dans les outils de développement en ligne et la nécessité de valider ce qui est installé sur une machine locale.
Un test initial peut déjà identifier les pistes vocales, traiter un fichier enregistré et assembler un short basique avec sous-titres et coupes. Cependant, ce premier résultat n’est présenté que comme un point de départ. L’écart de qualité entre un montage automatisé fonctionnel et un clip social abouti reste important sans raffinement supplémentaire.
Pour pousser davantage la qualité, le système peut être orienté pour imiter le rythme, les transitions, les zooms, le cadrage et le style de sous-titres de clips performants sur des plateformes comme TikTok et Instagram. La recommandation n’est pas de copier aveuglément, mais de s’inspirer de façon ciblée de formats qui captent déjà l’attention. Des design systems existants et des dépôts publics GitHub peuvent aussi être importés pour élargir les styles d’animation disponibles.
Les choix automatisés d’effets sonores restent un point faible. Pour améliorer cette couche, des bibliothèques libres de droits comme Mixkit peuvent fournir de meilleurs assets audio, et l’IA peut être sollicitée pour préciser quel type d’effet doit être téléchargé. Avec le temps, des corrections répétées et de meilleures sources peuvent nettement améliorer le résultat final.
Le montage automatisé peut supprimer une grande partie du travail répétitif derrière la production de vidéos courtes, en particulier pour les sous-titres, la suppression des silences et les animations synchronisées. L’avantage concurrentiel se déplace alors de la vitesse de montage manuel vers la qualité du système créatif, des références et des assets qui alimentent le flux de travail.
Poser une question