Studio Modulo
R&D d'une solution de décors virtuels 3D pour tournage live sur fond vert.
- Travail Réalisé
-
Conception et développement d'une solution de décors virtuels (Unity, NodeJS, Cinema4D, OpenCV). Choix de matériel informatique et vidéo. Support technique de l'équipe vidéo durant les tournages.
Utilisation de matériel Panasonic, PTZOptics, DataVideo. Et des solutions OBS et Wirecast.
- Année
-
2018
- Crédits
-
Réalisé au sein de l'agence Modulo. En collaboration avec François B. pour le calibrage et tracking des caméras.
Le studio
En 2018, Modulo a fait construire un studio fond vert dans ses locaux. Et afin de pouvoir y réaliser des émissions en live, j'ai profité d'un temps libre pendant l'été pour développer une solution de décors virtuels en temps réel.
Le POC Unity3D
La première étape pour le système de décors virtuel a été de récupérer en temps réel les positions Pan/Tilt/Zoom des caméras robot que nous avions, puis de les appliquer à une caméra virtuelle dans Unity3D. De longs moments à décrypter la documentation avec François et à essayer de calibrer les valeurs via OpenCV pour le zoom. Mais ça a fini par payer.
J'ai aussi imaginé un système de triangulation pour positionner les caméras virtuelles à l'identique des réelles : pointer 3 marqueurs situés dans le studio avec la caméra, récupérer les angles pan/tilt correspondants puis, avec quelques formules, il est possible de calculer les positions X, Y et Z relatives.
Changement de solution
Un an après avoir développé notre POC interne, qui a tout de même permis de lancer l'offre, je suis tombé sur la solution hongroise Aximmetry au détour d'une recherche sur le web.
Conquis par la polyvalence de l'outil et son prix abordable, je me suis chargé de monter en compétence afin de créer de nouveaux décors et de déployer la solution. L'occasion de mettre au placard ma mouture de logiciel de décors virtuel, mais surtout d'étoffer l'offre du Studio Modulo avec des possibilités quasi infinies.
J'ai poursuivi mon accompagnement technique du pôle vidéo pour les émissions réalisées avec Aximmetry. De la customisation des décors à la présence sur place lors des tournage.
