The Mandolarian est une série issue de l’univers de Star War et bourrée d’effets spéciaux en tous genres .
La plupart des critiques semblent d’accord sur la qualité de cette série et son originalité. C’est surtout la manière dont cette série a été réalisée qui représente un véritable changement bien plus important, peut-être le plus important depuis l’écran vert dans le monde du cinéma et de la réalisation audiovisuelle . La technologie de pointe (littéralement) derrière “The Mandalorian” crée une nouvelle norme et un nouveau paradigme pour les médias – et le public n’en sera pas privé .
Mais alos quelle est cette nouvelle technologie magique qui révolutionne la production et la réalisation de films et de séries ? C’est une évolution d’une technique utilisée depuis près d’un siècle sous une forme ou une autre : afficher une image en direct derrière les acteurs. L’avancée n’est pas dans l’idée mais dans l’exécution : une confluence de technologies qui redéfinit la « production virtuelle » ou virtual production pour les anglophones et donnera du pouvoir à une nouvelle génération de créateurs.
Comme détaillé dans un rapport paru dans The American Cinematographer Magazine, le processus de production de “The Mandalorian” est complètement différent de tout avant, et il est difficile d’imaginer qu’une production cinématographique majeure n’utilise pas cette technologie à l’avenir.
Officiellement appelé Stagecraft, il mesure 20 pieds de haut, 270 degrés autour et 75 pieds de large – l’environnement de tournage virtuel le plus grand et le plus sophistiqué jamais créé. ILM vient de publier aujourd’hui une vidéo des coulisses du système utilisé, ainsi qu’un certain nombre de nouveaux détails à ce sujet.
Ce n'est pas facile d'être écolo
En termes de cinéma, un « volume » fait généralement référence à un espace où la capture de mouvement et la composition ont lieu. Certains volumes sont volumineux et intégrés dans des décors, comme vous l’avez peut-être vu dans les images des coulisses des films Marvel ou Star Wars. Certaines sont des affaires plus petites et plus simples, où les mouvements des acteurs derrière les personnages de CG jouent leurs rôles.
Mais ils ont généralement une chose en commun : ils sont statiques. Des étendues géantes, vertes et vierges.
L’une des choses les plus difficiles pour un acteur dans le cinéma moderne est d’entrer dans le personnage tout en étant entouré de murs verts, de blocs de mousse indiquant les obstacles à peindre plus tard et de personnes avec des points mocap sur le visage et des costumes avec des balles de ping-pong attachées. Sans oublier que tout a des reflets verts qui doivent être éclairés ou colorés.
Les progrès réalisés il y a quelque temps (pensez à l’ère préquelle de Star Wars) ont permis aux caméras d’afficher une pré-visualisation approximative de ce à quoi ressemblerait le film final, en remplaçant instantanément les arrière-plans et les personnages CG sur les moniteurs. Bien sûr, cela aide à la composition et au mouvement de la caméra, mais le monde du film n’est pas là, tel qu’il est avec les décors pratiques et les tournages sur place.
De plus, en raison des limites de rendu du contenu CG, les mouvements de la caméra sont souvent limités à une piste de travelling ou à quelques plans présélectionnés pour lesquels le contenu (et l’éclairage, comme nous le verrons) a été préparé.
Ce volume particulier, appelé Stagecraft par ILM, la société qui l’a assemblé, n’est pas statique. L’arrière-plan est un ensemble d’énormes écrans LED comme vous avez pu en voir sur scène lors de conférences et de concerts. Le volume Stagecraft est plus grand que n’importe lequel d’entre eux, mais plus important encore, il est plus intelligent.
Vous voyez, il ne suffit pas de montrer une image derrière les acteurs. Les cinéastes font ça avec des arrière-plans projetés depuis l’ère du muet ! Et c’est bien si vous voulez juste avoir une fausse vue depuis une fenêtre de studio ou simuler un emplacement derrière une prise de vue statique. Le problème survient lorsque vous voulez faire quelque chose de plus fantaisiste que cela, comme déplacer la caméra. Parce que lorsque la caméra bouge, il devient immédiatement clair que l’arrière-plan est une image plate.
L’innovation dans Stagecraft et d’autres murs LED plus petits (le terme plus général pour ces arrière-plans) n’est pas seulement que l’image affichée est générée en direct en 3D photoréaliste par de puissants GPU, mais que la scène 3D est directement affectée par les mouvements et les paramètres de la caméra. Si la caméra se déplace vers la droite, l’image change comme s’il s’agissait d’une scène réelle.
Ceci est remarquablement difficile à réaliser. Pour que cela fonctionne, la caméra doit envoyer sa position et son orientation en temps réel à, essentiellement, une bête de PC de jeu, car cette configuration et d’autres configurations similaires fonctionnent généralement sur le moteur Unreal (Epic fait sa propre ventilation du processus ici). Cela doit prendre ce mouvement et le restituer exactement dans l’environnement 3D, avec des changements de perspective, d’éclairage, de distorsion, de profondeur de champ, etc. assez rapides pour que ces changements puissent être affichés sur le mur géant presque instantanément. Après tout, si le mouvement de l’arrière-plan retardait la caméra de plus d’une poignée d’images, cela serait perceptible même par le spectateur le plus naïf.
Pourtant, la moitié des scènes de “The Mandalorian” ont été tournées dans Stagecraft, et je suppose que personne n’en avait la moindre idée. Intérieur, extérieur, mondes extraterrestres ou cockpits de vaisseaux spatiaux, tous utilisaient ce volume géant dans un but ou dans un autre.
Il existe d’innombrables avancées technologiques qui ont contribué à cela; “The Mandalorian” n’aurait pas pu être fait comme il y a cinq ans. Les murs n’étaient pas prêts ; la technologie de rendu n’était pas prête ; le suivi n’était pas prêt — rien n’était prêt. Mais c’est prêt maintenant.
Il faut dire que Jon Favreau est depuis des années le moteur de cette méthode cinématographique ; des films comme le remake de “The Lion King” étaient en quelque sorte des essais technologiques pour “The Mandalorian”. Combiné aux avancées de James Cameron dans le cinéma virtuel, et, bien sûr, au travail de l’infatigable Andy Serkis en motion capture, ce genre de production ne devient réaliste que maintenant du fait d’un concours de circonstances.
Pas seulement pour SFX
Bien sûr, Stagecraft est probablement aussi l’environnement de production le plus coûteux et le plus complexe jamais utilisé. Mais ce qu’il ajoute en frais généraux technologiques (et il y en a beaucoup), il est plus que rentable en toutes sortes d’avantages.
D’une part, cela élimine presque les prises de vue sur place, qui sont extrêmement coûteuses et chronophages. Au lieu d’aller en Tunisie pour obtenir ces plans désertiques à grande ouverture, vous pouvez construire un décor sablonneux et mettre un désert photoréaliste derrière les acteurs. Vous pouvez même combiner ces idées pour le meilleur des deux mondes : envoyez une équipe pour repérer des lieux en Tunisie et capturez-les en 3D haute définition pour les utiliser comme arrière-plan virtuel.
Cette dernière option produit un avantage secondaire étonnant : les reprises sont beaucoup plus faciles. Si vous avez filmé dans un bar à Santa Monica et que les changements de dialogue signifient que vous devez refaire la scène, inutile de vous disputer les permis et de rallumer minutieusement le bar. Au lieu de cela, la première fois que vous y êtes, vous capturez soigneusement toute la scène avec l’éclairage et les accessoires exacts que vous aviez là la première fois et vous les utilisez comme arrière-plan virtuel pour les reprises.
Le fait que de nombreux effets et arrière-plans puissent être rendus à l’avance et tournés à huis clos plutôt que composés ultérieurement permet d’économiser beaucoup de temps et d’argent. Il rationalise également le processus de création, avec des décisions pouvant être prises sur place par les cinéastes et les acteurs, puisque le volume est réactif à leurs besoins, et non l’inverse.
L’éclairage est une autre chose qui est grandement simplifiée, du moins à certains égards, par quelque chose comme Stagecraft. Le mur LED lumineux peut fournir une tonne d’éclairage, et parce qu’il représente réellement la scène, cet éclairage est précis pour les besoins de cette scène. Un intérieur éclairé en rouge d’une station spatiale, et les étincelles habituelles qui tombent, etc., montrent du rouge sur les visages et bien sûr le casque hautement réfléchissant du Mandalorien lui-même. Pourtant, l’équipe peut également le modifier, par exemple en collant une ligne blanche brillante haut sur le mur LED hors de vue de la caméra, mais qui crée une mise en évidence agréable sur le casque.
Naturellement, il y a des compromis. À 20 pieds de haut, le volume est grand mais pas si grand que les plans larges ne captureront pas le haut, au-dessus duquel vous verriez des caméras et un type différent de LED (le plafond est aussi un écran, mais pas aussi puissant ). Cela nécessite de la rotoscopie et de la post-production, ou limite les angles et les objectifs avec lesquels on peut filmer — mais c’est vrai pour n’importe quelle scène sonore ou volume.
La taille des LED, c’est-à-dire des pixels eux-mêmes, limite également la distance à laquelle la caméra peut s’en approcher, et bien sûr, vous ne pouvez pas zoomer sur un objet pour une inspection plus approfondie. Si vous ne faites pas attention, vous vous retrouverez avec des motifs moirés, ces rayures que l’on voit souvent sur les images d’écrans.
Stagecraft n’est pas la première application des murs LED – ils sont utilisés depuis des années à plus petite échelle – mais c’est certainement de loin le plus médiatisé, et “The Mandalorian” est la première véritable démonstration de ce qui est possible en utilisant cette technologie. Et croyez-moi, ce n’est pas un cas isolé.
On m’a dit que presque toutes les maisons de production construisent ou expérimentent des murs LED de différentes tailles et types – les avantages sont si évidents. Les productions télévisuelles peuvent économiser de l’argent, mais elles sont tout aussi belles. Les films peuvent être tournés selon des horaires plus flexibles. Les acteurs qui détestent travailler devant des écrans verts peuvent trouver cela plus acceptable. Et vous feriez mieux de croire que les publicités trouveront également un moyen de les utiliser.
En bref, dans quelques années, il sera rare de trouver une production qui n’utilise pas de mur LED sous une forme ou une autre. C’est la nouvelle norme.
Ceci n’est qu’un aperçu général de la technologie sur laquelle travaillent ILM, Disney et leurs nombreux partenaires et fournisseurs. Dans un article de suivi, je partagerai des informations techniques plus détaillées directement de l’équipe de production et des technologues qui ont créé Stagecraft et ses systèmes associés.
Comprendre et prendre en main une nouvelle technologie
Il existe de nombreuses façons pour les marques d’utiliser la technologie du liveshopping. Du côté de la faible maintenance, Instagram et YouTube peuvent être utilisés pour interagir avec les consommateurs sur le moment. Cependant, cela a tendance à être une option moins rémunératrice car il existe des moyens limités de personnaliser l’apparence et l’expérience au sein de la plate-forme, mais il existe déjà un public important avec lequel s’engager.
Offrir une plate-forme ou une page d’achat en direct sur mesure sur le site Web d’une marque peut créer une expérience shopping personnalisée. Le contrôle des fonctionnalités ciblées telles que les carrousels de produits, les sondages et les questions-réponses signifie que l’engagement global est beaucoup plus élevé. L’utilisation d’une plate-forme sur mesure offre une solution entièrement personnalisée, par exemple LEGO® CON 2021, bien qu’elle n’offre aucune option achetable est parfaitement intégrée à leur site Web principal, garantissant une expérience client transparente et une interaction optimale.
