{"id":35251,"date":"2021-07-23T17:03:37","date_gmt":"2021-07-23T15:03:37","guid":{"rendered":"https:\/\/www.monitor-radiotv.it\/w\/?p=35251"},"modified":"2021-09-30T13:22:50","modified_gmt":"2021-09-30T11:22:50","slug":"la-rai-e-la-realta-aumentata-ne-parla-davide-meda","status":"publish","type":"post","link":"https:\/\/www.monitor-radiotv.it\/w\/la-rai-e-la-realta-aumentata-ne-parla-davide-meda\/","title":{"rendered":"La RAI e la Realt\u00e0 Aumentata, ne parla Davide Meda"},"content":{"rendered":"
<\/div>\n

Realt\u00e0 aumentata (Augmented Reality) e intelligenza artificiale (Artificial Intelligence) sono concetti entrati nel lessico e nella prassi delle produzioni televisive negli ultimi anni. Uno sviluppo tecnologico che ha trovato una formidabile accelerazione in tempi di pandemia e di forzato rispetto del distanziamento tra le persone.<\/strong><\/p>\n

\"\"Una volta c’era solo lo statico chroma-key per catapultare i soggetti su uno sfondo virtuale, ma l’immagine dello sfondo non poteva interagire con il soggetto inquadrato in primo piano. Ora nella Realt\u00e0 Aumentata<\/strong> lo ‘sfondo’ si adatta alle variazioni della prospettiva di ripresa delle telecamere, i background a loro volta si modificano in armonia con il soggetto principale, creando una sensazione di\u00a0 coinvolgimento. In altre parole le immagini virtuali si “fondono”<\/strong> con le riprese delle telecamere. Questo \u00e8 reso possibile soprattutto da una serie di marker installati sul set di ripresa. Vengono riconosciuti dal software che elabora le immagini della telecamera e fanno agire di conseguenza in simbiosi le prospettive di soggetto inquadrato e sfondo virtuale. Con un diverso approccio tecnologico il risultato pu\u00f2 essere ottenuto rilevando i movimenti delle telecamere con una serie di encoder piazzati sulle camere stesse permettendo analogamente di armonizzare le riprese con gli inserimenti virtuali.\u00a0 I software che fanno ‘vivere’ la Realt\u00e0 Aumentata<\/strong> sono ancora pi\u00f9 sorprendenti se utilizzano anche applicazioni di intelligenza artificiale<\/strong>, ad esempio per il riconoscimento di immagini e facce<\/strong>. Lo vediamo in alcune riprese sportive: non appena il software riconosce una persona sono disponibili in regia le informazioni e le schede del personaggio inquadrato che possono andare ad arricchire la grafica delle riprese.<\/p>\n

\"\"<\/a>Soluzioni che aprano una serie di molteplici possibilit\u00e0 di utilizzo per il regista e ne esaltano la capacit\u00e0 creativa.<\/p>\n

Ne parliamo con Davide Meda<\/strong> che in RAI si occupa di Realt\u00e0 Aumentata e con la sua squadra ha sviluppato soluzioni ad effetto con scenografie virtuali di grande impatto.<\/p>\n

Le parole prendono vita<\/h3>\n

\"\"<\/a>“Nella trasmissione\u00a0 Le parole della settimana<\/strong>\u00a0su RAI 3, dove l’obiettivo era mantenere il focus della conversazione tra gli ospiti e il conduttore del talk sulla parola di cui si discute \u00e8 stato scelto un modo accattivante e non invasivo come sarebbe stato un cartello fisso, sfruttando la grafica 3d .\u00a0 <\/em>– afferma Meda – Con la parola di cui si discute sempre presente in scena e altri arricchimenti scenografici virtuali. Ci sono tre telecamere in realt\u00e0 aumentata, un braccio telescopico che dall’alto fornisce delle riprese che navigano all’interno della scena con effetto spettacolare, oltre a due camere a livello del pavimento che forniscono due prospettive diverse.<\/em><\/p>\n

\"\"<\/a><\/p>\n

\"\"<\/a>

Il ciclista intervistato viene teletrasportato all’interno del set virtuale<\/p><\/div>\n

Altro esempio \u00e8 il set virtuale delle interviste al Giro d’Italia<\/strong> con gli atleti che non potevano intervenire in studio perch\u00e8 tutto il ‘circo’ del giro doveva vivere “in una bolla” a causa del Covid. Quindi si \u00e8 scelto di teletrasportare virtualmente i corridori intervistati all’interno dello studio.<\/p>\n

Continua Davide Meda<\/strong>: “Sono perito elettronico e ho fatto la Scuola di Cinema di Milano, specializzandomi come tecnico audiovideo – prosegue Davide – ma la mia passione per la computer grafica risale agli anni in cui si utilizzava il computer Amiga”.<\/em><\/p>\n

\"\"<\/a>“Una volta in RAI nel 2004-2005 ha iniziato a lavorare per lo studio virtuale<\/strong>, dove ho acquisito le competenze legate alla creazione di scene virtuali tridimensionali e dei relativi sistemi di tracking per far s\u00ec che le immagini riprese dalle telecamere reali coincidano come prospettiva con gli elementi del virtual set. Dopo una decina d’anni di lavoro sul virtual set<\/strong>, nel 2015 ha realizzato una demo per uso interno per dimostrare le possibilit\u00e0 della realt\u00e0 aumentata anche al di fuori del set virtuale. Una semplice ripresa in un corridoio della RAI nella quale aveva inserito elementi virtuali. L’idea \u00e8 piaciuta molto e l’azienda ha con lungimiranza deciso di investire sulle realizzazioni in realt\u00e0 aumentata.”<\/em><\/p>\n

\"\"<\/a>Davide<\/strong> –\u00a0 “A distanza di meno di un anno dalla mia demo \u00e8 arrivata una grossa produzione: “The Voice of Italy<\/strong>. E’ andata molto bene perch\u00e9 inizialmente la richiesta della produzione era di fare quattro scenari di realt\u00e0 aumentata sulla base delle finali quindi per quattro concorrenti , in realt\u00e0 eravamo pronti prima e abbiamo iniziato a fare degli inserti anche durante le semifinali. Alla fine sono state pi\u00f9 di 20 realizzazioni di performance durante il programma.<\/strong><\/em><\/p>\n

Tutto live<\/h3>\n

“C’erano due telecamere con realt\u00e0 aumentata<\/strong>. C’era un braccio di 8 metri<\/strong> e una telecamera sul cavalletto<\/strong> che dava un altro punto di vista perch\u00e9 giustamente la realt\u00e0 aumentata si vedeva solo su queste due telecamere e il regista aveva bisogno di poterla sfruttare un po’ di pi\u00f9 che non da un solo punto di vista”.<\/em><\/p>\n

\"\"<\/a>Tecnicamente era organizzato con una workstation per ognuna delle due camere utilizzate<\/strong>. In questo modo l’operatore e anche\u00a0 il regista avevano la possibilit\u00e0 di vedere sempre la resa finita, completa di realt\u00e0 aumentata. Con altri sistemi nel passato, quando la tecnologia costava molto, bisognava condividere le risorse ed era necessario utilizzare una sola workstation che elaborava il segnale di pi\u00f9 telecamere<\/strong> costringendo il regista a vedere l’effetto finale della scena solo per la camera che era abbinata alla workstation in quel momento.<\/p>\n

“In un live questo rischia di non funzionare in maniera snella,<\/em> – continua Davide<\/strong> – pu\u00f2 rappresentare pi\u00f9 un ostacolo che un aiuto.\u00a0 Col passare degli anni la tecnologia si \u00e8 abbassata di costo \u00e8 ci ha permesso di lavorare one camera\/one station”.<\/em><\/p>\n

\"\"<\/a>\"\"<\/a>“Subito dopo the Voice ci sono state le Olimpiadi Rio de Janeiro 2016 e l\u00ec abbiamo utilizzato per la prima volta la realt\u00e0 aumentata su situazioni remote. La sfida \u00e8 stata quella di sensorizzare due telecamere, una era alla cosiddetta Platform allo stadio dell’atletica e un’altra era alla piscina del nuoto, a circa 10-15 km di distanza rispetto all’International Broadcast Center dove c’era tutta la parte impiantistica e hardware. I dati sono stati trasferiti tramite IP.\u00a0 Con il segnale di queste telecamere, quelle che la Rai utilizza per personalizzare l’evento, abbiamo realizzato degli inserti di realt\u00e0 aumentata, sensorizzandole opportunamente. Ad esempio nel nuoto segnalavano le corsie degli italiani, mentre nell’atletica abbiamo fatto degli inserti di alleggerimento (tipo segnalare il meteo con dei simboli), ma anche la visualizzazione grafica degli spazi all’interno dello stadio dove si svolgevano le gare delle varie discipline.<\/em><\/p>\n

Anche per le prossime Olimpiadi di Tokyo stiamo studiando una soluzione analoga.\u00a0 Oltre al nuoto e all’atletica organizzeremo un piccolo studio e altri inserti. La tendenza \u00e8 ormai questa: arricchire i contenuti delle riprese con una serie di informazione a video presentate in modo accattivante. La realt\u00e0 aumentata \u00e8 un nuovo linguaggio televisivo, efficace e legato a doppio filo alle immagini riprese dalle telecamere”.<\/em><\/p>\n

Realt\u00e0 Aumentata, la ciliegina sulla torta<\/h3>\n

Altra realizzazione importante\u00a0 della squadra Realt\u00e0 Aumentata di Rai\u00a0 \u00e8 Sanremo Giovani nel 2017<\/strong>. Ancora una volta tutto live con due bracci telescopici Tecnocrane e una camera sul cavalletto, pi\u00f9 tutto il sistema Televoto. Un lavoro veramente impegnativo perch\u00e8 concentrato in un’unica serata live con tutte le performance degli artisti, oltre al televoto.<\/p>\n

\"\"<\/a>Tra le ulteriori realizzazioni interessanti l’anno scorso ci sono state le cerimonie della Mostra del Cinema di Venezia<\/strong>, che verr\u00e0 realizzata anche per quest’anno, e poi due edizioni della Partita del Cuore.<\/strong><\/p>\n

Insomma la Realt\u00e0 Aumentata<\/strong> lavora molto sui grandi eventi “Perch\u00e8 – <\/em>dice Davide Meda<\/strong> – secondo me rappresenta proprio la ciliegina sulla torta che arricchisce di contenuti visivi una produzione”.<\/em><\/p>\n

Merita una menzione anche la Prima della Scala<\/strong> dell’anno scorso. In questo caso Davide Meda era supervisore collaborando con una societ\u00e0 esterna che lavorava gi\u00e0 sulle grafiche del LED Wall e gi\u00e0\u00a0 generava in quel occasione realt\u00e0 aumentata, la Rai per\u00f2 ha messo in piedi tutto il sistema di ripresa, il sistema di tracking delle tre camere e quindi ha dato poi il segnale di tracking alle workstation della societ\u00e0 di produzione che hanno prodotto il risultato finito. “In questo caso un lavoro non completamente live, perch\u00e8 con il problema del Covid e quindi senza il pubblico i vari inserti sono stati registrati in settimana e poi mixati nello spettacolo finale”.<\/em><\/p>\n

“L’esperienza e la specializzazione della RAI resta produrre live. Su questo la Rai ha un’esperienza che altri non hanno: lavorare live e lavorare registrati ovviamente sono sono due situazioni completamente diverse, non si pu\u00f2 rifare nel live una scena che non \u00e8 riuscita bene e quindi il lavoro\u00a0 \u00e8 molto pi\u00f9 complesso.”<\/em><\/p>\n

Tecnologie sempre in evoluzione<\/h3>\n

Viene in aiuto l’evoluzione della tecnologia: i motori di rendering sono sempre pi\u00f9 potenti e si sta passando dell’OpenGL alla UnrealEngine che permette di sfruttare tutte le possibilit\u00e0 di elaborazione delle immagini in tempo reale che fino ad ora erano limitate dai tempi di rendering.<\/p>\n

\"\"<\/a>Davide Meda:<\/strong> “La direzione \u00e8 quella di abbandonare l’Open GL<\/strong> che comunque si usa ancora tantissimo perch\u00e9 \u00e8 molto solido e collaudato e d\u00e0 la possibilit\u00e0 di lavorare veramente in tempo reale anche sulla modifica delle geometrie e delle texture cosa che invece la Unreal<\/strong> ancora non permette. Un testo, un dato statistico, un grafico che deve generarsi in tempo reale richiede ancora un’interfaccia un po’ complessa che non si pu\u00f2 collegare come \u00e8 possibile al momento fare ad esempio con Brainstorm<\/strong> che possiede un software di utilizzo e un’interfaccia votata al broadcast. Nasce\u00a0 come uno strumento progettato per i tempi del broadcast, quindi pensato per il live. L’Unreal nasce per soddisfare altre esigenze, soprattutto il gaming<\/strong>, e quindi certe operazioni necessarie nel broadcast live<\/strong> possono essere realizzate attualmente soltanto seguendo vie un po’ tortuose. Servono ancora degli sviluppi nella Unreal che vadano in sintonia con le esigenze del mondo broadcast.<\/em><\/p>\n

\"\"<\/a>

Workstation Brainstorm<\/p><\/div>\n

Per quanto riguarda i sistemi di tracking ci sono state tante evoluzioni partendo dal virtuale tuttora utilizzato negli studi Rai di Milano, anzi qui ho messo in piedi una Render Farm che permette di condividere le risorse utilizzate per la realt\u00e0 aumentata<\/strong>. Ad esempio per la Domenica Sportiva<\/strong> ci sono due telecamere e un braccio sensorizzati negli studi di Corso Sempione collegati in remoto con la Render Farm<\/strong> attrezzata con le workstation Brainstorm <\/strong><\/a><\/em>(ndr distribuite da For.A<\/a>)\u00a0che generano la grafica virtuale e producono il compositing finale in realt\u00e0 aumentata. Le stesse workstation sono cablate con lo studio virtuale di Milano<\/strong>. Una condivisione di risorse creata non tanto per ragioni economiche ma proprio per ottimizzare le modalit\u00e0 operative. In questo modo ci consente di lavorare in maniera indipendente sui progetti senza essere vincolati a un determinato studio. La Render Farm<\/strong> vive di vita propria e quando deve andare in onda viene collegata allo studio virtuale piuttosto che a quello della Domenica Sportiva<\/strong> o ad altri studi secondo le necessit\u00e0.”<\/em><\/p>\n

Tracking ottico o meccanico<\/h3>\n

Per tornare al discorso del tracking<\/strong> , nel Virtual Set Rai<\/strong> c’\u00e8 un sistema ottico per quanto riguarda la posizione della telecamera e anche il suo orientamento di pan tilt<\/strong>, mentre per zoom e focus<\/strong> ci sono degli encoder meccanici. I sistema ottici danno una gran libert\u00e0 di movimento rispetto ai meccanici, per\u00f2 risentono molto dei fattori esterni. Se ci sono impallamenti o delle luci potrebbero non essere precisi oppure perdere dei riferimenti.<\/p>\n

\"\"<\/a>“Io prediligo al momento sistemi meccanici quando facciamo le installazioni che sono al di fuori dei perimetri aziendali<\/strong>, ma anche nelle Parole della Settimana<\/strong> c’\u00e8 un sistema meccanico, ovvero\u00a0 una serie di encoder rotativi che intercettano i movimenti della telecamera, quindi su un braccio c’\u00e8 l’ encoder del pan e tilt del braccio stesso, sulla testa pan e tilt e poi sull’ottica zoom e focus. In totale su un braccio ci sono 6 encoder che vengono mandati in un box che fa il calcolo trigonometrico per ottenere la posizione precisa della camera. Bisogna settare bene tutte le componenti ma alla fine questi sistemi meccanici sono molto affidabili e robusti”.<\/em><\/p>\n

Infine la realt\u00e0 aumentata \u00e8 approdata recentemente anche al TG1<\/strong>, per ora solo nei cosiddetti ‘lanci’ del preserale, ma l’intento \u00e8 quello di adottarla anche durante il telegiornale. “E’ un lavoro molto complesso, soprattutto dal punto di vista operativo perch\u00e8 il tg \u00e8 in onda 365 all’anno e le squadre che gestirebbero la Realt\u00e0 Aumentata<\/strong> sarebbero tante e nel caso andranno addestrate tutte in modo appropriato”.<\/em><\/p>\n

\"\"<\/a>In uno studio virtuale la situazione \u00e8 abbastanza statica<\/strong> quindi una volta installato si continua alavorare con questo sistema. In situazioni estemporanee di eventi, magari outdoor i sistemi ottici al momento non sono spesso la soluzione migliore perch\u00e9 richiedono dei marker<\/strong> che vanno posizionati o sul soffitto o sul pavimento oppure bisogna inventarsi delle cose che possono essere delle reti con dei piccoli marker. Sono situazioni un po’ precarie.<\/p>\n