Un muro di televisori accesi. Le immagini non scorrono uguali per tutti: cambiano a seconda di come lo spettatore si comporta davanti a loro. Non c’è un montaggio fisso da guardare, c’è un sistema che risponde.
Si chiama ROMA CAMPIONATA, è un video-wall interattivo costruito da Flavio Taggi durante il percorso di Game & Interactive Design, ed è stato fatto con TouchDesigner. Partiamo da qui per spiegare cos’è questo software, perché se ne parla sempre di più e cosa ci si costruisce davvero.
ROMA CAMPIONATA — progetto di Flavio Taggi. Video-wall interattivo: lo spettatore sceglie come vivere la storia.
Cos’è TouchDesigner, in parole semplici
TouchDesigner è un ambiente di programmazione visuale per la grafica in tempo reale, sviluppato dalla canadese Derivative. Serve a costruire cose che reagiscono: installazioni, proiezioni, scenografie di concerti, video-wall, visual per spettacoli dal vivo.
La differenza con un programma di montaggio o di animazione è tutta lì. In un software di montaggio costruisci un risultato finito, uguale a ogni riproduzione. In TouchDesigner costruisci un sistema che genera il risultato mentre gira, e che può cambiare in base a un suono, a un movimento, a un sensore, a un dato che arriva dalla rete.
Per questo si dice che è uno strumento da real-time: non esiste un file finale da esportare, esiste un progetto che va in esecuzione.
Come si ragiona per nodi
Non si scrive codice riga per riga, si collegano blocchi. Ogni blocco fa una cosa e passa il risultato al successivo, e il progetto prende la forma di una rete che si legge da sinistra a destra.
I blocchi sono divisi in famiglie, e capirle è metà del lavoro.
- TOP, che lavorano sulle immagini: video, effetti, composizioni, tutto quello che è pixel.
- CHOP, che lavorano sui segnali: audio, movimento, dati di un sensore, valori che cambiano nel tempo.
- SOP, che lavorano sulla geometria tridimensionale.
- DAT, che gestiscono testo, tabelle e script.
- MAT e COMP, cioè materiali e componenti, che servono a rendere e a organizzare il progetto in pezzi riutilizzabili.
Il momento in cui il software si capisce davvero è quando colleghi un CHOP a un TOP: un suono che diventa il movimento di un’immagine. È l’esercizio con cui quasi tutti cominciano, ed è anche il motivo per cui in giro si vedono tanti visual che pulsano a ritmo di musica.
Chi vuole spingersi oltre trova Python integrato, quindi la parte scritta c’è, ma non è obbligatoria per iniziare.
Cosa ci si costruisce davvero
L’elenco è più lungo di quanto si immagini, e quasi sempre riguarda cose che esistono fuori da uno schermo di computer.
Installazioni interattive in musei, fiere, spazi pubblici, dove il visitatore modifica quello che vede. Proiezioni architettoniche, cioè il mapping su edifici e superfici irregolari. Scenografie per concerti e spettacoli, con visual che seguono la musica dal vivo. Video-wall e retail, come nel progetto qui sopra. Virtual production, dove contenuti generati in tempo reale finiscono sui LED wall dei set. E tutta l’area dei dati in scena: numeri che arrivano da una fonte esterna e diventano immagine mentre cambiano.
È il motivo per cui questo strumento sta tra due mondi: non è solo grafica e non è solo programmazione, è progettazione di esperienze.
È gratis?
Esiste una licenza non commerciale gratuita, ed è con quella che si studia e si prototipa. Ha dei limiti, in particolare sulla risoluzione massima in uscita e su alcune funzioni avanzate, ma per imparare e per costruire i primi progetti è più che sufficiente.
Per l’uso professionale ci sono licenze a pagamento, con una versione dedicata a chi studia. I prezzi cambiano nel tempo, quindi la cosa sensata è controllarli sul sito di Derivative prima di fare conti.
Gira su Windows e macOS, e chiede una scheda grafica decente: è un software che disegna immagini sessanta volte al secondo, non un editor di testo.
Da dove si comincia
Il consiglio che diamo a chi parte da zero è sempre lo stesso: costruisci una cosa piccola che risponde a un suono, e falla funzionare davvero.
Non serve conoscere la matematica dei segnali per iniziare, serve capire che tutto quello che entra nel sistema è un numero che cambia nel tempo: il volume di un microfono, la posizione di una mano, un valore che arriva da un sensore. Quando accetti quell’idea, la logica dei nodi diventa naturale.
L’errore classico è l’opposto: partire dall’installazione monumentale immaginata nella testa, lavorarci tre settimane e non finirla mai. In questo campo, come nel game design, dieci prototipi brutti ma funzionanti insegnano più di un progetto ambizioso mai concluso.
Dove si impara, alla DAM
TouchDesigner rientra nella parte di sistemi interattivi del triennale in VFX, Game & Interactive Design, dove si lavora sul progetto interattivo dall’idea al prototipo funzionante, fino all’installazione mostrata dal vivo.
ROMA CAMPIONATA nasce lì, come LUMINA di Karen T. Vitao, un lavoro costruito con fasci di luce, fumo e suono. Sono due strade diverse verso la stessa competenza: far uscire il progetto dallo schermo. Il quadro completo del percorso sta nella pagina del dipartimento Game & Interactive Design, e chi arriva da un interesse per gli effetti visivi trova il ponte tra i due mondi in come diventare VFX artist.
Il prossimo passo
Questo articolo racconta cos’è e a cosa serve. Il passaggio successivo è metterci le mani: nelle prossime settimane pubblicheremo un tutorial in italiano, passo per passo, per costruire il primo progetto audio reattivo con le schermate del software.
Nel frattempo, se vuoi vedere dal vivo un’installazione interattiva e la macchina che la fa girare, il modo più rapido è passare a un Open Day.