Tecniche dei nuovi media integrati

Finalità

Il corso ha l’obiettivo di fornire le competenze tecniche e linguistiche necessarie per operare con i nuovi media sulle tipologie di informazione che il digitale consente di veicolare. Oltre all’integrazione audiovisiva, vengono analizzate anche quelle con informazioni solitamente non prese in considerazione in ambito espressivo, come qualsiasi dato codificabile digitalmente. Anche l’idea di integrazione viene considerata nell'accezione molto più ampia che i formati digitali permettono, sia offline che online.

Argomenti

Il corso tratterà in particolare le caratteristiche e le peculiarità tecniche di audio, immagini e dati digitali per comprenderne le possibilità di elaborazione ed eventualmente di autogenerazione. Oltre alla possibilità di una fruizione multimodale vengono prese in considerazione anche le tecniche che permettono di compiere elaborazioni peculiari dell’ambito digitale, come le trasformazioni computazionali e le transcodifiche fra formati. Il percorso parte dalle visualizzazioni statiche e passa per quelle parametriche e iterative, la grafica cinetica e interattiva, le transcodifiche fra grafica e suono e la visualizzazione di dati. Durante la trattazione tecnica viene sempre data molta attenzione alle possibili implicazioni percettive, cognitive ed espressive che le diverse possibilità analizzate comportano.

Didattica

A ogni lezione teorica del primo trimestre segue un’esercitazione pratica sugli stessi temi. Nel secondo trimestre le lezioni sono dedicate allo sviluppo di un progetto di integrazione audio-visuale o, previa discussione, basato su una diversa forma di integrazione fra media.

Le esercitazioni e il progetto vengono realizzati per il web attraverso il linguaggio p5.js, non specializzato nel montaggio audiovisivo ma aperto a un maggior numero di forme di integrazione digitale. Il codice viene scritto in Visual Studio Code con il supporto di OpenCode, un agente di programmazione (coding agent) open source che permette di usare diversi modelli linguistici di grandi dimensioni (LLM).

- Lev Manovich; "Il linguaggio dei nuovi media", Edizioni Olivares, 2002.

- Michel Chion; "L’audiovisione. Suono e immagine nel cinema", Lindau, Torino 2001.

- Dina Riccò; "Sentire il design - Sinestesie nel progetto di comunicazione", Carocci, 2008.

- M. Pometti, F. Tissoni; "Comunicare con i dati. L'informazione tra data journalism e data visualization", Ledizioni, 2018.

- B. Gross, H. Bohnacker, J. Laub, C. Lazzeroni; "Generative Design: Visualize, Program, and Create with JavaScript in p5.js", Princeton Architectural Press, 2018.

Altri testi o risorse online di approfondimento vengono comunicati durante il corso e sul sito:
https://codestesie.it/aa2627/tnmi/

L’esame consiste nella discussione del progetto sviluppato durante il secondo trimestre. L’avvenuta consegna e l’eventuale correzione di tutte le esercitazioni costituiscono una precondizione necessaria per l’ammissione all’esame.