Performance med computer ”Playing on a holo-stage: towards the interaction between real and virtual performers” Af Kia Ng, Vítor Sequeira, Emanuele Bovisio, Neil Johnson, David Cooper, João G.M. Gonçalves og David Hogg (UK/Italien) (2000) 1

Kort om forfatterne University of Leeds, UK European Commision – Joint Research Centre, Italien Forskningsinteresser: 3D Reconstruction Computer vision & Pattern Recognition: Learning & Analysis of Behaviour Augmented Reality & Tele-Presence 2

Opbygning og indhold Intro: gruppens bidrag: ’high performance computing’ kan med fordel anvendes i teater & live performance gruppens bidrag: Automatisk rekonstruktion af et hvilket som helst fysisk rum samt automatisk ’tracking’ af performance i ’virkelige’ rum præsentation af gruppens igangværende forskning/projekter 3

Igangværende projekter RESOLV projektet REconstruction using Scanned Laser and Video ikke oprindeligt designet til teater eller performance – men applicérbart resultatet http://www.scs.leeds.ac.uk/resolv/ 4

Muligheder – RESOLV Præcise og realistiske 3D-modeller oprindeligt fokuseret på interiør laser giver mulighed for også at ’indfange’ eksteriør fx anvendelse af bygningsværker som scenografi (’kulturarv’) mulighed for manipulation 5

Igangværende forskning ’Tracking performance & modelling behaviour’ På baggrund af videosekvenser kortlægning & fortolkning af performerens position, bevægelsesmønstre, mimik etc. Ud fra ’training data’ - fx generere ’3D virtual humans/VRML manikins’ Realistic behaviours can be randomly generated and applied to VRML manikins for animation” 6

Formål at fremme naturlig ’user-machine interaktion’ ”to equip a virtual human to interact in a natural way” Virtual immortality? 7

Gruppens mål Her - kobler ’performance’ og ’ performance space’ Håb om at udvikle en ’hybrid metode’ anvendelse af synsbaseret ’tracking’ sensorer der kan tracke bevægelse = skabe autonom 3D avatar ’Idealistic aim’ ”[…] to develop 3D computer models of artificial environments with virtual performers that can mimic, interact with and react to live performers.” 8

Sørensens Framework… Problem Domain: Problem Area: Human Interaction i VR Problem Area: Interaktion mellem virtuelle og virkelige aktører i et digitalt teater (holostage) anvendelse af 3D scenografi 9

…Sørensens framework Research Approach What have others done? Empirisk, konstruktivt What have others done? refererer til og henter belæg i projekter og forskning, der bidrager og understøtter Acknowledgement: partners of RESOLV consortium Research Results Tekst = Bidrag til udvikling af et interaktivt VR miljø for ’performance art’ (bl.a. muligheder med RESOLV) 10

En videnskabelig artikel… Samler trådene fra forskellige projekter Underbygger med referencer til såvel forfatternes egne/andres forskning/projekter Præsentation af forskellige igangværende projekter – som anslået i ’abstract’ – ’state-of-the-art’ ’Idealistisk mål’ & visioner Helhedsudtryk Gennemgående vagt – hverken meget stærke eller ’flyvske’ påstande (alt følges op). Svært at overskue de beskrevne projekters omfang og grænser (flydende overgange) - komplekst Efterlader læser med spørgsmålet om, hvad præcis denne teknik kan bruges til? (Erstatning/supplement…) 11

Perspektivering Overordnet – 2 hovedaspekter 3D vs. VR diskussion fra sidst… 3D modellering som redskab… Overordnet – 2 hovedaspekter 1. Hvorfor anvende virtuel/3D scenografi? Virtuel (’Immersive’: laserteknik - applicerer 3D scenografi i rum) I teatret: fantasien allerede i spil – kulisser og andre virkemidler bidrager til oplevelsen.. 12

Dixon’s tekst ”Remediating theatre in a digital proscenium” En af mulighederne ved RESOLV er at mixe performance og 3D scenografi til output på et interface Dixon’s tekst ”Remediating theatre in a digital proscenium” Ritualer/immersive oplevelse knyttet til det at gå i teateret - lader sig ikke indfange på skærm Nødvendigt at skabe et andet udtryk til skærmen! - men optagelsen kan anvendes i et mix Oplevelsen vil til hver en tid være en ganske anden 13

2. Virtuel repræsentation Betydning af virtuel repræsentation diskuteres af Wennberg i ”Virtuel Life” Collective & physical sharing of experience Being immersed Able to interact as ’real-time avatars’ Hvilke muligheder - interaktion mellem virtuelle og virkelige aktører…….? I forhold til performance/generelt… 14

VR-teater projekt ’Orakel’ (VRmedialab): ”Orakel er verdens første virtual reality-teater-performance. En kombination af virtual reality, supercomputer, traditionelt teater og ny performance - og en hel del mere.” http://www.vrmedialab.dk/projects/orakel/orakel_hvader.htm 15