Jocul și compozitorul filmului Sage Lewis spune că nimeni nu înțelege scrisul pentru VR încă

Pentru muzicianul clasic instruit Sage Lewis, tehnologia pune o provocare. Deși compozițiile sale au apărut în anunțurile pentru Google, Facebook și Nintendo, Lewis rămâne constant cu sunete acustice. "Există ceva despre cvartetul de coarde și despre principalele instrumente acustice, care exprimă atât de multă emoție", spune el la telefon. "Nu poți să-ți exprimi asta cu muzica electronică în același mod".

Dar poate că și-a dat seama. La South by Southwest, cele mai recente scoruri ale lui Lewis - teatrul tehnic Operator cu Martin Starr (Silicon Valley) și Mae Whitman, și thrillerul VR Surrogatul - să abordeze înțelegerea în continuă schimbare a interactivității umane cu tehnologia revoluționară. Scorurile lui Lewis, o combinație de electronică și acustică reflectă aceste schimbări seismice.

Regizat de Logan Kibens, Operator urmează un programator de calculator care construiește un bot service pentru clienți folosind soția sa ca șablon înainte de a lua o cale obsesională, distructivă, construită pe dragoste. Surrogatul, între timp, este o experiență VR de la o vedere de prima persoană care expune o căsătorie tulbure. Nominalizat pentru premiul Interactiv Innovation Award la festival, Surrogatul "Problematizează noțiunea de prezență fizică și reflectă … temerile și necazurile culturale din epoca digitală".

Înainte de festivalul Austin, Lewis a vorbit Invers și ne-a povestit cum a compus una dintre pietrele ascunse ale lui SXSW și cum sunt în continuare scrise regulile pentru compunerea VR.

La SXSW anul acesta, aveți Operator și Surrogatul. Ce puteți să-mi spuneți despre înțelegerea dvs. a celor două proiecte?

Este incitant, sunt două filme care sunt similare în povestirile lor, dar foarte diferite în formă și modul în care sunt experimentate. Ambele au de a face cu tehnologia, o relație cu și cum interferează cu relațiile reale din viața noastră personală. Intereseaza inteligenta artificiala si unde vom merge in viitor.

Tehnologia și relațiile umane sunt teme populare, evidențiate în asemenea lucruri A ei și Oglinda neagra. Cum v-ați apropiat de scorul dvs.? Operator ?

Tehnologia mediază comunicările noastre din ce în ce mai mult, dar unde am putea merge, relațiile noastre nu sunt doar cu un alt om, ci cu un algoritm. A fost distractiv să lucrăm pe aceste teme muzicale, scorul are un ansamblu de cameră cu un cvartet de coarde, pian, chitară acustică, set de tobe și percuție. Apoi, există o latură electronică întreagă, fiecare instrument electronic fiind hărțuit direct pe cealaltă parte a acusticului. Noi le-am recreat din nou cu un sintetizator modular. Asta a creat un scor care a putut să exprime aceste emoții pe cale electronică.

Având în vedere modul în care aceste filme sunt atât de importante în ceea ce privește tehnologia, de ce ați inclus sunete naturale și clasice în Operator ?

Pentru mine era vorba de două lumi coexistente, una virtuală și una naturală, și cum coexistă în armonie și în conflict, luptând în același spațiu. Era important să ai piese. Dacă aveți două lucruri împotrivă, fiecare face mai puternic. Muzica electronică sună mai electronic atunci când este în contextul muzicii acustice. Calitatea ceva naturală poate suna chiar și mai natural când îl puneți pe ceva foarte nenatural.

De ce a fost partea ta preferată Operator a înscrie?

Sunt câteva scene frumoase ale lacului Michigan, unde personajul, Joe, merge în fiecare zi. El își măsoară datele de sănătate, merge la Lacul Michigan și ia o fotografie. Există o scenă în care erau: "Aceasta este una dintre piesele cele mai importante ale filmului. Asta e tot tu, Sage. "Muzica a trebuit să fie și simplă, nu spunea cu multe gesturi. Au fost doar câteva minute ale câtorva gesturi care erau ușor de pus și că te-ar putea lovi cu adevărat în inimă. Asta a fost cea mai interesantă pentru mine.

Cum compuneți o experiență subiectivă în VR față de un film cum ar fi Operator ?

Este interesant pentru că nimeni nu înțelege cum să o facă. Nicăieri nu o puteți studia, nici măcar pentru a verifica alte proiecte VR pentru a vedea ce au făcut, pentru că încă nu este accesibil. Sunt o mulțime de a te imagina. Avem propriile noastre căști Oculus pe care le-am folosit pentru a dezvolta acest lucru. Uneori mergem la conferințe VR pentru a vedea alt conținut, dar în cea mai mare parte, este un produs care nu a lovit încă piața.

Ce zici de jocurile video, pe care ai lucrat - și de asemenea sunt experiențe tehnologice subiective?

În unele privințe, este vorba de jocuri video, dar experiența este diferită. Surrogatul nu este un joc, ci un "film interactiv", care a făcut o treabă foarte bună, imaginând un nou teritoriu al VR. Este de 12 minute lungime, este sferică, adică mai degrabă decât un cadru de 16x9 pe care îl găsești în film oriunde te uiți, în spatele tău, în sus, în jos, poți să te plimbi. Este acest hibrid de CG împușcat cu o cameră sferică, cu caractere reale. Nu sunt avatare.

Pe măsură ce mergeți în jur, o parte din muzică a fost folosită în întreg timp pentru a susține narațiunea. Există și acest alt tip situat în spații. Dacă te duci în acel spațiu, o vei auzi, dar dacă nu ești, nu o faci. Există o mulțime de care aveți nevoie să comunicați atunci când sunteți într-un film pentru a face povestea de lucru, astfel încât oamenii să nu rateze părți importante, dar în VR nu aveți control asupra utilizatorului. Utilizatorul poate umbla oriunde.

Scorul în VR ajută la comunicarea arcului emoțional, indiferent dacă acestea acordă o atenție deosebită performanței sau nu. Trebuie să utilizați scorul pentru a aduce lucrurile împreună pentru că nu aveți control. Acest lucru este interesant pentru mine, deoarece pe plan intern, în caracterul pe care îl ai în interior, este un thriller psihologic pentru acel personaj din mintea și corpul lui, dar în lumea exterioară nu este. Oamenii se mișcă și vorbesc, nu un thriller regulat cu acțiune.

Unghiile camerelor în filme comunică narațiune și temă, care intensifică muzica. În VR, se pare că muzica face toată munca.

E greu să-ți dai seama că, atunci când compun, nu pot să-l experimentez. Nu pot demonstra acest lucru, deoarece nu puteți compune setul cu cască. Într-un film, îl puteți urmări, pune muzică și îl puteți viziona din nou și o grămadă de oameni se așează împreună și vorbește despre asta.

VR este similar cu teatrul de fapt. Unii oameni au locuri bune, unii au scaune proaste. Se uită la toate unghiurile. Din perspectiva muzicală, știi cum se vor sincroniza lucrurile. Nu trebuie să ghiciți cum vor simți pe scenă când lucrați la ea. În VR ghiciți, imaginându-vă în minte, materialele pe care le referiți, care vă ajută să vă informați despre cum ar trebui să se arate lucrurile și să se simtă la sfârșit.

Nu a fost niciodată terminat. Pur și simplu se schimbă. Surrogatul, tocmai am terminat să facem cea mai recentă actualizare a acestuia. Apoi, vom continua să lucrăm la ea pentru o lungă perioadă de timp pe baza a ceea ce învățăm. Lucrurile sunt mai lent pentru că vă bazați pe programatori, lucrurile se rupe tot timpul în interiorul sistemului. Este atât de diferit.

Cât timp credeți că va fi necesar ca compozitorii să găsească ritmul muzicii în VR?

Imaginând cum să scrieți muzică pentru VR va dura atât timp cât vă imaginați celelalte elemente. Cred că trei până la cinci ani până când începe să ajungă la un punct în care lucrează și face parte din viața fiecăruia. În acest an, VR va merge pe piață. Probabil că va dura mai mulți ani pentru a îmbunătăți prototipul și pentru a afla cum să creați conținut, dar văd că se întâmplă în jurul anului 2020, când este o formă bine dezvoltată. Filmul a durat mult timp. Au fost mari filme de la început, Charlie Chaplin și așa ceva, dar dezvoltarea acestei tehnologii a durat mult timp până la vârsta de aur. Suntem departe de asta, dar se întâmplă acum. Vom începe să vedem asta anul acesta. Este interesant.