dinsdag 24 juni 2008

conclusie

Van de verschillende technieken die ik heb onderzocht denk ik dat Augmented Reality de meeste potentie heeft. Het combineren van echte beelden met daarover heen een virtuele laag van computer gegenereerde beelden accepteren we beter dan een ruimte die zich volledig afspeelt in de virtuele wereld.

Vaak zie je bij films waarbij echt opgenomen beelden gemixt worden met CGI ( computer generated images ) geloofwaardiger overkomen dan films die volledig met de computer zijn gemaakt. Als je de films Cloverfield en Beowulf met elkaar vergelijkt vind ik dat een film zoals Cloverfield aannemelijker ( tenminste in hoeverre je een groot monster dat door New York heen dendert aannemelijk kan nemen ) is dan Beowulf. In Cloverfield hebben ze live-action ( echte beelden ) gecombineerd met CGI terwijl Beowulf volledig in 3d gemaakt is. Ze hebben voor de laatst genoemde film acteurs in een speciaal soort pak gehesen en vervolgens hun bewegingen ( van het acteren) overgenomen met tracking points ( deze techniek wordt ook wel mocap of terwijl motion capture genoemd ). Vervolgens hebben ze de acteurs ook digitaal gescand zodat zij in een virtuele ruimte geplaats kunnen worden. Toch heb je als kijker het gevoel dat er iets niet klopt. Hoe realistisch de bewegingen ook zijn en hoe nauwkeurig de acteurs ook zijn gemodelleerd. Aan Gollem in de Film Lord of The Rings of het monster in Cloverfield stoor je je veel minder. Dit heeft naar mijns inziens met een aantal zaken te maken:

- Er bestaat (nog) geen even realistische weergave van de werkelijkheid als de werkelijkheid zelf
- Willen wij als kijkers kijken naar animaties films die zo realistisch zijn als de werkelijkheid of kijken we dan liever naar live-action films.


Juist omdat films zoals Beowulf of Final Fantasy – The Spirits Within trachten om zo realistisch mogelijk over te komen ga je je als kijker storen aan hele kleine dingen die dan net niet kloppen. Het menselijk oog is zeer gevoelig voor beweging, vandaar dat je je er aan gaat storen zodra subtiele bewegingen net niet kloppen. Neem zoiets emoties. Goede acteurs hebben daar jarenlang voor geoefend. Dan is het de kunst van de animator om een in eerste instantie levenloos karakter leven in te blazen. Door middel van mocap kun je hier wel dicht bij komen maar een animator moet daar zeker nog aanpassingen aan verrichten.

Om deze redenen denk ik dat een techniek als Virtual Reality (nog) niet goed genoeg is om volledig te accepteren dat je als kijker echt deel neemt aan een film. Tenminste als dat je doel is als filmmaker. Sinds de tijd dat we schilderen zijn gaan maken hebben we als beeldmakers de neiging als om alles te kadreren. Maar dat komt ook simpelweg doordat de techniek het toen nog toeliet om het op een andere manier op te kunnen te lossen.

Dit geldt hetzelfde voor de techniek stereovison. Er wordt wel een extra dimensie toegevoegd aan het beeld, maar je hebt in dit geval ook “last” van kadrering. Zodra je als kijker je hoofd maar 90 graden draait ben je al “uit” de film.

De uitdaging die er voor mij ligt als beeldmaker met de huidige technieken is het vinden van nieuwe mogelijkheden om een verhaal te kunnen vertellen. Zowel vernieuwd in de zin van interactie met het publiek als de kijker proberen volledig te kunnen onderdompelen in de ervaring. Er word sinds enige tijd geëxperimenteerd met verhalen opslaan in databases om vervolgens het publiek te laten kiezen hoe een verhaal dan zou kunnen gaan lopen. Dit soort interactie werkt naar mijn idee gewoon nog niet omdat zodra je als kijker op een knopje moet drukken om vervolgens verder te gaan in het verhaal je uit de filmervaring wordt getrokken. Op dat moment realiseer je dat je een toeschouwer bent en dat je niet echt deel uitmaakt van de film. Eigenlijk wil je als kijker het gevoel hebben dat je helemaal geen hulpstukken hoeft te gebruiken om deel uit te kunnen maken van een andere realiteit. Dat is ook tevens het kritiek wat ik heb over de technieken Virtual Reality en Augmented Reality. Voor beide technieken geldt dat je hulpstukken nodig hebt om je te verplaatsen in die andere realiteit. Toen Jan Torpus tijdens zijn presentatie zijn living-room project liet zien, zag je dat hij een enorm apparaat op zijn hoofd had. Natuurlijk zullen dit soort apparaten in de toekomst steeds kleiner en efficiënter worden, maar we moeten toe naar een systeem waar wij als kijkers zo min mogelijk last van hebben. Vergelijk het maar met dromen. Sommige dromen kunnen zo realistisch zijn dat je echt het gevoel hebt dat je je bevindt in een andere wereld. Zonder hulpstukken. Puur natuur. Wat dat betreft zou een systeem zoals te zien in de matrix, de ultieme ervaring kunnen zijn. Als we films zouden kunnen maken in de vorm van een droom, waarin de kijker zich dus totaal kan overgeven aan die film. Waarom zou je bijvoorbeeld nog op vakantie gaan, als je een ervaring kan creëren alsof je je op dit moment echt in Barcelona bevindt. Niet alleen visueel, maar ook met geluiden en geuren erbij. Wat zou dan nog de noodzaak zijn om je fysiek te willen verplaatsen met alle rompslomp eromheen? Als we onze zintuigen wat dat betreft op zo’n manier voor de “gek” kunnen houden, dan kunnen we ons lichaam ( en geest ) hierdoor manipuleren.
Ik denk dat er nog veel onderzoek gedaan moet worden naar de invloed van onze geest op ons lichaam.

De techniek Augmented Reality is nog verre van perfect maar als beeldmaker zijn er wel interessante mogelijkheden om een verhaal te vertellen. Je kan de kijker direct invloed laten hebben op een scène door middel van attributen te plaatsen in het virtuele ruimte die direct invloed zouden kunnen hebben op die ruimte. Stel de slechterik op het punt staat om iets heel ergs akeligs te doen en jij kan dat voorkomen door hem neer te schieten met een pistool die zich daar ergens in de ruimte bevindt dan heb je direct invloed op het verloop van de film. Wellicht moet je als beeldmaker dan de mogelijke uitkomsten daarvan kunnen voorspellen en die in een database structuur gooien. Zodat de verhaallijn op dat moment een andere weg inslaat. Wat dat betreft verschilt deze manier van een film ervaren niet eens zo veel met het spelen van een game. Ik denk ook dat deze twee vormen van kunst steeds meer naar elkaar toe gaan groeien. In de games industrie wordt er als sinds een aantal jaren meer geld gegenereerd dan in de filmindustrie. Ik hoop dat het een mooi huwelijk wordt.

maandag 23 juni 2008

Augmented Reality: presentatie door Jan Torpus

Mediakunstenaar Jan Torpus presenteert op de Willem de Kooning Academie tijdens een crossLab lunchevents een aantal projecten die hij met AR heeft gemaakt. Waar ik zelf het meest van onder de indruk was, is zijn living-room project. Door middel van een helm en een soort van bril die je opzet krijg je allerlei virtuele objecten/kleuren/ animaties etc te zien in een bepaalde ruimte waardoor de realiteit volledig kan worden veranderd. Zo kan je dus zoals in dit voorbeeld je hele huiskamer re-stylen zonder maar een kwast aan te raken. Ook kan je de ruimte van je huiskamer ( virtueel ) veel groter maken dan hij in werkelijkheid is. Op die manier zou je je kamer een veel meer ruimtelijk effect kunnen geven. Wat dan wel jammer is, is dat je er fysiek niet heen kan lopen want de werkelijke fysieke ruimte van de kamer heeft uiteraard wel zijn beperkingen. Door middel van kleur kan je de sfeer die de kamer heeft compleet veranderen. Je kan de kamer in een keer van compleet blauw naar geel veranderen. Er zijn vele studies gedaan over hoe bepaalde kleuren je gemoedstoestand kan beinvloeden. Op die manier kan je als je bijvoorbeeld gestrest van werk komt, de kleur van je kamer aanpassen zodat je na een aantal minuten weer volledig tot rust kan komen.

Het living-project kan je hier vinden:
link

Op de website van Jan Torpus kan je nog een aantal van zijn projecten vinden:
Link

Vergeet suffe powerpoint presentaties!

Een leuke toepassing van augmented reality. Tijdens deze lezing laat de spreker goed zien wat hoe we augmented reality zouden kunnen gebruiken voor een presentatie.

Artikel en een filmpje van de presentatie zijn hier te vinden:

www.extendlimits.nl


Op deze pagina is er een opsomming van linkjes te vinden van allerlei onderzoeken naar augmented reality. Hier vind je ook allerlei wetenschappelijke publicaties over dit onderwerp


Links:

http://www.se.rit.edu/~jrv/research/ar/

Nieuw materiaal slaat hologrammen binnen enkele minuten op

Dit artikel gaat over een nieuw soort beelddrager om holografische beelden makkelijk op te kunnen slaan. Het maken van holografische beelden is op zichzelf niet zo vernieuwend maar wetenschappers zijn nu in staat om in tegenstelling tot gebruikelijke materialen de beelddrager herschrijfbaar te maken. Nu duurt het nog een aantal minuten om het beeld te verversen maar in de toekomst kunnen ze de beelddrager sneller wissen en herschrijven zodat je net als bij een "normale" tv beelden sneller kan laten zien. Wellicht hebben we in de nabije toekomst holografische tv's. In het artikel staat ook een stukje vermeld over de mogelijke toepassingen die wetenschappers al bedacht hebben:


De wetenschappers zien toepassingen van de holografische techniek in onder meer de gezondheidszorg en opleidingen voor luchtmachtpersoneel. Aangezien het gebruikte materiaal relatief goedkoop te produceren is en dankzij thin-film technieken geen inherente grootte-restricties kent, zouden levensgrote afbeeldingen, bijvoorbeeld een holografische afbeelding van een mens om een chirurg te ondersteunen bij een operatie, geen probleem moeten zijn. Een quicktime-filmpje waarin de onderzoekers hun technologie tonen, is op de site van de Universiteit van Arizona beschikbaar.

bron: tweakers.net
Het gehele artikel is hier te vinden: link

Voor de nieuwe generatie beeldmakers is het natuurlijk interessant om te onderzoeken hoe wij deze nieuwe technologie zouden kunnen gebruiken voor het maken van "nieuw" soort feuture films/documentaires/animaties etc. Ik ga hier later dieper op in.

woensdag 23 april 2008

Pentagon: 'Augment' Reality with 'Videogame' Contact Lenses

Het Pentagon komt met een artikel hoe ze Augment Reality kunnen gebruiken om hun soldaten nog beter te kunnen uitrusten. Zo kunnen ze door middel van een lens allerlei informatie projecteren op het netvlies. Je zou dan bijvoorbeeeld belangrijke objecten kunnen hightlighten. Hierdoor gaat oorlog voeren haast steeds meer op een first-person shooter lijken.

Artikel

Toy Story films get 3D makeover


Typisch geval hoe Hollywood de industrie "uitmelkt". Met een nieuwe techniek gaan ze een remake maken van een oude film in dit geval Toy Story. In plaats dat Pixar een nieuw soort film bedenkt waarmee ze techniek naar een hoger niveau zouden kunnen tillen maken ze remake. Jammer, maar misschien beschouwen ze deze productie als een soort van test hoe ze de techniek in de toekomst beter kunnen inzetten.

Het artikel kan je hier vinden.

Stereovision

Movie industry members give their views on digital technology demonstrated at Pinewood Studios.

Filmpje