Virtuele 3D-voorwerpen met de hand oppakken

Medewerkers van Microsoft Research hebben Holodesk ontwikkeld, een systeem dat het mogelijk maakt om virtuele driedimensionale voorwerpen op te pakken en te verplaatsen. Het systeem herkent en reageert bovendien op de aanwezigheid van ‘echte’ voorwerpen als een vel papier of een omgekeerd kopje.

De ontwikkelaars  van de groep Sensors and Devices vertellen niet veel over de werking van hun nieuwe gebruikersinterface, maar het bestaat uit een grote kast met een overheadscherm dat via een beamsplitter en 2D-beeld projecteert op een vlak eronder. Een Kinect camera detecteert de positie van de  handen van de gebruiker in de virtuele 3D-omgeving.   Een webcam volgt het gezicht van de gebruiker om te helpen bij de plaatsingsnauwkeurigheid en speciale algoritmen brengen alles (bijna) onvertraagd samen.

De gebruiker kijkt via een transparant display naar het actieve gebied waar de virtuele voorwerpen kunnen worden opgepakt en gestapeld – zelfs op echte voorwerpen. Zo kunnen echte handen jongleren met virtuele ballen of spelen met een niet-bestaande smartphone. De ontwerpers schijnen ook de mogelijkheid te hebben ingebouwd om op afstand samen te werken aan gedeelde multi-user virtuele projecten.

Microsoft Research maakte een proof-of-concept video, waarin is te zien dat de beeldkwaliteit nog niet volmaakt is en dat er ook nog wel wat plaatsings- en tracking-problemen zijn, maar duidelijk is dat er enorme mogelijkheden zijn in bijvoorbeeld gaming, educatieve toepassingen en bij productontwerp.