برای دستکاری اشیا در واقعیت مجازی، نیاز به یک هدست Oculus Touch یا دیگر کنترلرهای مجازی مانند دستبندها یا تانگ های دیجیتال استفاده کنید. اما برای رسیدن به تجربیات لمسی واقعی نیاز به اشیا واقعی دارید. اما این یک چالش محاسباتی محسوب می شود، زیرا سیستم نیاز به پیگیری دقیق هر کدام از آنها دارد. محققان مایکروسافت، USC و دانشگاه Waterloo کشف کردند با دستکاری اینکه چگونه بدن و جهان را در واقعیت مجازی می بینید، این کار را انجام دهید.  

برای نشان دادن روش، این تیم یک Kinect ردیابی دست راه اندازی کردند. در اولین تمرین، به کاربر سه مکعب واقعی در یک جدول نشان داده شد، اما بعد از اینکه هدست را وصل کرد دو عدد از آنها حذف شدند. سپس از افراد خواسته شد یکی از این سه شی فیزیکی را بگیرد، در حالی که فقط یک شی فیزیکی وجود داشت. با استفاده از body warping مخصوص، افراد دیدند که بازوی آنها به طور خیالی اشیا متعدد را برمی دارد و با گرفتن یک مکعب خیالی به آنها پاداش داده شد.
در مثال دوم، از افراد خواسته شد به دور نگاه کنند، با این کار جهان به طور ماهرانه تغییر داده شد به طوری که اشیا واقعیت مجازی با موقعیت مکعب واقعی مطابقت داده شدند. تکنیک سوم این body warping مخصوص و دنیای مجازی را برای مطابقت با جسم فیزیکی ترکیب کرد. این روش به هر دو صورت افقی و عمودی کار می کند، و به شما اجازه حرکت بلوک های اطراف را می دهد. این می تواند یک تکنیک مفید برای Minecraft است.

این تیم اعلام کرد که شرکت کنندگان در رویکرد ترکیبی سطح حضور بالاتری را نسبت به روش های دیگر گزارش کرده اند. این پژوهش در حال حاضر در همین سطح انجام شده و مشخص نیست چه زمانی مایکروسافت از این تکنیک در هولولنز یا سایر محصولات واقعیت مجازی استفاده خواهد کرد.