Közzététel: 2015. jún. 30.
Microsoft Research
https://www.youtube.com/channel/UCCb9_Kn8F_Opb3UCGm-lILQ

We present a new interactive approach to 3D scene understanding. Our system, SemanticPaint, allows users to simultaneously scan their environment, whilst interactively segmenting the scene simply by reaching out and touching any desired object or surface. Our system continuously learns from these segmentations, and labels new unseen parts of the environment. Unlike offline systems, where capture, labelling and batch learning often takes hours or even days to perform, our approach is fully online.

Read the paper:
http://research.microsoft.com/en-US/projects/semanticpaint/valentin2015semanticpaint.pdf

Main Contacts:
Shahram Izadi, Microsoft Research: shahrami@microsoft.com
Interactive 3D Technologies, Microsoft Research:
http://research.microsoft.com/en-us/groups/i3d/

Philip Torr, University of Oxford: philip.torr@eng.ox.ac.uk
Torr Vision Group, University of Oxford:
http://www.robots.ox.ac.uk/~tvg/


Minden jel arra utal, hogy a Microsoftnál olvassák a Playert. Éppen a múltkor panaszkodtunk rá az Intel RealSense kapcsán,
http://player.hu/tech-3/intel-realsense-3d-s-kamera/
hogy mennyire nem használják ki a tuti mozgásérzékelős kamerájuk (aka. Kinect) lehetőségeit, erre azonnal kidobtak egy demót, .... http://player.hu/tech-3/microsoft-semanticpaint-program/

A cuccot úgy hívják, hogy SemanticPaint, és gyakorlatilag azt tudja, hogy beszkennelheted a teljes szobát a számítógépbe, aztán szabadon átfestheted.

zzel persze kicsit leegyszerűsítettük a dolgokat, hiszen itt valójában három lépésről van szó, amiből talán jobban meg lehet érteni, hogy mire is lesz jó ez a technológia:

- Tehát beszkenneled a teret, ami lehet csak egy bútor, vagy egy egész szoba, amit a számítógép kezdetben egy oszthatatlan objektumnak lát.

- Ezután jössz te, aki hangirányítással megnevezi az egyes bútorokat, amelyeket a program ezután már külön tud választani, és kategóriákba is sorolja őket, így ha eleget tanítják, egy idő után képes lesz megkülönböztetni a székeket, az asztalt meg a konyhaszekrényt.

- Ennek köszönhetően a későbbiekben komplett 3D-s térképeket készíthetünk majd a környezetünkről, és ha elegen beszállnak, akkor akár az egész világról is.

Ez hatalmas segítséget jelenthetne például a látássérülteknek, de jól láthatóan ott van benne az a lehetőség is, hogy a Hololensszel
http://player.hu/tech-3/microsoft-hololens-kiterjesztett-valosag-szemuveg-bemutato/
kombinálva létrehozzunk egy olyan virtuális valóságot, ami gyakorlatilag a tökéletes tükörképe a valódi világnak.