Computerwetenschappers van de Universiteit van St. Andrews hebben een smartphone-app ontwikkeld die de camera aan de voorzijde van het apparaat gebruikt om te herkennen op welk soort oppervlak het zit.

De app heet SpeCam en sluit aan op een bestaande database van materialen. Wanneer het een bepaald oppervlak detecteert, kan het een specifieke actie activeren. De onderzoekers suggereren dat je het zou kunnen activeren om jazz te spelen wanneer het op de bank wordt geplaatst, of om muziek te dansen op een salontafel.

Multi-Spectral

Zijn acties zijn niet beperkt tot muziek. Als je telefoon overgaat en je legt hem met de afbeelding naar beneden op je laptop, dan kan er een bericht verschijnen met de tekst 'sorry, ik ben in vergadering', maar als je hem in plaats daarvan in je zak steekt, kan dit een ander bericht sturen - misschien suggereren dat de beller contact opneemt met een collega.

Het werkt door het scherm van het apparaat te gebruiken als een multispectrale lichtbron en de camera aan de voorzijde om vervolgens de reflectie te vangen van het materiaal waarop het is geplaatst. Nadat het scherm door verschillende kleuren is gefietst, kan het materiaal worden gedetecteerd. Je kunt het hier in actie zien:

Discreet computergebruik

"Dit is een voorbeeld van wat we Discreet Computing of discrete interactie noemen, waar subtiele en onopvallende gebruikersacties kunnen resulteren in geheel nieuwe vormen van interactie," zei hoofdonderzoeker professor Aaron Quigley, voorzitter van Human Computer Interaction bij St Andrews.

"Door materialen te trainen en te herkennen, worden alle oppervlakken om ons heen een canvas voor onze verbeelding."

Hui Yeo, die een bijdrage leverde aan het onderzoek, voegde hieraan toe: "Het doel is om nieuwe vormen van interactie te verkennen voor gebruik met één hand, die kunnen profiteren van wat mensen al doen met apparaten, zonder nieuwe hardware aan het apparaat toe te voegen."

A zal worden gepresenteerd op de 19e internationale conferentie over mens-computerinteractie met mobiele apparaten en diensten, ACM SIGCHI MobileHCI 2017 op 6 september in Wenen, Oostenrijk.

  • Astronaut Peggy Whitson keert terug naar de aarde na een recordbrekend verblijf in de ruimte