过去几年我们曾见过各种不同的UI技术，包括了红外眼球追踪（这项技术后来以某种方式进驻到智能手机中）以及极为精确的3D动作控制。今天，日本的富士通 （Fujitsu）展示了与众不同的UI现实增强技术：混合了扫描仪、摄像头及屏幕，用户可在中间部分用手与纸质文档进行交互操作，该系统名称超长叫做“通过手势及手指动作进行操作的下一代UI（Next- Generation UI Enabling Operations via Hand Gestures and Finger Movements）”。

富士通今天所展示的新项目让用户能与现实中的实体文档产生交互，就像以前在计算机屏幕上操作一样，将数字技术与现实生活做到了真正的结合。富士通演示了一款剪贴本应用，用户使用点击拖拽手势即可完成对文档内容的剪切，并且使用系统内置的摄像头保存我们在这张纸质文档上选择的图片。

另外一款相似的应用则实现了对日常便利贴的数字备份，随后对这些便利贴实现更方便的管理，如分组、移动等操作，无需保留实体便利贴，免除日常生活中贴得到处都是的麻烦。



另外此系统还能检测物体的深度，知道指尖所在的确切位置，实时通过简单的几何线条绘制出用户所做的手势及手指动作。其中一款演示中的应用能够通过检测用户手在整个系统的深度位置，进行CAD制图操作，虽然可能目前的操作仍然不及3D鼠标理想，但从创新的角度来看，这即是相当不错的突破和实际应用。





富士通还展示了构想中的一款方案，可在地图上帮助渴望进行旅行的用户提供不同的目的地视图。当把纸质的实体旅行手册放在这款设备摄像头之下时，投影仪会高亮显示手册中的不同区域，并且告诉你额外的旅游资讯。如果你对其中一部分感兴趣，可以点击放大，看看此位置的照片和视频，并还可将此兴趣点保存到剪贴板中。在进行保存后，展开纸质地图，系统即能够告知用户刚才保存的旅游地位于地图中的什么位置。



总体来说，演示中基本都在依靠剪贴板工作，而剪切板更像是众多应用的中转站。设备可以将实体文档中的图片和文字截取下来，无需用户进行繁琐的扫描工作，即可将真实世界的文档保存为电子档形式，或是与实体文档直接做交互。富士通表示，这款产品预计会在2014年投放市场，只是价格还未确定，不过工作人员透露所用的组件均为目前技术可及的设备，所以价格不至于过高。