北京时间3月1日消息,据国外媒体报道,电脑天才李镇河(Jinha Lee)在TED大会上演示了3D桌面环境SpaceTop。使用这种系统,你可以直接跟虚拟桌面交互,可以伸手到投影出来的3D空间中,用你自己的手直接操作窗口。李镇河在微软应用科学部门(Microsoft Applied Science)实习期间以及之后开发了这个系统。
李镇河现在是麻省理工学院(MIT)的博士生,去年曾因为ZeroN吸引了人们关注;ZeroN是一个悬浮的3D小球,可以记忆用户与小球交互时的轨迹,并对其进行再现。李镇河在前往微软应用科学部实习后,推出了他最新开发的数字3D环境。在这个3D环境中,用户可以把手伸进电脑“屏幕”(3D投影),抓取网页、文档和视频,就像抓取现实世界中的物品一样。而且用户还可以用手势触发更高级的任务。
SpaceTop 3D的组件包含一个透明的LED显示屏和两个深度摄像头(depth camera):其中一个摄像头跟踪用户的手势,另一个摄像头追踪用户面部的位置,以调整投影上的视角和视差。
融合3D显示界面与3D手势控制
SpaceTop 3D目前仍处于早期阶段,但它点亮了迈向“质的飞跃”的道路,这种飞跃在计算机界面领域十分罕见。人们花了几十年的时间,才从命令行界面进化到图形用户界面和苹果的Macintosh,又花了几十年时间,才从Mac发展到iPhone和iPad的触摸界面。像李镇河这样的创新者将更快地把我们带向下一次革命。
沿着类似路线前进的其他人也不少:微软Kinect,三星智能电视平台,以及像Leap Motion 和SoftKinect这样的初创公司都采用了基于手势的控制方式。同时,三维显示界面也出现在了爱荷华大学的Leonar3Do项目和Kickstarter的游戏项目Oculus Rift中。
李镇河的SpaceTop把3D界面与3D手势控制这两条发展路线汇集到了一起,这种明智的做法以后可能会变得更加常见。李镇河在TED大会上发言时说,SpaceTop和ZeroN是一个更加广泛的趋势的一个组成部分,这个趋势就是发展一种我们可以用自己的双手抓取的界面。人们在开展协作的时候,似乎更愿意采用实体界面(比如比例模型、地图或白板),而且人们也喜欢“多形态”交互,比如读一本书,在单词下划线,用铅笔在页边空白处涂画,并在一个本子上做笔记。
但是如今的计算机把所有的交互都“压扁”在了一个屏幕上,既不提供实体界面,也不支持“多形态”交互。
给世界编程
李镇河在接受记者采访时说:“如果你能让电脑在同一个工作流程中接受‘多形态’交互,效果就会大大改善。对于体育活动来说,比如你怎么跳舞,怎么打球 —— 会出现一些数字形式的改善方法,来帮助你提高技巧。”
在TED大会上,李镇河演示了SpaceTop和ZeroN,以及一支可折叠的笔。这支笔看上去可以“推入”到计算机显示屏里面,实际上是笔自己折叠了起来,而显示屏上显示笔的一端越来越深地陷入到显示屏中的影像。李镇河还播放了一个视频,内容是用户使用一个智能手机应用和增强现实(augmented reality)眼镜,在一家网店“试戴”虚拟的手表。 李镇河说,这些系统之间的共同之处,是它们将实体世界和数字世界紧密地联系起来,为用户提供自动化的实体交互,他把这种交互称为“给世界编程(programming the world)”。
“‘给世界编程’甚至会改变我们的日常身体活动,”他告诉听众说: “因为我们的两只手可以探入到数字世界中。”
这种类型的用户体验是否会继续小众下去 —— 积极接纳它的主要是建筑师、遗传学家和其他3D设计师和研究人员 ——还是有可能成为一种主流,目前尚不清楚。人们已经习惯在电脑鼠标、键盘和平板电脑屏幕上活动手指和手腕了,大家是否真的有耐力把手伸到计算机里去活动胳膊呢?
对于这个问题,李镇河的看法是:3D界面可能不会取代适合写电子邮件或消费视频的“懒惰型”界面。但在有些情况下 —— 开展协作、进行设计、以及有了3D界面后可能会出现的新活动(比如试穿虚拟的衣服)——提供3D交互就很合适。
良好的开局
像SpaceTop和ZeroN这样的系统要想获得成功,细节非常重要,比如用户的胳膊要伸多远,什么时候建议用户使用3D界面比较合适等等,所以,这项技术值得一些善于“精炼”技术的公司关注,比如微软,甚至是苹果——平板电脑曾经被人们冷落在一边,默默无闻,是苹果公司“精炼”并普及了平板电脑。现在,3D计算似乎会有一个良好的开局。
“它不应该掌握在科学家的手里,而是应该掌握普通人的手里,” 李镇河说。 “因为我们打算用它做的事情,是设计一个美丽的世界,所以记得这一点非常重要。当数字的力量超越屏幕的束缚时,它的发展会有各种各样的可能性,但是我们大家应该一起来设计这个美丽的世界,这是我们的责任。”
另外,李镇河个人网站上的信息显示,他目前已经从MIT媒体实验室请假,前往三星公司开发下一代计算界面,以从事非军事性勤务的方式代替服兵役。