英特尔® 实感™ 技术

(之前为英特尔感知计算技术)

现推出:  率先打造沉浸式体验。    请下载 面向 Windows 的英特尔® 实感™ SDK* (2014 年黄金版),并预订您的开发人员套件。

RealSense

创建可利用您的一般感观的应用 

开发人员的机遇

个人电脑问世已有数十年之久,但是这一路走来它究竟变得有多“人性化”呢? 您与您电脑交互的方式跟与朋友或家人交流的方式一样吗? 您的电脑能够理解您的沟通方式吗? 您利用电脑工作和娱乐时,比较直观还是不便? 在英特尔,我们认为人机交互比较麻烦,因此我们过去几年一直都在研究如何让电脑更具人性化。 为了创建一个真正自然的界面,我们必须首先让电脑像人类一样感知世界。我们推出的软硬件组合即是英特尔® 实感™ 技术。

英特尔实感技术能够理解四种重要的交流模式:手部、面部、语音以及周围的环境。 这可以通过英特尔实感 3D 摄像头来实现,它可以像人的眼睛一样感知深度。 如果您有兴趣了解英特尔实感技术到底能做什么, 您可以直接访问我们的技 技术网站。果您是一名软件开发人员,我们可以告诉您一些振奋人心的好消息:英特尔实感 SDK 支持您轻松利用我们的独特硬件和出色软件来创建您自己的应用。 不止于此,2014 年,英特尔实感™ 3D 摄像头还将会与超极本、笔记本电脑、2 合 1 设备和一体机广泛集成。

 

打造客户期待的体验

集成式 3D 摄像头的上市令我们兴奋不已,但软件开发人员更应该为此高兴。 在 2012 年和 2013 年,英特尔实感技术还被称为感知计算。那时客户必须另外购买 3D 摄像头才能体验英特尔感知计算技术支持的应用。 随着戴尔、惠普、联想、华硕、富士通、NEC 和宏基等厂商系统纷纷搭载集成式 3D 摄像头,基于英特尔实感 SDK 构建的应用将可运行在广泛的系统上,这对开发人员而言意味着巨大的机遇。

我们都知道,软件专业人员是技术行业内最富有创造力的人才,所以我们迫切期待他们发掘我们未曾实现的用途。那么,英特尔实感 SDK 支持哪些功能呢?

总体分类

功能

关于

手部

空中操作界面元素! 该 SDK 可追踪每只手的 22 个点,以实现准确的免触控手势识别。

脸部

可识别 78 个面部点,推测情绪和想法,并追踪用户头部的位置。 构建可响应用户动作和情绪的应用。

语音

为您的应用配备强大的语音识别功能,以实现直观的免手控界面

环境

利用深度数据更加准确地理解场景,从而实现十分精确的增强现实。 移除图像背景以创建一个没有屏幕的绿屏。

 

创意应用遍地开花的时代

在感知计算向英特尔实感技术演变的过程中,我们的一个目标便是确保该技术易于开发人员实施。 您不必非常精通机器学习或手部追踪算法便可在您的应用中实施手势功能。 也就是说,我们提供对原始深度数据的完全访问,确保开发人员能够以喜欢的任何方式大胆创新。 该技术可激发您的无限创意灵感,帮助您尽情释放聪明才智,开发出独特界面,让您的客户爱不释手。 英特尔注重应用的五大方面:沉浸式协作、游戏和娱乐、自然交互、学习和寓教于乐,以及 3D 扫描。 我们将深入研究每个方面,探索相关的支持技术。

沉浸式协作意味着您可以创建支持您几乎随时随地开会的应用。 假设您需要与 Bill 进行商务视频会议。 您可以坐在毛伊岛一个豪华的高尔夫球场公寓门廊上呼叫 Bill,而借助背景移除,他会认为您还在洛杉矶没有空调、华氏 110 度的办公室内。 背景移除实质上是一个由英特尔实感 SDK 支持的没有屏幕的绿屏特性,十分易于部署。

游戏和娱乐 十分适用于那些希望调动自己所有感官来参与和控制游戏活动的英特尔实感技术用户。英特尔实感技术游戏和娱乐开发菜单包括旧功能和新功能。语音识别可用于控制战术战斗游戏中的动作,如 Iridium Studios。 将发布的《回声战令》游戏。 手势控制、面部分析以及头部、手部和手指追踪也可用于强化或替换传统输入方法,可在游戏体验中实现无与伦比的精确操作,例如,英特尔® 感知计算挑战赛的另一款获胜游戏《Head of the Order》,便可提供这种体验。


《回声战令》利用语音功能控制战术战争游戏

《回声战令》是一款由语音控制的实时战略游戏,其主角配音由因出演 《星际迷航》*、《Eureka》*, 和《生活大爆炸》*而名声大噪的 Will Wheaton 操刀。 该游戏目前专门针对英特尔® 实感™ 技术支持的系统而开发,应该会于 2014 年中期在 Steam* 上发布。 《回声战令》借助英特尔® 实感™ 技术,针对语音命令进行了全新设计,可让您作为战术小分队的战地指挥官,使用语音命令完成战术目标,甚至还能与攻击分队的其他成员进行互动。 观看此处视频。在视频中,Iridium Studio 的首席执行官兼首席架构师 Jason Wishnov 讲述了《回声战令》的开发过程。


交互式故事会 (Interactive Storytelling) 通过融合虚拟世界和真实世界革新了一般的故事叙述方式。 利用增强现实技术,我们可以通过创建一个 3D 虚拟世界和构造“用户感知”的故事元素,将应用人性化、戏剧化并为应用添加情绪性元素。

儿童故事书应用可能以玩洋娃娃的小朋友为主角。 通过在该应用中添加增强现实功能,我们可以让这个虚拟的洋娃娃对着小朋友微笑,让它模仿小朋友的面部表情,甚至还可以在认出小朋友的时候说“你好”。 使用这个应用的小女孩能够动用全部的感官与媒体内容进行交互,从而获得更有趣的沉浸式体验。

通过添加功能来感知这个小朋友和她的环境,我们可以提供逼真的媒体内容,营造一个小朋友可以与之互动的本地环境。 如果小朋友用手势与它沟通,虚拟洋娃娃还可以跳到实际的桌子上并且来回走动。


访问 Uncle Jeffrey’s Funky Farm,体验奇妙的交互式故事会

交互式故事会和增强现实听起来就令人心动,赶紧访问 CES 2014 上的英特尔演示项目Uncle Jeffrey’s Funky Farm,一饱眼福吧。

在农场中小朋友会获得奇妙的体验,感受具有几乎无限可能的增强现实的一些神奇之处。 Jeffrey 叔叔会带小朋友游览农场,小朋友会看到雪花飘落、彩虹横跨天际和羊群咩咩叫的画面。 体验过 Uncle Jeffrey’s Farm 的小朋友能够动用所有感官与媒体内容进行交互,获得有趣的沉浸式体验。

 

自然交互

自然交互应用可真正将应用控制置于客户的指尖上。 通过利用手部和手指追踪、面部特征检测和语音识别等英特尔实感技术功能,您可以精确追踪手部和手指,并使用简单的手势或精确的 3D 操作来控制您的应用。

手部和手指追踪:该功能可在 0.2 – 1.2 米内发挥作用,并且提供了用于控制应用的指尖、手掌和前臂点的 3D 位置。 在 2013 年,SDK 仅支持数量有限的手指和手部特征点,但是在 2014 年,Beta SDK 可支持 22 个手部特征点,并且支持点追踪以实现更高的精确度和分辨率。 通过更精细的 GUI 控制和更出色的指尖追踪和手部导向功能,您可以实现更复杂的交互,从而实现全新的应用用途。

2013 年 SDK 仅支持指尖、掌心、握点和前臂(左图); 2014 年 SDK 可追踪 22 个点(右图)。

手势追踪: 识别 8 种静态手势和 6 种动态手势,可创建与软件自然交互的空中手部动作和手势。  静态手势示例包括拇指竖起或 V 字形手势,而动态手势示例包括挥手或圆周动作等。

面部分析: 在英特尔感知计算 SDK 中,面部分析仅限于额部、2D 检测以及眼睛、嘴巴、鼻子等 7 个特征点,支持您将当前面部与之前存储的面部参考库相比较。 2014 年的 3D 面部分析进行了改进,支持 3D 深度,78 个特征点可实现更高的准确性、真正的 3D 面部检测以及面部的转动、俯仰和侧偏。 该功能支持您识别摄像头范围内的所有面部,以及人脸上面部特征点的位置。 它还支持您追踪和识别头部姿势,并基于这些面部特征点识别愤怒、惊讶和沮丧等表情和情绪。

2013 年 SDK 仅支持 7 个点和 2D 检测(左图);
2014 年 SDK 可支持 78 个特征点、真正的 3D 面部检测及面部的转动、俯仰和侧偏(右图)。

语音识别:创建可支持用户利用语音自然进行应用交互和控制的应用。 除了命令和控制外,它还能够以 9 种语言口述文本和将文本转换为语音。 语音识别是一项非常强大的功能,可以支持免手动控制应用和游戏,正如《回声战令》向我们展示的一样。

 

捕捉和共享 

借助英特尔实感 SDK,我们可以为您提供扫描、更改、打印和共享小型对象的功能。 其原理如下:由于英特尔实感技术采用了 3D 摄像头,您可以在您的计算设备前面旋转一个对象以构建一个 3D 网格。 然后将颜色覆盖在网格上,这样您就得到了一个完全可以打印和共享的数字副本。 想要为您的孩子构建一些可供一起游戏娱乐的士兵吗? 没问题。 想要上传您在网上商城销售的茶壶的 3D 模型吗? 完全可以。 此外,我们正在将这项技术打包为一项独立特性,以便开发人员能够将 3D 扫描整合到他们自己的应用中。

 

开发人员计划 — 又一大机遇

目前为止我们已经探讨了英特尔实感技术在 2014 年为开发人员带来的两大机遇,即日益扩展的市场以及功能丰富的强大 SDK。 还有一个同样重要的第三大机遇,即英特尔为奖励开发人员而制定的计划。该计划可确保开发人员成功开发,并且成功展示和销售他们的产品。 实现所有这一切的关键是全新的英特尔® 实感™ 技术开发人员资源中心。这是一个一站式商店,可支持开发人员了解此项技术,下载 SDK,订购英特尔实感摄像头开发人员套件,参加“应用挑战赛”等开发人员竞赛和教育计划,并且完整观看两次演示和查看功能全面的应用。

2014 年英特尔® 实感™ 应用挑战赛是继成功举办 2013 年英特尔感知计算挑战赛之后的又一大活动。 在“创意阶段”,开发人员先获得有关全新英特尔实感 3D 摄像头和 SDK 的简述,然后再提交应用演示申请。演示内容涵盖五个方面: 游戏和娱乐、学习和寓教于乐、自然交互、沉浸式协作/创建,以及开放创新。 该阶段选出了数百名决赛选手进入“应用开发阶段”。此时他们会收到一个英特尔实感 3D 摄像头开发套件,并在大约 10 周的时间内完成应用演示。 决赛选手将激烈争夺 100 万美元的现金奖金和广阔的市场机遇!

 

黑客马拉松、虚拟 AE 会议、网络研讨会和学习教程 

除了挑战赛以外,2014 年英特尔还将会再次举办一系列活动,以针对开发人员进行 SDK 方面的培训并帮助他们获取成功:

  • 黑客马拉松: 英特尔® 实感™ 技术黑客马拉松在全球举行。在活动中,开发人员有机会亲身体验 SDK 和摄像头,提出相关问题,共同探讨切磋,同时享受无限乐趣。 
  • 虚拟 AE 会议: 该会议穿插在黑客马拉松和网络研讨会之间举行。 虚拟应用工程师 (AE) 会议将在网上举办,为参与者提供一个在线交流以及向英特尔 AE 提出开发问题的机会。
  • 网络研讨会: 2014 年英特尔将再次举办一系列的英特尔® 实感技术网络研讨会,以帮助开发人员了解此项技术并学习如何利用该技术创建出色的应用。 网络研讨会的主题多种多样,从 SDK 简介到有关编码的技术性内容探讨等。
  • 教程和文档: 针对无法参加黑客马拉松或虚拟 AE 会议或网络研讨会的开发人员,2014 年我们将会在资源中心提供一系列实用的自助学习教程和深入剖析文档。

 

展示应用

在您完成游戏或应用设计之后,英特尔实感技术应用展厅将为您的作品提供展示场所,让客户尽情品鉴。 除了展示应用外,展厅还会提供技术演示和有关该技术的视频。

 

2014 年英特尔® 实感™ 技术入门

那么,现在您已经了解了英特尔实感技术在 2014 年为您带来的机遇,可能您还心有疑问:我该如何开始使用该技术呢? 非常简单。 请访问 www.intel.com/software/RealSense ,注册获取全新的 2014 SDK 以及全新的英特尔® 实感™ 3D 摄像头开发套件(上市后)。

 

For more complete information about compiler optimizations, see our Optimization Notice.