苹果的计算机视觉团队开发的虚拟键盘 可在任何桌面上呈现

2019-04-08来源: 科技酷玩探索家关键字:苹果  虚拟键盘  计算机视觉

早在今年3月,苹果公司就发布了一份名为“苹果公司队伍一项关于未来虚拟现实键盘的专利”的报告。这项专利主要的意思就是,在未来,用户们不需要实体键盘,只需要戴上头显,然后在任何桌面上都可以投射出虚拟键盘,就比如说航空公司的下拉托盘都作为虚拟键盘。与传统笔记本键盘不同,这款新型的虚拟键盘将为用户提供在公共空间工作的私人空间。

  为了开发一款精确度比较高的虚拟键盘,苹果公司一直在研究开发先进的计算机视觉技术。在这项专利申请中,苹果电脑视觉和机器学习主管Daniel Kurtz解释了如何利用基于深度的触摸检测系统,研发下一代虚拟键盘和鼠标技术。Daniel Kurtz于2015年因为苹果收购Metaio来到苹果,他表示这种形式的触摸检测也可能适用于未来的VR游戏。

  收购Metaio两年后,苹果在2017年全球开发者大会上推出了AR技术。其软件高级副总裁Craig Federighi演示了如何用iPhone将虚拟的物体放在面前的桌子上。他首先是把一个虚拟咖啡杯放在桌子上,然后在咖啡杯旁边加了一盏灯,当他移动台灯时,我们看到咖啡杯的影子甚至会实时移动。苹果团队现在所做的不仅仅是在用户面前展示AR物体,而是更进一步,让用户能够实时与AR物体进行交互。

  而苹果专利的主要重点是与虚拟键盘进行实时交互,但我们想象这一下,这项发明或许还可以增强VR游戏的互动性,想象一下,在游戏中开门,驾驶汽车,拿武器,与敌人激战这些动作都可以更加真实,而不是只是按Xbox或PS4上的按钮。如果苹果团队能及时将这项技术推向市场,那么潜力将是巨大的。还有苹果的TrueDepth相机,在很多方面也会起到很重要的作用。

  专利背景

  Daniel Kurtz首先简要说明了一下现有系统的不足,然后解释了苹果的这项发明是如何克服基于深度的虚拟触摸检测中的某些问题。首先,他指出,检测到用户的手指何时接触到真实的环境平面,可以使用户和硬件系统(例如计算机或游戏系统)之间实现更直观真实的交互。

  使用相机进行触摸检测比使用嵌入式传感器(如电容式传感器)有很多优势。此外一些现代数码设备,如头戴式设备(HMD)和智能手机都配备了视觉传感器,包括深度相机,比如苹果的所有iPhone X型号上的TrueDepth相机。目前基于深度的触摸检测方法可以使用深度相机来测量相机和手指之间以及相机和表面之间的距离。

  一种方法有缺点就是不能应用于动态场景。另一种方法可以首先识别手指,然后从指尖中心开始填充邻近的像素,这样当填充足够时,就可以检测到触摸。但是由于这种方法没有考虑对像素深度数据标准化,因此很容易出错。另一种方法是,根据预先计算好的参考系、对手部轮廓的分析和深度曲线的拟合来确定的。

  这些方法都需要预先定义阈值来区分触摸和非触摸条件,还有就是要考虑到距离,当手指距离平面10毫米或以下时,可表示触摸。

  专利:基于深度的触摸检测

  苹果的发专利涵盖了以下概念,首先是提供一种基于深度的触摸检测方法,用于获取表面场景的深度图,深度图包含多个值(例如,深度图可以来自深度传感器以及一个或多个光学相机);识别深度图的第一区域,识别对象(例如,该对象可以是手指、手写笔或其他光学不透明对象);根据第一区域识别深度图的表面区域,(例如,该表面可以是平面的或非平面的)。最后根据获得输出,当输出表示物体与表面接触时,执行第一个肯定性操作(如执行与“鼠标点击”相对应的操作)。

  上面所述触摸检测操作可帮助改进接受非键盘输入的计算设备或系统的功能。可以通过使用任意的表面(例如桌面或其他表面)来进行输入操作,而不用传统的键盘和其他设备(例如鼠标或手写笔)。通过改进传统输入方式,可以进一步改进计算机系统的功能,用户可以在任意环境下使用键盘。

  下面的苹果专利数据说明了基于深度的触摸检测操作的各个方面信息。苹果的专利图3A是流程图形式,关于触摸检测操作。

  这项由美国专利局公布的苹果专利申请最初是在2017年第三季度提交的。考虑到这是一项专利申请,目前还不清楚该技术是否能够实现以及上市的时间。


关键字:苹果  虚拟键盘  计算机视觉 编辑:鲁迪 引用地址:http://news.eeworld.com.cn/szds/2019/ic-news040814845.html 本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:27寸2K!EIZO发布全新显示器:色域完美
下一篇:苹果AR眼镜或将紧跟Focals智能眼镜 采用智能对焦技术

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

苹果被起诉,AirPods系列被指侵权多项专利
      据 Appleinsider 报道,一家名为 Koss 的公司正因无线耳机和音箱产品起诉苹果,并指控苹果目前几乎所有的音频产品系列都在侵犯其持有的专利。  该诉讼于 7 月 22 日在美国德克萨斯州韦科地区法院提起,在长达 34 页的诉讼书中,在 11 页的部分提到了 “Koss 的音频创新遗产”,他们在其中详细介绍了该公司 67 年的历史。在这一部分中,他们强调了各种工程成就、创造的产品和公司的基准。  与苹果面临的许多专利诉讼不同,Koss 并不是一家知名的专利巨头,而是一家生产耳机和其他音频配件的公司。  在诉讼中,Koss 称苹果侵犯了其多项专利,包括美国专利号
发表于 2020-07-28
苹果A14芯片组件曝光 或今年4月生产
      距离九月越来越近,关于新iPhone的传闻也越来越多,最新曝光的,是苹果A14芯片组件的图片。  这两张图来自互联网账户Mr White,他有时会分享有关苹果公司未来计划的信息,以及部分组件图片,这两张图片是A14芯片的RAM组件(A14芯片的一部分)。  从芯片组件的照片中我们看不到太多有价值的东西,但是它似乎有一个日期编号,对应2020年的第16周,这意味着它很可能是在今年4月生产的。这颗芯片其实是是A14的RAM组件  Mr White此前曾在7月初分享过类似的A14 RAM组件照片,不过新照片更加清晰。  按苹果公司的升级规律,所有的2020款iPhone型号都将配备5纳米
发表于 2020-07-28
<font color='red'>苹果</font>A14芯片组件曝光 或今年4月生产
对比苹果11!iPhone 12全系外形解密:刘海真变小了
       对于苹果来说,今年最重要的事情,就是保证iPhone 12顺利发布,且能够有充足的供货,这款产品成功与否,直接决定了公司后续的营收情况。  之前一直有消息称,苹果有意在iPhone 12上缩小屏幕(完全取消是暂时做不到,工艺上不允许),现在从外媒最新的爆料来看,似乎确实如此。  MacRumors曝光了iPhone 12(5.4英寸)和iPhone 11 Pro的刘海对比照,从图片上看,苹果似乎真的缩小了刘海的面积,只是不清楚其余三款机型是不是也是同样的做法,如果都是这样的话,那么屏占比势必会进一步增加。  至于iPhone 12 5.4英寸版本的真实性,iOS 14最新测试版
发表于 2020-07-28
传闻苹果下周会更新iMac 但只是旧款换芯片
     7月27日上午消息,新iMac即将发布的传言越来越多,有人这将是一次大幅更新,但也有声音称,苹果公司最快在本周就会发布新款iMac,但只是一次常规设计,仍旧是之前的设计。  今年开始,很多传言说苹果会在夏季(尤其是WWDC大会之前)推出新一代iMac产品,苹果没有更新。所以也只能解释成为新iMac或许还没准备好。  但在测试软件的Geekbench上,之前出现了一款未发布的配备10核Intel i9 CPU和Radeon Pro 5300 GPU的iMac,证明苹果是转背了新品的。这传言来自在Twitter帐户@ L0vetodream 称苹果的新产品“已经准备好出货了”。此前
发表于 2020-07-28
苹果新机延期上市,MLCC备货潮8月下旬将启动
日媒传出苹果iPhone 12将延期至十月下旬上市,5G版本则于11月发布,打破往年9月新品上市的惯例。雅虎新闻指出,供应链依照该时间点推算,苹果三大日系MLCC供应链备货潮有望在8月下旬启动,第一大供货商村田制作所因应苹果的备料需求,第三季MLCC议价相对强势,也稳住第三季全球MLCC的供需架构。苹果以往的新机均在9月份的秋季新品发布会上推出,上游被动组件备货潮约在7~8月启动。而今年到目前为止仍然平静,日本媒体报道,苹果的iPhone 12将延期至10月下旬,5G版本更会推迟至11月。报道指出,上游供应链以苹果新机上市的时间点推算,MLCC的备货潮预计自8月下旬启动。目前苹果第一大MLCC供货商为村田,京瓷、太阳诱电也是主力
发表于 2020-07-24
侵犯无线耳机专利?Koss已经起诉苹果
据appleinsider报道,耳机生产商Koss日前向美国德克萨斯州韦科市地方法院提起了一项诉讼,指控苹果侵犯其5项无线耳机专利。Koss在诉讼文件中提到,涉案专利包括其在美国编号为10206025,10469934,10491982和1,506325的专利,这四项专利涉及一款收发器电路的无线耳机,该设备能够从数字音频播放器、计算机或无线网络输送音频。Koss声称,苹果通过出售AirPods,AirPods Pro和无线Beats by Dre产品部分或全部侵犯了这四项专利,对Koss造成了不可弥补的损害。Koss还称苹果侵犯了10298451号美国专利,该项专利描述了一种配置无线设备以在无线网络上工作的方法。此外,Koss强调
发表于 2020-07-24
小广播
换一换 更多 相关热搜器件

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 电视相关 白色家电 数字家庭 PC互联网 数码影像 维修拆解 综合资讯 其他技术 技术产品 应用设计 论坛

词云: 1 2 3 4 5 6 7 8 9 10

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2020 EEWORLD.com.cn, Inc. All rights reserved