新手机_ 谷歌新手机搭载隔空手势操控,引领新触摸屏革命?

谷歌(以下简称谷歌)专注于几年的手势操作技术的开发,今年10月有可能首次搭载在谷歌的新手机Pixel 4上。 在2015年的I/O开发者大会上首次登场的技术被遗忘的时候到了。

通常,谷歌pixel系列的新机型今年9月发布,在不公开之前,应该严格保密自己的产品。 但是,由于今年稍有不同,谷歌正试图推进硬件和云服务市场。 此次谷歌决定以积极的方式事先揭露Pixel 4。 反而决定自己爆炸,以免被其他第三者吸引。 谷歌首次宣布Pixel 4将成为该公司的下一代旗舰级智能手机。

首先,谷歌公布了宣布独特相机阵列和基本设计的预告片。 在视频中,首先显示Pixel 4的解锁功能,一个女性的脸接近手机的正面,想解除脸的锁定。 不久,她退了一步,在手机前挥手控制音乐播放界面。

与此同时,谷歌在官方博客上表明将配备Pixel 4的新功能

1、人脸识别:支持亚毫秒级人脸识别锁定解除,不是屏幕下的指纹锁定解除。 通过结合新的算法和传感器,没有使用上层3D构造的场景技术。

2、隔空手势操作: Pixel 4具有“Motion Sense”功能。 手势识别,使用项目soli毫米波雷达传感器,通过隔空手势控制手机。

如果说脸部识别功能不容易兴奋,那么手势操作绝对是一种有趣的黑技术。 现在这个技术概念首先被引入Pixel 4手机。 这是当前所有电子设备制造商和消费者发出的重要警告信号:手势操作的感知很可能是眼前接近未来的对话技术。

挥手就能操作手机

2015年,谷歌先进技术和计划部门( ATAP )宣布开展新项目。 代码名称是Soli,即现在已知的毫米波雷达传感器,该项目致力于构建基于60GHz毫米波雷达技术的虚拟操纵系统。 利用雷达技术捕捉人的手势,操作机器,其精度达到亚毫米级。 当时,它作为黑科学技术的概念进入了一般视野,人们对它没有特别长期的期待。

但是,经过最近5年的研究开发,谷歌决定揭示这项技术的真面目。 谷歌的家“亲生子女”手机Pixel 4将成为使用Soli雷达系统的首台设备。 一种新的体感识别功能,结合传感器和算法,使雷达识别手机的手势动作,控制手机,用户挥手切换曲目,控制闹钟,静静地进入电话。 谷歌表示,随着Pixel的优化,这些手势控制也将得到优化。

与市场上销售的大部分手势和动作捕捉技术不同,Soli使用的是毫米波雷达技术,而不是2D、3D摄像机和红外光。 其结构与众所周知的雷达原理相同,首先向某个地区发射电磁波,接收物体反射回来的电波,进行处理、计算、分析。

当食指和拇指一次关闭时,模拟按钮的动作,向目标发射电波雷达接收器接收信号,切断来自该目标的反射能量,模拟通过往复摩擦转动旋钮等实际动作,这些动作干扰电波返回的时间和速度。 收集电波规律并进行分析和计算后,系统能够识别特定的运动模式,确定用户行为,发出响应控制命令。

雷达技术不是接触设备的画面,而是实时跟踪动作,根据动作改变信号。 将手放置在传感器的前面,不做任何事情就能够按下特定的动作,例如手指,来控制带有雷达的智能设备。 操作演示包括

其中一些包括:

就是这样的

有科幻电影的临场感。

Soli雷达传感器的作用实际上是从雷达信号本身形成装置识别出姿势的闭环链。 它使用的频率极高,波长短,60GHz的频率与5毫米波长对应。 因此,Soli传感器能量集中,方向性强,环境噪声强,可集成在封装内,容易贯通塑料盒,捕捉毫米级手的动作变化,保证回波强度。

2018年底,美国联邦通信委员会( FCC )批准谷歌手势操作传感器系统,“Soli项目”申请的频带允许毫米波雷达使用57-64GHz,峰值等效全向辐射功率( EIRP )达到13dBm。

从安全角度来看,谷歌和Soli传感器数据都是通过用户的手机处理、保存或添加不与其他谷歌服务共享的Titan M安全芯片,保护手机本地(不是云)进行保存。 此外,手势识别功能仅为一些国家提供,如果雷达频带与谷歌手势不匹配,或者某些地区监督部门不认可,则该技术很可能不在手机上运行。

类似功能实际上在之前的三星Galaxy移动电话中是存在的,但是由于非常难以使用,用户需要开启相关的设定,识别场景非常少,只能识别简单的动作,不能复杂地实现。 此后,由于系统简化,其功能被删除。

目前,谷歌公式的应用范围、Pixel 4上是否预装、以后是否进行软件更新才能搭载,这个谜团可能会在10月发布。

手势操作脸部识别=解除手机的锁定

与手势识别功能相比,脸部识别已经不是什么新鲜事了。 以前有iPhone X,之后有oppoofindx的3d结构光识别的移动设备,这项新技术已经成为许多用户的日常需求,解锁、支付、下载的应用程序“一目了然”。

谷歌表示,Pixel 4与其他手机的面部识别锁定解除技术不太相同。 首先,Pixel 4与Soli传感器协作进行操作,接近用户手持手机的距离时,Soli积极启动脸部识别传感器,默认解除手机的接口。 之后,算法一旦识别出用户的脸部信息就解除锁定,即使手机被反向抬起,也能够以任意的角度持有手机。 谷歌表示,Pixel 4面部解锁还可用于安全支付和应用程序认证。

相比之下,iPhone上的applefaceid脸部识别功能仅在手机的垂直方向朝向脸部时有效,TrueDepth景深照相机系统位于手机的上部,即使遮挡也无法正常识别锁定解除,将设备完全抬起,以某种姿势等待锁定解除并滑动 苹果在iPad Pro中使用同样的脸部识别功能,只追加了4个方向的锁定解除方式,不会在雷达传感器上工作。 对谷歌来说,它是独特的“黑技术”。

此外,谷歌还发表了Pixel 4设备的各种传感器和组件的样本图,说明了使用Soli传感器解除面部锁定的方法。 Pixel 4手机屏幕上部有两个红外线照相机,用于解锁脸部,环境光/接近传感器、Soli雷达传感器、点投影仪和脸部解锁照明。 谷歌称,用户的面部信息留在像素设备的Titan M安全芯片中,并且不能离开用户的手机。

有趣的是,科技网站9to5Google报道,谷歌以外包的形式,提供5美元的报酬支持,用街头人脸数据交换,训练Pixel 4人脸识别系统的模式。 街上的人说想让我从口袋里取出修改过的Pixel 3 XL。 这个手机是谷歌的外包负责人交给你的,既可以看到通知,也可以得到脸部的数据。 一问到这是什么,谷歌方面的员工只需简单地说明一下,就是“未来”的谷歌产品。

谷歌公司的发言人今天证明了Pixel 4可以使用多张脸作为脸部数据的交换。 包括生物特征、脸部识别等,减少具有性别和人种偏见的数据。 到目前为止,亚马逊发表的脸部匹配算法Rekognition,因人种偏见的存在而受到谴责。 在ACLU (美国公民自由联盟)去年进行的测试中,扫描国会议员的照片时,Rekognition误将28人与警察的照片进行了比较。 亚马逊把结果归咎于算法校对不良。 结果,美国许多州政府拒绝这项技术落地。

Pixel 4除了使用Soli雷达传感器的脸部识别和许多数据模型处理的识别精度之外,Pixel 4的脸部识别速度和算法也非常重要。

最近,谷歌发布了针对移动GPU推理定制的轻量级高性能人脸检测算法BlazeFace。 在设备上以200~1000 FPS的速度运行,适用于多个人脸识别场景,该算法主要是“超实时性能”。

谷歌在Arxiv网站上发表了相关论文,介绍了该算法的技术成果。 该算法基于AR技术进行面部检测,由于面部与设备之间存在不同的焦距,因此事先用前置摄像头和后置摄像头的AR拍摄,构建面部模型,及时捕捉物体的大小和大小。 BlazeFace生成包括眼睛、耳朵、嘴中心和鼻尖在内的6个脸的键坐标,用锚定方式连接,估计人脸的旋转角度。 通过这样的设定,能够使脸部识别在各个方向正常动作。

在算法层面,谷歌采用混合分辨率策略取代抑制算法,利用重复预测间的加权平均值来估计边界框的回归参数,提高面部识别的精度和速度,连续输入稍微偏离目标的图像,由此对抖动量进行量化,提高每次输入识别数据的精度,提高面部识别时间的偏差

谷歌在论文中没有说明该技术是否应用于Pixel 4,但该算法经谷歌持续测试,预计将在今年的Pixel产品中首次实现。

谷歌的Made by Google策略

Pixel系列产生以来,谷歌首席执行官萨达尔·皮特尔越来越重视谷歌的研究技术和着陆效果,云服务和硬件产品的投入力也表明了这一点。 在过去谷歌总公司Alphabet第二季度的财报中,随着Pixel 3A于5月上市,第二季度Pixel等硬件产品的销售额比上年增加了2倍以上。

根据前一年的新机型战略,今年6月发布了价格性能比Pixel A系列的新机型,9月发布Pixel数字旗舰手机的战略顺利实施。 从市场和宣传反馈来说,“一年两新”确实是谷歌非常好的战略选择。 此前罗永浩接受罗振宇的采访,说在红海市场手机,3个月是安卓手机的宣传和发售的节点。

2015年,“柴哥”担任谷歌公司CEO后,提出“Made by Google”的口号,通过AI技术硬件操作系统,形成没有工厂标志的Pixel手机、Pixel C平板电脑,VR、智能家居等自主开发

过去四年,从市场反馈来看,新Pixel系列设备更有意义,通过硬件和软件技术的一体化生产,给手机行业带来了更多发展前景,形成了安卓设备的终极标准。 例如,Googletitan和Titan M的安全芯片是非常典型的例子。

Titan M安全芯片在硬件规格上使用Arm Cortex-M3内核,采用自我研究的算法,将其前身的Titan芯片应用于数据中心场景,然后通过写入最新版本的安卓操作系统,实现Pixel系列手机

在今天发表的官方声明中,谷歌强调“安全和隐私是Pixel的核心原则”。

为了保护用户的隐私和安全,数据安全地存储在Pixel的Titan M安全芯片上。 该谷歌独自开发的硬件和软件产品,更加灵活地应用于Pixel手机。

麦德贝谷歌战略表明,谷歌不断探索技术,硬件与软件的结合已经形成了该公司发展的“崛起”。 但同时,隐私和垄断等语言也伴随着谷歌公司的发展让人担心。

无论如何,此次Pixel 4新机的技术亮点很多,非常值得期待。 外国媒体预计Pixel 4将于今年10月发布。 此前,Note 10、新iPhone陆续登场。

手势操作功能是否能帮助Pixel 4抓住更多消费者的心,虽然需要市场检查,但是Soli技术落地,带来更大的预期,不正是它引领霸权性更新,革命了触摸屏的生命吗

大家都在看

相关专题