原创 没有手机，华为却发布了这项独创传感交互技术，1000+项传感器专利，布局这么深了！

9月25日，华为一年一度的秋季全场景新品发布会举行，这可能是华为历史上最为特殊、关注度最高的一场产品发布会，众多官媒加持，被许多媒体认为是华为强势回归的“仪式”。

最近一个月来，是独属于华为的高光时刻，从8月底华为Mate 60 pro手机“未发先售”，麒麟9000s芯片实现华为手机媲美5G上网速度，“遥遥领先”全网热议，任正非和孟晚舟先后发表“第四次工业革命”、“全面智能化时代”等讲话，华为正在全面回归。

当然，在这场发布会上行，大家更期待的是，听到更多华为手机的声音。然而，并没有，华为 Mate 60 RS Ultimate Design手机在刘德华的宣传视频中浅浅地漏了一面，此外就是余承东提了一下华为Matepad用的芯片与手机一样——也即是麒麟9000s芯片——这看起来麒麟9000s芯片的产能似乎还比较充足。

但是，最近华为发布一大批发明专利信息情况，其中包含了多款传感器发明专利，涉及光纤传感器、激光雷达、MEMS等多种传感器技术，据查询，华为迄今已经公布了1000+项传感器技术专利。

在这次发布会上，我们也发现华为发布的多款产品使用了这些传感器专利，创造了多个突破性人机交互应用。华为，在传感器技术领域布局这么深了！详情见下文。

今日（9月25日）下午的华为秋季新品发布会上，余承东一登场，就先介绍了此前“先锋计划”计划的火爆——也即是华为Mate 60系列“未发先售”，对于当下的缺货情况，余承东也说到，他们正在“加班加点紧急生产”。

在发布会上，我们看到了华为平板产品MatePadPro 13.2英寸、非凡大师智能手表、华为智慧屏V5 Pro、FreeBuds Pro 3旗舰耳机、华为智能眼镜 2、华为Watch GT4、华为路由BE3 Pro等系列新产品。

此外，余承东还预告了首款轿车智界S7，预计11月下旬与大家见面；大家期待已久的问界M9，12月如期而至。

关于本次华为华为发布会新品信息如下： 

1、“全球最轻薄”的大屏平板，手机同款旗舰芯片，首次支持星闪技术，配套手写笔写画体验媲美专业的数位板。

2、刘德华亲临现场带来的“非凡大师”手表，一块手表镶嵌6段金条，支持双向北斗卫星消息、支持百米潜水，售价21999元。

3、可以“隔空触控”、搭配灵犀操控，可以像手机一样刷视频的“巨幕手机”电视，边框比iPhone 15 Pro还窄，搭载自研鸿鹄900电视芯片。

4、搭载华为最新自研麒麟A2芯片的耳机，支持星闪技术、超CD级无损音质，双DSP架构支持空间音频，中央音乐学院首席调音团专业调音。

5、采用钛合金工艺的智能眼镜，支持智慧播报、颈椎健康检测等AI功能。

6、支持最新Wi-Fi 7技术，无线速率可达3600Mbps的路由器。

7、华为智选车业务首款轿车智界S7正式亮相，搭载HarmonyOS 4智能座舱、华为高阶智能驾驶，定位超越特斯拉Model S，将在今年11月下旬正式发布。

▲华为发布会新品一览

▲智界S7

▲华为秋季新品全景图

关于华为Mate 60 系列手机产品，发布会中较少提及，华为 Mate 60 RS | Ultimate Design，在发布会中只在刘德华的宣传视频中，露了一脸而在发布会后，华为官方公众号发布了一条“HUAWEI Mate 60 RS 非凡大师”的消息，向大家介绍这款新机型的信息和价格——起售价11999起。

▲来源：华为公众号

值得一提的是， 本次发布会中，华为带来了全球首创的人机交互方式——华为灵犀指向遥控，该创新的交互技术与华为智慧屏 V5 Pro 一同亮相，该交互方式基于华为多项传感器技术的创新。

灵犀指向遥控交互应用于电视领域，主要是解决巨幕时代下，大屏电视的操控难题，这也是首次有厂商开辟这一新操控方式，号称开创“巨幕手机”新时代。

据华为终端BG首席运营官何刚介绍，灵犀隔空遥控器采用超小型天线设计，支持灵犀空间定位，能够实现超精准位置 / 姿态融合感知。同时，该遥控器支持滑动、点按、拖拽、圈选、跳选多种手势操作，可对电视 UI 进行隔空操控，号称将电视变成“巨幕手机”。

而近期，华为公开了包括芯片、传感器等在内的多项专利技术情况，作为中国硬科技的代表企业，让人不禁感叹华为在技术上的“遥遥领先”。

其中，灵犀指向遥控技术信息，就在这些公开的发明专利里，在一项今年刚刚公开的名为“遥控方法、遥控设备和被控制设备”的专利中，我们能够知道华为怎么进行指向遥控——这基于多传感器的感知及算法融合技术。

全新的隔空交互！华为怎么进行指向遥控？1000+传感器技术专利披露！华为在传感器领域的布局这么深了！

该专利申请号为：202210248607 .6，在2022年3月份申请， 根据专利信息摘要介绍：

本发明实施例提供了一种遥控方法、遥控设 备和被控制设备。本发明实施例提供的技术方案中，所述被控制设备包括屏幕，所述方法包括：接收遥控设备的第一信息；根据所述第一信息确定所述遥控设备正对所述屏幕的目标位置；根据所述目标位置在屏幕上执行第一操作。本发明实施例能够使得用户在不需要对五向导航键进行机械频繁操作的前提下，实现对被控制设备的远程 操作，提升用户在使用过程中的体验感。

此外，发明专利说明书中，提到了：

目前被控制设备的遥控方法需要用户对五向导航键进行机械频繁的操作来实现对大屏的远程操作，导致使用过程中体验感较差。有鉴于此，本发明实施例提供了一种遥控方法、遥控设备和被控制设备，能够使得用户在不需要对五向导航键进行机械频繁操作的前提下，实现对被控制设备的远程操作，提升用户在使用过程中的体验感。

因此不难看出，该专利也即是本次发布会中，华为灵犀指向遥控所采用的技术。那么，怎么实现呢?

专利原文介绍较详细，这里简单翻译下，专利主要使用双目摄像头（即双目视觉传感器），拍摄电视图像轮廓，然后将图像数据传送到算法模块进行解析，算法解析出坐标发送给屏幕，屏幕显示对应的坐标图像并进行相应的操作。

这个过程看起来，是不是很像我们用人眼观看屏幕然后用手指操控触摸屏？

其中的算法模块可以放置于遥控设备或者被控制设备（屏幕）中，而无线传输也有蓝牙、红外、移动网络或者WLAN传输等多种方式，因此该发明专利包含多个实施方案可供选择。

▲来源：华为专利公开信息

原理看起来并不复杂，但做起来却一点都不简单。要不然凭什么是华为首先发布这项全新的交互技术，此前没有厂商公布呢？

首先，是在自由空间下，传感器的标定。标定传感器是传感器感知的必要环节，是后续传感器融合的必要步骤和先决条件，其目的是将两个或者多个传感器变换到统一的时空坐标系，使得传感器融合具有意义。

这里面包括左目摄像头标定、右目摄像头标定、确定摄像头之间的平移旋转关系，以及焦距、图像中心、畸变系数等。

此外，还要进行双目深度估计，具体地计算两个图像之间像素的相对匹配关系，包括匹配误差计算、误差集成、视差图计算、视差图优化和视差图矫正5个步骤。

具体有多复杂，可看下方部分专利原文对操控过程的描述（可上下滑动查看）：

[0106] 需要说明的是，如图3所示，遥控设备100正对屏幕时，遥控设备100的中心点与屏幕上目标位置之间的连线与遥控设备100较长的两个侧边平行。

[0107] 其中，如图5所示，算法模块具体用于：在离线状态下对双目摄像头进行标定；通过对屏幕的两个图像进行矫正，以去除双目摄像头带来的畸变；通过双目匹配计算矫正后的两个图像之间的匹配点，得到视差图；根据视差图，通过3D坐标计算得到遥控设备100正对屏幕的位置坐标。

[0108] 其中，在离线状态下对双目摄像头进行标定的目的是通过获取两个摄像头的内参和外参对齐两个摄像头。首先对左目摄像头标定，获取左目摄像头的内参和外参；其次，对右目摄像头标定，获取右目摄像头的内参和外参；最后，对双目摄像头标定，获取左目摄像头和右目摄像头之间的平移旋转关系。其中，内参包括焦距、图像中心、畸变系数等；外参包括旋转矩阵、平移矩阵。

[0109] 其中，通过对屏幕的两个图像进行矫正可得到两个图像在X方向上的差异，能够提高视差计算的准确性。具体的，对屏幕的两个图像进行矫正包括畸变矫正和转化为标准形式。

[0110] 其中，双目匹配是双目深度估计的核心部分，主要目的是计算两个图像之间像素的相对匹配关系。具体的，双目匹配包括匹配误差计算、误差集成、视差图计算、视差图优化和视差图矫正5个步骤。

[0111] 其中，根据视差图中的匹配信息以及三角测量原理重建图片中屏幕的三维信息，通过3D坐标计算得到遥控设备100正对屏幕的位置坐标。

[0112] 其中，第一操作，包括：在目标位置显示指针；或者，将与目标位置对应的控件高亮显示或者阴影显示。

[0113] 需要说明的是，当用户移动遥控设备100时，遥控设备100采集到的包含屏幕轮廓的图像会发生变化，需要重新计算遥控设备100正对屏幕的位置坐标，被控制设备200根据新的位置坐标刷新指针位置，指针根据遥控设备的指向移动；或者，被控制设备200根据新的位置坐标刷新高亮显示或者阴影显示的控件。

双目摄像头也叫双目景深摄像头，即使用两个图像传感器，像人类的双眼，通过两幅图像的视差计算来确定距离，双目摄像头不需要知道障碍物是什么，只要通过计算就可以测距。

而在华为的这个专利中，双目视觉传感器感知到的图像数据，除了进行测距外，还用来进行复杂的3D坐标计算。

因此，这个专利除了传感器外，更涉及到复杂的算法计算和处理能力，以及对专用算法的芯片级开发，以做到在移动设备下的高效率和低能耗。

这也是未来智能传感器的重大方向，试想一下，当前，机器学习已经无处不在。如果算法不仅仅放在机器设备里，而是也可以放在最小的感知单元——传感器中，那么嵌入式人工智能，就会大力推动智能时代的发展。

具体来看，智能传感器集传感就是芯片、通信芯片、微处理器、驱动程序、软件算法等于一体，其核心优势就在于高复杂度的信息处理能力，以及高集成度的信息传输能力。

除了关键的双目摄像头外，该专利中还包含了传感器模块，可以添加包括压力传感器、陀螺仪传感器、气压传感器、磁传感器……等等众多传感器，实现遥控设备的更多功能。

▲来源：华为专利公开信息

目前，华为传感器技术领域的专利中，以传感器为主要关键字的有约923件，此外，在激光雷达/雷达、MEMS等领域还有超过250+件专利数。其中，这些专利大部分以发明专利为主。

应用这些专利技术，华为已经推出了首款光纤传感产品OptiXsense EF3000、首款车规级高性能96线中长距激光雷达、首款毫米波AI超感传感器、首款S-TAG运动传感器等产品。

来源：天眼查

此外，华为还大力投资了多家传感器上下游企业，包括了激光器、CMOS图像传感器、TOF传感器、MEMS陀螺仪、旋变传感器等多条赛道。

发布加速行业智能化白皮书，华为的全面智能化时代，以传感器为感知底座，创造数以亿计的需求

在5天前的华为全联接大会上，CFO孟晚舟发布了华为未来10年的重要战略规划——全面智能化（All Intelligence）战略，这个战略将是未来10年华为发展的重点方向，也预示着华为研判的未来科技产业发展的趋势。（相关信息参看《华为发布未来10年重要战略》）

全面智能化战略提到“所有对象可联接”、“让所有应用可模型”、“让所有决策可计算”。

会后，华为发布了《加速行业智能化白皮书》，其中，“智能感知”将是全面智能化的重要底座之一，包含了雷达、机器视觉、传感器、计量表等众多传感器领域应用。

华为的全面智能化战略，在推动传统行业向智能化转型过程中，也必然将创造数以亿计的海量传感器需求。

▲来源：华为官网

结语

本次发布会上，华为发布了灵犀遥控等多个创新的人机交互操作，而这些操作则基于华为多年来深厚的传感器专利技术基础。

未来，随着全面智能化时代的到来，除了传感器数量上的巨大需求外，对传感器的智能化也提出了更高的要求，传感器+算法的各种智能传感器将创造新的产品定义，创造新的市场需求。

中国正是因为有华为这些链主级别的科技企业，不断推动进行技术创新，推出新的产品，才能拉动芯片、传感器等上下游技术的不断进步！

中国科技，且看未来！并且，这个未来不远了！