聊无网通话必须两个设备吗

  聊无网通话是否必须两个设备,取决于具体的技术实现和应用场景。在OPPO的无网络通信技术(MeshTalk)中,这项技术可以在没有蜂窝网络、Wi-Fi和蓝牙的情况下,通过多台设备以mesh的方式进行自由组网,实现多人群聊。这意味着,虽然理论上可以进行点对点的通信,但为了实现更广泛的通信需求,通常需要多台设备进行组网。

  因此,虽然理论上两个设备也可以进行无网通话,但在实际应用中,为了支持更多的人群同时参与通话,通常需要多个设备协同工作。

  一、 无网通话技术的最新发展

  无网通话技术的最新发展主要体现在两个方面:小米和vivo分别推出了各自的技术创新。

  小米在2024年10月29日发布了小米星辰通信系统,这是行业首个公里级无网通话技术,能够在完全无网络支持的情况下,实现半径达3.5公里的双向通话。这项技术由小米15 Pro首发搭载,并配备了小米澎湃T1S信号增强芯片以及AI天线智选技术,进一步提升了通信能力。此外,小米的无网通信还支持mesh组网,需要在同品牌终端下才能支持。

  另一方面,vivo在2024年10月10日的开发者大会上发布了基于蓝牙的公里级无网通信技术,能够在无网络信号的空旷环境下,支持最远超过1.5公里的点对点语音对讲和文字传输。这项技术确保用户在徒步、露营等无网环境下仍能保持通信不断联。

无网通信

  二、 MeshTalk技术的具体工作原理和限制条件

  MeshTalk技术是一种从语音生成全脸3D动画的通用方法,其核心在于跨模态解纠缠(cross-modality disentanglement)技术。该技术通过将输入信号分为语音信号和表情信号两部分,可以输出可信的上面部动作,从而生成逼真的整个面部三维动画。

  1. 具体工作原理如下:

  音频处理:MeshTalk使用torchaudio库对输入的音频进行预处理,提取音频特征。这些特征随后被送入神经网络模型中,进行跨模态的解耦,从而分离出与面部表情相关的特征。

  网络架构

  音频编码器采用四层1D时间卷积网络。

  表情编码器包含三个全连接层后接一个LSTM层。

  融合模块为三层MLP。

  解码器D采用UNet风格架构,具有加性跳跃连接。在瓶颈层,表达编码器与编码的模板网格进行拼接,随后通过两层LSTM层建模帧间的时序依赖性,再通过三个全连接层将表示映射回顶点空间。

  损失函数:为了确保输入模式下的信息在潜在空间中得到充分利用,MeshTalk提出了一种跨模态损失函数。该损失函数鼓励模型独立于音频输入准确地重建上脸部分,同时也能独立于提供的表达序列准确地重建口部区域。为了强调眼睑顶点的重要性,特别添加了眼睑损失。最终优化损失为L = L_xMod + L_eyelid,实践中发现两者的权重相等效果良好。

  自动回归模型:当仅使用音频输入驱动模板网格时,无法获得表达输入x1:T,因此需要学习一个自动回归时间模型,以在类别潜在空间中生成可信且与音频输入一致的潜在序列。利用贝叶斯定律,可以将给定音频输入a1:T下潜在嵌入c1:T,1:H的概率分解为当前和过去音频信息的依赖关系。我们使用类似PixelCNN的自动回归卷积网络来建模这一关系。

  2. 限制条件包括:

  •   延迟问题:由于实时处理的需求,MeshTalk在实际应用中可能会遇到延迟问题。
  •   实时运行限制:该系统在实时运行时可能会受到性能限制。
  •   面部追踪失败:在某些情况下,面部追踪可能失败,导致动画效果不理想。

  三、 除了OPPO,还有哪些公司或技术实现了无网通话功能?

  除了OPPO,还有其他公司和品牌实现了无网通话功能。根据证据,小米也推出了支持无网双向通话的技术。例如,小米15 Pro搭载了澎湃T1S信号增强芯片,并配备小米星辰通信系统,可以在3.5公里范围内实现无网双向通话。此外,vivo也在其X200系列手机中引入了无网通信技术,并且iQOO 13智能手机也将支持这一功能。

  四、 无网通话在实际应用中的案例

  无网通话技术在实际应用中有着多种案例,这些案例展示了其在不同场景下的实用性和重要性。

  •   vivo与联发科的合作:vivo与联发科共同研发了一种公里级无网通信技术,通过蓝牙实现了超过1.5公里的点对点语音对讲和文字广播功能。这种技术特别适用于地下车库寻找车辆或偏远山区进行户外探险等场景,因为这些地方往往网络服务不足。
  •   OPPO的无网络通信技术:OPPO展示了一种能在没有蜂窝网络、Wi-Fi、蓝牙的情况下实现手机之间的文字、语音传输乃至语音通话的技术。这项技术的有效传输距离可以达到3公里。这使得OPPO手机用户即使在网络不稳定或无法连接的情况下,也能保持清晰的通话。
  •   OpenGarden和Endaga:OpenGarden是一个“off-the-grid”消息应用,即使在没有互联网连接或蜂窝电话覆盖的情况下也能工作,并且已经连接了全球300万用户。它利用设备间的P2P连接创建了一个OTT网络。Endaga则是一个由Facebook收购的小规模独立蜂窝网络,专门为农村社区服务,允许智能手机在蜂窝网络发生灾难性故障时仍能通信。
  •   Reno12系列手机:OPPO Reno12系列手机首发了无网通讯技术,通过最新的蓝牙5.4技术,与周边同样开启无网畅聊的手机进行通话。这种技术不仅提升了用户体验,还在网络不稳定或无法连接的情况下提供了可靠的通信手段。

  五、 无网通话技术面临的主要挑战和解决方案

  无网通话技术虽然带来了革命性的变革,但其普及和应用仍面临一些主要挑战。首先,成本问题是无网通话技术普及的一大障碍。设备的价格需要足够低,以便广大消费者能够接受。其次,无网通话的稳定性和安全性也是需要重点关注的问题。

  为了解决这些挑战,业界已经提出了一些解决方案。例如,基于蓝牙的公里级无网通信技术可以在无网络覆盖的环境下实现超过1500米的通话距离。此外,vivo与联发科共同研发的技术也旨在实现远距离通信。小米推出的星辰通信系统则通过信号增强芯片和多频段天线组实现了3.5公里半径内的双向通话。

  另外,OPPO的MeshTalk技术利用去中心化通讯技术,在没有蜂窝网络或Wi-Fi的情况下进行小范围通讯(3000米内),可以实现文字、语音传输甚至是语音通话。这种技术不仅提高了通信的灵活性,还增强了在偏远地区的通信能力。

原创声明:文章来自技象科技,如欲转载,请注明本文链接: //www.viralrail.com/blog/98906.html

免费咨询组网方案
Baidu
map