Vision Pro:为什么空间音频是AR的绝杀武器?

这篇具有很好参考价值的文章主要介绍了Vision Pro:为什么空间音频是AR的绝杀武器?。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

Apple Vision Pro,不仅仅是苹果全新的重磅品类,而且在它身上也融合了苹果过去几乎所有新技术,比如空间音频就是其中一个例子。

苹果表示,Vision Pro中空间音频可以很好的应用在:影视节目、游戏内容、3D空间照片、3D空间视频、视频通话、等,甚至整个系统和UI交互中也充分融合空间音频的能力。

Vision Pro:为什么AR需要空间音频?

而苹果如何高规格的打造Vision Pro,更是在告诉大家,空间音频将是AR、MR设备的一大杀器,它对于提升临场感至关重要。

Vision Pro:为什么空间音频是AR的绝杀武器?

1,苹果最强空间音频系统

Vision Pro和大多数AR、VR一样,采用了开放式扬声器方案,整体的设计相对中庸一些,因为整体模组体积比较大,在头显硬质绑带上还是有点突出。

据悉,苹果Vision Pro描述页面显示:这是苹果有史以来最强的空间音频系统。

Vision Pro:为什么空间音频是AR的绝杀武器?

在此之前,我体验到最好的空间音频AR、VR设备包括:HoloLens 2,它不仅临场感十足,而且音频定向传播控制极其出色,在旁边的人几乎听不到设备的声音。

2,音频射线追踪

根据现场体验的反馈,所有人在体验之前都实现通过iPhone原生感相机扫描耳朵轮廓,从而为Vision Pro体验提供更适合你个人的空间音频效果。

Vision Pro:为什么空间音频是AR的绝杀武器?

该技术最早是在WWDC22上公布,其目标是AirPods Pro提供更符合你耳朵轮廓的空间音频效果。因为AirPods耳机的设计是在保证佩戴舒适性,同时在数千人不同耳朵轮廓的基础上建立了一个通用HRTF模型,来打造出适用性较广的空间音频能力。

而在Vision Pro上,则更进一步。

目前大家可以通过具备空间音频的AirPods Pro等产品来了解空间音频的能力。但是我要说的是,在Vision Pro中的空间音频将会更进一步。

Vision Pro:为什么空间音频是AR的绝杀武器?

其中一个重要逻辑就是:它会充分融合设备中LiDAR扫描,对房间内声学特性(物理材质等)进行分析,然后打造出适用于你耳朵轮廓且匹配你房间的“空间音频”效果。

上面这项技术,被苹果称为“音频射线追踪”(Audio Raytracing)。当然,在部分VR游戏中已经支持此技术,只不过对照关系都在游戏的虚拟场景之内。

相比AirPods Pro的空间音频,Vision Pro中既考虑你的耳朵轮廓信息,又融合(虚拟场景的)声音在房间内传播特性,来达到虚实融合的目的。

3,visionOS音频交互

在WWDC公开课中,我们也看到了苹果visionOS的声音交互设计指南。从中我们了解到,更多的声音交互层面的信息。

空间中还原声音的目标是:

  • 1,正确的音源位置;
  • 2,正确的音源方向。

围绕这两点,再加上一些技巧基本可以很好的设计好空间音频交互。

其中主要的要求是:

  • 1,背景音舒适、音量合适、不刺耳、不聒噪;
  • 2,前后景声音分明,利用好声音位置信息;
  • 3,需要明确左右位置,提供明确的声音方向;
  • 4,背景回响,提升整体氛围感;
  • 5,声音和视觉交互锚定,整体具备层次感。

参考:Apple文章来源地址https://www.toymoban.com/news/detail-489027.html

到了这里,关于Vision Pro:为什么空间音频是AR的绝杀武器?的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • MySQL Delete 表数据后,磁盘空间并未释放,为什么?

    有开发小哥咨询了一个问题,记录一下处理过程分享给有需要的朋友。 问题如下: MySQL数据库中有几张表增删比较频繁、数据变动剧烈且数据量大,导致数据增长过快,磁盘占用多。为了节约成本,定期进行数据备份,并通过delete删除表记录,但是执行delete操作后发现磁盘空

    2024年02月06日
    浏览(56)
  • 苹果 Apple 发布的 AR 头显 Vision Pro 介绍

    苹果今天凌晨的发布会,隆重推出了用了8 年时间研发的AR(增强现实)头戴显示器 Vision Pro。作为苹果 AR系列的最新成员,为用户带来了前所未有的沉浸式增强现实体验。 硬件 12个摄像头 ,包括苹果首个 3D 相机,5个传感器,6个麦克风,实时将你身边的环境搬进虚拟空间,

    2024年02月03日
    浏览(42)
  • 线性代数:为什么所有3x3对称矩阵构成的向量空间是6维的?(mit第11讲中的疑问)

    对应mit线性代数第11讲矩阵空间,秩1矩阵,小世界图第6-7分钟的讲解问题:3x3对称矩阵构成的向量空间为什么是6维的 看了一些资料,发现这个国外的大哥讲得清楚 https://math.stackexchange.com/questions/2813446/what-is-the-dimension-of-the-vector-space-consisting-of-all-3-by-3-symmetric-mat 转成中文后如

    2024年02月03日
    浏览(50)
  • new char与delete[]问题,疑惑点终得解开:为什么释放指向的内存空间后,其中的数据还可以继续访问

    请问:将一个保存有字符串变量的指针等号赋值给另一个char*类型的变量,这个过程发生了什么? 解答:将一个保存有字符串变量的指针等号赋值给另一个 char* 类型的变量,实际上是将指针的值(即指向字符串的内存地址)复制给了另一个指针变量。这个过程并不会复制字符

    2024年02月15日
    浏览(55)
  • Apple Vision Pro:空间计算的未来已来,你准备好了吗?

    “ 正如iPhone带我们进入移动计算时代,Apple Vision Pro将带我们进入空间计算时代。” 我虽然没有亲身体验,但观看了许多国内外第一批体验者的体验分享,看得出来,这些体验者都十分兴奋,根据他们的描述,我仿佛看到了科幻电影《头号玩家》里的世界即将到来。 2023年6月

    2024年02月08日
    浏览(44)
  • 如何将OpenAI Sora生成的普通AI视频转化为Vision Pro的空间视频,沉浸式体验

    【基于AI的Vision Pro空间视频】工作流:这个工作流程用于将2D视频转换为适用于 Vision Pro的Spatial视频: 1、使用Deep3D将2D视频转换为3D SBS: 使用Deep3D工具将2D视频转换为3D SBS格式: 转换例子: Prediction– lucataco/deep3d – Replicate https://replicate.com/p/uxtucj3bk2y3dd4brmtph5nxtu 2、使用

    2024年02月20日
    浏览(46)
  • Netty为什么高效,为什么这么受欢迎?

    上篇文章通过 Java NIO 的处理流程与 Netty 的总体流程比较,并结合 Netty 的源码,可以更加清晰地理解Netty。本文将结合源码详细解析Netty的高效和强大功能的设计原理,学习 Netty 是如何实现其卓越的性能和功能特性,也希望可以在日后工作中利用到 Netty 的设计思想。 我们先看

    2024年02月12日
    浏览(68)
  • Redis—Redis介绍(是什么/为什么快/为什么做MySQL缓存等)

    一、Redis是什么 Redis 是一种 基于内存的数据库 ,对数据的读写操作都是在内存中完成,因此读写速度非常快,常用于 缓存,消息队列、分布式锁等场景 。         Redis 提供了多种数据类型来支持不同的业务场景,比如 String(字符串)、Hash(哈希)、 List (列表)、Set(集合)、

    2024年02月10日
    浏览(66)
  • AIMD 为什么收敛(tcp reno/cubic 为什么好)

    TCP 拥塞控制目标是缓解并解除网络拥塞,让所有流量公平共享带宽,合在一起就是公平收敛。 AIMD(几乎所有与拥塞控制相关的协议或算法都有 AIMD 的影子,包括 RoCE,BBRv2) 为什么收敛?我一般会给出下面的老图: 虽然只展示了两条流的收敛,但 n 条流收敛的展示无非就是将

    2024年02月06日
    浏览(74)
  • tcp 为什么要三次握手,两次不行吗?为什么?

    TCP使用三次握手(Three-Way Handshake)的过程是为了确保双方建立起可靠的通信连接,并在连接的建立过程中协商必要的参数。两次握手是不够的,原因主要有以下几点: 防止已失效的连接请求被接受: 假设有A和B两台主机,A向B发送了一个连接请求,但由于某些原因导致连接建

    2024年02月20日
    浏览(62)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包