• 我的订阅
  • 科技

倾斜 45 度,苹果构建 Vision Pro 沉浸空间视频的独特算法

类别:科技 发布时间:2024-04-16 09:37:00 来源:IT之家

IT之家 4 月 16 日消息,迈克・斯旺森(Mike Swanson)上周末发布博文,深度剖析了 iPhone 的“拍摄空间视频”能力,表示采用了和传统鱼眼镜头不同的算法方式。

目前拍摄空间视频能力仅限于运行 iOS 17.2 或更高版本的 iPhone 15 Pro 和 iPhone 15 Pro Max 机型,用户录制的空间视频可以在苹果 Vision Pro 头显上以三维形式重温回忆。

iPhone 15 Pro 和 iPhone 15 Pro Max 上拍摄的空间视频为 1080p / 30 fps 的 SDR 格式。一分钟空间视频的大小约为 130 MB(一分钟 1080p / 30 fps 普通视频的大小约为 65 MB)。

而想要让 2D 视频转换成为半球形或球形投影图,在沉浸式体验方面存在诸多挑战,其中最常规的方式就是 180 度鱼眼镜头。

常规方法就是以特定方式分割视频,可以将其拉伸到适合用户 180 度视野的水平和垂直虚拟球体中。但这种方式会导致部分边角部分并未实际使用,数据效率不高。

倾斜 45 度,苹果构建 Vision Pro 沉浸空间视频的独特算法

还有一种消除黑色部分的替代方法,即 180 度等角投影。通过编辑创建,它可以扭曲图像以填充整个矩形框架。但这种方式也有一个问题,就是很难在每个 180 度视角中保留细节。

倾斜 45 度,苹果构建 Vision Pro 沉浸空间视频的独特算法

苹果使用了一种特殊的构建算法,以 45 度旋转的方式对鱼眼内容进行编码,也就是视野直径位于对角线上,不仅可以更显更多的像素,而且也提高了数据使用率。

倾斜 45 度,苹果构建 Vision Pro 沉浸空间视频的独特算法

对观众来说,这样做的好处是视野“地平线”的像素最多。由于大多数人在观看视频时都会注视地平线,因此保留这一部分的细节对观看体验至关重要。

IT之家附上参考

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-04-16 11:45:11

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

299元!字节首款MR头显来了,巨幕打游戏,同屏刷抖音,兼容苹果Vision Pro
...精度达厘米级。在此基础上,PICO自研了一整套环境感知算法,包含实时创建3D地图、环境语义理解、长期记忆虚拟物体固定位置等功能
2024-08-21 09:37:00
799元!XREAL Beam投屏盒子发布
...、无法调节、易抖动等问题,XREALBeam基于自研的空间感知算法和EIS电子防抖算法,创新推出悬停、云台、浮窗三种投屏模式,带来更加稳定、高度自由、适配更多生活场景的空间投
2023-06-14 09:47:00
最前线 | 联想发布新一代轻量化晨星AR眼镜G2 light
...款AR眼镜拥有双目1080P立体显示光机,配合9轴传感器融合算法,可以让佩戴者的“视界”在空间无限拓展。光机具有50%的环境光透过率,同时,提高了屏幕亮度到2000nit,确
2023-07-03 11:22:00
苹果AR/VR专利为混合现实视频提出基于注视点的视频编码系统
...网Nweon 2023年03月10日)有视频编码系统是使用比特率控制算法来确定向视频帧的特定区域分配多少比特,从而确保给定视频编码标准的统一图像质量。然而,大多数比特率控制算
2023-03-10 11:00:00
OPPO刘作虎:跟进我们这套影像系统,友商会很痛苦
...右英寸的底才能做到不错标准,如果以23焦段真实地做QBC算法的部分,其实在35mm的部分也可以做到等效的效果,我的答案是随着一英寸带来的变化,大家对高度的限制,在做一英寸的3
2024-01-09 07:00:00
iPhone 15 Pro Max传感器无限接近1英寸
...致认为苹果手机最顶呢?这就得益于其的硬件设备、系统算法等因素啦~先来说说iPhone的强大芯片,我们就不说它的性能如何了,主要说说与成像效果有关的部分,iPhone的A系列仿
2023-05-08 10:43:00
好奇心不下头!能拍摄空间视频的iPhone 15 Pro,元宇宙的钥匙
...奇心没有上头的一夜过去后,几乎所有媒体都再次高呼“苹果毫无新意”,“iPhone即将寿终正寝”。但在手机已经卷无可卷的2023年
2023-11-10 09:21:00
【硬件编年史】秦始皇都做不到统一!视频编码的那点事
...的了。因此视频压缩编码就尤为重要了,在传统数据压缩算法来看视频文件里面基本上是没有什么冗余信息的,所以人们就有必要去开发针对视频的压缩算法,把实际存在的冗余信息给去掉,从而减
2023-05-08 02:00:00
苹果被大模型打得措手不及
...超当时市场上的其他手机产品。苹果致力于通过传感器与算法技术,淘汰传统的交互逻辑。iPhone的推出,成功使手机摆脱了手写笔和键盘;空间计算领域,苹果期望能够突破屏幕与手持设备
2024-03-26 10:25:00
更多关于科技的资讯:
摘要:随着信息技术的快速发展,人工智能技术逐渐渗透金融机构的各类业务与管理环节,对传统金融运作模式产生了深刻影响。金融机构在激烈竞争和成本约束的背景下
2026-03-07 05:46:00
近日,省应急管理厅举行“AI+工业企业火情预警(火眼哨兵)”“AI+烟花爆竹监管(烟花卫士)”应用上线发布仪式。浙江拥有30余万家工业企业
2026-03-07 07:34:00
视频摄制:张晶、赵新宇、朱泊宇
2026-03-07 07:47:00
今年的全国两会上,“一人公司”(One Person Company,简称OPC)成为代表委员们热议的话题。全国人大代表
2026-03-07 07:04:00
2026年全国两会正式开幕,全国政协委员、京东集团技术委员会主席、京东云总裁曹鹏围绕人工智能产业发展建言献策。他建议,推动我国AI产业实现从规模扩张到效能提升
2026-03-06 22:56:00
编者按:从生力军天创机器人开始,《大众证券报》明镜财经工作室记者将陆续探访在各种应用场景解决着实际问题的南京机器人企业
2026-03-06 22:56:00
从平台赋能到标杆涌现:青岛崂山区打造OPC创业首选地
鲁网3月6日讯2026年,是“一人公司”(OPC)从概念走向规模化实践的关键之年。当这一新型创业范式成为科创发展新风口
2026-03-06 20:12:00
【宅男财经|专家面对面】据央视新闻报道,十四届全国人大四次会议今天(6日)举行经济主题记者会。商务部部长王文涛在会上表示
2026-03-06 21:54:00
从手工“制茶”到数据“智茶”:竹叶青展现AI时代品质新解法
在中国古老的传统产业版图中,茶产业无疑是最具代表性,却又最难被现代化改造的堡垒之一。长期以来,非标化、依赖人工经验、产业链条冗长等痛点
2026-03-06 17:21:00
全球AI迈向“办事时代”,千问持续推进AI生活服务落地
3月6日,千问宣布持续投入“AI办事”,用户可以让AI一句话下单各类生活服务,享受AI办事带来的便捷和立减实惠。进入2026年
2026-03-06 18:54:00
三联家电洪楼店店庆盛典3.07火热开启!
鲁网3月6日讯春暖花开,焕新正当时!一年一度,三联家电洪楼店将于3月7日至3月15日隆重举办店庆盛典,为广大消费者带来一场诚意十足
2026-03-06 17:08:00
2025ITEC颁奖典礼在京举行 半导体AI创新成果引关注
2月4日,第十三届朝阳国际人才创业大会(ITEC2025)创新峰会在北京举办,大会全球创业赛获奖名单同期正式揭晓——“人工智能在半导体制造的应用与研究”项目凭借核心技术突破与产业化落地实效
2026-03-06 14:10:00
中新经纬3月6日电 (薛宇飞)从“新三样”(新能源汽车、锂电池和光伏产业)领跑全球,到新“新三样”(机器人、人工智能与创新药)迎来爆发
2026-03-06 15:03:00
3月10日起携程将下线“调价助手”,减少酒店间价格内卷
3月5日,极目新闻记者从携程获悉,从2026年3月10日起,携程商家管理后台将下线“AI生意助手”(调价助手)功能。据了解
2026-03-06 15:20:00
3月6日,字节跳动官方微信公众号发文称,ByteIntern实习生招聘项目正式启动。据悉,本次招聘为字节跳动史上规模最大的转正实习生招聘计划
2026-03-06 15:20:00