高通日前发布全新虚拟现实(VR)软件开发包(SDK)。
820处理器这样的先进异构处理器可支持沉浸式VR体验,但如果没有合适的开发者工具包,开发者们也难以充分利用其性能。
开始提供。
骁龙VR SDK将首次支持多项针对最佳VR用户体验的、至关重要的新技术。它们包括:
• DSP传感器融合:利用骁龙820中包含的全套技术,该SDK让开发者能够通过骁龙传感器内核,轻松获取来自高频陀螺仪和加速计的感应数据,并利用Qualcomm® Hexagon™ DSP进行预测性的头部位置处理,打造具备更佳响应性的沉浸式体验
• 快速光子移动:通过异步时间扭曲及单显示缓存,提供快速的3D画面渲染,与不使用该SDK相比,减少高达50%的延迟
• 支持镜头校正的立体渲染:支持3D双眼画面的色彩校正和桶形畸变,提高图形和视频的视觉质量,增强整体VR体验
• VR图层:生成菜单、文字和其他覆盖图层,在虚拟世界中实现正确渲染,减少失真可能造成的视觉不适感
• 功耗管理:集成Qualcomm® Symphony System Manager SDK,提供整体的CPU、GPU和DSP功率与性能管理,让VR能够在低功耗、低散热的严格要求下,以稳定的帧数率运行——与不使用该SDK相比,提高电源效率
Qualcomm Technologies, Inc. 工程高级总监Dave Durnil表示,“我们正提供先进的工具和技术帮助开发者显著改善诸多应用程序的虚拟现实体验,包括游戏、360度VR视频和各种交互式教育与娱乐应用等。VR是我们与世界互动的全新方式,我们很高兴能帮助移动VR开发者在即将面市的、可支持VR的骁龙820安卓智能手机和头盔上,更高效地提供引人瞩目的高品质体验。”
好文章,需要你的鼓励
这项由Midjourney团队主导的研究解决了AI创意写作中的关键问题:如何让AI既能写出高质量内容,又能保持创作的多样性和趣味性。通过引入"偏差度"概念和开发DDPO、DORPO两种新训练方法,他们成功让AI学会从那些被传统方法忽视的优秀独特样本中汲取创意灵感,最终训练出的模型在保持顶级质量的同时,创作多样性接近人类水平,为AI创意写作开辟了新方向。
上海AI实验室联合多所高校开发出VisualPRM系统,这是首个专门用于多模态推理的过程奖励模型。该系统能像老师批改作业一样逐步检查AI的推理过程,显著提升了AI在视觉推理任务上的表现。研究团队构建了包含40万样本的训练数据集和专门的评估基准,实现了在七个推理基准上的全面性能提升,即使是最先进的大型模型也获得了5.9个百分点的改进。
上海AI实验室团队通过LEGO积木设计了创新评测基准LEGO-Puzzles,系统测试了20个先进多模态大语言模型的空间推理能力。研究发现即使最强AI模型准确率仅57.7%,远低于人类93.6%的表现,揭示了当前AI在三维空间理解和多步序列推理方面的重大不足,为机器人、自动驾驶等应用发展提供重要参考。
字节跳动团队突破了AI图像生成领域的三大难题:身份识别不准确、文字理解偏差和图片质量不佳。他们开发的InfiniteYou技术采用创新的InfuseNet架构和多阶段训练策略,能够根据用户照片和文字描述生成高质量个性化图像。实验显示该技术在身份相似度、文本匹配度和图像质量方面均超越现有最佳方案,并具备出色的兼容性,为个性化内容创作开辟了新道路。