CNET科技行者 8月17日 北京消息:8月15日,高通宣布扩展QualcommSpectra™模组项目(Qualcomm Spectra™ Module Program),将能实现更加优化的生物识别功能和高分辨率深度传感,旨在满足一系列广泛的移动终端和头戴式显示器(HMD)所带来的、日益增加的拍照和视频需求。该模组项目基于高通Spectra嵌入式图像信号处理器(ISP)系列背后的前沿技术而打造,完全由高通设计,高通Spectra将通过即将推出的骁龙移动平台为未来图形质量和计算机视觉创新铺平道路。
高通产品管理副总裁Tim Leland表示:“无论是用于计算摄影、视频录制,或是要求精确动作跟踪的计算机视觉应用,高功效的摄像头图像信号处理无疑对下一代移动用户体验变得愈加重要。我们在视觉质量和计算机视觉方面的突破性进展,结合我们面向骁龙的集成式高通Spectra ISP系列,旨在支持前沿的移动应用生态系统,从而让我们的客户受益。”
全新的ISP和摄像头模组结合起来,旨在支持利用了深度学习技术以及背景虚化效果的图像体验所实现的出色图像质量和全新计算机视觉用例,并缩短智能手机和HMD的上市时间。下一代ISP采用面向计算机视觉、图像质量和功效提升而设计的全新摄像头架构,支持未来的骁龙移动平台和骁龙虚拟现实(VR)平台。摄像头模组项目新增部分包含了三个摄像头模组,包括虹膜认证模组、被动深度传感模组和主动深度传感模组。
Qualcomm Spectra模组项目
去年发布的高通Spectra模组项目旨在帮助客户加快支持出色图像质量和先进摄像头技术的终端上市时间。去年的产品中向客户提供了优化的双摄像头模组解决方案,便于制造商打造提升弱光拍摄、具备平滑变焦视频录制功能的智能手机摄像头。现在,摄像头模组项目已经扩展,纳入了全新的摄像头模组,能够利用主动传感支持出色的生物识别,并利用结构光支持需要实时、多重景深图生成与分割的各种计算机视觉应用。
第二代Qualcomm Spectra ISP
第二代高通Spectra ISP是利用全新硬件和软件架构的下一代集成式ISP系列,专为未来骁龙平台中计算机视觉、图像质量和功效提升而设计。它支持多帧降噪技术,可实现卓越的拍摄质量,同时也支持硬件加速动态补偿时间滤波器(MCTF)与内联电子图像稳定(EIS),可实现“像摄像机一般”的出色视频质量。
除了优化的同步定位与地图构建(SLAM)算法以外,高通Spectra ISP的低功耗、高性能运动追踪功能旨在面向需要SLAM的虚拟现实和增强现实应用,支持全新的扩展现实(XR)用例。
高通Spectra ISP系列和全新高通Spectra摄像头模组预计将集成在下一款旗舰骁龙移动平台中。
好文章,需要你的鼓励
这篇论文提出一种插件式2D动作接口,让已训练好的3D运动语言模型无需修改或微调即可直接理解2D姿态输入。实验证明2D输入效果媲美3D输入,且在真实视频场景下配合专门的降噪适配器,2D方案比3D姿态估计更省算力、更实用,为动作理解模型的现实部署提供了新路径。
研究团队让8种AI智能体独立完成100项真实科研任务,深度剖析800份研究轨迹后发现,即便是最强模型,也普遍存在"发现问题却不修正"的现象,背后根源指向AI缺乏检验自身产出、主动纠错的元认知能力。
WorldRover是一套面向可探索世界建模的合成视频数据引擎,基于虚幻引擎构建,能让同一段探索轨迹在保持路线与场景一致的前提下,重新渲染为多种视角和外观状态,并同步提供深度、光流、长程点追踪等丰富标注,最终发布WorldRover-10M数据集,含2190万帧、202.7小时视频。
这篇论文指出,现有多目标强化学习训练大模型时存在"一刀切"分配优化精力的问题,提出SA-MRPO方法,根据每个奖励目标的饱和程度动态调整其权重,在数学推理、自适应推理、代码生成等任务上均取得优于现有方法GDPO的效果。