CNET科技行者 8月17日 北京消息:8月15日,高通宣布扩展QualcommSpectra™模组项目(Qualcomm Spectra™ Module Program),将能实现更加优化的生物识别功能和高分辨率深度传感,旨在满足一系列广泛的移动终端和头戴式显示器(HMD)所带来的、日益增加的拍照和视频需求。该模组项目基于高通Spectra嵌入式图像信号处理器(ISP)系列背后的前沿技术而打造,完全由高通设计,高通Spectra将通过即将推出的骁龙移动平台为未来图形质量和计算机视觉创新铺平道路。
高通产品管理副总裁Tim Leland表示:“无论是用于计算摄影、视频录制,或是要求精确动作跟踪的计算机视觉应用,高功效的摄像头图像信号处理无疑对下一代移动用户体验变得愈加重要。我们在视觉质量和计算机视觉方面的突破性进展,结合我们面向骁龙的集成式高通Spectra ISP系列,旨在支持前沿的移动应用生态系统,从而让我们的客户受益。”
全新的ISP和摄像头模组结合起来,旨在支持利用了深度学习技术以及背景虚化效果的图像体验所实现的出色图像质量和全新计算机视觉用例,并缩短智能手机和HMD的上市时间。下一代ISP采用面向计算机视觉、图像质量和功效提升而设计的全新摄像头架构,支持未来的骁龙移动平台和骁龙虚拟现实(VR)平台。摄像头模组项目新增部分包含了三个摄像头模组,包括虹膜认证模组、被动深度传感模组和主动深度传感模组。
Qualcomm Spectra模组项目
去年发布的高通Spectra模组项目旨在帮助客户加快支持出色图像质量和先进摄像头技术的终端上市时间。去年的产品中向客户提供了优化的双摄像头模组解决方案,便于制造商打造提升弱光拍摄、具备平滑变焦视频录制功能的智能手机摄像头。现在,摄像头模组项目已经扩展,纳入了全新的摄像头模组,能够利用主动传感支持出色的生物识别,并利用结构光支持需要实时、多重景深图生成与分割的各种计算机视觉应用。
第二代Qualcomm Spectra ISP
第二代高通Spectra ISP是利用全新硬件和软件架构的下一代集成式ISP系列,专为未来骁龙平台中计算机视觉、图像质量和功效提升而设计。它支持多帧降噪技术,可实现卓越的拍摄质量,同时也支持硬件加速动态补偿时间滤波器(MCTF)与内联电子图像稳定(EIS),可实现“像摄像机一般”的出色视频质量。
除了优化的同步定位与地图构建(SLAM)算法以外,高通Spectra ISP的低功耗、高性能运动追踪功能旨在面向需要SLAM的虚拟现实和增强现实应用,支持全新的扩展现实(XR)用例。
高通Spectra ISP系列和全新高通Spectra摄像头模组预计将集成在下一款旗舰骁龙移动平台中。
好文章,需要你的鼓励
新加坡国立大学研究团队开发了SPIRAL框架,通过让AI与自己对弈零和游戏来提升推理能力。实验显示,仅训练AI玩简单扑克游戏就能让其数学推理能力提升8.6%,通用推理提升8.4%,且无需任何数学题目作为训练材料。研究发现游戏中的三种推理模式能成功转移到数学解题中,为AI训练提供了新思路。
同济大学团队开发的GIGA-ToF技术通过融合多帧图像的"图结构"信息,创新性地解决了3D相机噪声问题。该技术利用图像间的不变几何关系,结合深度学习和数学优化方法,在合成数据集上实现37.9%的精度提升,并在真实设备上展现出色泛化能力,为机器人、AR和自动驾驶等领域提供更可靠的3D视觉解决方案。
伊利诺伊大学研究团队通过对比实验发现,经过强化学习训练的视觉语言模型虽然表现出"顿悟时刻"现象,但这些自我纠错行为并不能实际提升推理准确率。研究揭示了AI模型存在"生成-验证差距",即生成答案的能力强于验证答案质量的能力,且模型在自我验证时无法有效利用视觉信息,为AI多模态推理发展提供了重要启示。
MIT等顶尖机构联合提出SparseLoRA技术,通过动态稀疏性实现大语言模型训练加速1.6倍,计算成本降低2.2倍。该方法使用SVD稀疏性估计器智能选择重要计算部分,在保持模型性能的同时显著提升训练效率,已在多个任务上验证有效性。