CNET科技行者 8月17日 北京消息:8月15日,高通宣布扩展QualcommSpectra™模组项目(Qualcomm Spectra™ Module Program),将能实现更加优化的生物识别功能和高分辨率深度传感,旨在满足一系列广泛的移动终端和头戴式显示器(HMD)所带来的、日益增加的拍照和视频需求。该模组项目基于高通Spectra嵌入式图像信号处理器(ISP)系列背后的前沿技术而打造,完全由高通设计,高通Spectra将通过即将推出的骁龙移动平台为未来图形质量和计算机视觉创新铺平道路。
高通产品管理副总裁Tim Leland表示:“无论是用于计算摄影、视频录制,或是要求精确动作跟踪的计算机视觉应用,高功效的摄像头图像信号处理无疑对下一代移动用户体验变得愈加重要。我们在视觉质量和计算机视觉方面的突破性进展,结合我们面向骁龙的集成式高通Spectra ISP系列,旨在支持前沿的移动应用生态系统,从而让我们的客户受益。”
全新的ISP和摄像头模组结合起来,旨在支持利用了深度学习技术以及背景虚化效果的图像体验所实现的出色图像质量和全新计算机视觉用例,并缩短智能手机和HMD的上市时间。下一代ISP采用面向计算机视觉、图像质量和功效提升而设计的全新摄像头架构,支持未来的骁龙移动平台和骁龙虚拟现实(VR)平台。摄像头模组项目新增部分包含了三个摄像头模组,包括虹膜认证模组、被动深度传感模组和主动深度传感模组。
Qualcomm Spectra模组项目
去年发布的高通Spectra模组项目旨在帮助客户加快支持出色图像质量和先进摄像头技术的终端上市时间。去年的产品中向客户提供了优化的双摄像头模组解决方案,便于制造商打造提升弱光拍摄、具备平滑变焦视频录制功能的智能手机摄像头。现在,摄像头模组项目已经扩展,纳入了全新的摄像头模组,能够利用主动传感支持出色的生物识别,并利用结构光支持需要实时、多重景深图生成与分割的各种计算机视觉应用。
第二代Qualcomm Spectra ISP
第二代高通Spectra ISP是利用全新硬件和软件架构的下一代集成式ISP系列,专为未来骁龙平台中计算机视觉、图像质量和功效提升而设计。它支持多帧降噪技术,可实现卓越的拍摄质量,同时也支持硬件加速动态补偿时间滤波器(MCTF)与内联电子图像稳定(EIS),可实现“像摄像机一般”的出色视频质量。
除了优化的同步定位与地图构建(SLAM)算法以外,高通Spectra ISP的低功耗、高性能运动追踪功能旨在面向需要SLAM的虚拟现实和增强现实应用,支持全新的扩展现实(XR)用例。
高通Spectra ISP系列和全新高通Spectra摄像头模组预计将集成在下一款旗舰骁龙移动平台中。
好文章,需要你的鼓励
这项由Midjourney团队主导的研究解决了AI创意写作中的关键问题:如何让AI既能写出高质量内容,又能保持创作的多样性和趣味性。通过引入"偏差度"概念和开发DDPO、DORPO两种新训练方法,他们成功让AI学会从那些被传统方法忽视的优秀独特样本中汲取创意灵感,最终训练出的模型在保持顶级质量的同时,创作多样性接近人类水平,为AI创意写作开辟了新方向。
上海AI实验室联合多所高校开发出VisualPRM系统,这是首个专门用于多模态推理的过程奖励模型。该系统能像老师批改作业一样逐步检查AI的推理过程,显著提升了AI在视觉推理任务上的表现。研究团队构建了包含40万样本的训练数据集和专门的评估基准,实现了在七个推理基准上的全面性能提升,即使是最先进的大型模型也获得了5.9个百分点的改进。
上海AI实验室团队通过LEGO积木设计了创新评测基准LEGO-Puzzles,系统测试了20个先进多模态大语言模型的空间推理能力。研究发现即使最强AI模型准确率仅57.7%,远低于人类93.6%的表现,揭示了当前AI在三维空间理解和多步序列推理方面的重大不足,为机器人、自动驾驶等应用发展提供重要参考。
字节跳动团队突破了AI图像生成领域的三大难题:身份识别不准确、文字理解偏差和图片质量不佳。他们开发的InfiniteYou技术采用创新的InfuseNet架构和多阶段训练策略,能够根据用户照片和文字描述生成高质量个性化图像。实验显示该技术在身份相似度、文本匹配度和图像质量方面均超越现有最佳方案,并具备出色的兼容性,为个性化内容创作开辟了新道路。