在近日举行的年度计算机视觉和模式识别盛会CVPR(Conference on Computer Vision and Pattern Recognition)上,阿里云ET城市大脑的三项视觉技术论文入选,与其应用场景息息相关。
CVPR由专业技术学会IEEE(电气和电子工程师协会)主办,是计算机视觉领域全球最具影响力、内容最全面的顶级学术会议。据CVPR官网显示,今年大会有超过3300篇论文投稿,其中录取979篇。
简单来说,ET城市大脑的三篇论文研究内容分别是:不改变硬件条件,提高视频质量;优化卷积神经网络架构,提高视频计算效率;从局部看整体,利用GAN减少样本标注来训练视频识别。
阿里云ET城市大脑是城市级的人工智能中枢,已经在杭州、衢州、澳门、吉隆坡等11个城市落地。摄像头是ET城市大脑感知城市运行状态的重要入口。
以杭州举例,杭州城市大脑已接管249路监控球机,覆盖700多个道路断面,视频报警准确率达95%以上,释放巡逻警力约200余名,并能实现人工巡逻无法做到的365天24小时无休。2018年底,预计将有1700路视频接入杭州城市大脑,覆盖全城43%的道路范围,上线后,监控覆盖区域将无需人工巡逻。
但通过视频看城市也面临着许多问题,例如,早期安装的标清球机摄像头分辨率低、噪点多、监控角度不确定,特别在行人、非机动车检测上为视频分析带来了很大挑战,如何在不改变摄像头硬件的前提下,提高视频识别的准确度和效率?在攻克这一难题的过程中,催生出一系列世界级的顶尖技术。
目前,在全球性的车辆检测、行人检测与识别算法排行榜上,ET城市大脑视觉智能团队都占据第一位。去年,还有三项技术论文入选另一国际顶级学术会议ACM Multimedia,涉及交通事故识别、人流轨迹判断、交通数据样本等研究领域。
阿里巴巴机器智能实验室副主任华先胜表示,通过普通的摄像头,城市大脑能够读懂各种车辆及行人的运行状态和轨迹,这一视频数据处理的规模全球罕见。城市大脑的应用场景是许多技术研究的起点,研究成果也将帮助到城市大脑落地,是人工智能领域的“登月计划”。
华先胜是ET城市大脑视觉智能负责人,此外还是IEEE(国际电气与电子工程师协会)院士,是视觉识别和搜索领域的国际级权威学者。
此次CVPR上,华先胜做了两次主题报告演讲,详细阐述了城市大脑背后的视觉技术,最终实现全面、实时、全量地优化决策、预测和干预。目前已推出天曜、天鹰、天机这三大视觉技术产品及天擎这一大规模视觉计算平台,解决交通事件实时感知、行人识别、车辆行人流量预测问题。
全球权威咨询与服务机构Forrester曾发布《New Tech: Computer Vision Software For AI In China, Q1 2018》报告,对国内机器视觉厂商进行了一轮全面评估,阿里云被选入最强阵营。
作为首批国家新一代人工智能开放平台,未来ET城市大脑还将向与城市治理有关的全部生态参与者开放平台上的AI能力,引领技术孵化和产业发展,更好地改善城市管理模式。
好文章,需要你的鼓励
AIM Intelligence联合多所知名大学揭示了音频AI系统的重大安全漏洞,开发出名为WhisperInject的攻击方法。这种攻击能让看似无害的音频指令操控AI生成危险内容,成功率超过86%,完全绕过现有安全机制。研究暴露了多模态AI系统的系统性安全风险,对全球数十亿智能设备构成潜在威胁。
新加坡国立大学研究团队系统梳理了视觉强化学习领域的最新进展,涵盖超过200项代表性工作。研究将该领域归纳为四大方向:多模态大语言模型、视觉生成、统一模型框架和视觉-语言-动作模型,分析了从RLHF到可验证奖励范式的政策优化策略演进,并识别出样本效率、泛化能力和安全部署等关键挑战,为这一快速发展的交叉学科提供了完整的技术地图。
浙江大学研究团队通过OmniEAR基准测试揭示了当前AI模型在物理世界推理方面的严重缺陷。测试显示,即使最先进的AI在明确指令下能达到85-96%成功率,但面对需要从物理约束推断行动的任务时,成功率骤降至56-85%。研究发现信息过载反而降低AI协作能力,监督学习虽能改善单体任务但对多智能体协作效果甚微,表明当前架构存在根本局限性。
纽约大学和Aimpoint Digital Labs的研究团队首次揭示了Transformer模型训练中"大规模激活"的完整发展轨迹。这些影响力比普通激活大千倍的"超级激活"遵循可预测的数学规律,研究者开发出五参数公式能以98.4%准确率预测其变化。更重要的是,通过调整模型架构参数如注意力密度、宽深比等,可以在训练前就预测和控制这些关键激活的行为,为设计更高效、量化友好的AI模型提供了全新工具。