苹果Siri在语音识别技术领域引领了一次革命,但远远不够。语音识别技术要全面影响人机交互,必须要让语音识别技术普及到每一个国家、每一个地区、每一个人。特别是当前智能终端的高速发展,可穿戴设备、无人驾驶汽车、智能电视、智能家居……更需要懂得不同地域自然人的语言。

德国知名学者威廉·冯·洪堡曾说过:“每种语言都反映了一个民族的精神和智慧。”尽管文字、图片、动作、表情等能传递人们的思想,但语言是其中最重要的媒介,是人类文明多样化成果的载体。保护民族语言和抢救濒危语言就是保护多样性的民族文化,同时也是保障各民族成员的平等权利。
我国56个民族有多达129种独立语言,特定使用区域和人群具有不同发音、词汇和语法体系,除了统一标准的普通话,诸多地方方言素有“十里不同音”之说。针对这一现象科大讯飞最新研发了前沿的方言语音识别技术,让机器能够听懂粤语、四川话、东北话、上海话、闽南话、湖南话、河南话等各地方言,极大满足了各行业需求。
那么,科大讯飞此项技术是如何突破方言识别难题的?从基本层面来看,普通话有400个单音节声音,根据声调予以区别;而方言发音则相对复杂,需要根据不同发音特性采用不同的特征识别方法,大致为:声类特征识别、韵类特征识别、调类特征识别和方言词汇识别。科大讯飞针对方言定制出专有语音识别引擎,使用纯正的方言语料库进行训练,确保能够用于口音较重的方言用户使用。
从2012年起,讯飞语音云在声学和语言建模中取得很多成果,同时在噪音和口音等方面都突破了技术难题,在全行业遥遥领先。“方言语音识别”是公司在云计算语音听写技术基础上,为扩大语音使用群体,满足不同地域用户自然便捷的语音使用需求而进行的技术创新,具有自适应性和稳定性。该技术成果将形成明显的差异化竞争优势,为公司主营业务带来积极影响,还能提高相关应用的用户黏性。
一般而言语音识别技术最先应用于语音拨号、语音导航、室内设备控制、简单的听写数据录入等,但此次方言语音识别技术将率先应用于手机输入法,并逐步推广到其他应用中。目前,智能手机和平板电脑都已抛弃鼠标键盘,语音输入正成为日常习惯,对老人和小孩都很适用;同时,手机输入法作为移动互联网新型入口,面向休闲娱乐、商务办公、人际交流、教育教学等生活中的方方面面,具有海量的使用人群,能够更快的提升应用能力。因此,手机输入法是语音应用的最好形态。
方言语音识别技术是继离线语音之后科大讯飞又一次率先推出的革命性技术,除了支持中文普通话、英文,方言语音识别能够让更多用户拥有近乎完美、没有错误的语音输入体验。
好文章,需要你的鼓励
GeoVerse融合几何潜在扩散模型与Wan2.2视频生成先验,并引入全局空间记忆机制,实现了跨视角一致、生成质量高且推理速度快的新视角合成,在多个数据集上大幅超越现有方法GLD。
本文解读TT-VidT,一种通过分离外观锚点与动作令牌、结合Diff Compression训练目标的视频自监督方法。在24种架构目标组合的受控实验中,仅TT3D与Diff Compression搭配才能进入强动作敏感区,且计算量比同类方法降低近一半。
Q&A Q1:Imprint Reader是什么? A:Imprint Reader是上海人工智能实验室团队开发的模型,通过SMaRT训练方法学会读取另一个模型冻结的权重更新,把参数层面的变化翻译成自然语言描述,判断这次更新到底注入了什么知识或诱导了什么行为习惯。 Q2:MetaEdit能做什么? A:MetaEdit能把Reader对目标行为的梯度信号迁移到原始模型上,不需要任何目标任务的训练数据,只用一句行为描述就能定向调整模型参数,已经在安全性拒绝率调节、数学推理风格转变和工具调用能力提升上验证过效果。 Q3:Imprint Reader读权重更新的准确率高吗? A:目前还不高,知识类目标的Pass@100只有2%,行为类目标是16%,说明自由生成描述的可靠性有限,但相比原始模型完全答不出来的0%基线,已经证明了权重更新的自然语言读取是可行的。
统一多模态模型能看也能画,理论上该会自我修正。本论文提出UMM-Reflection,用整条轨迹的强化学习联合训练诊断和修图能力,GenEval提升12分,且迁移到多个未训练基准,揭示RL提升的是选择可靠性而非新能力。