
上篇的《大话“东数西算”》里,说到了东数西算是一种数据和计算的资源调配,但这种资源调配,和“南水北调”、“西气东输”又是大不同的。
小美:资源平衡可以理解,但数据的动态平衡,是啥意思来?
悟空博士:大家不能简单的理解为东部的数据都要拿到西部去计算。如果这样简单看,没毛病,但并没用厘清“东数西算”的大规划。数据的动态平衡是要先分清楚数据的分类,以此为基础,来理解东数西算了。
小美:悟空博士,那你快来说一说,数据怎么分类?
悟空博士:数据也有很多分类,从应用角度来看,数据可分为热数据和冷数据。热数据就是需要频繁访问,对计算实效有较高要求的数据,比如我们点外卖,当然需要系统及时的响应,那么这个数据就是热数据。简单理解,就是我们经常用到的数据。
小美:有热,就有冷吧?
悟空博士:对,还有一部分就是冷数据,我们偶尔访问一下,对计算的时效性要求并不高,比如我们归档的电子邮件,偶尔想起来时候才会去看一眼。
小美:我知道了,冷数据和热数据既然是按照平常用的应用频率来区分的,那么,这样的区别,具体在“东数西算”中如何体现?
悟空博士:东数西算中的“数”,要看的是冷数据和热数据之间的平衡,热数据尽量留在距离用户近的东部,而冷数据则运到距离用户较远的西部,数据的动态平衡,放在这里,就是要随着数据的冷热进行动态的平衡。
小美:这种动态平衡延伸开来,也会引发一系列效应吧?
悟空博士: 是的,算力在寸土寸金的东部自然要更贵一些,而在自然资源丰富的西部则更具价格优势。但成本同样需要考虑到,数据往返运送所涉及到的网络成本,以及往返的时间成本等。
小美:东数西算是全国一盘大棋,考量的会更多吧?
悟空博士:对头,东数西算既要考虑算力成本,也要考虑往返的网络成本以及时间成本,是结合成本考量后的平衡布局,确保相关数据的计算能保持一个成本最优解。
当然,“东数西算”实现的是更大意义上的平衡。西部的数字经济也会随着算力中心的潜移,而最终受益。
小美:西部能够接收东部的数据,说明西部也有一些条件是适合来接收的,这其中有哪些契机。
悟空博士:电力成本、土地成本、人才成本放在西部,就降低了许多,因此,西部的算力就比东部的整体算力成本低,是弥补东部算力不足的划算选择。这些都是大家很容易想到的理由。
小美:那肯定还有很多大家不容易想到的理由了。
悟空博士:首先,技术是最不容忽视的,跟以往的资源调度所不同,“东数西算”之所以能提出,因为有了新的契机:网络能力逐步提升,互联网架构也在调整,这些让“东数西算”成为可能。
小美:过去的网络不能实现这样的传输吗?
悟空博士:过去的网络传输能力还是有点“心有余,力不足”。传输海量的数据,需要有强大的网络。
曾经有一个段子,亚马逊为了计算处理数据,公司用货车拉硬盘到数据中心来处理,而不是像想象中的那样用“云”。
小美:原来还有这么一回事啊,下次咱们继续说。
作者:
中国信通院云大所副总工程师 王蕴韬
科技行者执行总编辑 孙封蕾
大话“东数西算”
好文章,需要你的鼓励
谷歌DeepMind等顶级机构联合研究揭示,当前12种主流AI安全防护系统在面对专业自适应攻击时几乎全部失效,成功率超过90%。研究团队通过强化学习、搜索算法和人类红队攻击等多种方法,系统性地突破了包括提示工程、对抗训练、输入过滤和秘密检测在内的各类防护技术,暴露了AI安全评估的根本缺陷。
西蒙弗雷泽大学和Adobe研究院联合开发的MultiCOIN技术,能够将两张静态图片转换为高质量的过渡视频。该技术支持轨迹、深度、文本和区域四种控制方式,可单独或组合使用。采用双分支架构和分阶段训练策略,在运动控制精度上比现有技术提升53%以上,为视频制作提供了前所未有的灵活性和精确度。
英国国王学院研究团队开发了潜在精炼解码(LRD)技术,解决了AI文本生成中的速度与准确性平衡难题。该方法通过两阶段设计模仿人类思考过程:先让AI在连续空间中"深思熟虑",保持多种可能性的混合状态,然后"果断行动",逐步确定答案。实验显示,LRD在编程和数学推理任务中准确性提升最高6.3个百分点,生成速度提升最高10.6倍,为AI并行文本生成开辟了新路径。
清华大学团队开发的ViSurf是一种创新的大型视觉语言模型训练方法,巧妙融合了督导式学习和强化学习的优势。该方法通过将标准答案整合到强化学习过程中,让AI既能从正确答案中学习又能保持自主推理能力。实验显示ViSurf在多个视觉任务上显著超越传统方法,特别是在处理模型知识盲区时表现突出,同时有效避免了灾难性遗忘问题,为AI训练提供了更高效稳定的新范式。