江苏龙网

  1. 首页 > 资讯 > 科技 > >

台式机&硬件|快手的推荐系统背后，英特尔做了什么？( 二 )


Cooper Lake或将是快手加速推荐系统的好选择 。
依托傲腾持久内存 ， 加速存储与访问

更好地存储与访问 ， 是快手在加速推荐系统过程中 ， 需要面临的另一个问题 。
在传统的存储架构中 ， 大容量持久化存储主要在硬盘或者固态盘中 ， 对于快手的推荐系统而言 ， 尤其是参数服务器和分布式索引服务 ， 从硬盘或固态盘中索引数据 ， 工作量大 ， 时延长 。 若将索引工作直接在内存中进行 ， 就会降低访问延时 ， 提高推荐系统的响应 。
不过 ， 在内存存储金字塔中 ， 金字塔顶端的存储方案 ， 性能高 ， 存储低 ， 单位容量成本高 ， 金字塔低端则是容量大、性能低 ， 成本低的存储方案 ， 存在断层现象 ， 比如常规的DDR4的内存和NAND的闪存 ， 访问的延迟相差1000倍 ， 典型的容量相差100倍 ， 而单位容量的成本相差10倍 。 这一断层现象导致很多应用在选择方案时 ， 难以找到比较平衡的设计 。
基于这一难题 ， 英特尔推出了傲腾持久内存 ， 与上一代产品相比 ， 其内存带宽提升25% ， 若搭配之后发布Ice Lake的平台 ， 每处理器可带来4.5TB的总内存容量 。 同时 ， 在做数据写入时 ， 其访问延迟只有几百纳秒 ， 而一个普通的NAND SSD的访问时间则在100微秒左右 。

英特尔技术专家介绍 ， 英特尔第三代至强可扩展平台与傲腾持久内存结合 ， 可将服务器上每个节点的容量从原来的几百GB扩展至TB级别 ， 例如一个4路、4个插槽的第三代至强可扩展处理器平台 ， 每个插槽都搭配傲腾持久内存 ， 支持的最大内存就可达到18T 。
基于此 ， 快手率先与英特尔展开合作 ， 结合英特尔至强可扩展处理器平台和傲腾持久内存 ， 快手推荐系统性能及TCO得到了优化和提升 。 不仅大大降低了数据访问延迟时间 ， 还缩短了系统故障恢复时长 。
台式机&硬件|快手的推荐系统背后，英特尔做了什么？
本文插图

同时 ， 傲腾持久内存与DRAM内存性能表现相似 ， 前者相比于后者更具成本和容量优势 。 因此在同英特尔的合作中 ， 快手推荐系统的总拥有成本（CTO）降低了30% 。
除了在推荐系统方面同英特尔合作 ， 改善存储与访问速度之外 ， 快手也正在同英特尔探讨成立联合实验室 ， 推动业务创新及升级数据中心 。
作为推荐系统的受益者 ， 快手或将在进一步加速生态系统的过程中再次尝到甜头 。
[1] 王喆 ， 《深度学习推荐系统》 ， 电子工业出版社
雷锋网雷锋网雷锋网


推荐阅读


上一篇：新机发布|数码博主上手OPPO A72，网友看过后评价走心了

下一篇：抗日战争|美国人问13岁小战士: 胜利后, 最想做什么? 他只说了五个字