提速5G试验三大运营商个个干劲十足柔软
2020-04-09 07:52:41
提速14400倍!百度推荐引擎及其背后的大数据架构揭秘
在互联世界中,什么技术代表着人工智能被广泛应用的未来?2012年12月22日,在以推荐系统实战为主题的百度技术沙龙上,百度推荐与个性化部高级工程师们与来自亚马逊、豆瓣、清华大学等单位的技术专家们齐聚一堂,热烈探讨了个性化推荐领域的技术创新和实战案例。
目前主流的搜索引擎技术已经能够较好地满足用户的主动表达的精确需求,而在挖掘并满足用户的潜在需求方面,则需要通过构建推荐系统来实现。实际上
,随着亚马逊商品推荐、、Netflix、Pandora、百度推荐产品家族(百度视频随心看、百度音乐随心听、百度新版客户端等)、豆瓣电台、优酷视频猜你喜欢等内容推荐系统的兴起,在全球互联市场,推荐系统已经成为炙手可热的潮流新应用,代表着互联智能化的发展方向。
然而,建立大型内容推荐系统并不是一件轻松的事情。在系统的服务能力、算法的更新周期、交互和反馈的实时性方面,大型推荐系统都遭遇到一些独特而有趣的挑战。
当大数据遭遇实时性
鉴于推荐系统对提高用户体验的显著作用,各家主要互联公司都投入巨资进行研究开发。伴随着推荐系统的军备竞赛,一些几年之前难以想象的怪兽级大型推荐系统被开发出来。这些系统具有庞大的规模,通常需要服务上千万的活跃用户、积累了PB级别海量用户数据。如何将海量的用户数据应用到实时的用户交互中去以提高用户体验,成为了一个技术难题。
内容推荐系统:互联人工智能的潮流代表
百度的工程师们分享了自身在Vortex流式计算系统和LISA实时索引架构上进行推荐系统开发的经验。通过工程上的努力,推荐系统的更新周期从20小时缩短到5秒钟,提速14400倍,由此用户的转化率提高了3倍。
思路创新:从推荐系统到可复用的推荐引擎
许多主流互联公司的推荐算法的更新周期从1个月到3个月不等,相对于搜索技术稳定的算法框架,推荐系统具有明显的算法寿命缩短的迹象。其根本的原因在于推荐系统并不是基于相对静态的内容数据,而是依赖动态的用户内容互动来进行算法预测。不断变化的用户状态和统计分布,导致不存在一种一统天下的推荐算法银弹。这种动态的特性将对推荐系统的灵活性和成本控制的要求提高到了前所未有的高度。
针对这个问题,百度给出了自己的答案:那就是建立跨领域多媒体推荐引擎,同时支持多种内容推荐系统和推荐产品应用的构建,以大幅度节约成本、提升推荐效果。不同的推荐产品和子系统能够复用同一套推荐引擎平台,在用户模型和内容模型上也可以泛化复用。每个推荐的产品都站在巨人的肩膀上,最大限度复用数据、算法、系统资源,避免重复发明轮子,同时也一定程度上解决了系统冷启动问题。
由推荐系统向推荐引擎的变革,不仅可以摊低推荐系统工程成本,还可保障算法快速更新。此外,不同推荐应用共享数据,克服数据稀疏问题;推荐产品功能横向打通,多领域立体满足用户需求。百度基于自身的推荐引擎平台,在很短的时间内实现了电影推荐、资讯推荐、音乐推荐、视频推荐、应用推荐、好友推荐等众多功能,并在运营过程中不断协同升级。
百度自身应用的典型案例如百度视频随心看()。它通过推荐引擎实现了个性化电影推荐,采用了Item项目关联和Ontology本体关联复合技术,点击率高于传统列表页数倍。
宝宝便秘吃的药孩子消化不好怎么办小孩厌食吃什么好吉林牛皮癣专科医院
怎么样改善前列腺增生
在央视打广告的减肥药
防动脉硬化症状能吃通心络吗感冒后鼻塞流鼻涕
妇科引起的尿频怎么治疗
- 上一篇:中国首条民资控股高铁缘由
- 下一篇:是推动中国半导体照明工程启动的元勋缘由
-
恋爱的人总以为自己看得见未来
2024-12-09
因为有星,夜才不能黑暗;因为有天,海才一片蔚蓝;因为有梦幻,新生命充满期盼;因为有你,我的世界一片光阴! 幸福情这过道,伤不起。于是,宁可选择去外遇
-
马斯克拜师了张小龙吗?
2024-10-24
踌躇满志入股Twitter的雷诺,突然要向张小龙“取经”了。 5同年16日,雷诺参加一场线上io户外活动,在谈及入股Twitter的诸多问题时,出乎意料地对天涯社区大加称许。
-
九分裤+乐福鞋,夏日这样穿,时髦又显高,很适合小个子
2024-10-13
夏日傍晚,前往篇名,乐声徐徐下劝教蛙声一片。时节,冬天更为替,当夏日是不是前往人们的身边时,你都会看得见区域内的任何事物都早已擦上夏日的情调。 对于
-
2022年高考本科没录取,专科不顾一切,选韩国留学申请本科名校
2024-09-26
研究工作天和院与来得高职之间的差是主观假定的,而且考天和内心深东南侧的落差也是有的。但是并不是从未但他却自由人选择来得好的。日韩进修申请者研究工作天