十年磨一剑,阿里巴巴推荐与搜索深度学习服务体系AI·OS在云栖大会正式亮相

本文涉及的产品
智能开放搜索 OpenSearch行业算法版,1GB 20LCU 1个月
OpenSearch LLM智能问答版免费试用套餐,存储1GB首月+计算资源100CU
推荐全链路深度定制开发平台,高级版 1个月
简介: 2018年9月21~22日,在以“驱动数字科技”为主题的云栖大会上,阿里巴巴搜索事业部特别推出了“搜索推荐专场”,“推荐与搜索引擎AI·OS专场”,深度参与了这场科技盛宴。   阿里巴巴推荐与搜索引擎平台支持了包括淘宝、天猫、菜鸟、优酷以及海外电商在内的整个阿里集团的推荐与搜索业务,引导成交占据了集团GMV的绝大部分份额。

2018年9月21~22日,在以“驱动数字科技”为主题的云栖大会上,阿里巴巴搜索事业部特别推出了“搜索推荐专场”,“推荐与搜索引擎AI·OS专场”,深度参与了这场科技盛宴。

阿里巴巴推荐与搜索引擎平台支持了包括淘宝、天猫、菜鸟、优酷以及海外电商在内的整个阿里集团的推荐与搜索业务,引导成交占据了集团GMV的绝大部分份额。随着智能化时代到来,引擎平台正日益发展为大数据深度学习在线服务体系(AI Online Serving)。此外,引擎平台还拥有多项领先算法技术,如IBrain深度实时用户感知模型,可建设最完整的静态与动态电商用户兴趣感知网络,能够直接用于用户行为识别、偏好预估、个性化召回、个性化排序等任务中,在搜索、推荐和广告等个性化业务中有广泛的应用场景。

在9月21日的“推荐与搜索引擎AI·OS专场”的分论坛上,阿里巴巴高级研究员、搜索推荐工程技术负责人五福正式发布了阿里巴巴AI·OS系统,其团队向分论坛参与者详实地介绍了,随着智能化时代的到来,在保持原有的全链路10秒级更新延迟的引擎平台之上,AI·OS是如何拓展支持各种深度学习网络预测的灵活拆分,支持超TB的模型,驱动异构计算、实时计算以及深度学习训练平台发展,不断追求效率的极致。

AI·OS系统不仅仅服务于阿里集团的业务,同时也通过阿里云开放搜索OpenSearch产品服务外部开发者。为了更好赋能外部开发者,五福团队正在研发OpenSearch 2.0,进一步把淘宝、天猫更多的搜索核心算法产品化,给开发者提供效果更好、更智能的搜索服务体验,实现一键复制淘宝搜索的能力。此外,在推荐场景,阿里云智能推荐产品也将在近期推出公测,AI·OS系统将进一步赋能给开发者。

a04ae0719d10d6b4abd443f7ac81c4fc626443d9

(上图为阿里巴巴高级研究员,搜索推荐工程技术负责人五福在云栖大会)

淘宝搜索每天所承担的数据量级很大,数十亿级的query、数十亿级的商品、数百万级的卖家以及过半淘宝和天猫的GMV等。如此庞大的数据处理自然离不开灵活、易用和高效的AI·OS。在“推荐与搜索引擎AI.OS专场”上,阿里巴巴资深技术专家兰韬向与会者介绍了淘宝搜索与AI.OS的关系。阿里巴巴高级技术专家吴宗远则带领大家深入了解了阿里推荐系统架构的演进历程,并分享了在整套系统建设过程的经验教训。首先从猜你喜欢总体架构开始讲起,紧接着分享了业务层TPP服务架构,推荐的核心是图,因而重点对全图化推荐引擎进行了分析说明,包括在线图查询引擎iGraph和在线图服务框架SuezTuring。阿里巴巴高级技术专家唐辉天、柳明还介绍了搜索算法在云上产品化的尝试和探索,以及如何给算法开发人员提供简单高效的、端到端的、颠覆式的搜索算法开发、调优和评测体验。阿里巴巴资深开发专家陈乐重点介绍了搜索工程团队在手机淘宝搜索和拍立淘场景中成功落地了多个场景,提升机器学习的实时性、丰富性,改善用户体验并节省服务端计算资源的实践与探索。阿里巴巴高级技术专家李伟分享了其在大规模分布式系统运维管理上的经验,尤其是如何通过在离线混部、弹性调度,自动容量评估和部署优化等方式高效支持每年的双11大促。

0d00ec408cd6c5b6635dc246666baf8488d3c904

(图为推荐与搜索引擎AI.OS专场讲师合影)

而在同一天,阿里搜索事业部搜索推荐算法团队带着“搜你所需,荐你所想”的使命和愿景推出了“搜索推荐专场”。作为赋能淘宝和天猫等产品背后的核心搜索推荐算法技术,吸引了大量的参会者参加,现场可以算是爆满了。

df314454ba635d6f2db8a80eae61ed3bc09309a1

(搜索推荐专场现场参与状况)

阿里巴巴搜索事业部从成立到今年刚好是第十个年头,算法上经过了好几次大的更新换代,包括从最初首次使用机器学习模型,开启千人千面的个性化时代,到大规模机器学习的时代,以及应用在线学习平台实现模型的在线学习和实时更新,到最近的深度学习技术的全面应用等等。经过十年的发展,阿里巴巴的搜索推荐技术已经取得了世界领先的水平。

本次大会上,来自阿里巴巴集团的众多专家对最新的发展方向和研究成果作了详细的解读。其中阿里巴巴研究员郑波重点介绍了多场景和多目标的迁移学习在电商场景中的应用。阿里巴巴资深算法专家邓洪波介绍了新一代的智能交互搜索及其背后的算法。在推荐方面,阿里巴巴资深算法专家欧文武重点介绍了新版的猜你喜欢系统,包括基于图计算和图引擎的新推荐引擎,基于强化学习和多智能体的智能决策,以及如何加速预测和训练提速等方面。来自阿里巴巴的资深算法专家赵斌强从另一角度详细介绍了推荐系统中的向量化,包括商品的向量化和用户的向量化,探讨了如何将各种特征组合以及用户的行为和物品信息融合到一起学习,从而可以增强推荐算法的发现性和冷启动的能力。

77e3e83a80aa1c6421c5337cafd312fdac85e8de

(图为搜索推荐专场讲师合影)

AI·OS(Online Serving),大数据深度学习在线服务体系,由搜索事业部工程与算法同事们砥砺十年而成,支撑起海内外阿里电商全部的搜索和推荐业务,时刻置身大数据主战场,引导成交占据大盘主体;此外,作为中台技术中坚,AI·OS已是包括电商、阿里云、优酷、菜鸟、盒马、钉钉等等在内全集团的基础设施;更为重要的是,AI·OS体系的十年积累,已经透过云产品矩阵服务于全球各行各业的开发者,搜索即服务,推荐即服务已经深入人心,产品创新和服务能力还在持续升级。

目录
相关文章
|
22天前
|
人工智能 供应链 搜索推荐
生成式 AI 与向量搜索如何扩大零售运营:巨大潜力尚待挖掘
唯有打破领域壁垒,让数据在整个系统中流转 方可实现 AI 驱动的自动化增长
|
21天前
|
人工智能 自然语言处理 数据可视化
阿里云AI大模型助力客户对话分析——全方位提升服务与体验
随着数字化转型的推进,企业愈发重视客户互动数据的价值。阿里云推出了一套基于AI大模型的客户对话分析解决方案,通过自动化手段分析大量客户对话数据,提取有价值信息,优化服务流程,提升客户体验。本文将结合技术文档和实际体验,全面评测这一解决方案。
43 2
|
27天前
|
人工智能 搜索推荐 API
用于企业AI搜索的Bocha Web Search API,给LLM提供联网搜索能力和长文本上下文
博查Web Search API是由博查提供的企业级互联网网页搜索API接口,允许开发者通过编程访问博查搜索引擎的搜索结果和相关信息,实现在应用程序或网站中集成搜索功能。该API支持近亿级网页内容搜索,适用于各类AI应用、RAG应用和AI Agent智能体的开发,解决数据安全、价格高昂和内容合规等问题。通过注册博查开发者账户、获取API KEY并调用API,开发者可以轻松集成搜索功能。
|
24天前
|
人工智能
云端问道12期-构建基于Elasticsearch的企业级AI搜索应用陪跑班获奖名单公布啦!
云端问道12期-构建基于Elasticsearch的企业级AI搜索应用陪跑班获奖名单公布啦!
168 2
|
1月前
|
机器学习/深度学习 数据采集 自然语言处理
使用Python实现深度学习模型:智能客户服务与支持
使用Python实现深度学习模型:智能客户服务与支持
32 6
|
2月前
|
人工智能 自然语言处理 安全
【通义】AI视界|谷歌推出AI搜索功能“问照片”,照片一问即得……
本文汇总了AI领域的最新动态,包括谷歌推出的“问照片”功能,使用户能用自然语言检索Google Photos;OpenAI的商业用户激增及ChatGPT的广泛应用;Anthropic发布的企业级AI助手Claude Enterprise;美英欧盟首个人工智能法律约束条约;OpenAI前首席科学家新公司获巨额融资;以及比尔·盖茨对AI前景的乐观展望与安全建议。
|
2月前
|
SQL 人工智能 运维
在阿里云日志服务轻松落地您的AI模型服务——让您的数据更容易产生洞见和实现价值
您有大量的数据,数据的存储和管理消耗您大量的成本,您知道这些数据隐藏着巨大的价值,但是您总觉得还没有把数据的价值变现出来,对吗?来吧,我们用一系列的案例帮您轻松落地AI模型服务,实现数据价值的变现......
182 3
|
3月前
|
存储 人工智能 安全
保障隐私的Elasticsearch AI搜索解决方案
【8月更文第28天】随着大数据和人工智能技术的发展,搜索引擎在日常生活中扮演着越来越重要的角色。然而,用户隐私保护成为了一个不容忽视的问题。本文将探讨如何在确保用户数据隐私的同时,利用Elasticsearch实现智能搜索功能。我们将介绍一种综合方案,该方案结合了加密技术、差分隐私、匿名化处理以及安全多方计算等方法,以保障用户数据的安全性
149 0
|
5天前
|
安全 Linux 数据安全/隐私保护
Vanilla OS:下一代安全 Linux 发行版
【10月更文挑战第30天】
18 0
Vanilla OS:下一代安全 Linux 发行版
|
8天前
|
人工智能 安全 Linux