Flink Forward Asia 生产实践专场 “美团Flink资源调度优化实践”冯斐 美团数据平台计算引擎工程师

实时数仓workshop北京站“flink x Hologres 构建企业级一站式实时数仓”刘一鸣阿里云高级产品专家

Lakehouse Meetup“Apache Hudi 实时湖仓解决方案”陈玉兆阿里巴巴技术专家Apache Hudi PMCApache Calcite PMC

11月5日， 阿里云开发者社区、阿里灵杰、InfoQ联合举办的「开源人说」“大数据&AI”专场在云栖大会D2馆开发者舞台火热进行。阿里巴巴开源会员会大数据AI领域主席王峰和阿里巴巴资深技术专家施兴现场分享热门开源项目背后的故事。开源中国创始人&CTO红薯，白鲸开源联合创始人代立冬，浙大博导、AI专家赵俊博，InfoQ总编辑王一鹏、Apache软件基金会成员李钰等嘉宾圆桌共话，对开源热点及痛点问题展开激烈讨论。讲师/嘉宾简介嘉宾/讲师王峰阿里巴巴开源委员会大数据AI领域主席、阿里云开源大数据平台负责人、Flink中文社区发起人红薯开源中国社区创始人兼CTO代立冬白鲸开源联合创始人、Apache DolphinScheduler PMC Chair、Apache SeaTunnel PPMC王一鹏InfoQ总编辑赵俊博浙江大学博导、AI专家李钰ASF Member、Apache Flink&HBase PMC Member、阿里巴巴资深技术专家施兴阿里巴巴资深技术专家、阿里云AI开源项目EasyRec负责人

快手、美团、字节跳动、小米、运满满、蔚来汽车、中泰证券、中原银行、中信建投、中南电力设计院等多行业实时计算领域专家详细解读 Flink 在不同企业和行业内的应用与落地，围绕业务场景、业务痛点、面临挑战、如何破局等宝贵实践经验倾囊相授。讲师/嘉宾简介贺小令｜阿里云高级技术专家，Apache Flink Committer刘建刚｜快手技术专家许雷力｜阿里云计算平台 实时计算&托管生态 SRE 团队 阿里云技术专家张韦杰｜阿里云开发工程师冯斐｜美团数据平台计算引擎工程师李建国｜字节跳动 实时数据研发工程师茅旭辉｜字节跳动 实时数据研发工程师

由 Apache Flink 核心贡献者与来自阿里巴巴、字节跳动、华为、Shopee、bilibili、美团等公司的一线技术专家解析 Flink 技术动向与应用实践，回归技术本质，打造全方位技术盛宴。讲师/嘉宾简介俞航翔｜Apache Flink Contributor范瑞｜Tech Lead of Shopee Flink Runtime Team，Apache StreamPark Committer & Flink/Hadoop/HBase/RocksDB Contributor张杨｜bilibili 资深开发工程师李明｜字节跳动基础架构工程师王义｜字节跳动基础架构工程师王非凡｜美团数据平台计算引擎工程师，Apache Flink Contributor

Apache Flink Meetup 北京站主题：Flink Table Store 典型应用场景讲师：李劲松 阿里巴巴高级技术专家

活动介绍：为了促进 Flink CDC 技术的交流和发展，我们将于 5 月 21 日在线举办 Flink CDC Meetup。本次 Meetup 由阿里巴巴技术专家，Apache Flink PMC Member & Committer 伍翀 (云邪) 作为出品人，邀请了来自阿里巴巴、XTransfer、顺丰、OceanBase、大健云仓的大咖分享 Flink CDC 在各场景中的最佳实践、生产经验、技术原理等。嘉宾简介：伍翀（云邪）- 阿里巴巴技术专家，Apache Flink PMC Member & Committer徐榜江（雪尽）- 阿里巴巴高级开发工程师，Apache Flink Committer & Flink CDC Maintainer孙家宝 - XTransfer 资深 Java 开发工程师，Flink CDC Maintainer覃立辉 - 顺丰大数据研发工程师王赫（川粉）- OceanBase 技术专家龚中强 - 大健云仓基础架构部负责人

首届 Flink Forward Asia Hackathon，本次比赛由 Apache Flink 社区联手阿里云 ACE、 Pravega 社区、DELL 联合举办。本次比赛为开放式命题，以实时计算为主题，以 Flink 为工具，解决大家日常学习和工作中遇到的实际问题。可以是气象预测、城市交通管理、金融交易监察这样关乎国计民生的选题；也可以是提升购物体验、增强游戏互动性、个人运动管理、社交等改善生活中琐碎点滴的选题；还可以是对 Flink 本身的创新和改进。选手需要使用（但不仅限于使用）Flink 生态里的各种工具，包括统计分析、机器学习、复杂事件处理、各类 connector，StatefulFunction 等等来完成自己的选题。共计 29 支队伍进入决赛

来自阿里巴巴、字节跳动、网易的技术专家们将解读如何构建数据湖平台、简化实时数据入湖入仓等相关问题，更有 Flink + Iceberg、Flink + Hudi 构建流式数据湖最佳实践。讲师/嘉宾简介1.《字节跳动实时数据湖构建的探索和实践》李延加 - 字节跳动数据平台研发工程师，Apache Hudi PMC Member & Committer2.《Flink CDC 如何简化实时数据入湖入仓》徐榜江 - 阿里巴巴高级开发工程师，Apache Flink Committer，Flink CDC Maintainer伍翀 - 阿里巴巴技术专家，Apache Flink PMC Member & Committer3.《Flink + Iceberg 构建网易湖仓一体》马进 - 网易数据科学中心在线数据和实时计算团队负责人4.《使用 Flink Hudi 构建流式数据湖平台》陈玉兆 - 阿里巴巴技术专家，Apache Hudi Committer刘大龙 - 阿里巴巴开发工程师5.《Apache Flink 集成 Apache Iceberg 最佳实践》胡争 - 阿里巴巴技术专家，Apache Iceberg & HBase PMC

平台建设专场由来自字节跳动、腾讯新闻、网易、小红书、京东、滴滴、bilibili、汽车之家、移动、联通、BIGO、蚂蚁金服、翼支付的技术专家分享基于 Apache Flink 的实时计算平台演进与实践。讲师/嘉宾简介1.《网易游戏 FlinkSQL 平台化实践》林小铂 - 网易游戏资深开发工程师2.《联通实时计算平台演进与实践》穆纯进 - 联通大数据技术专家3.《Flink on K8s 在京东的持续优化实践》付海涛 - 京东资深技术专家4.《State Migration and Query on Flink SQL》周伊莎 - 字节跳动基础架构工程师马越 - 字节跳动基础架构工程师，Apache Flink Contributor5.《BIGO 使用 Flink 做 Olap 分析及实时数仓的实践及优化》邹云鹤 - BIGO Staff Engineer

行业实践专场由字节跳动、网易、蔚来、中原银行、建信金融科技、中信建投等多行业实时计算领域专家详细解读 Flink 在业内的应用与落地，围绕业务场景、业务痛点、面临挑战、如何破局等宝贵实践经验倾囊相授。讲师/嘉宾简介1.《Flink 在能源建设的实践》姚远 - 中南电力设计院工程师、注册测绘师2.《Apache Flink 在蔚来汽车的应用》吴江 - 蔚来汽车大数据部门数据开发，OLAP 平台 tech lead3.《Flink 在字节跳动数据流的实践》刘石伟 - 字节跳动数据平台数据流技术负责人4.《网易游戏基于 Flink 的支付环境全关联分析实践》林佳 - 网易互娱技术中心计费实时平台与 SDK 技术负责人，Apache Flink Contributor

如何利用云上分布式 Python 加速数据科学。如果你熟悉 numpy、pandas 或者 sklearn 这样的数据科学技术栈，同时又受限于平台的计算性能无法处理，本次直播介绍的 MaxCompute 可以让您利用并行和分布式技术来加速数据科学。也就是说只要会用 numpy、pandas 和 scikit-learn 之一，就会用 MaxCompute 分布式 Python 的能力。讲师简介孟硕 阿里云智能 产品专家

MaxCompute通过流式数据高性能写入和秒级别查询能力(查询加速)，提供EB级云原生数仓近实时分析能力；高效的实现对变化中的数据进行快速分析及决策辅助。当前Demo基于近实时交互式BI分析/决策辅助场景，实现指标卡近实时BI分析、近实时市场监测、近实时趋势分析、近实时销量拆分功能。讲师简介隆志强 阿里云智能 高级产品专家

直播介绍：（建议600字以内）E-MapReduce 极客挑战赛线上宣讲会直播内容：1、大咖寄语2、赛事解读讲师简介EMR极客挑战赛官方

此次课程是继上一节“ Spark 大数据处理最佳实践 ” 课后，大数据最佳实践课程的第二课。主要讲一下 flink 流计算的最佳实践。讲师根据自己多年经验总结的方法论，从 flink 学习框架入手，配合一些非常落地的最佳实践，带你有章法的学习 flink ，摆脱技术小白称号！讲师简介简锋 阿里云 EMR 数据开发平台 负责人

本次直播将介绍MaxCompute支持的三款开源ETL工具Kettle、Airflow、Azkaban以及连接示例。讲师简介龙青云 阿里云智能 技术支持经理

本次课程主要介绍Hologres Binlog的相关功能以及如何订阅Hologers Binlog最佳实践，实现全链路事件驱动讲师简介王华峰（继儒），阿里巴巴技术专家， 长期从事Hologres引擎开发工作。

本次主要介绍如何通过内置Spark Connector，将多种数据源数据高性能写入至hologres讲师简介张高迪(杳天)，阿里巴巴开发工程师，长期从事Hologres引擎开发工作

本次主要介绍Datahub写入Hologres原理，并实操演示数据从DTS到Datahub再写入Hologres的最佳实践讲师简介胡一博（上唐），阿里巴巴技术专家， 长期从事Hologres数据集成生态开发工作。

本次主要介绍在Hologres中如何查看执行计划，并通过执行计划定位性能瓶颈，从而自助化性能调优，提升系统整体性能，实现资源更高效使用讲师简介余骏（清芬），阿里巴巴技术专家，多年分布式系统经历，对系统调优有丰富的经验

本次主要介绍在Hologres中外表、内表常用的性能调优手段，提升自助化调优能力，实现资源更高效利用讲师简介余骏（清芬），阿里巴巴技术专家，多年分布式系统经历，对系统调优有丰富的经验

本次主要介绍Hologres支持的可视化分析工具生态，并通过实操演示如何将Hologres数据直接对接BI工具，满足企业级可视化展示要求讲师简介丁烨(昆吾)，阿里巴巴产品专家，Hologres产品经理

EMR on ACK是企业级半托管的开源大数据平台，为阿里云E-MapReduce(EMR)提供了一个部署选项，允许您在阿里云容器服务Kubernetes版 (ACK) 上运行开源大数据框架。 目前支持Spark引擎的部署，结合自研的Remote shuffle service（RSS）服务组件，提供用户高稳定、高性价比、灵活的弹性计算服务。RSS解决了计算存储分离和混合架构下的shuffle稳定性和性能问题。本次直播将重点展开RSS的使用和性能展示。讲师介绍吴雪扬（枢木），阿里云高级开发工程师

1、介绍电商、内容行业常见的推荐应用形态，推荐算法逻辑2、结合电商、内容行业战略诉求、体验诉求、效果诉求等调参的最佳实践3、介绍如何使用智能推荐AIRec服务打造从0分->60分->90分+的推荐效果讲师介绍讲师：王亚宁花名：栀露头衔: 阿里巴巴集团产品专家

问题与互动页面（戳我进入）7月10日，Apache Flink x TiDB Meetup 北京站来啦！本场 Meetup 将由 Flink 社区与 TiDB 社区合办。一如既往，我们邀请了各行业的技术大牛，来自阿里巴巴、TiDB、360、知乎、网易的 5 位技术专家将围绕 Flink 和 TiDB，分享如何实现准确稳定的实时计算业务、如何搭建实时数仓数据链路的最佳实践、如何利用两者的特点完成端对端实时计算的闭环交付，以及 Flink SQL 和 Flink-CDC 架构的感悟与实践等。活动亮点超多实用干货，超多实用干货，Flink + TiDB 的结合能擦出怎样的火花，且看各位技术专家聚焦实时数据业务支撑、实时数仓、端到端实时计算等场景，用理论结合实践解析 Flink + TiDB 在各场景的应用。活动形式多样化，线下线上同步开启，同城可参与线下 Meetup 面对面交流，异地也可在线观看直播，精彩内容不错过；丰富周边等你拿，报名参加就有机会获得超多 Flink 社区定制的精美周边！Meetup 技术交流群：活动议程合作伙伴

【第7/8讲 直播主题】1、Flink 高效 sink 写入 OSS2、Flume 高效写入 OSS【背景】为了让更多开发者了解并使用 JindoFS，由阿里云 JindoFS+OSS 团队打造的专业公开课【数据湖 JindoFS+OSS 实操干货36讲】会在每周二16：00准时开讲！从五大板块入手，玩转数据湖！讲师介绍重湖 - 阿里巴巴计算平台事业部 EMR 高级工程师焱冰 - 阿里巴巴计算平台事业部 EMR 技术专家

本节主要介绍开通EMR的环境准备、账号准备、付费情况、实操演示讲师：魏巍，花名念民，阿里巴巴 EMR 产品经理

【开发者优惠来了】全网最低价，阿里云爆款服务器低至8.1元/月，更有针对学生的专享福利全面升级，戳：http://click.aliyun.com/m/1000188819/介绍智能推荐在内容行业的业务价值、实践案例和快速上手指南讲师信息讲师：王亚宁花名：栀露头衔：阿里巴巴集团产品专家

【开发者优惠来了】全网最低价，阿里云爆款服务器低至8.1元/月，更有针对学生的专享福利全面升级，戳：http://click.aliyun.com/m/1000188819/介绍搜索与推荐技术在业务中如何可持续的、高质量的交付价值，以及为什么选择阿里云的开放搜索与智能推荐技术服务讲师信息讲师：曾罗花名：是溪头衔：阿里巴巴集团产品专家

主要探讨如何在Spark上使用持久内存这一新技术来进一步提速性能。具体会介绍基于Plasma的共享内存方案来提速SQL数据源访问的性能以及利用持久内存扩展Spark现有内存磁盘存储层级来提速RDD cache在迭代式计算中的效果。讲师介绍：纪琨尚，英特尔亚太研发有限公司大数据部门的软件工程师，专注于Spark计算框架上基于Optane PMEM的优化叶宇强，英特尔亚太研发有限公司大数据部门的资深软件工程师，专注于Spark计算框架上基于Optane PMEM的优化

从实时分析的价值、场景和数据流程，以及用户对平台能力要求展开，讲述云数据仓库MaxCompute的产品能力优势 ，面对实时分析场景的能力演进要求。进而以实时分析典型场景的全数据流程处理、建模和分析的最佳实践，讲解MaxCompute+Hologres的解决方案，展现强强组合的能力优势。分享人：孔亮 阿里云智能 产品专家

分享人：李姗姗 阿里云智能 高级产品经理本次直播的主要内容将介绍从Lambda架构到HSAP实时数仓，以及Hologres产品架构、典型场景和客户案例。

在信息过载、碎片化的时代，个性化推荐成为提升用户浏览/转化率的核心手段之一。而在实际应用中，怎样满足本行业的信息分发需求，精准匹配海量用户偏好，提高运营效率，仍是一个待解之题。此次，阿里巴巴搜索推荐产品团队带来系列公开课，聊聊怎样结合实际场景，嵌入智能推荐，搭建“千人千面”的分发体系，使产品价值最大化。每期20分钟，修炼推荐硬功夫。课程目录第一期推荐场景化构建与业务价值第二期智能推荐在电商的经典打法与实践第三期智能推荐电商行业2.0发布，算法模板再升级第四期7天搭建电商个性化推荐场景和最佳实践第五期0-1激活推荐系统，解锁冷启动难题第六期智能推荐内容行业2.0发布第七期详解内容行业典型案例，直击标题党和推荐时效性第八期智能推荐新闻行业2.0升级与最佳实践第九期智能推荐AIRec功能使用指南第十期课程总结与交流问答

本次直播主要介绍如何利用FUSE的POSIX文件系统接口，像本地磁盘一样轻松使用大数据存储系统, 为云上AI场景提供了高效的数据访问手段。讲师介绍苏昆辉，花名抚月，阿里巴巴计算平台事业部 EMR 高级工程师, Apache HDFS committer. 目前从事开源大数据存储和优化方面的工作。

本次直播主要介绍大数据生态中常见的元数据服务部署形态，并分析大规模文件元数据下在生产环境中可能遇到的问题，以及针对这些问题如何进行优化和调整。讲师介绍孙大鹏，花名诚历，阿里巴巴计算平台事业部 EMR 技术专家，Apache Sentry PMC，Apache Commons Committer，目前从事开源大数据存储和优化方面的工作。

讲师介绍王道远，花名健身，阿里云EMR技术专家，Apache Spark活跃贡献者，主要关注大数据计算优化相关工作。直播简介：本次分享会介绍云上大数据处理的存储计算分离特征，分析传统大数据处理中数据本地化与存储计算分离场景的区别，以及在存储计算分离场景中阿里云EMR的相关优化。

在信息过载、碎片化的时代，个性化推荐成为提升用户浏览/转化率的核心手段之一。而在实际应用中，怎样满足本行业的信息分发需求，精准匹配海量用户偏好，提高运营效率，仍是一个待解之题。此次，阿里巴巴搜索推荐产品团队带来系列公开课，聊聊怎样结合实际场景，嵌入智能推荐，搭建“千人千面”的分发体系，使产品价值最大化。每期20分钟，修炼推荐硬功夫。课程目录第一期推荐场景化构建与业务价值第二期智能推荐在电商的经典打法与实践第三期智能推荐电商行业2.0发布，算法模板再升级第四期7天搭建电商个性化推荐场景和最佳实践第五期0-1激活推荐系统，解锁冷启动难题第六期智能推荐内容行业2.0发布第七期详解内容行业典型案例，直击标题党和推荐时效性第八期智能推荐新闻行业2.0升级与最佳实践第九期智能推荐AIRec功能使用指南第十期课程总结与交流问答加入社群扫码入群，了解更多资讯，获取课程资料

企业实践专场企业实践专场将邀请知名企业一线技术专家，分享大数据及人工智能最新技术进展和实践，详细解读Apache Flink在各行业的应用与落地，包括应用场景、业务痛点、面临挑战、如何破局等宝贵经验，并就大数据与人工智能等技术的发展趋势进行探讨和展望。讲师介绍韩鹏，奇安信集团高级总监，网络安全技术专家更多直播信息企业实践专场>>>Apache Flink 在字节跳动的实践与优化 | 企业实践专场Apache Flink在快手实时多维分析场景的应用 | 企业实践专场bilibili 实时平台的架构与实践 | 企业实践专场Apache Flink在滴滴的应用与实践 | 企业实践专场Apache Flink 在网易的实践 | 企业实践专场Apache Flink在中国农业银行的探索和实践 | 企业实践专场基于Apache Flink的爱奇艺实时计算平台建设实践 | 企业实践专场实时计算在贝壳的实践 | 企业实践专场基于Flink构建CEP引擎的挑战和实践 | 企业实践专场

企业实践专场企业实践专场将邀请知名企业一线技术专家，分享大数据及人工智能最新技术进展和实践，详细解读Apache Flink在各行业的应用与落地，包括应用场景、业务痛点、面临挑战、如何破局等宝贵经验，并就大数据与人工智能等技术的发展趋势进行探讨和展望。讲师介绍吴良波，网易JAVA技术专家更多直播信息企业实践专场>>>Apache Flink 在字节跳动的实践与优化 | 企业实践专场Apache Flink在快手实时多维分析场景的应用 | 企业实践专场bilibili 实时平台的架构与实践 | 企业实践专场Apache Flink在滴滴的应用与实践 | 企业实践专场Apache Flink 在网易的实践 | 企业实践专场Apache Flink在中国农业银行的探索和实践 | 企业实践专场基于Apache Flink的爱奇艺实时计算平台建设实践 | 企业实践专场实时计算在贝壳的实践 | 企业实践专场基于Flink构建CEP引擎的挑战和实践 | 企业实践专场

Apache Flink核心技术专场数据的价值在于数据分析，而数据分析的挑战之一在于支撑大数据处理的平台技术。深度技术专题将邀请下一代大数据计算引擎Apache Flink创始团队及业界资深专家解析Flink技术动向，并回归技术本质，打造Flink全方位技术盛宴。讲师介绍崔星灿，Apache Flink Committer,York University 博士后更多直播信息Apache Flink 核心技术专场>>>Pluggable Shuffle Service and Unaligned Checkpoint | Apache Flink 核心技术专场New Source API – Make it Easy! | Apache Flink 核心技术专场Stateful Functions | Apache Flink 核心技术专场Apache Flink新场景——OLAP引擎 | Apache Flink 核心技术专场New Feature and Improvements on State Backends in Flink 1.10 | Apache Flink 核心技术专场阿里巴巴在 Apache Flink 大规模持久化存储的实践之道 | Apache Flink 核心技术专场深入探索 Apache Flink SQL 流批统一的查询引擎与最佳实践 | Apache Flink 核心技术专场Using Apache Flink as a Unified Data Processing Platform | Apache Flink 核心技术专场Apache Flink 流批一体的资源管理与任务调度 | Apache Flink 核心技术专场

人工智能专场人工智能是未来十年最重要的技术革命与驱动力，在各行各业产生者日益重要的作用。人工智能专场将集中介绍Flink在机器学习上的新技术与新应用，为参会者呈现Flink机器学习的具体应用实践与最新技术落地案例。讲师介绍潘国庆，携程大数据研发经理更多直播信息人工智能专场>>>基于Apache Flink的机器学习算法平台实践与开源 | 人工智能专场携程实时智能检测平台实践 | 人工智能专场Apache Flink AI生态系统工作 | 人工智能专场

友盟+首席产品官林鸣晖先生带来《可闭环 可沉淀 可持续的企业级数据赋能体系--友盟云的数据中台产品实践》嘉宾介绍林鸣晖 ，友盟+首席产品官<img src="https://yqfile.alicdn.com/2fb894bb46e54b37c73639f00bde26778e18043f.png" width="200"更多课程阿里经济体大数据平台的建设与思考解密淘宝推荐实战，打造“比你还懂你”的个性化APP阿里风控大脑关于大数据应用的探索与实践可闭环 可沉淀 可持续的企业级数据赋能体系--友盟云数据中台产品实践

手淘，是每天服务数亿用户的最大流量入口，是每天成交数十亿金额的最大成交渠道之一，是几十种内容和数百种场景交织的最复杂的业务形态，更是大数据+算法双驱动的最复杂的技术场景。阿里巴巴搜索推荐事业部 资深算法专家三桐老师，将深度《解密淘宝推荐实战，打造“比你还懂你”的个性化APP》。嘉宾介绍欧文武（三桐），阿里巴巴搜索推荐事业部资深算法专家<img src="https://yqfile.alicdn.com/977f76d8026d41c3105e296feb3cc16dc7fc918e.png" width="200"更多课程阿里经济体大数据平台的建设与思考解密淘宝推荐实战，打造“比你还懂你”的个性化APP阿里风控大脑关于大数据应用的探索与实践可闭环 可沉淀 可持续的企业级数据赋能体系--友盟云数据中台产品实践

本分享会先介绍传统数据增量同步方案，之后对比新方案（完全基于Spark无需额外组件），介绍新方案如何结合最新的数据湖(delta lake)实现，同时引入spark-binlog，极大的简化了数据增量的门槛和架构。如果时间允许，我们也会简单介绍开源项目spark-binlog,delta-plus等的内部设计是如何支持我们新的数据增量方案的。讲师介绍祝威廉，资深数据架构，11年研发经验。同时维护和开发多个开源项目。擅长大数据/AI领域的一些思路和工具。现专注于构建集大数据和机器学习于一体的综合性平台，降低AI落地成本相关工作上。

如何有效降低大数据平台的安全风险-李雪峰_大数据企业级服务专场嘉宾介绍李雪峰

一条SQL在MaxCompute之旅（技术快闪）嘉宾介绍振禹 颖达 谢宁

本次直播将介绍智能推荐AIRec产品冷启动、推荐配置、数据监测等重点feature和典型场景方案，帮您快速了解智能推荐产品。直播嘉宾闫勖勉(三秋) 阿里云智能事业群 高级解决方案工程师

本次直播介绍机器学习平台PAI近期重要feature，涵盖支持自定义算法上传、AutoML2.0支持一键自动调参和更多算法、全新上线自动学习平台AutoLearning等内容。 <br/> 直播嘉宾：郁环宇 阿里云智能事业群 产品经理

EMR-运行工作流