Apache Spark系列技术直播--第四讲 机器学习介绍与Spark MLlib实践
直播时间：2018.12.06 19:00 - 20:00
主讲人：江宇(燕回) 阿里巴巴计算平台EMR技术专家
内容提要：本次讲座主要面对的是机器学习的入门者，以及想要使用Spark来进行机器学习的用户。我们会介绍一下机器学习相关领域的基础知识，以及机器学习在spark上面的实践，同时给出我们的一些使用建议。
加入Apache Spark中国技术交流钉钉群看直播
#Apache Spark系列技术直播# 第四讲 【 机器学习介绍与Spark MLlib实践 】
2018-12-06
1897
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
简介：
Apache Spark系列技术直播--第四讲 机器学习介绍与Spark MLlib实践
直播时间：2018.12.06 19:00 - 20:00
主讲人：江宇(燕回) 阿里巴巴计算平台EMR技术专家
内容提要：本次讲座主要面对的是机器学习的入门者，以及想要使用Spark来进行机器学习的用户。
目录
相关文章
|
4月前
|
分布式计算
大数据
数据处理
Apache Spark：提升大规模数据处理效率的秘籍
【4月更文挑战第7天】本文介绍了Apache Spark的大数据处理优势和核心特性，包括内存计算、RDD、一站式解决方案。分享了Spark实战技巧，如选择部署模式、优化作业执行流程、管理内存与磁盘、Spark SQL优化及监控调优工具的使用。通过这些秘籍，可以提升大规模数据处理效率，发挥Spark在实际项目中的潜力。
231
0
0
|
4月前
|
存储
机器学习/深度学习
Apache
|
1月前
|
分布式计算
Hadoop
大数据
大数据处理框架在零售业的应用：Apache Hadoop与Apache Spark
【8月更文挑战第20天】Apache Hadoop和Apache Spark为处理海量零售户数据提供了强大的支持
36
0
0
|
1月前
|
分布式计算
Serverless
数据处理
EMR Serverless Spark 实践教程 | 通过 Apache Airflow 使用 Livy Operator 提交任务
Apache Airflow 是一个强大的工作流程自动化和调度工具，它允许开发者编排、计划和监控数据管道的执行。EMR Serverless Spark 为处理大规模数据处理任务提供了一个无服务器计算环境。本文为您介绍如何通过 Apache Airflow 的 Livy Operator 实现自动化地向 EMR Serverless Spark 提交任务，以实现任务调度和执行的自动化，帮助您更有效地管理数据处理任务。
145
0
0
|
2月前
|
分布式计算
Apache
Spark
|
3月前
|
分布式计算
大数据
数据处理
Apache Spark在大数据处理中的应用
Apache Spark是大数据处理的热门工具，由AMPLab开发并捐赠给Apache软件基金会。它以内存计算和优化的执行引擎著称，提供比Hadoop更快的处理速度，支持批处理、交互式查询、流处理和机器学习。Spark架构包括Driver、Master、Worker Node和Executor，核心组件有RDD、DataFrame、Dataset、Spark SQL、Spark Streaming、MLlib和GraphX。文章通过代码示例展示了Spark在批处理、交互式查询和实时数据处理中的应用，并讨论了其优势（高性能、易用性、通用性和集成性）和挑战。【6月更文挑战第11天】
88
6
6
|
3月前
|
分布式计算
Spark
大数据
深入探究Apache Spark在大数据处理中的实践应用
【6月更文挑战第2天】Apache Spark是流行的开源大数据处理框架，以其内存计算速度和低延迟脱颖而出。本文涵盖Spark概述、核心组件（包括Spark Core、SQL、Streaming和MLlib）及其在数据预处理、批处理分析、交互式查询、实时处理和机器学习中的应用。通过理解Spark内部机制和实践应用，可提升大数据处理效率，发挥其在各行业的潜力。
239
3
3
|
3月前
|
消息中间件
分布式计算
关系型数据库
|
4月前
|
消息中间件
分布式计算
Serverless
CDC一键入湖：当 Apache Hudi DeltaStreamer 遇见 Serverless Spark
CDC一键入湖：当 Apache Hudi DeltaStreamer 遇见 Serverless Spark
102
2
2
|
4月前
|
存储
机器学习/深度学习
Apache
热门文章
最新文章
1
阿里封神谈hadoop生态学习之路
2
基于Alluxio系统的Spark DataFrame高效存储管理技术
3
JindoFS概述：云原生的大数据计算存储分离方案
4
玩转阿里云EMR三部曲-中级篇 集成自有服务
5
基于Spark Streaming 进行 MySQL Binlog 日志准实时传输
6
从数砖开源 Delta Lake 说起
7
Apache Spark 3.0 将内置支持 GPU 调度
8
【译】用SQL统一所有：一种有效的、语法惯用的流和表管理方法
9
YARN中的CPU资源隔离-CGroups
10
Apache Spark + Intel Analytics Zoo 进行深度学习
1
阿里云 EMR StarRocks 在七猫的应用和实践
123
2
EMR Serverless StarRocks体验测评
37
3
EMR Serverless Spark 实践教程 | 通过 Apache Airflow 使用 Livy Operator 提交任务
145
4
不是吧？这么好用的开源标注工具，竟然还有人不知道…
60
5
迟来的EMR Serverless Spark评测报告
206
6
DataWorks操作报错合集之在处理元数据存储时发生报错：ODPS-0010000，该如何处理
90
7
EMR Serverless Spark 实践教程 | 通过 spark-submit 命令行工具提交 Spark 任务
365
8
【报名中】阿里云 x StarRocks：极速湖仓第二季—上海站
303
9
阿里云 EMR Serverless StarRocks OLAP 数据分析场景解析
19139
10
E-MapReduce Serverless Spark体验评测
269