AI 助理
备案控制台

开源大数据平台 E-MapReduce

首页 标签 开源大数据平台 E-MapReduce
# 开源大数据平台 E-MapReduce #
关注
1808内容
相关子社区
倚天
166内容 1活动 383关注
最新 热门 文章 问答 视频 电子书 训练营 活动
阿里云E-MapReduce团队
|
博文
|
来自： 大数据与机器学习
漫谈分布式计算框架
本文主要谈了一些分布式计算框架方面的心得。
# 开源大数据平台 E-MapReduce # 分布式计算 # 并行计算 # TensorFlow # 算法框架/工具 # Spark
开源大数据EMR
|
博文
|
来自： 大数据与机器学习
使用Spark Streaming SQL进行PV/UV统计
PV/UV统计是流式分析一个常见的场景。通过PV可以对访问的网站做流量或热点分析，例如广告主可以通过PV值预估投放广告网页所带来的流量以及广告收入。另外一些场景需要对访问的用户作分析，比如分析用户的网页点击行为，此时就需要对UV做统计。
# 开源大数据平台 E-MapReduce # 云数据库 Tair（兼容 Redis） # 日志服务 # 分布式计算 # Spark # SQL # 流计算 # NoSQL # Redis
开源大数据EMR
|
博文
|
来自： 大数据与机器学习
Hive性能优化（全面）
Hadoop的计算框架特性下的HIve有效的优化手段
# 开源大数据平台 E-MapReduce # 日志服务 # SQL # 分布式计算 # 负载均衡 # 算法 # Oracle # Hadoop # 关系型数据库 # 调度 # HIVE # Spark
开发者说
|
博文
|
来自： 大数据与机器学习
使用Databricks作为分析平台
SPARK+AI SUMMIT 2020中文精华版线上峰会将会带领大家一起回顾2020年的SPARK又产生了怎样的最佳实践，技术上取得了哪些突破，以及周边的生态发展。本文是阿里巴巴高级技术专家章剑锋做的相关分享，介绍了YipitData公司基于Databricks平台搭建的分析平台。
# 开源大数据平台 E-MapReduce # 大数据开发治理平台 DataWorks # 存储 # JSON # 分布式计算 # DataWorks # 数据挖掘 # API # Spark # 数据格式 # Python # 人工智能
阿里云大数据Al技术
|
博文
|
来自： 大数据与机器学习
基于 Delta Lake 构建数据湖仓体系
本文整理自阿里云开源大数据平台技术专家毕岩在7月17日阿里云数据湖技术专场交流会的分享。
# 云原生数据仓库AnalyticDB MySQL版 # 实时计算 Flink版 # 云原生大数据计算服务 MaxCompute # 开源大数据平台 E-MapReduce # SQL # 存储 # JSON # 分布式计算 # 大数据 # 关系型数据库 # HIVE # Spark # 数据格式 # 流计算
扬流
|
博文
|
来自： 大数据与机器学习
阿里云EMR 2.0：重新定义新一代开源大数据平台
本次分享主要介绍了阿里云E-MapReduce的开发历程，EMR 2.0的新特性、产品架构，以及EMR 2.0在平台体验、数据开发、资源形态及分析场景等方面的全面突破与创新，重新定义新一代开源大数据平台。
# 云原生大数据计算服务 MaxCompute # 大数据开发治理平台 DataWorks # 实时计算 Flink版 # 对象存储 # 开源大数据平台 E-MapReduce # SQL # 存储 # 弹性计算 # 运维 # 分布式计算 # DataWorks # 大数据 # 数据挖掘 # API # Spark
扬流
|
博文
|
来自： 大数据与机器学习
面向未来的开源 OLAP 技术架构探讨以及选型实践
本文详细介绍了开源大数据OLAP的演化过程和最佳实践。
# 云原生数据仓库AnalyticDB MySQL版 # 对象存储 # 实时计算 Flink版 # 云数据库 ClickHouse # 云消息队列 Kafka 版 # 开源大数据平台 E-MapReduce # SQL # 分布式计算 # 运维 # 搜索推荐 # OLAP # BI # 对象存储 # HIVE # Spark # 流计算
扬流
|
博文
|
来自： 大数据与机器学习
王日宇：基于 StarRocks 和 Paimon 打造湖仓分析新范式
本文根据 StarRocks Summit 2023 演讲实录整理而成，主要分享了基于 StarRocks 和 Paimon 打造湖仓分析方案及背后的技术原来和未来规划。
# 对象存储 # 云原生数据仓库AnalyticDB MySQL版 # 开源大数据平台 E-MapReduce # 存储 # SQL # Java # 对象存储 # C++
李呈祥
|
博文
|
来自： 大数据与机器学习
扩展Spark Catalyst，打造自定义的Spark SQL引擎
在Spark2.2版本中，引入了新的扩展点，使得用户可以在Spark session中自定义自己的parser，analyzer，optimizer以及physical planning stragegy rule。
# 开源大数据平台 E-MapReduce # SQL # 分布式计算 # 测试技术 # Scala # Spark
寒沙牧
|
博文
|
来自： 大数据与机器学习
SparkSQL Catalyst解析
Catalyst Optimizer是SparkSQL的核心组件(查询优化器)，它负责将SQL语句转换成物理执行计划，Catalyst的优劣决定了SQL执行的性能。
# 开源大数据平台 E-MapReduce # 云解析DNS # SQL
免费试用