AI 助理
备案控制台

分布式计算

首页 标签 分布式计算
# 分布式计算 #
关注
37846内容
最新 热门 文章 问答 视频 电子书 课程
阿里云实时计算Flink
|
博文
|
来自： 大数据与机器学习
流计算精品翻译: The Dataflow Model
我们提出了Dataflow模型，并详细地阐述了它的语义，设计的核心原则，以及在实践开发过程中对模型的检验。
# 实时计算 Flink版 # 日志服务 # 分布式计算 # 数据处理 # API # 流计算 # Spark # 测试技术 # Apache # 开发工具 # SQL # HIVE
隐林
|
博文
|
来自： 大数据与机器学习
MaxCompute SQL原理解析及性能调优
分享内容 介绍了ODPS SQL的基于mapreduce是如何实现的及一些使用小技巧，回顾了mapreduce各个阶段可能产生的问题及相应的处理方法，同时介绍了一些应对数据倾斜的处理方法，最后介绍了一些关于数据集构造、特征选择的技巧帮助减少资源利用。
# 云原生大数据计算服务 MaxCompute # 云解析DNS # SQL # 分布式计算 # 算法 # MaxCompute
祎休
|
博文
|
来自： 大数据与机器学习
MaxCompute/DataWorks权限问题排查建议
MaxCompute/DataWorks权限问题排查建议 __前提：__MaxCompute与DataWorks为两个产品，在权限体系上既有交集又要一定的差别。在权限问题之前需了解两个产品独特的权限体系。
# 云原生大数据计算服务 MaxCompute # 大数据开发治理平台 DataWorks # 分布式计算 # DataWorks # 安全 # MaxCompute
木洛
|
博文
|
来自： 云存储
数据中台之结构化大数据存储设计
对数据系统核心组件进行拆解，介绍每个组件下对应的开源组件以及云上产品。
# 云原生数据仓库 AnalyticDB PostgreSQL版 # 云原生大数据计算服务 MaxCompute # 云数据库 RDS # 实时计算 Flink版 # 函数计算 # 表格存储 # 批量计算 # 检索分析服务 Elasticsearch版 # 云数据库HBase版 # 云数据库 RDS MySQL 版 # 存储 # 大数据 # NoSQL # 索引 # 流计算 # 数据库 # Hbase # 分布式数据库 # 数据挖掘 # 分布式计算
开源大数据EMR
|
博文
|
来自： 大数据与机器学习
基于Alluxio系统的Spark DataFrame高效存储管理技术
介绍越来越多的公司和组织开始将Alluxio和Spark一起部署从而简化数据管理，提升数据访问性能。Qunar最近将Alluxio部署在他们的生产环境中，从而将Spark streaming作业的平均性能提升了15倍，峰值甚至达到300倍左右。
# 开源大数据平台 E-MapReduce # 存储 # 缓存 # 分布式计算 # 固态存储 # Spark
ningoo
|
博文
Elasticsearch中的DocValues
简单的说，Elasticsearch通过反向索引做搜索，通过DocValues列式存储做分析，将搜索和分析的场景统一到了一个分布式系统中，还是很有搞头的。
# 检索分析服务 Elasticsearch版 # 存储 # 分布式计算 # Java # Spark # 索引
调皮仔3683
|
博文
Hadoop集群中增加与ElasticSearch连接的操作
Hadoop集群中增加与ElasticSearch连接的操作
# 检索分析服务 Elasticsearch版 # 分布式计算 # Java # 大数据 # Hadoop # Spark
watercat
|
博文
用MaxCompute Studio开发Python UDF（附采坑记录）
# 云原生大数据计算服务 MaxCompute # 分布式计算 # 测试技术 # MaxCompute # Python
隐林
|
博文
|
来自： 大数据与机器学习
比自建 Hadoop 还便宜！云栖大会揭秘阿里云数加 MaxCompute
DT时代，越来越多的企业应用数据步入云端。 Hadoop是当下流行的大数据并行计算体系，横向扩展、生态圈成熟等一直是它的主要特点。 阿里云数加MaxCompute (原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。
# 云原生大数据计算服务 MaxCompute # 分布式计算 # 大数据 # Hadoop # 云栖大会 # MaxCompute
知与谁同
|
博文
零基础搭建Hadoop大数据处理-环境
# 云原生大数据计算服务 MaxCompute # 云虚拟主机 # 分布式计算 # Java # 大数据 # Hadoop # Linux
免费试用