开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 正文

Databricks数据洞察如何构成?

Databricks数据洞察如何构成?

展开
收起
游客lmkkns5ck6auu 2022-07-29 10:58:23 804 0
1 条回答
写回答
取消 提交回答
  • 1、Spark SQL和DataFrames Spark SQL是用来处理结构化数据的Spark模块。DataFrames是被列化了的分布式数据集合,概念上与关系型数据库的表近似,也可以看做是R或Python中的data frame。 2、Spark Streaming 实时数据处理和分析,可以用写批处理作业的方式写流式作业。支持Java、Scala和Python语言。 3、MLlib 可扩展的机器学习库,包含了许多常用的算法和工具包。 4、GraphX Spark用于图和图并行计算的API。 5、Spark Core API 支持R、SQL、Python、Scala、Java等多种语言。

    2022-07-29 14:17:33
    赞同 展开评论 打赏

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

相关电子书

更多
Databricks数据洞察:从入门到实践 立即下载
MaxCompute半结构化数据思考与创新 立即下载
Paimon ✖️ StarRocks,共话实时湖仓架构 立即下载