视频介绍
庞大的小文件和冷文件数量会对HDFS的性能产生不利影响，严重时甚至影响业务稳定性，这个主题将介绍对大容量HDFS进行小文件和冷文件分析的方法，并基于分析结果可以采取哪些处理措施。
讲师：
郭聪，花名析源，阿里云计算平台事业部技术专家。目前主要从事大数据领域APM产品的研发工作。
相关视频
阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。
热门文章
热门讨论
-
阿里封神谈hadoop生态学习之路49591
-
现代流式计算的基石：Google DataFlow18521
-
JindoFS解析 - 云上大数据高性能数据湖存储方案14732
-
HIVE MapJoin异常问题处理总结15031
-
漫谈分布式计算框架11171
-
首次揭秘|为6.4亿人次出行提供无线网络的技术架构10648
-
助力云上开源生态 - 阿里云开源大数据平台的发展11818
-
基于Spark Streaming 进行 MySQL Binlog 日志准实时传输11026
-
在 Apache Spark 中利用 HyperLogLog 函数实现高级分析10605
-
从数砖开源 Delta Lake 说起9685
展开全部
-
hdfs 文件块过多（1亿）每个datanode 占3000万块(分16G内),某时刻内存陡然增加？605
-
请问flink sql 写oss有个报错该怎么办？1501
-
cdh（6.3.2版本）集群访问oss存储的配置步骤8441
-
我想问一下阿里云E-MapReduce，为什么会报错这个信息呢？220
-
Spark3.0中AQE包括哪些功能？1453
-
乐观并发控制和悲观并发控制是区别是什么？406
-
阿里云E-MapReduce中starrocks 2.4的mysql外部表哪个字段类型，映射不上吗？235
-
阿里云云原生数据湖体系有什么优势？1060
-
JindoFS 的架构是怎样的？1148
-
请教个问题，我想部署 1FE 节点 + 3BE节点的 StarRocks 集群， 在 EMR 控制台528
展开全部
来源圈子
更多
+ 订阅