# 数据总线 DataHub #
0
关注
613内容
MaxCompute表设计最佳实践
MaxCompute表设计最佳实践
产生大量小文件的操作
MaxCompute表的小文件会影响存储和计算性能，因此我们先介绍下什么样的操作会产生大量小文件，从 而在做表设计的时候考虑避开此类操作。
使用MaxCompute Tunnel SDK上传数据，上传过程中，每commit一次就会产生一个文件。
|
给研发工程师的代码质量利器 | SOFAChannel#5 直播整理
本文根据 SOFAChannel#5 直播分享整理，主题：给研发工程师的代码质量利器 —— 自动化测试框架 SOFAActs。
日志数据如何同步到MaxCompute
日常工作中，企业需要将通过ECS、容器、移动端、开源软件、网站服务、JS等接入的实时日志数据进行应用开发。包括对日志实时查询与分析、采集与消费、数据清洗与流计算、数据仓库对接等场景。本次分享主要介绍日志数据如何同步到MaxCompute。
|
Canal监听MySQL Binarylog消费实践
在MySQL作为如今最为主流使用的数据库背景下，除了常规的数据存储使用场景，还存在大量的使用需求，如：数据自动同步，数据更新监听等场景。由于数据库层面的增量数据变动无法依靠应用服务层面进行有效感知，因此，还是需要从数据库自身提供的机制入手进行实现处理。下面为将展示关于如何借助Canal实践解决场景的几个业务场景问题
|
【MaxCompute 常见问题】 工具及下载
MaxCompute 提供了三种数据上传下载的通道：
DataHub 实时数据通道：包含的工具有 OGG 插件、Flume 插件、LogStash 插件和 Fluentd 插件。
Tunnel 批量数据通道：包含的工具有 MaxCompute 客户端、DataWorks、DTS、Sqoop、Kettle 插件以及 MMA 迁移工具。
Streaming Tunnel 流式数据写入通道：支持实时计算 Flink、数据通道 DataHub、数据传输服务DTS、实时数据同步、Kafka 消息系统。
免费试用