类目筛选
2023-08-28
20955
探索AI时代的应用工程化架构演进，一人公司时代还有多远？
当代AI来势汹汹，本文从AI的特点、对研发的挑战、AI的应用工程和场景分化等剖析了AI时代的应用工程化架构演进之路。
20,955
2024-09-30
440
预算10万的数据中台大单，把我气笑了…
数据治理的新风向来了：从普惠、低成本的SaaS化敏捷版，到平滑升级可持续演进的数据体系架构，再到智能化DataAgent的加入~ 瓴羊Dataphin，让企业数据治理有更多选择，也更便捷！
440
2024-05-15
65280
阿里云 EMR 基于 Paimon 和 Hudi 构建 Streaming Lakehouse
Apache Paimon 和 Apache Hudi 作为数据湖存储格式，有着高吞吐的写入和低延迟的查询性能，是构建数据湖的常用组件。本文在阿里云EMR上，针对数据实时入湖场景，对 Paimon 和 Hudi 的性能进行比对，并分别以 Paimon 和 Hudi 作为统一存储搭建准实时数仓。
65,280
2024-05-15
212
跨节点参数的缘起与今生
Dataphin v3.13引入了跨节点参数功能，允许任务间传递消息。输出节点（如SQL、Shell、Python任务）能输出参数，输入节点可以接收并使用这些参数。此功能解决了通过公共存储中转消息的复杂性和低效问题。应用场景包括：金融企业的币种转换，其中汇率任务（输出节点）提供汇率，转换任务（输入节点）使用该汇率；以及产品目录更新检查，通过跨节点参数控制是否需要执行数据导入任务。用户可以通过任务编辑器设置和传递跨节点参数，并在运维中进行补数据操作。
212
2024-09-26
140
Dataphin中集成SelectDB以支持报表分析和API查询
本文介绍了一家零售企业如何利用SelectDB进行BI分析及数据服务API的查询。通过Dataphin的数据集成、SQL研发等功能，将CRM、ERP等系统数据汇聚加工，并推送至SelectDB构建销售数据集市层，以支持报表分析及API查询。SelectDB具备实时、统一、弹性及开放特性，适用于多种实时分析场景。文章详细描述了在Dataphin中集成SelectDB的整体方案、数据源配置、数据集成、数据开发及数据服务流程。
140
