晋恒_个人页

2023年05月

• 05.22 18:53:26
  发表了文章 2023-05-22 18:53:26

  MaxCompute 物化视图智能推荐最佳实践

  本文主要介绍什么是五话题以及MaxCompute 发布的“物化视图智能推荐”具体内容。
• 05.22 18:08:27
  发表了文章 2023-05-22 18:08:27

  MaxCompute 发布“物化视图智能推荐”，CU算力节省14%

  物化视图智能推荐支持自动对用户历史作业进行分析，自动识别周期性作业，智能提取作业集合中的公共计算逻辑作为物化视图计算逻辑，最终转换为对用户友好的SQL文本形式，按照推荐程度排序展示给用户，并支持将物化视图使用效果可视化展现。

  
• 05.11 11:16:43
  发表了文章 2023-05-11 11:16:43

  HashTable 在蚂蚁转化归因中的极致运用

  本文主要讲述hash cluster表的一些运用。

2023年04月

• 04.19 14:34:24
  发表了文章 2023-04-19 14:34:24

  阿里云 MaxCompute 2023-1~4 月刊

  MaxCompute 发布新人特惠免费试用规格，5000CU*H计算资源和100GB存储，3个月免费用，让您0元体验MaxCompute 强劲的产品力。

  

2023年03月

• 03.22 16:13:11
  发表了文章 2023-03-22 16:13:11

  MaxCompute 包年包月套餐与非预留计算资源将于北京时间2023年4月30日00:00:00停止续订

  若您当前保有MaxCompute包年包月“特价套餐”（含“存储密集型160特价套餐”、“存储密集型320特价套餐”、“存储密集型600特价套餐”）或包年包月“非预留计算资源”，请您详细阅读本文。

  

2022年12月

• 12.28 15:47:04
  发表了文章 2022-12-28 15:47:04

  阿里云 MaxCompute 2022-12月刊

  本刊为您带来 2022年12月 MaxCompute 产品最新动态。

  

2022年11月

• 11.23 16:17:36
  发表了文章 2022-11-23 16:17:36

  阿里云 MaxCompute 2022-10月11月刊

  本刊为您带来 2022年10月、11月 MaxCompute 产品最新动态。

  

2022年10月

• 10.08 13:51:22
  发表了文章 2022-10-08 13:51:22

  阿里云 MaxCompute 2022-9月刊

  本刊为您带来 2022年9月 MaxCompute 产品最新动态

  

2022年09月

• 09.02 17:08:35
  发表了文章 2022-09-02 17:08:35

  基于开放共享的自主研发—MaxCompute 持续增强生态与开放性建设

  MaxCompute 是阿里巴巴自研的云原生数据仓库，同时也兼容大部分大数据生态系统。一个平台无法实现所有功能和解决所有问题，MaxCompute 需持续增强生态与开放性建设，方能走得更远。

  
• 09.02 16:18:49
  发表了文章 2022-09-02 16:18:49

  阿里云 MaxCompute 2022-8月刊

  本刊为您带来 2022年8月 MaxCompute 产品最新动态。

  

2022年07月

• 07.26 17:41:19
  发表了文章 2022-07-26 17:41:19

  阿里云 MaxCompute 2022-7月刊

  本刊为您带来 2022年7月 MaxCompute 产品最新动态及精彩活动回顾。

  
• 07.04 11:48:11
  发表了文章 2022-07-04 11:48:11

  阿里云 MaxCompute 2022-6月刊

  2022年6月，MaxCompute包年包月规格支持查询加速、独占Quota、以及对单作业设置CU并发上限；同时MaxCompute支持在DataWorks公共表中查看外部数据源的元数据信息。

  

2022年06月

• 06.10 11:59:09
  发表了文章 2022-06-10 11:59:09

  2022阿里云大数据公开课第一季 — 云原生一体化数仓产品新能力解读

  为培育专业化、场景化的大数据解决方案，构建多层次的工业互联网平台、建设行业的大数据平台，阿里云整合自研大数据产品MaxCompute、DataWorks、Hologres，提出云原生一体化数仓，为企业提供一站式大数据处理平台。

  

2022年05月

• 05.30 16:28:03
  发表了文章 2022-05-30 16:28:03

  阿里云 MaxCompute 2022-4-5月刊合集

  MaxCompute 按外表类型对外表计算独立计费；MaxCompute 湖仓一体法兰克福region商业化发布

  
• 05.26 17:33:45
  发表了文章 2022-05-26 17:33:45

  阿里巴巴云数据仓库 MaxCompute 数据安全最佳实践

  MaxCompute作为企业级SaaS模式云数据仓库，正在为客户业务及其数据提供持续的安全保护。 MaxCompute 近期对产品的安全能力进行了全面升级 ，结合数据生命周期，针对数据误用、数据滥用、数据泄露、数据丢失等典型数据风险场景，构建全生命周期的数据安全防护体系。

  
• 05.26 12:04:24
  发表了文章 2022-05-26 12:04:24

  MaxCompute 公共云多租户设计的技术要点详解及产品实现特色

  公共云大数据平台在多租户的设计和实现方式上有所差异。本文主要介绍在公共云大数据平台的多租实现方案中需要考虑的问题和挑战，重点介绍了MaxCompute在计算和存储多租实现上的特点。期望通过这些介绍来让大家了解大数据云平台多租方案需要关注的技术点和MaxCompute在多租实现上的产品特色。

  

2022年04月

• 04.12 10:59:02
  发表了文章 2022-04-12 10:59:02

  某智能终端厂商流量商业化项目的云原生大数据平台实践

  随着流量获取，移动互联网业务成为集团三大战略之一，启动流量商业化项目，包括类似阿里妈妈的流量联盟、帮助广告主更好买量的数字化营销平台以及用户体系等，其中广告检索和广告大数据平台成为支撑整个流量商业化项目的技术基础。

  

2022年03月

• 03.24 12:00:45
  发表了文章 2022-03-24 12:00:45

  阿里云 MaxCompute 2022-3月刊合集

  2022年3月，MaxCompute 全新支持 Spark 3.1 版本；物化视图改写能力进一步增强，更多产品动态详情请查看本次月刊。

  
• 03.02 11:13:50
  发表了文章 2022-03-02 11:13:50

  阿里云 MaxCompute 2022-1月2月刊合集

  云原生一体化数仓重磅发布；MaxCompute支持表结构变更邀测版本发布。

  

2022年01月

• 01.06 10:19:41
  发表了文章 2022-01-06 10:19:41

  阿里云 MaxCompute 2021-12 月刊

  2021年12月，MaxCompute 发布物化视图增强功能和支持渐进式计算。详情请阅读本月刊。

  

2021年12月

• 12.28 12:00:00
  发表了文章 2021-12-28 12:00:00

  阿里云MaxCompute为坚韧性系统 — 中国信通院完成首个面向大数据技术产品的混沌测试

  随着 2021 年《关键信息基础设施安全保护条例》出台，稳定性已成为各领域客户在功能、性能之外，对大数据技术产品能力评价的重要指标。阿里云MaxCompute大数据平台在13轮不同程度的破坏性测试中，性能水平并未明显下降，被证明为韧性型系统。

  
• 12.16 15:26:13
  发表了文章 2021-12-16 15:26:13

  阿里云 MaxCompute 2021-11 月刊

  2021年11月阿里云MaxCompute集成网易有数BI工具商业化发布；MaxCompute 专有网络连接管理产品化发布；MaxCompute 支持清空分区表中指定分区的数据。更多详情欢迎阅读本文。

  

2021年11月

• 11.08 16:08:49
  发表了文章 2021-11-08 16:08:49

  阿里云 MaxCompute 2021-10 月刊

  2021年10月，MaxCompute集成观远数据(GuanData)BI工具(商业化)发布，MCQA（MaxCompute Query Acceleration）查询缓存机制商业化发布，外表支持Hbase增强版和云原生多模数据库 Lindorm。

  

2021年10月

• 10.14 16:35:39
  发表了文章 2021-10-14 16:35:39

  阿里云 MaxCompute 2021-9 月刊

  MaxCompute 是面向分析的企业级 SaaS 模式云数据仓库，基于MaxCompute与推荐、搜索、机器学习等产品可以构建智能推荐、用户增长等多种常用的解决方案。同时MaxCompute具备大规模数据科学分析、半结构化数据处理能力，也可提供基于Delta lake、Hudi格式的湖仓一体方案 。9月MaxCompute金融云华南1（深圳）节点正式开服。

  

2021年09月

• 09.07 15:51:43
  发表了文章 2021-09-07 15:51:43

  2021阿里巴巴大数据技术公开课第二季 — SaaS模式云数据仓库MaxCompute应用场景实践

  MaxCompute 是面向分析的企业级 SaaS 模式云数据仓库，基于MaxCompute与推荐、搜索、机器学习等产品可构建智能推荐、用户增长等多种用户常用的解决方案。同时MaxCompute具备大规模数据科学分析、半结构化数据处理能力，也可提供基于Delta lake、Hudi格式的湖仓一体方案 。本季直播将对基于MaxCompute的经典解决方案和能力进行最佳实践介绍。

  
• 09.06 16:14:34
  发表了文章 2021-09-06 16:14:34

  阿里云 MaxCompute 2021-8 月刊

  8月MaxCompute最新发布多项新功能，包括MaxCompute SQL 支持物化视图；流式数据通道服务功能商业化发布；SQL UPDATE、DELETE和MERGE INTO功能商业化发布；支持读取 OSS 上 Hudi、Delta Lake 格式文件；支持访问开启 Kerberos 认证授权机制的 Hadoop 集群。

  

2021年08月

• 08.04 16:09:26
  发表了文章 2021-08-04 16:09:26

  阿里云 MaxCompute 2021-7 月刊

  MaxCompute 7月刊将带您了解7月最新发布的项目删除、SQL性能优化推荐等功能以及7月、8月精彩直播课程，欢迎阅读。

  

2021年07月

• 07.16 16:19:42
  发表了文章 2021-07-16 16:19:42

  2021阿里巴巴大数据技术公开课第一季 — 外部工具连接SaaS模式云数仓MaxCompute实战

  MaxCompute 是面向分析的企业级 SaaS 模式云数据仓库，以 Serverless 架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，帮助企业和大数据开发者经济并高效的分析处理海量数据。

  
• 07.14 16:02:51
  发表了文章 2021-07-14 16:02:51

  阿里云 MaxCompute 2021年4-6月刊合集

  本次月刊合集包含 MaxCompute 近期功能发布及商业化动态，更推荐10篇技术及实践文章供产品用户阅读了解。

  

2021年06月

• 06.01 09:33:39
  发表了文章 2021-06-01 09:33:39

  数仓架构的持续演进与发展 — 云原生、湖仓一体、离线实时一体、SaaS模式

  数据仓库概念从1990年提出，经过了四个主要阶段。从最初的数据库演进到数据仓库，到MPP架构，到大数据时代的数据仓库，再到今天的云原生的数据仓库。在不断的演进过程中，数据仓库面临着不同的挑战。

  

2021年04月

• 04.29 17:13:35
  发表了文章 2021-04-29 17:13:35

  [JDBC] Kettle on MaxCompute 使用指南

  Kettle是一款开源的ETL工具，纯Java实现，可以在Windows、Unix和Linux上运行，提供图形化的操作界面，可以通过拖拽控件的方式，方便地定义数据传输的拓扑 。基本讲介绍基于Kettle的MaxCompute插件实现数据上云。

  
• 04.01 11:14:40
  发表了文章 2021-04-01 11:14:40

  阿里云 MaxCompute 2021-3 月刊

  2021年3月，MaxCompute管家等多项功能上新，快来一起看看吧。

  

2021年03月

• 03.26 11:47:54
  发表了文章 2021-03-26 11:47:54

  国内唯一，阿里云挺进 Forrester 全球云数据仓库卓越表现者象限

  阿里云凭借产品现有能力、产品战略、市场表现三项优势，进入Forrester Wave 2021 Q1云数据仓库卓越表现者象限，成为入选此次评测的唯一中国厂商，并由竞争者象限跃升至卓越表现者象限。

  
• 03.03 19:06:15
  发表了文章 2021-03-03 19:06:15

  阿里云 MaxCompute 2021-2 月刊

  2021年2月，MaxCompute发布云数仓内的机器学习 MaxCompute SQLML功能，以及MaxCompute湖仓一体OSS数据湖集成方案等15项新功能，欢迎阅读产品2月刊了解新发功能详情。

  

2021年02月

• 02.19 10:08:34
  发表了文章 2021-02-19 10:08:34

  阿里云 MaxCompute 2021-1 月刊

  2021年1月，SaaS模式云数据仓库MaxCompute存储单价由梯度定价统一下调整为月固定单价，中小规模企业数据仓库存储成本最高降四成。

  

2021年01月

• 01.27 15:47:37
  发表了文章 2021-01-27 15:47:37

  阿里云联合帆软发布企业级BI分析解决方案，解决数据应用难题

  MaxCompute 是阿里云提供的云数据仓库服务，服务着数以万计的客户和阿里巴巴集团。MaxCompute 秉持兼容生态的开放技术路线，持续投入产品生态建设。本次将正式发布与帆软FineBI和FineReport官方集成，为双方用户提供更优质的数据分析体验。

  
• 01.05 14:03:03
  发表了文章 2021-01-05 14:03:03

  阿里云 MaxCompute 2020-12 月刊

  2020年12月 MaxCompute 在查询加速、流式数据写入、消费限制、实时作业监控、元数据服务方面有最新发布，欢迎通过本月刊了解12月最新发布详情。

  

2020年12月

• 12.16 11:46:11
  发表了文章 2020-12-16 11:46:11

  2020阿里巴巴大数据技术公开课第五季 — SaaS模式云数据仓库MaxCompute开发实战与常见问题

  MaxCompute（原ODPS）作为SaaS模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您经济并高效的分析处理海量数据。

  
• 12.02 18:41:59
  发表了文章 2020-12-02 18:41:59

  阿里云 MaxCompute 2020-11 月刊

  2020年11月MaxCompute发布支持以RAM角色身份访问使用服务以及支持消息队列Kafka版通过Connector持续导入数据新功能，详情请查看本月刊内容。

  
• 12.01 11:12:11
  发表了文章 2020-12-01 11:12:11

  玩物得志：效率为王 基于DataWorks+MaxCompute+Hologres 构建大数据平台

  为了支撑业务的快速发展，玩物得志极少自己造轮子，会大量采用云平台提供的 SaaS、PaaS 服务。比如大数据体系是在阿里云 MaxCompute+DataWorks 框架体系上建设起来。使用了其核心存储、计算等组件，上层的可视化以及业务查询部分，在使用过程中也会有大量的定制化需求，玩物得志在开源方案的基础上进行了一些二次开发。

  

2020年11月

• 11.30 16:01:43
  发表了文章 2020-11-30 16:01:43

  双11史上作业数最多，人工干预最少—MaxCompute 自适应执行引擎DAG2.0为1.5亿分布式作业提供自动化保障

  阿里巴巴双11史上作业数最多，但人工干预最少的一次双11技术保障： 从动态并发调整带来的单日10亿计算节点的节省，到数据智能编排带来的高级基线单个作业数十个小时执行时间的缩短，再到全新Bubble执行模式在百万作业获取的30%以上的性能提升。 本文为大家介绍，在2020年阿里巴巴集团双11海量作业数目与突变的数据特性面前，阿里云MaxCompute 新一代 DAG 2.0 执行引擎，通过其自适应的动态执行能力和新架构上的全新计算模式，如何为双11大促数据的及时产出提供自动化保障。

  
• 11.20 14:17:03
  发表了文章 2020-11-20 14:17:03

  阿里云机器学习PAI和大数据平台MaxCompute分别进入IDC和Forrester领导者象限

  近日，全球权威研究机构Forrester、IDC分别发布《中国预测分析和机器学习Wave，2020Q4》和《Marketscape：中国大数据管理平台厂商评估，2020》报告，阿里云机器学习平台PAI和大数据平台MaxCompute分别位居领导者象限，且在战略维度上双双领先。

  
• 11.10 19:18:57
  发表了文章 2020-11-10 19:18:57

  【干货整理】MaxCompute 持续定义 SaaS 模式云数据仓库 — 2020阿里巴巴大数据技术公开课第四季

  数据管理领域的技术演进以及云计算的蓬勃发展催生了基于云提供开箱即用的数据仓库服务的产品模式-Data Warehouse as a Service(DWaaS)，最终用户无需关心基础设施、平台软件管理以及平台运维和优化升级工作。这部分工作由服务提供商完全托管并提供满足SLA要求的高质量服务，减少用户的前期投入并加速价值实现，让数据仓库服务回归服务的本质。阿里云MaxCompute正是基于云构建的SaaS模式的数据仓库服务。本季直播将重点从SaaS模式云数据仓库按需使用的核心能力-Serverless能力、"云数据仓库+价值场景" 两个方面做深入解读。

  
• 11.09 11:45:18
  发表了文章 2020-11-09 11:45:18

  阿里云 MaxCompute 2020-10 月刊

  MaxCompute10月新发布功能在sql的产品能力、易用性、性能以及存储优化方面持续增强，欢迎阅读月刊了解最新feature及用法。

  

2020年10月

• 10.10 11:59:33
  发表了文章 2020-10-10 11:59:33

  数据湖 VS 数据仓库之争？阿里提出大数据架构新概念：湖仓一体

  随着近几年数据湖概念的兴起，业界对于数据仓库和数据湖的对比甚至争论就一直不断。有人说数据湖是下一代大数据平台，各大云厂商也在纷纷的提出自己的数据湖解决方案，一些云数仓产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么，是技术路线之争？是数据管理方式之争？二者是水火不容还是其实可以和谐共存，甚至互为补充？本文作者来自阿里巴巴计算平台部门，深度参与阿里巴巴大数据/数据中台领域建设，将从历史的角度对数据湖和数据仓库的来龙去脉进行深入剖析，来阐述两者融合演进的新方向——湖仓一体，并就基于阿里云MaxCompute/EMR DataLake的湖仓一体方案做一介绍。

  
• 10.10 10:54:51
  发表了文章 2020-10-10 10:54:51

  业内首次融合数据仓库与数据湖 阿里云推出下一代大数据平台 “湖仓一体”

  2020年9月18日，阿里云在云栖大会正式推出大数据平台的下一代架构——“湖仓一体”，打通数据仓库和数据湖两套体系，让数据和计算在湖与仓之间自由流动，从而构建一个完整的有机的大数据技术生态体系。为企业提供兼具数据湖的灵活性和数据仓库的成长性的新一代大数据平台，降低企业构建大数据平台的整体成本。

  
• 10.10 10:36:37
  发表了文章 2020-10-10 10:36:37

  阿里云 MaxCompute 2020-9 月刊

  MaxCompute改版控制台，优化全托管云数据仓库服务的管理和使用体验；同时作业监控诊断工具Logview功能升级发布，扩展了作业的监控指标，提供作业回放功能以及新增Fuxi Sensor支持查看作业内存及CPU使用。

  

2020年09月

• 09.04 12:25:53
  发表了文章 2020-09-04 12:25:53

  阿里云 MaxCompute 2020-8 月刊

  MaxCompute商业化发布数据备份恢复和数据科学Mars两项重要功能，同时公测发布MaxCompute查询加速。秒级恢复误删除数据，分布式加速 Python 数据科学栈，自动识别短查询作业并加速处理，满足报表分析、即席查询场景的使用要求尽在8月刊。

  

2020年08月

• 08.05 10:12:40
  发表了文章 2020-08-05 10:12:40

  SaaS模式云数据仓库 MaxCompute 企业级安全能力升级—持续定义云原生，有效提升企业数据安全管理水平

  日前，阿里云SaaS模式云数据仓库MaxCompute 全面升级企业级安全新能力，新发布功能包含实时审计日志、细粒度授权、数据脱敏、存储加密( BYOK)、持续备份恢复和跨地域的容灾备份。MaxCompute作为全托管大数据平台内建完善的安全管理能力，本次升级将对企业云上数据和业务形成更加全面和细粒度的保护，有效提升企业安全管理水平。

  
• 08.04 14:42:10
  发表了文章 2020-08-04 14:42:10

  SaaS 模式云数据仓库 MaxCompute 数据安全最佳实践

  MaxCompute作为企业级SaaS模式云数据仓库，正在为客户业务及其数据提供持续的安全保护。 MaxCompute 近期对产品的安全能力进行了全面升级，本文将针对数据误用、数据滥用、数据泄露、数据丢失等典型数据风险场景，结合数据生命周期，为您介绍基 于MaxCompute 和 DataWorks 原生集成安全能力的最佳实践。