一、安装Azkaban,并将简单流程任务进行打包运行
1.1构建对应的运行任务
bar.job
# bar.job
type=command
dependencies=foo
command=echo bar
foo.job
# foo.job
type=command
command=echo foo
将这个两个文件打包为foobar.zip文件
1.2.创建project
1.3.上传对应调度任务
1.4.运行对应的调度任务
二、在DataWorks打开迁移助手,并进行业务流程的导入
2.1打开DataWorks的开发界面选择全部产品,点击运维助手
2.2进入迁移助手,点击新建导入任务
2.3选择对应的Azkaban任务,点击上传文件将foobar.zip进行上传
2.4上传完成后,可以看到对应的任务列表,查看对应的导入报告
可以看待对应任务导入是结果展示,以及转化为的业务流程名称
2.5最后回到Dataworks的开发界面进行查看转化后的调度任务
总结和注意事项:
1.仅主账号和工作空间管理员能够进行导入和导出操作,其他角色成员仅支持查看导入、导出任务列表,无操作权限。
2.目前支持Hive、Sqoop、Shell的转化等。
3.迁移上DataWorks的业务流程,需要转化的任务需要做手动改动,但是整体的逻辑不会改变。对比重新建立对应的繁杂的依赖关系,无论效率和成本都是完善的一种方案。
欢迎加入“MaxCompute开发者社区2群”,点击链接申请加入或扫描二维码