为什么新版Azkaban改动那么大呢?

来源:10-10 -Azkaban快速入门案例

John_Z_

2020-08-27

我查看Azkaban官网,上面说文档已经更新,然后我去浏览新的文档:
https://azkaban.readthedocs.io/en/latest/createFlows.html
我发现新版的Azkaban已经有很多改动了,例如以前用.job文件,现在用.flow文件,然后.flow里面配置任务的方式也全变了。
为什么Azkaban会有如此大的改动呢?它的核心是否也有很大的改动呢?我是用新版还是用课程讲解的版本呢?谢谢!

写回答

1回答

Michael_PK

2020-08-27

AZ2.X和3.X变化不小,而且3.x是具备高可用的,2.x是不具备的。本课程是使用3.x讲解的。

.job那种方式官网已经说了,标记为过时的了,后面说不定哪个版本就不一定支持了。

换句话说:现在就应该学习3.x的了,不用再看2.x。

PS:我们自己团队的调度就是基于3.x改的,已经在生产上使用了很长一段时间了。

1
1
John_Z_
非常感谢!
2020-08-27
共1条回复

Python3实战Spark大数据分析及调度

使用Python3对Spark应用程序进行开发调优,掌握Azkaban任务调度

1046 学习 · 434 问题

查看课程