一品网
  • 首页

ETL调度工具对比 AirFlow, XXL-JOB, Azkanban


AirFlow

编写语言:Python

易用性:低

工作流层级:dag - - tasks

任务类型:Python、Bash、HTTP、Mysql等,支持Operator的自定义扩展。

Azkaban

编写语言:Java

易用性:强

工作流层级:project - - flows - - tasks

任务类型:Command、HadoopShell、Java、HadoopJava、Pig、Hive等,支持插件式扩展

XXL

编写语言:Java

易用性:强

工作流层级:project - - flows - - tasks

任务类型:Java

数仓

相关


数仓设计

【CDH数仓】Day01:概念、环境搭建、CDH数仓搭建、用户行为数仓搭建

【离线电商数仓】Day02-用户行为数据仓库:分层介绍、环境搭建(hive、tez)、LZO压缩、建表

【实时数仓】Day00:数据流程、课程内容、框架结构、知识点总结

【实时数仓】Day05-ClickHouse:入门、安装、数据类型、表引擎、SQL操作、副本、分片集

【转】详解数仓中的数据分层:ODS、DWD、DWM、DWS、ADS

看SparkSql如何支撑企业数仓

【大数据-课程】高途-天翼云侯圣文-Day2:离线数仓搭建分解

数仓建模—ID Mapping

数仓建模—埋点设计与管理

聊聊数仓中TPCD-DS&TPC-H与查询性能的那些事儿

中信建投X袋鼠云:实时数仓,证券机构的“速度与稳定”

标签

一品网 冀ICP备14022925号-6