背景介绍

开源for Huawei（参考：https://developer.huaweicloud.com/programs/opensource/contributing/）  通过和公司、高校、社区的开发者合作，完成鲲鹏、昇腾、欧拉、鸿蒙、高斯、云服务等与开源软件的适配开发，帮助繁荣Huawei的基础生态，同时让开源软件能够更加简单、高效的运行于华为云上。

开始之前，开发者可以下载 开源for Huawei Wiki（参考：https://gitcode.com/HuaweiCloudDeveloper/OpenSourceForHuaweiWiki/overview） 了解详细的开发步骤，技术准备，以及开发过程需要的各种资源。

1 需求分析

1.1 项目影响力

Azkaban是由Linkedin公司推出的一个批量工作流任务调度器，主要用于在一个工作流内以一个特定的顺序运行一组工作和流程，它的配置是通过简单的key:value对的方式，通过配置中的dependencies 来设置依赖关系。Azkaban使用job配置文件建立任务之间的依赖关系，并提供一个易于使用的web用户界面维护和跟踪你的工作流。

Azkaban由三个关键组件构成：

AzkabanWebServer：AzkabanWebServer是整个Azkaban工作流系统的主要管理者，它用户登录认证、负责project管理、定时执行工作流、跟踪工作流执行进度等一系列任务。

AzkabanExecutorServer：负责具体的工作流的提交、执行，它们通过mysql数据库来协调任务的执行。

关系型数据库（MySQL）：存储大部分执行流状态，AzkabanWebServer和AzkabanExecutorServer都需要访问数据库。

项目数据：Fork 1.6K, Star 4.4K,Contributors 105+，最近一次提交：2023-8-12

主要开发语言:

· Java 90.1%

官网: https://azkaban.github.io/

源代码仓库：https://github.com/azkaban/azkaban

star历史（https://star-history.com/）：

1.2 任务目的和范围

本任务的主要目的是让Azkaban社区支持华为云 GaussDB数据库服务，拓展GaussDB数据库服务的影响力，方便Azkaban的用户使用华为云服务时能够顺利对接GaussDB数据库服务。

l 适配任务清单

2 工作量评估和任务分解

2.1 工作量评估

2.2 基于华为云ECS完成Azkaban安装和部署调试

华为云部署参考:

Azkaban系统架构图：

参考：

代码仓库：https://github.com/azkaban/azkaban

2.3 完成GaussDB数据库适配功能开发

参考现有Azkaban的架构，完成2个功能点的分析和适配工作。

• Azkaban安装时的默认数据库从Mysql替换成GaussDB数据库。
• 从Azkaban Workflow输出的数据，能够写入GaussDB数据库。

参考：

https://github.com/azkaban/azkaban/tree/master/azkaban-db

2.4 完成DEMO设计和验证

• Azkaban安装时使用GaussDB数据库进行安装。
• Azkaban Workflow 执行完成后数据写入GaussDB数据库。

2.5 在华为云开发者论坛输出博客

访问华为云开发者论坛（参考：https://bbs.huaweicloud.com/blogs）发表博客，介绍完成这些任务的过程和心得。

内容包括不限于如下内容：

• 开源for Huawei的背景
• 开源软件的功能介绍
• 开发适配过程及碰到和解决的问题
• DEMO设计、开发、部署过程
• 代码推送开源社区及互动过程

博客打上如下标签：

• 开源（必选）
• 开发者（必选）
• GaussDB数据库（可选）
• 云数据库 GaussDB（可选）
• 鲲鹏（可选）
• 昇腾（可选）
• 鸿蒙（可选）
• 对象存储 OBS（可选）

2.6 代码推送上游社区

将代码合并到Azkaban官网主干代码，更新Azkaban官网资料，包括版本说明、开发指南等。

3 验收材料

4 参考资料

• 开源for Huawei介绍、环境搭建、示例项目、开发和部署指南：https://gitcode.com/HuaweiCloudDeveloper/OpenSourceForHuaweiWiki/overview
• Azkaban 开源软件 for Huawei 临时代码仓库参考：https://github.com/azkaban/azkaban