Kibble适配GaussDB开源开发任务验证心得

背景介绍

开源for Huawei（参考：https://developer.huaweicloud.com/programs/opensource/contributing/）  通过和公司、高校、社区的开发者合作，完成鲲鹏、昇腾、欧拉、鸿蒙、高斯、云服务等与开源软件的适配开发，帮助繁荣Huawei的基础生态，同时让开源软件能够更加简单、高效的运行于华为云上。

开始之前，开发者可以下载 开源for Huawei Wiki（参考：https://gitcode.com/HuaweiCloudDeveloper/OpenSourceForHuaweiWiki/overview） 了解详细的开发步骤，技术准备，以及开发过程需要的各种资源。

组件功能

Apache Kibble 是一个用于处理日志和分析软件开发生命周期数据的工具。它可以收集来自各种源（如版本控制系统、问题跟踪系统、构建系统等）的数据，并将这些数据整合起来进行分析。

1. 日志收集

      2.日志存储与索引

         （1）存储机制：Kibble 通常会将处理后的日志数据存储在合适的存储系统中。这可能是关系型数据库（如 MySQL）或非关系型数据库（如 Elasticsearch）。以 Elasticsearch 为例，Kibble 会将日志数据发送到 Elasticsearch 集群中，利用 Elasticsearch 的分布式存储和高效的索引机制，方便后续的查询和检索。

         （2）索引构建：在存储过程中，Kibble 会帮助构建索引。例如，对于日志中的日期字段，它可以构建时间序列索引，使得用户可以很方便地按照时间范围查询日志。对于用户相关的字段（如提交者姓名），可以构建基于用户的索引，便于查找特定用户相关的所有日志。

适配准备

1. 已安装并配置好Gauss数据库
2. Python 3.6 或更高版本(最好是3.8版本，3.10以上版本可能会出现版本不兼容的情况)。
3. Elasticsearch集群搭建(虽然Kibble服务的日志数据可以存储在关系型数据库中，但由于kibble服务初始化需要依靠ES集群执行，所以还是需要搭建的)

ps:ES集群可到官网地址根据自己主机配置选择所对应的jar包或者rpm包：https://www.elastic.co/cn/elasticsearch

pip install psycopg2

[database]
         type = gaussdb
         driver = psycopg2
         host = localhost
         port = 5432
         user = kibble_user
         password = kibble_password
         database_name = kibble_gaussdb

[network]
         proxy_type = http
         proxy_host = proxy.example.com
         proxy_port = 8080