云日志服务(LTS)日志转储——转储至DMS

举报
云里来云里去 发表于 2020/12/08 09:32:06 2020/12/08
【摘要】 分布式消息服务 DMS(Kafka专项版)提供日志实时处理管道,本文为您介绍如何将日志转储至Kafka

分布式消息服务 DMS(Kafka专项版)提供日志实时处理管道,您可以通过分布式消息服务API实时消费处理日志。

转储至DMS(Kafka专项版)功能当前受限开放,敬请期待。

前提条件

  • 已创建日志组和日志流。

  • 已完成ICAgent安装。

  • 已配置日志采集规则。

  • 已购买DMS(Kafka专项版)DMS存储独立收费,收费详情请参见:华为云定价

操作步骤

  1. 在云日志服务管理控制台,左侧导航栏中,单击“日志转储”。

  2. 在“日志转储”页面右上角,单击“配置转储”。

    unnaming (10).png

  3. 在“配置转储”页面,设置转储日志相关参数。

    说明:转储任务创建成功后,已绑定的日志组和转储方式不支持修改,其他参数支持修改。

    Table1 配置转储参数说明

    参数名称

    说明

    样例

    日志组名称

    选择已创建的日志组。

    -

    日志流名称

    选择已创建的日志流。

    -

    转储方式

    选择转储的云服务。

    DMS

    Kafka实例

    选择Kafka实例。如果没有可选择的实例,单击“查看Kafka通道”,进入分布式消息管理控制台,创建Kafka专享版。

    -

    修改密码

    Kafka实例如果已注册(如果未注册,请注册Kafka示例,操作指导请参见:注册Kafka实例),可以选择修改用户名密码

    -

    Topic

    选择Kafka实例的topic,如果没有可选择的topic,进入分布式消息管理控制台,创建专享版Kafka的topic

    topic-01

    转储格式

    当前只支持“原始日志”格式,示例如下:

    云日志服务控制台展示的日志内容的格式为原始日志格式。

    Sep 30 07:30:01 ecs-bd70 CRON[3459]: (root) CMD (/opt/oss/servicemgr/ICAgent/bin/manual/mstart.sh > /dev/null 2>&1)

    RAW

    是否开启转储

    选择开启转储。

    开启

    转储周期

    日志将实时转储至Kafka实例中。

    实时

  4. 单击“确定”,完成配置。当转储任务状态为“正常”时,表示转储任务创建成功。
  5. 单击“转储对象”列的名称,可跳转到专享版Kafka实例的基本信息页面。


注册Kafka实例

  1. 如果选择Kafka实例未注册,单击注册,跳转到注册Kafka实例页面。

    unnaming (4).png

  2. 注册Kafka实例相关参数说明

    参数名称

    说明

    样例

    Kafka实例

    dms实例名称。

    Kafka-01

    打通DMS网络

    打通Kafka实例和LTS服务的网络,用户LTS服务通过该网络发送转储数据

    -

    用户名

    如果Kafka实例开启了sasl认证,需要输入sasl认证的用户名

    DMS

    密码

    如果Kafka实例开启了sasl认证,需要输入sasl认证的密码

    -

  3. 点击确认,完成注册Kafka实例。

【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。