【数据仓库】Teradata项目搬迁GaussDB(DWS)云数仓浓缩

举报
wzhyalfa 发表于 2020/09/30 21:49:53 2020/09/30
【摘要】 Teradata项目搬迁GaussDB(DWS)云数仓事项浓缩信息
  1. 概念差异

    1. Teradata(下文简称TD)

    2. GaussDB(DWS) (下文简称DWS)

  2. 数据库管理

    1. 模式schema管理

      1. TD的database层级与DWS的schema相当,原有database对象直接搬迁到schema下面;

    2. 权限管理

    3. 空间管理

  3. DDL表结构迁移

    1. 常见字段类型映射

  4. 批量SQL迁移

    若用户存在批量作业的SQL开发平台,可以直接由平台实现相关语法SQL转换


  5. 自定义函数及TD内置函数迁移

    1. 目的,满足搬迁过程中,改造量最小,前后数据一致,快速迁移;

  6. 跨平台校验

    1. 目的,满足搬迁期间,DWS平台追批期间和TD平台的数据一致性校对;

  7. 跨平台修数

    1. 目的,满足搬迁期间,切换前,两个平台并行运行期间,发生业务数据修数的行为;

  8. 数据备份

    1. GDS逻辑备份

    2. Roach物理备份

  9. 运维

    1. 负载管理

      1. 目的:系统库本身存在资源上线,充分规划好负载管理配置,可以更有效发挥数据库运行能力,好刀用在好刃上;

      2. 作法:

        1. 虽然数据库内部可设置超级通道,但实际多数场景并不能直接使用该约束性通道,故在负载管理上,预留一条VIP通道,平常不放置用户,通过QueryBand设置及临时将User移至VIP队列,实现超级通道;

        2. 实践中,建议负载细项不控制内存,让其处于共享状态,通过memory_limit及队列使用内存的异常查杀控制内存过度占用;

      3. 待续

    2. 数据库常见监控

      1. 空间监控

        1. 存储维度:已用空间及倾斜率

          单表级:

          schema表级:

          schema级:

          库级:

        2. 使用维护:用户粒度的空间使用情况

      2. 会话监控

        1. 活动会话:

        2. 历史会话:

      3. SQL性能回查:

    3. 异常

  10. 待续


持续完善

【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。