作者小头像 Lv.3
更多个人资料
185 成长值
0 关注
6 粉丝
+ 关注 私信

个人介绍

这个人很懒，什么都没有留下

感兴趣或擅长的领域

暂无数据
个人勋章
TA还没获得勋章~
成长雷达
185
0
0
0
0

个人资料

个人介绍

这个人很懒，什么都没有留下

感兴趣或擅长的领域

暂无数据

达成规则

以上满足项可达成此勋章

  • 博客
  • 关注
  • 粉丝
  • 论坛
全部时间
全部时间
最近三天
最近一周
最近一月
  • 全部
  • 暂无专栏分类
DRS如何实现Mysql->Kafka的数据解析
DRS如何实现Mysql->Kafka的数据解析数据复制服务（Data Replication Service，简称DRS）是一种易用、稳定、高效、用于数据库在线迁移和数据库实时同步的云服务，除了支持mysql，postgres，sqlserver，MongoDB和oracle等常用数据库之间同步外，还可以通过订阅mysql的增量日志写到kafka，由客户自主决定写到其他的数据库、数据仓库和...
数据复制服务 DRS 数据库
作者小头像 DRS技术快客 2022-01-04 20:09:04
9771
0
0
2022-01-04 20:09:04
999+
0
0
我使用DRS同步MySQL Float类型数据到PostgreSQL，为什么两边数据"不一致"
最近收到一个客户反馈使用DRS同步后，源库和目标库的数据不一致。数据一致性是DRS的生存之本，团队上下非常重视，收到反馈后马上联系客户了解情况排查原因，最终发现原来是虚惊一场。那么这个“不一致”是怎么产生的？它底层的根本原因又是什么呢？接下来我们一起来挖一挖。问题现象客户使用DRS创建了MySQL到PostgreSQL的同步任务，MySQL表中存在一个FLOAT类型的列，DRS任务启动后会在...
MySQL PostgreSQL 数据复制服务 DRS
作者小头像 DRS技术快客 2021-10-30 22:06:55
7221
0
0
2021-10-30 22:06:55
999+
0
0
MySQL账号登录ip验证机制
####问题我们通过mysql客户端登录MySQL服务器的时候，基本都是使用的命令 mysql -hxxx.xxx.xxx.xxx -uxxx -pxxxxxx 进行访问的。但是我们可能会遇到这样的情况，我们明明输入的是正确的密码。但是就是登录不上，服务端却返回了ERROR 1045 (28000): Access denied for user xxx 之类的报错，但是换一个机器使用mys...
MySQL
作者小头像 DRS技术快客 2021-09-30 09:33:15
6952
0
0
2021-09-30 09:33:15
999+
0
0
MySQL中的binlog简单查看
DRS数据迁移DRS做数据迁移有两个阶段，初始化阶段，和增量阶段初始化就是把表中的存量数据从源端迁移到目标端去，增量阶段就是从源端实时拉取binlog并解析成SQL，并在目标端执行，以达到实时同步的目的 binlog参数配置1、binlog开关MySQL中可以配置增量日志binlog，来保存实例上的数据变更，可能通过参数sql_log_bin来控制，其中on表示开启mysql> show ...
MySQL SQL
作者小头像 DRS技术快客 2021-09-29 15:49:58
7855
0
0
2021-09-29 15:49:58
999+
0
0
DRS的TiDB增量技术探索
1 TiDB BinlogTiDB binlog为PingCap自定义格式的日志，非MySQL官方标准binlog。（参考官网文档https://docs.pingcap.com/zh/tidb/v3.0/binlog-consumer-client ）目前Drainer提供了很多输出方式，通过对drainer进行配置实现日志直接回放到目标库（MySQL、TiDB）以及日志落盘（File）...
MySQL 数据复制服务 DRS
作者小头像 DRS技术快客 2021-07-31 14:46:37
7694
0
0
2021-07-31 14:46:37
999+
0
0
DRS数据同步到KAFKA原理
##一、kafka简单介绍kafka大家的第一印象是一个消息系统。但是kafka的官网的说法是： Apache Kafka® is a distributed streaming platform kafka是一个分布式流处理平台，而流处理平台主要具备以下三种能力：1.发布和订阅消息流，类似于消息队列或企业消息传递系统。2.以容错的持久化方式储存消息流。3.可以在产生消息流的时候，同时进行处...
Kafka 数据复制服务 DRS
作者小头像 DRS技术快客 2021-07-31 10:04:57
4723
0
0
2021-07-31 10:04:57
999+
0
0
工作中使用到的文件及转换技巧
在做文件处理的时候，我们经常会使用到压缩，加密，校验压缩：就是对数据以一种更省字节的方式做一个无损转换，举例字符串AAAAAAAAA，我们需要9个字符，我们用9*A来表示的时候，只需要3个字符，常用的文件压缩的工具有zip, tar加密：就是对数据做一个映射或其它复杂的可逆转换，举例字符串AAAAAAAAA,我们通过一个映射表(密码规则)，把数据转换成了aaaaaaaaa,这时数据跟原来的数...
数据加密服务 DEW
作者小头像 DRS技术快客 2021-06-30 21:05:29
4408
0
0
2021-06-30 21:05:29
999+
0
0
MySQL JDBC中的参数
jdbc的参数配置当我们用jdbc连MySQL的时候，有一个连接串，一般形如jdbc:mysql://127.0.0.1:3307/test_tb?connectTimeout=5000&serverTimezone=UTC&zeroDateTimeBehavior=convertToNull&characterEncoding=UTF8&useConfigs=fullDebug还有时候我...
JDBC MySQL
作者小头像 DRS技术快客 2021-06-29 20:53:50
5525
0
0
2021-06-29 20:53:50
999+
0
0
跨字符集迁移数据库
普通迁移1、创建一个gbk字符集的表create table t_gbk (val varchar(32)) default character set gbk2、插入一条数据mysql> insert into t_gbk values('华为云');Query OK, 1 row affected (0.02 sec)mysql> select * from t_gbk;+------...
MySQL
作者小头像 DRS技术快客 2021-05-31 20:47:37
3993
0
0
2021-05-31 20:47:37
999+
0
0
一个字符校对规则引发的血案
问题现场我们先看一个建表语句CREATE TABLE collate_test (val1 char(32) COLLATE utf8mb4_general_ci,val2 char(32)) CHARACTER SET utf8mb4;当我们在MySQL5.7和MySQL8.0上建表，都能建成功，但是当建成功之后，我们都执行SQL：SELECT * FROM collate_test W...
MySQL
作者小头像 DRS技术快客 2021-05-31 15:38:05
8796
0
0
2021-05-31 15:38:05
999+
0
0
总条数：18
10
10
20
50
100
  • 1
  • 2

上滑加载中

https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
作者小头像
作者小头像
快速交付
+ 关注