Lv.3
Leef724
更多个人资料
320
成长值
2
关注
18
粉丝
+ 关注
私信
个人介绍
华为云智能数据域,数据集成的一名搬砖工
感兴趣或擅长的领域
暂无数据
个人勋章
TA还没获得勋章~
成长雷达
320
0
0
0
0
个人资料
个人介绍
华为云智能数据域,数据集成的一名搬砖工
感兴趣或擅长的领域
暂无数据
达成规则
以上满足
项可达成此勋章
博客
关注
粉丝
论坛
全部时间
全部时间
最近三天
最近一周
最近一月
全部
暂无专栏分类
基于MinGW的pkg-config 工具离线安装
安装本文假设你已安装MinGW环境目录为C:\MinGW\bin在http://ftp.gnome.org/pub/gnome/binaries/win32/dependencies/下载pkg-config_0.26-1_win32.zip,解压后将bin/pkg-config.exe 拷贝到C:\MinGW\bin下载gettext-runtime_0.18.1.1-2_win32.z...
Leef724
2021-06-17 16:31:12
9696
0
0
2021-06-17 16:31:12
999+
0
0
从云数据迁移服务看MySQL大表抽取模式
小编最近在云上的一个迁移项目中被Mysql抽取模式折磨的很惨。一开始爆内存被客户怼,再后来迁移效率低下再被怼。mysql jdbc抽取到底应该采用什么样的方式,且听小编给你娓娓道来。Java-JDBC通信原理参考博客[MySQL JDBC StreamResult通信原理浅析]的分析,JDBC与数据库之间的通信是通过socket完,大致流程如下图所示。Mysql Server ->内核Soc...
云数据迁移 CDM
数据迁移
Leef724
2021-02-02 18:45:47
10281
0
2
2021-02-02 18:45:47
999+
0
2
CDM踩坑指南之网卡冲突导致连接Mysql失败
问题背景cdm集群跨VPC连接RDS失败,用户已经配了对等连接。分析cdm的网卡分配策略:1)CDM集群所在VPC网段为192.168.0.0/24,则CDM集群在创立的时候网卡分与网段对应关系如下管理面~eth0 ~ 172.16.0.0/24,业务面 ~ eth1 ~ 192.168.0.0/24 2) CDM集群所在VPC网段为172.16.0.0/24,则CDM集群在创立的时候网卡分...
云数据迁移 CDM
MySQL
Leef724
2020-11-25 18:03:37
9170
0
0
2020-11-25 18:03:37
999+
0
0
CDM抽取DDM数据被截断了?
问题现象cdm抽取ddm数据时,ddm的varchar字段被截断了,该字段存储了一个json。如下用三方客户端查出的结果是问题定位模拟cdm抽取场景编写demo代码,利用jdbc协议抽取数据public class Demo { public static void main(String[] args) {// String url = "jdbc:mysql://10...
分布式数据库中间件 DDM
云数据迁移 CDM
Leef724
2020-11-16 16:13:59
8739
0
0
2020-11-16 16:13:59
999+
0
0
深入浅出Sqoop之迁移过程源码分析
本文从简单介绍了Sqoop作业执行时相关的类及方法。并将该过程与MapReduce的执行结合,分析数据如何从源端迁移到目的端。Sqoop作业执行过程抛开MR的执行过程,Sqoop执行时用到的关键类总共有5个,Initializer、Partitioner、Extractor、Loader、Destroyer。执行流程如下图所示Initializer:初始化阶段,源数据校验,参数初始化等工作;...
任务调度
Leef724
2020-11-09 16:02:04
13323
2
4
2020-11-09 16:02:04
999+
2
4
如何使用Arthas抓包
转载自arthas网: https://segmentfault.com/a/1190000014618329 watch 的参数比较多,主要是因为它能在 4 个不同的场景观察对象参数名称参数说明class-pattern类名表达式匹配method-pattern方法名表达式匹配express观察表达式condition-express条件表达式[b]在方法调用之前观察[e]在方法异常之后观...
其他
Leef724
2020-11-09 15:01:10
9813
0
0
2020-11-09 15:01:10
999+
0
0
如何利用pdb 进行python调试
进入调试交互界面方法一:python -m pdb filename.py方法二:在被调试的文件中添加如下一行import pdb;pdb.set_trace()执行后显示出如下界面(Pdb)即进入了调试命令交互界面调试交互常用命令命令简写命令作用break + linenob b lineno b filename:lineno b functionname显示...
Python
Leef724
2020-10-28 11:15:23
7990
0
0
2020-10-28 11:15:23
999+
0
0
如何使用CDM迁移MYSQL布尔类型
背景MySQL没有内置的布尔类型。 但是它使用TINYINT(1)。 为了更方便,MySQL提供BOOLEAN或BOOL作为TINYINT(1)的同义词。在MySQL中,0被认为是false,非零值被认为是true。 要使用布尔文本,可以使用常量TRUE和FALSE来分别计算为1和0。 迁移问题描述用户想迁移mysql到云上DWS, 字段映射如下作业运行报错解决办法点击连接管理-> 编辑对应...
云数据迁移 CDM
MySQL
Leef724
2020-09-01 14:59:47
8703
0
0
2020-09-01 14:59:47
999+
0
0
CDM进阶指导之字段转换
在创建表/文件迁移作业的字段映射界面,可新建字段转换器,如 图1所示。CDM可以在迁移过程中对字段进行转换,目前支持以下字段转换器:脱敏去前后空格字符串反转字符串替换去换行表达式转换脱敏隐藏字符串中的关键信息,例如要将 “12345678910”转换为 “123****8910”,则配置如下:“起始保留长度”为“3”。“结尾保留长度”为“4”.。“替换字符”为“*”。去前后空格自动去字符串前...
云数据迁移 CDM
Leef724
2020-07-23 20:27:16
8654
0
0
2020-07-23 20:27:16
999+
0
0
CDM进阶指导之文件列表迁移
从FTP/SFTP/NAS/OBS/OSS/KODO/SFS导出文件时,CDM支持文件列表迁移,用户可以单次迁移多个指定的文件(最多50个),导出的多个文件只能写到目的端的同一个目录。在创建表/文件迁移的作业时,如果源端数据源为FTP/SFTP/NAS/OBS/OSS/KODO/SFS,CDM源端的作业参数“源目录或文件”支持输入多个文件名(最多50个),文件名之间默认使用“|”分隔,您也可...
云数据迁移 CDM
Leef724
2020-07-23 20:23:02
8548
0
0
2020-07-23 20:23:02
999+
0
0
总条数:32
10
10
20
50
100
1
2
3
4
上滑加载中
https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
+ 关注