作者小头像 Lv.2
更多个人资料
73 成长值
1 关注
1 粉丝
+ 关注 私信

个人介绍

Oracle数据库专家认证、华为Bigdata hcip认证、CSDN大数据领域优质创作者

感兴趣或擅长的领域

大数据、数据库
个人勋章
TA还没获得勋章~
成长雷达
50
3
0
0
20

个人资料

个人介绍

Oracle数据库专家认证、华为Bigdata hcip认证、CSDN大数据领域优质创作者

感兴趣或擅长的领域

大数据、数据库

达成规则

以上满足项可达成此勋章

  • 博客
  • 关注
  • 粉丝
  • 论坛
全部时间
全部时间
最近三天
最近一周
最近一月
  • 全部
  • 暂无专栏分类
sqoop避免输入密码自动增量job脚本介绍
将关系型数据库ORACLE的数据导入到HDFS中，可以通过Sqoop、OGG来实现，相比较ORACLE GOLDENGATE，Sqoop不仅不需要复杂的安装配置，而且传输效率很高，同时也能实现增量数据同步。 说明：本测试hadoop是单节点伪分布式环境,是基于之前写的两篇文章对应的环境操作. 本文档将在以上两个文章的基础上操作，是对第二篇文章环境的一个简单使用测试，使用过程中出现的错误亦可以验证暴
Hive Oracle
作者小头像 赵延东的一亩三分地 2023-03-25 12:09:05
2328
0
0
2023-03-25 12:09:05
999+
0
0
Sqoop全量同步mysql/Oracle数据到hive
接下来本篇文章详细介绍一下使用sqoop全量同步oracle/mysql数据到hive，这里实验采用oracle数据库为例， 后面一篇文章将详细介绍： 1、sqoop --incremental append 附加模式增量同步数据到hive 2、sqoop --incremental --merge-key合并模式增量同步到hive
Hive MySQL Oracle
作者小头像 赵延东的一亩三分地 2023-03-25 12:06:12
4480
0
0
2023-03-25 12:06:12
999+
0
0
Sqoop增量同步mysql/oracle数据到hive(merge-key/append）测试文档
在生产环境中，系统可能会定期从与业务相关的关系型数据库向Hadoop导入数据，导入数仓后进行后续离线分析。故我们此时不可能再将所有数据重新导一遍，此时我们就需要增量数据导入这一模式了。 增量数据导入分两种，一是基于递增列的增量数据导入（Append方式）。二是基于时间列的增量数据导入（LastModified方式），增量导入使用到的核心参数主要是： –check-column
Hive MySQL Oracle
作者小头像 赵延东的一亩三分地 2023-03-25 12:02:02
2788
0
0
2023-03-25 12:02:02
999+
0
0
Solr5.1+Jcseg分词器安装部署(中英文同义词、停止词配置)
项目中用的是华为FusionInsight6.5,solr环境为5.1版本，分词器不是使用得solr得text_general分词器，而是jcseg分词器。因为笔者需要使用同义词和停止词功能，项目中得solr环境本人无法随意测试，所以打算在本地部署一个Solr5.1得环境，从Oracle数据库取数，使用项目中使用得jcseg分词器做本地环境得分词器，用来测试jcseg分词器同义词和停止词如何配置及
JAR Lucene
作者小头像 赵延东的一亩三分地 2023-03-25 11:55:14
2725
0
0
2023-03-25 11:55:14
999+
0
0
Elasticsearch+Logstash+Kibana(6.7.1版本)安装部署
Elasticsearch+Logstash+Kibana(6.7.1版本)安装部署
Elasticsearch
作者小头像 赵延东的一亩三分地 2023-03-25 00:26:47
2550
0
0
2023-03-25 00:26:47
999+
0
0
ElasticSearc写入查询性能优化总结
ES 的默认配置，是综合了数据可靠性、写入速度、搜索实时性等因素。实际使用时，我们需要根据公司要求，进行偏向性的优化。
Elasticsearch
作者小头像 赵延东的一亩三分地 2023-03-25 00:25:06
6914
0
0
2023-03-25 00:25:06
999+
0
0
超级详细的生产环境OGG(GoldenGate)12.2实时异构同步Oracle数据部署方案(下)
下面是我给大家的生产环境下，如何部署GoldenGate12C及异构实时同步数据的解决方案。本文主要介绍如何实现实时异构的进行Oracle->Oracle的数据同步，这种数据同步适用于灾备、升级、实时ODS等场景使用。我这里给大家了三个GoldenGate部署方式，看大家喜欢用哪种吧！！ 注意：本部署方案分为三章节，三章节的重点分别是：
Oracle 任务调度
作者小头像 赵延东的一亩三分地 2023-03-25 00:16:21
4977
0
0
2023-03-25 00:16:21
999+
0
0
超级详细的生产环境OGG(GoldenGate)12.2实时异构同步Oracle数据部署方案(中)
下面是我给大家的生产环境下，如何部署GoldenGate12C及异构实时同步数据的解决方案。本文主要介绍如何实现实时异构的进行Oracle->Oracle的数据同步，这种数据同步适用于灾备、升级、实时ODS等场景使用。我这里给大家了三个GoldenGate部署方式，看大家喜欢用哪种吧！！
UI Oracle
作者小头像 赵延东的一亩三分地 2023-03-25 00:15:04
2477
0
0
2023-03-25 00:15:04
999+
0
0
超级详细的生产环境OGG(GoldenGate)12.2实时异构同步Oracle数据部署方案(上)
博主所在单位目前使用Oracle GoldenGate将各个业务生产库汇聚到一起做数仓实时ODS平台，源端库可能涉及Oracle、Mysql、达梦、Guassdb库。 之前写过一系列关于GoldenGate异构同步Mysql、Kafka、Kylin、Flink做实时计算的场景文章。但是突然发现，卧槽最最最应该第一个做的Oracle->Oracle的实时异构同步文档竟然没写！
Oracle 数据库
作者小头像 赵延东的一亩三分地 2023-03-25 00:10:23
7167
0
0
2023-03-25 00:10:23
999+
0
0
记一次同事不慎用root起动weblogic以及启动日志卡在The server started in RUNNING mode
最近因为单位换了新版本华为HD集群，有一些业务数据存在于hive数据库中。而有一些Smartbi的报表数据源是连接的华为HD Hive,因为变更了集群，需要将SmartBi的数据源改为新集群的。我将Kerberos认证凭据和新版本Hive jdbc驱动以及新的jdbc连接串给了同事，也将实施文档给了同事，但是同事在操作完成后，Smarbi节点无法正常起来(后台日志卡在：The server st
Hive
作者小头像 赵延东的一亩三分地 2023-03-25 00:07:46
2688
0
0
2023-03-25 00:07:46
999+
0
0
https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
作者小头像
作者小头像
快速交付
+ 关注