作者小头像 Lv.2
更多个人资料
63 成长值
4 关注
5 粉丝
+ 关注 私信

个人介绍

这个人很懒，什么都没有留下

感兴趣或擅长的领域

暂无数据
个人勋章
TA还没获得勋章~
成长雷达
60
3
0
0
0

个人资料

个人介绍

这个人很懒，什么都没有留下

感兴趣或擅长的领域

暂无数据

达成规则

以上满足项可达成此勋章

  • 博客
  • 关注
  • 粉丝
  • 论坛
全部时间
全部时间
最近三天
最近一周
最近一月
  • 全部
  • 暂无专栏分类
初次接触OpenLookeng
openLooKeng是华为的一款性能强大的引擎，基于业界著名的开源SQL引擎Presto来提供交互式查询分析基础能力， 用于支持数据探索、即席查询和批处理，具有100+毫秒至分钟级的近实时时延，而无需移动数据。openLooKeng还支持层次化部署，使地理上远程的openLooKeng集群能够参与相同的查询。利用其跨区域查询计划优化能力，涉及远程数据的查询可以接近“本地”的性能
EI企业智能 SQL 大数据 数据湖探索 DLI 智能数据
作者小头像 我爱次火锅锅 2021-09-29 17:32:46
8434
0
0
2021-09-29 17:32:46
999+
0
0
mockito——让你轻松地进行单元测试的强大工具
相信每一个程序猿在写Unit Test的时候都会碰到一些令人头疼的问题：如何测试一个rest接口；如何测试一个包含客户端调用服务端的复杂方法；如何测试一个包含从数据库读取数据的复杂方法。。。这些问题mockito都可以帮我们轻松地解决。
EI企业智能 大数据 数据湖探索 DLI 智能数据
作者小头像 我爱次火锅锅 2021-07-13 11:54:00
13682
0
0
2021-07-13 11:54:00
999+
0
0
Scala并发之Future、ExecutionContext
当我们需要同时执行多个任务、并且不会因为其中一个任务的执行时间漫长而陷入阻塞，就需要用到并发，也即多线程。Java中的并发实现主要在java.util.concurrent包中，Future这个概念其实Java里也有。Scala是在Java的基础上实现的函数式编程语言，所以Scala也可以调用Java API。今天会介绍Scala并发中应用比较多的两个概念——Future、ExecutionCon
智能数据 数据湖探索 DLI EI企业智能 HUAWEI CONNECT
作者小头像 我爱次火锅锅 2020-12-01 09:21:08
11083
0
1
2020-12-01 09:21:08
999+
0
1
Spark-Redis工作篇：执行海量数据插入、查询作业时碰到的问题
前一篇博客介绍了Spark-Redis入门篇：包括一些基础概念和重要的类、方法。Spark-Redis是用Spark在redis上面进行读写数据操作的包。其支持redis的所有数据结构。由于redis是基于内存的数据库，稳定性并不是很高，尤其是standalone模式下的redis。于是工作中在使用Spark-Redis时也会碰到很多问题，尤其是执行海量数据插入与查询的场景中。
EI企业智能 智能数据 数据湖探索 DLI HUAWEI CONNECT
作者小头像 我爱次火锅锅 2020-11-27 15:28:58
11531
0
2
2020-11-27 15:28:58
999+
0
2
Spark-Redis入门篇
Spark 是专为大规模数据处理而设计的快速通用的计算引擎，起源于UC Berkeley AMP lab的一个研究项目。相比传统的Hadoop(MapReduce) ，Spark的性能快了将近100x倍。Spark在计算中用到的数据可能会存在DWS、HBase或者HDFS上，其读写速度都和Spark计算的速度相差甚远。而Redis基于内存的读写可以成功解决这个问题，于是诞生了Spark-Redis
EI企业智能 智能数据 数据湖探索 DLI HUAWEI CONNECT
作者小头像 我爱次火锅锅 2020-09-27 14:23:40
9585
0
1
2020-09-27 14:23:40
999+
0
1
Redis如何避免数据倾斜问题？
相信很多研究大数据的都会接触到“数据倾斜”这个令人头疼的问题。那么数据倾斜到底是什么，redis如何避免这类问题，我们一起来揭开它的神秘面纱。 简单的讲，数据倾斜就是我们在计算数据的时候，数据不够分散，大量的数据集中到了一台或者几台机器节点上计算，从而导致这些节点负载多大，而其他节点处于空闲等待中，导致最终整体效率低下。
EI企业智能 智能数据 数据湖探索 DLI HUAWEI CONNECT
作者小头像 我爱次火锅锅 2020-08-26 16:47:52
10851
0
1
2020-08-26 16:47:52
999+
0
1
https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
作者小头像
作者小头像
快速交付
+ 关注