云社区 MapReduce服务 MRS
# MapReduce服务 MRS #
MRS StarRocks，新一代极速全场景数据仓库
StarRocks 是一款高性能分析型数据仓库，使用向量化、MPP 架构、CBO、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析。StarRocks 既支持从各类实时和离线的数据源高效导入数据，也支持直接分析数据湖上各种格式的数据。StarRocks 兼容 MySQL 协议，可使用 MySQL 客户端和常用 BI 工具对接。
作者小头像 尼古拉斯-辉
1698
1
0
使用华为SDK开发MRS API应用初实践(Java语言)
在今天的技术世界里，接入华为云服务API可以比你想象的更简单。作为一名华为云相关的开发者，我深知那些看似繁琐的请求体编写和URL拼接实际上有多么耗时。幸运的是，华为云提供了一整套易于使用的SDK，大大简化了整个开发过程。在这篇文章中，我将分享我的个人经验和实用技巧，希望能帮助像我一样的开发者更高效地使用MRS服务，无论你是刚刚起步还是正在寻找改进开发流程的方法，这里都有你需要的东西。 SDK...
作者小头像 breakDawn
3307
0
0
通过API-Explorer优化MRS服务API开发流程，打造高效API开发能力
MRS是一个在华为云上部署和管理Hadoop系统的服务，一键即可部署Hadoop集群。我们可以使用官方文档提供API对MRS服务进行相关操作，如创建集群、删除集群、调整集群节点、创建作业并执行等。支持的全部操作可以参见官方文档API概览。但是如果基于文档去进行API的开发和调试，还是有一定的入门门槛， 依赖本地需要有API调用软件， 如果要开发代码还必须得有开发环境才能测试。例如创建集群的A...
作者小头像 breakDawn
3416
0
0
容器化学习——从容器的发展历史理解容器的本质
近期工作上开始接触了相关容器化的内容，因此整理学习了一堆有关容器化的知识，特此进行分享。首先，理解K8S和容器，首先需要学习以下它的发展历史，才能逐步理解容器的意义和作用。 阶段一：隔离文件——chroot命令的诞生在1979年，Unix系统引入了一个革命性的命令，它允许系统管理员将进程的根目录锁定在指定的位置，从而有效地限制了该进程访问的文件系统范围。这个命令成为了早期容器技术的基石，因为...
作者小头像 breakDawn
7729
0
0
容器化学习——我们为什么要使用容器
近期工作上开始接触了大量容器化和华为云云容器引擎CCE的内容，因此整理学习了一堆有关容器化的知识，特此进行分享。在学习容器化之前，首先要了解一个内容，为什么要使用容器，好处是什么？ 兼容性问题我们在工程实践中，经常会遇到一些兼容性的问题，比如：ISA兼容：目标机器指令集的兼容性ABI兼容：目标系统或者依赖库的二进制兼容性环境兼容： 目标环境的兼容性。例如环境变量、配置、注册中心等。以一个多服...
作者小头像 breakDawn
6641
0
0
华为云HBase 冷热分离最佳实践
​ HBase介绍​ HBase是Hadoop Database的简称，是建立在Hadoop文件系统之上的分布式面向列的数据库，它具有高可靠、高性能、面向列和可伸缩的特性，提供快速随机访问海量数据能力。​ HBase采用Master/Slave架构，由HMaster节点、RegionServer节点、ZooKeeper集群组成，底层数据存储在HDFS上。​ 整体架构如图所示：HMaster主...
作者小头像 milan
5105
0
0
基于华为云技术的大数据电影推荐系统分享~
摘要... 5一、引言... 61.1 研究背景和意义... 61.2 系统亮点... 61.3 主要贡献... 7二、相关技术和理论... 82.1 推荐系统的发展历程和研究现状... 82.2 推荐算法的分类及其优缺点... 82.3 物品协同过滤算法的原理和应用... 92.4 Hadoop框架的架构、特点和应用场景... 102.4.1 Hadoop的架构... 102.4.2 Ha...
作者小头像 yd_277944621
816
0
0
MRS1.9.2安装Flume客户端并且对接Kafka到HDFS
MRS1.9.2安装Flume客户端并且对接Kafka到HDFS
作者小头像 yd_254158608
3428
0
1
华为FusionInsight MRS HBase的集群隔离——RSGroup
华为FusionInsight MRS HBase的集群隔离——RSGroup一、HBase RSGroup理解    RSGroup是集群隔离方案。    HBase原有的资源隔离：为多个用户共享同一个HBase集群，提供了资源隔离的能力。NameSpace,将不同业务的表隔离在不同的namespace是一个最简单的资源隔离的方法。【轻量】ACL（Access Control Lists）...
作者小头像 MissAverage
2322
0
0
关于kafka的Producer的粘性分区的坑
kafka的粘性分区特性是在kafka的2.0版本以后提出的，旨在提升生产者发送数据的调度性能，笔者在生产环境使用过程中发现了一个致命的问题并在此处分享
作者小头像 Bigdata Go!
5761
0
0
总条数：108
到第页
热门标签