MRS二次开发(1/27): 环境准备

一、MRS是什么？

MRS是一种基于云计算平台的大数据服务

两种部署形式：

因此本系列课程实际讲解的是 FusionInsight 集群的服务调用案例

二、课程说明

本次课程共27节，基于FusionInsight 8.0.2版本进行讲解，课程目录列表如下，所有样例都是基于Java语言的maven项目，其他非maven项目，我们后续会在FusionInsight论坛上传使用指导

1.1 课程列表

三、环境准备

3.1 集群环境

本系列课程使用的是FusionInsight集群为安全模式，支持Kerberos认证

已经安装了客户端，客户端目录为/opt/client，该目录可根据实际情况自定义

3.2 开发环境

3.3 样例代码获取

获取地址：https://github.com/huaweicloud/huaweicloud-mrs-example/tree/mrs-3.0.2

注意是 mrs-3.0.2 分支

git下载样例代码命令参考：

 git clone -b mrs-3.0.2 https://github.com/huaweicloud/huaweicloud-mrs-example.git

如果访问github比较慢的同学，也可以通过 FusionInsight 论坛获取，获取方式为论坛内搜索 二次开发，找到环境准备这节课，从帖子的附件中下载即可

3.4 配置maven仓库

样例代码需要从maven仓下载依赖，因此需要开发环境连通互联网环境。

maven仓库配置可以参考华为公有云网站MRS服务的指导，链接为：

https://support.huaweicloud.com/devg-mrs/mrs060002.html

也可参考如下方式配置：

创建settings.xml文件内容参考如下

• <?xml version="1.0" encoding="UTF-8"?>
  
  <settings xmlns="http://maven.apache.org/SETTINGS/1.0.0"
  xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
            xsi:schemaLocation="http://maven.apache.org/SETTINGS/1.0.0 http://maven.apache.org/xsd/settings-1.0.0.xsd">
  
  <localRepository>E:\apache-maven-3.6.3\repo</localRepository>
  
  <mirrors>
  <mirror>
  <id>repo1</id>
  <mirrorOf>central</mirrorOf>
  <url>https://repo1.maven.org/maven2/</url>
  </mirror>
  </mirrors>
  
      <profiles>
  <profile>
  <id>huaweicloudsdk</id>
  <repositories>
  <repository>
  <id>huaweicloudsdk</id>
  <url>https://repo.huaweicloud.com/repository/maven/huaweicloudsdk/</url>
  <releases><enabled>true</enabled></releases>
  <snapshots><enabled>true</enabled></snapshots>
  </repository>
  </repositories>
  <activation>
  <activeByDefault>1.8</activeByDefault>
  <jdk>1.8</jdk>
  </activation>
  <properties>
  <maven.compiler.source>1.8</maven.compiler.source>
  <maven.compiler.target>1.8</maven.compiler.target>
  <maven.compiler.compilerVersion>1.8</maven.compiler.compilerVersion>
  </properties>
  </profile>
  </profiles>
  
      <activeProfiles>
  <activeProfile>huaweicloudsdk</activeProfile>
      </activeProfiles>
  </settings>

在IDEA项目中修改Settings中的Maven仓配置，如图所示位置

四、环境检查

4.1 开发环境hosts信息配置检查

 检查 C:\Windows\System32\drivers\etc\hosts 文件中是否包含所有集群节点的域名IP映射信息

4.2 开发环境与集群网络检查

网络检查可以通过windows环境下的cmd命令行进行ping检查，也可以参考使用MobaXterm中的NetworkScanner来扫描网络

4.3 端口检查

所有组件的端口占用信息可通过版本配套的通信矩阵来获取具体端口信息，其中注意Kerberos认证需要开放UDP端口21732

本版本用到的通信矩阵将以附件形式附上，或通过如下链接获取

https://support.huawei.com/enterprise/zh/doc/EDOC1100161650?idPath=22658044%7C22662728%7C22666212%7C22396131

4.4 开发环境与集群时间差检查

Windows开发环境的时间与集群时间误差不能超过5分钟

4.5 开发环境JDK配置检查

所有需配置为1.8

互动渠道：FusionInsight论坛

访问 https://www.huaweicloud.com/ 后点击“开发者”-“云社区”-“论坛”

选择“热门板块”里面的“EI企业智能”

进入"FusionInsight"子版块，在该版块中如有问题，可选择发帖类型为“问题求助”类型进行咨询

或者使用如下链接直接进入： https://bbs.huaweicloud.com/forum/forum-1103-1.html