Hive on spark参数
Hive on Spark参数介绍
Hive on Spark 功能增加的参数,具体含义如下:
hive.spark.client.future.timeout
Hive client请求Spark driver的超时时间,如果没有指定时间单位,默认是秒。
hive.spark.job.monitor.timeout
Job监控获取Spark作业的超时时间,如果没有指定时间单位,默认是秒。
hive.spark.client.connect.timeout
Spark driver连接Hive client的超时时间,如果没有指定时间单位,默认就是毫秒。
hive.spark.client.server.connect.timeout
Hive client和远程Spark driver握手时的超时时间,这个会在两边都检查,如果没有指定时间单位,默认就是毫秒。
hive.spark.client.secret.bits
在Hive client和远程Spark driver通信过程中,随机生成密码的比特数。最好设置成8的倍数。
hive.spark.client.rpc.threads
远程Spark driver用于处理RPC事件所用的最大线程数,默认是8。
hive.spark.client.rpc.max.size
Hive client和远程Spark driver通信最大的消息大小(单位:byte),默认是50MB。
hive.spark.client.channel.log.level
远程Spark driver的通道日志级别,必须是DEBUG,ERROR,INFO,TRACE,WARN中的一个。
hive.spark.client.rpc.sasl.mechanisms
用于身份验证的SASL机制的名称。
- 点赞
- 收藏
- 关注作者
评论(0)