DLI 2020-06 服务月刊

举报
JIMHUA 发表于 2020/07/13 11:35:42 2020/07/13
【摘要】 本月DLI服务月刊为您带来: 1.服务功能更新:双AZ计算队列、扫描数据量套餐包、Spark作业支持开发者模式、SDK性能提升、地址连通性测试能力、DLI样例代码发布。 2.上亿条数据,如何查询分析简单又高效? 3. Spark on Elasticsearch一致性问题的探索。 4. DLI计费规格详解。

服务功能更新

1.【新功能】支持双AZ计算队列(即将上线)

计算队列支持跨AZ双活功能,创建双AZ队列时会分别在两个AZ下都创建计算队列资源,两个AZ下的队列都同时能够使用,可提高用户作业的可靠性。该功能已在部分Region开通,7月下旬会在所有Region提供。

 

2.【新功能】增加扫描数据量套餐包

新增DLI扫描量套餐包,包年可享受9折优惠,为客户提供更优惠的价格。

 

3.【新功能】Spark作业支持开发者模式

Console界面上支持以API方式提交Spark作业,更符合Spark开发人员的使用习惯。

 

4.【新功能】 提升SDK show partition接口获取分区性能

通过SDK获取表分区信息性能提升15倍,5万分区信息1分钟获取完成;支持超大分区表(最大10万分区)。

 

5.【新特性】提供地址连通性测试能力

为队列提供与指定地址间的连通性测试能力,帮助客户在创建与第三方服务对接时,更好的进行网络连通性分析。

 

6.【新功能】发布DLI样例代码

发布了Flink作业、Spark作业、PySpark作业等样例代码,包括Flink作业多种SourceSink,以及Spark作业访问OBSRedis等多个样例,为客户编写DLI程序作业提供参考。

 

6月份DLI精品文章
上亿条数据,如何查询分析简单又高效?
Spark on Elasticsearch一致性问题的探索
DLI计费规格详解


【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。