DLI 2020-06 服务月刊
【摘要】 本月DLI服务月刊为您带来:
1.服务功能更新:双AZ计算队列、扫描数据量套餐包、Spark作业支持开发者模式、SDK性能提升、地址连通性测试能力、DLI样例代码发布。
2.上亿条数据,如何查询分析简单又高效?
3. Spark on Elasticsearch一致性问题的探索。
4. DLI计费规格详解。
服务功能更新
1.【新功能】支持双AZ计算队列(即将上线)
计算队列支持跨AZ双活功能,创建双AZ队列时会分别在两个AZ下都创建计算队列资源,两个AZ下的队列都同时能够使用,可提高用户作业的可靠性。该功能已在部分Region开通,7月下旬会在所有Region提供。
2.【新功能】增加扫描数据量套餐包
新增DLI扫描量套餐包,包年可享受9折优惠,为客户提供更优惠的价格。
3.【新功能】Spark作业支持开发者模式
Console界面上支持以API方式提交Spark作业,更符合Spark开发人员的使用习惯。
4.【新功能】 提升SDK show partition接口获取分区性能
通过SDK获取表分区信息性能提升15倍,5万分区信息1分钟获取完成;支持超大分区表(最大10万分区)。
5.【新特性】提供地址连通性测试能力
为队列提供与指定地址间的连通性测试能力,帮助客户在创建与第三方服务对接时,更好的进行网络连通性分析。
6.【新功能】发布DLI样例代码
发布了Flink作业、Spark作业、PySpark作业等样例代码,包括Flink作业多种Source和Sink,以及Spark作业访问OBS、Redis等多个样例,为客户编写DLI程序作业提供参考。
6月份DLI精品文章
上亿条数据,如何查询分析简单又高效?
Spark on Elasticsearch一致性问题的探索
DLI计费规格详解
【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)