作者小头像 Lv.1
更多个人资料
35 成长值
5 关注
0 粉丝
+ 关注 私信

个人介绍

西安层境信息科技有限公司

感兴趣或擅长的领域

人工智能、自动化运维、云存储、云计算
个人勋章
TA还没获得勋章~
成长雷达
20
15
0
0
0

个人资料

个人介绍

西安层境信息科技有限公司

感兴趣或擅长的领域

人工智能、自动化运维、云存储、云计算

达成规则

以上满足项可达成此勋章

主题 | 回复
ModelArts体验师活动之数据处理
发布时间 2020/08/11 17:31:37 最后回复 @Wu 2020/10/19 07:45:19 版块 AI大赛&活动
7615 41 2
他的回复:
数据校验体验体验的结果:这个体验中, 直接使用的是OBS数据作为数据集, 输入输出都指向了OBS数据, 如下图DataSet-yunbao-bad-abs是原始数据, output是处理后的数据, 而Validation_yunbao, 是创建数据集的文件),数据集和数据处理数据集和数据处理, 是两个独立的模块, 是互相并不依赖的.而数据集中, 新生成的版本, 可以通过导出 => 至数据存储服务(OBS), 将处理的图片和output.manifest这个功能还是挺有用处的. 另外还有数据去重, 难例筛选, 等等操作: 1. 数据处理简介：https://bbs.huaweicloud.com/blogs/193413 2. 数据增强：https://bbs.huaweicloud.com/blogs/189148  使用数据增强，解决数据不足和数据集不均衡的情况3. 数据生成域迁移：https://bbs.huaweicloud.com/blogs/193405  数据风格变换：ModelArts的数据域迁移功能4. 数据校验：https://bbs.huaweicloud.com/blogs/193412   数据校验--给你的数据做个体检吧5. 数据去重：https://bbs.huaweicloud.com/blogs/193420  数据去重---ModelArts在数据处理上的应用技巧-免费，欢迎大家体验6. 数据清洗：https://bbs.huaweicloud.com/blogs/193421  数据清洗---ModelArts在数据处理上的应用技巧-免费，欢迎大家体验7. 难例筛选：https://bbs.huaweicloud.com/blogs/193422  如何加速AI模型迭代：Modelarts的难例筛选功能
ModelArts体验师活动之数据处理
发布时间 2020/08/11 17:31:37 最后回复 @Wu 2020/10/19 07:45:19 版块 AI大赛&活动
7615 41 2
他的回复:
数据清洗活动体验:最终的结果: 300张图片, 过滤出来了144张:有三个小问题: 上传数据到OBS, 然后使用OBS创建数据集, 进入数据集后, 并没有图片显示出来: (直接点击"开始标注", 显示的是V1,V2两个版本的数据 . 最后在版本管理=>版本=>设置为默认, 然后点击"开始标注",图片才显示出来)2.  创建数据操作, 等了很久, 大概有20分钟, 状态还是初始化: 最后没有办法, 重新刷新了一下网页, 状态才显示出来.3. 查看OBS库,目录下多了一个输出文件:   /test-modelarts-20200726/hat/dataset-helmet-725-4Z6RmOHHPXf5aWKqPGF/annotation/V002/V002.manifest但是如何能够区分过滤图片, 文档中没有说明.