基于ModelArts自动学习的超市商品分类定位【我的华为云体验之旅】

运气男孩 发表于 2021/12/04 23:54:53 2021/12/04
【摘要】 ModelArts自动学习-超市商品分类定位前言随着电子商务的盛行,实体超市的购物体验受到较大冲击,这里简单运用ModelArts自动学习技术改善超市人手不足,消费者寻找商品困难等问题,从而提高消费者的购物体验。 基础环境准备在使用 ModelArts 进行 AI 开发前,需先完成以下基础操作哦(如有已完成部分,请忽略),主要分为4步(注册–>实名认证–>服务授权–>领代金券):使用手机号注...

ModelArts自动学习-超市商品分类定位

前言

随着电子商务的盛行,实体超市的购物体验受到较大冲击,这里简单运用ModelArts自动学习技术改善超市人手不足,消费者寻找商品困难等问题,从而提高消费者的购物体验。

 基础环境准备

在使用 ModelArts 进行 AI 开发前,需先完成以下基础操作哦(如有已完成部分,请忽略),主要分为4步(注册–>实名认证–>服务授权–>领代金券):

  1. 使用手机号注册华为云账号:点击注册

  2. 点此去完成实名认证,账号类型选"个人",个人认证类型推荐使用"扫码认证"。 

    image.png

  3. 点此进入 ModelArts 控制台数据管理页面,上方会提示访问授权,点击【服务授权】按钮,按下图顺序操作: 

    image.png

  4. 进入 ModelArts 控制台首页,如下图,点击页面上的"彩蛋",领取新手福利代金券!后续步骤可能会产生资源消耗费用,请务必领取。 

以上操作,也提供了详细的视频教程,点此查看:ModelArts环境配置

image.png

大概流程

完成了基础环境准备后,我们就可以开始基于 ModelArts 开始我们的 AI 开发之旅,此次操作主要分为以下几个流程:

  1. 将准备好的数据集上传到华为云对象存储服务(OBS)

  2. 创建 ModelArts 自动学习项目并导入数据集

  3. 完成数据标注并进行模型训练

  4. 将模型部署成在线服务,进行服务调用并获得结果

创建OBS桶

OBS大家可以先简单的理解成一个在线网盘,因为ModelArts本身目前没有数据存储的功能,所以需要从OBS里调用我们上传的数据进行训练

点击进入:华为云OBS控制台,进入后点击右上角的【创建桶】按钮(这里的桶可以理解成OBS进行存储的基本单位,所有的数据必须存储在某个桶里): 

我这里使用的是华为云官方的obs-browser-plus工具,方便上传数据


进入新建桶界面, 按照如下示例进行填写:

  • 区域:华北-北京四

  • 数据冗余存储策略:单AZ存储

  • 桶名称:自定义,需要全局唯一,即在整个华为云上的名字唯一

  • 其它选项保持默认即可

填写完成后,点击右下角的【立即创建】按钮并确认,稍等几秒钟即可完成 OBS桶 的创建。

 上传训练数据至OBS

在OBS首页,找到我们刚刚新建的桶,并点击桶名称进入桶内容管理界面。 

在train文件夹的同级目录,我们点击上面的【新建文件夹】按钮,创建一个新的空文件夹,命名成output,完成后,效果如下图(此文件夹后续会用到): 

进入后,点击左侧【对象】按钮,进入数据上传界面,点击【上传对象】按钮,弹出上传对象框,我们直接用鼠标将前面下载好的 train文件夹 拖拽到到上传对象框内: 

然后点击【上传】按钮即开始进行图片的上传,本次数据量较少,正常网络情况下约1分钟内即可完成数据的上传, 上传过程中可进入train文件夹查看进度,也可以继续进行下面的步骤。

数据集创建

点击访问 ModelArts自动学习 页面,选择数据管理,进入项目创建数据集页,按照如下示例进行填写:

  • 名称:自定义

  • 数据集来源:新建数据集

  • 数据集输入位置:选择上一步在OBS上传的train文件夹

  • 数据集输出位置:选择上一步在OBS创建的的out文件夹

  • 其它保持默认即可


数据标注

项目创建完成后会自动进入数据标注页面,页面左侧是标注操作区,右边是标签编辑与展示区。

标签就是对数据集进行分类,比如本案例中的:办公文具,方便速食,个人护理等等需我们自己根据数据集新建不同类型的标签;标注就是将数据集中的图片划归到对应的标签下,告诉模型这个图片里是什么

我们点击左侧的【未标注】页签,开始数据标注,我们选择同一类型的图片,然后在左侧的标签名出输入对应的美食名称并确定,即可对选择的图片做分类,如我们这里选择豆皮作为示例,效果如下:

我们重复上面的步骤,即可对不同类型的美食进行分类,也可以对某一标签进行图片追加。

注意目前标注不支持翻页选择,翻页后上一页选择的数据会丢失,所以请大家一页一页的选择并确认,如果觉得一页展示的图片太少,可以在页面的左下角选择一页图片展示的个数。

全部标注完成后的效果如下: 


自动学习项目创建

点击访问 ModelArts自动学习 页面,选择创建图像分类项目,进入项目创建设置页,按照如下示例进行填写:

  • 名称:自定义

  • 数据集来源:已有数据集

  • 其它保持默认即可

 模型训练

数据标注完成后,我们点击右上角的【开始训练】按钮,弹出模型训练的设置界面,按如下示例填写:

  • 最大训练时长(分钟) :修改为10

  • 计算规格:选择自动学习免费规格(GPU),并勾选"我已阅读并同意以上内容"

  • 其它保持默认即可


 填写完成后,点击【下一步】进入二次确认界面,点击界面上的【提交】按钮即可提交成功。 
 训练过程约耗时2分钟左右,请耐心等待哦~

模型部署

训练完成后,我们点击左侧的部署按钮,进行模型的部署操作,如下图示例。 



点击【下一步】按钮,进入二次确认界面,点击界面上的【提交】按钮即可提交成功。 

 

模型调用

部署完成后,可以看到如下界面: 

我们点击【上传】按钮,选择上传前面下载的数据集test文件夹中的任一图片,然后点击【预测】即可得到结果:


总结

此次开发的初衷是想通过AI预测商品的具体楼层和货架,起到模糊查询的作用,便于消费者寻找商品,由于技术有限,一些更细致的功能没有实现到位,只能简单的模拟演示一下这个流程。另外,模型训练精度仍有待提高,一方面是由于数据集的数据数量问题,另一方面商品之间存在联系和相似度,会造成AI识别的困难。

感恩能与大家在华为云遇见!希望能与大家一起在华为云社区共同成长。


本次开发到此完成,需要请大家注意:

  • 因为本次开发想通过AI预测商品的具体楼层和货架,简单的模拟演示一下这个流程,为了减少操作的难度和时间长度,只用了少量的数据集用于训练,可能造成数据预测不是很准确的情况,请大家理解

  • 示例中我们选择的都是免费规格,如果大家领取了新手代金券,可以尝试使用付费规格获得更好的体验,但记得及时关闭相应服务哦!

Tips:实验结束后请及时停止在线服务,不然在线服务会持续收费有可能导致欠费,致使华为云账号被冻结而影响使用。 我们在在线服务管理页面单击对应服务列表后的"停止"按钮即可停止本在线服务。

【我的华为云体验之旅】有奖征文火热进行中:https://bbs.huaweicloud.com/blogs/306271


【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区),文章链接,文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件至:cloudbbs@huaweicloud.com进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容。
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。