基于ModelArts自动学习的超市商品分类定位【我的华为云体验之旅】

ModelArts自动学习-超市商品分类定位

前言

随着电子商务的盛行,实体超市的购物体验受到较大冲击,这里简单运用ModelArts自动学习技术改善超市人手不足,消费者寻找商品困难等问题,从而提高消费者的购物体验。

 基础环境准备

在使用 ModelArts 进行 AI 开发前，需先完成以下基础操作哦（如有已完成部分，请忽略），主要分为4步（注册–>实名认证–>服务授权–>领代金券）：

1. 使用手机号注册华为云账号：点击注册

2. 点此去完成实名认证，账号类型选"个人"，个人认证类型推荐使用"扫码认证"。 

   
   

3. 点此进入 ModelArts 控制台数据管理页面，上方会提示访问授权，点击【服务授权】按钮，按下图顺序操作： 

   
   

4. 进入 ModelArts 控制台首页，如下图，点击页面上的"彩蛋"，领取新手福利代金券！后续步骤可能会产生资源消耗费用，请务必领取。 
   

以上操作，也提供了详细的视频教程，点此查看：ModelArts环境配置

大概流程

完成了基础环境准备后，我们就可以开始基于 ModelArts 开始我们的 AI 开发之旅，此次操作主要分为以下几个流程：

1. 将准备好的数据集上传到华为云对象存储服务（OBS）

2. 创建 ModelArts 自动学习项目并导入数据集

3. 完成数据标注并进行模型训练

4. 将模型部署成在线服务，进行服务调用并获得结果

创建OBS桶

OBS大家可以先简单的理解成一个在线网盘，因为ModelArts本身目前没有数据存储的功能，所以需要从OBS里调用我们上传的数据进行训练

点击进入：华为云OBS控制台，进入后点击右上角的【创建桶】按钮（这里的桶可以理解成OBS进行存储的基本单位，所有的数据必须存储在某个桶里）： 

我这里使用的是华为云官方的obs-browser-plus工具，方便上传数据

进入新建桶界面， 按照如下示例进行填写：

• 区域：华北-北京四

• 数据冗余存储策略：单AZ存储

• 桶名称：自定义，需要全局唯一，即在整个华为云上的名字唯一

• 其它选项保持默认即可

填写完成后，点击右下角的【立即创建】按钮并确认，稍等几秒钟即可完成 OBS桶 的创建。

 上传训练数据至OBS

在OBS首页，找到我们刚刚新建的桶，并点击桶名称进入桶内容管理界面。 

在train文件夹的同级目录，我们点击上面的【新建文件夹】按钮，创建一个新的空文件夹，命名成output，完成后，效果如下图（此文件夹后续会用到）： 

进入后，点击左侧【对象】按钮，进入数据上传界面，点击【上传对象】按钮，弹出上传对象框，我们直接用鼠标将前面下载好的 train文件夹 拖拽到到上传对象框内： 

然后点击【上传】按钮即开始进行图片的上传，本次数据量较少，正常网络情况下约1分钟内即可完成数据的上传， 上传过程中可进入train文件夹查看进度，也可以继续进行下面的步骤。

数据集创建

点击访问 ModelArts自动学习 页面，选择数据管理，进入项目创建数据集页，按照如下示例进行填写：

• 名称：自定义

• 数据集来源：新建数据集

• 数据集输入位置：选择上一步在OBS上传的train文件夹

• 数据集输出位置：选择上一步在OBS创建的的out文件夹

• 其它保持默认即可

数据标注

项目创建完成后会自动进入数据标注页面，页面左侧是标注操作区，右边是标签编辑与展示区。

注：标签就是对数据集进行分类，比如本案例中的：办公文具，方便速食，个人护理等等需我们自己根据数据集新建不同类型的标签；标注就是将数据集中的图片划归到对应的标签下，告诉模型这个图片里是什么

我们点击左侧的【未标注】页签，开始数据标注，我们选择同一类型的图片，然后在左侧的标签名出输入对应的美食名称并确定，即可对选择的图片做分类，如我们这里选择豆皮作为示例，效果如下：

我们重复上面的步骤，即可对不同类型的美食进行分类，也可以对某一标签进行图片追加。

注意：目前标注不支持翻页选择，翻页后上一页选择的数据会丢失，所以请大家一页一页的选择并确认，如果觉得一页展示的图片太少，可以在页面的左下角选择一页图片展示的个数。

全部标注完成后的效果如下： 

自动学习项目创建

点击访问 ModelArts自动学习 页面，选择创建图像分类项目，进入项目创建设置页，按照如下示例进行填写：

• 名称：自定义

• 数据集来源：已有数据集

• 其它保持默认即可

 模型训练

数据标注完成后，我们点击右上角的【开始训练】按钮，弹出模型训练的设置界面，按如下示例填写：

• 最大训练时长（分钟） ：修改为10

• 计算规格：选择自动学习免费规格（GPU），并勾选"我已阅读并同意以上内容"

• 其它保持默认即可

 填写完成后，点击【下一步】进入二次确认界面，点击界面上的【提交】按钮即可提交成功。 
 训练过程约耗时2分钟左右，请耐心等待哦~

模型部署

训练完成后，我们点击左侧的部署按钮，进行模型的部署操作，如下图示例。 

点击【下一步】按钮，进入二次确认界面，点击界面上的【提交】按钮即可提交成功。 

模型调用

部署完成后，可以看到如下界面： 

我们点击【上传】按钮，选择上传前面下载的数据集test文件夹中的任一图片，然后点击【预测】即可得到结果：

总结

此次开发的初衷是想通过AI预测商品的具体楼层和货架，起到模糊查询的作用，便于消费者寻找商品，由于技术有限，一些更细致的功能没有实现到位，只能简单的模拟演示一下这个流程。另外，模型训练精度仍有待提高，一方面是由于数据集的数据数量问题，另一方面商品之间存在联系和相似度，会造成AI识别的困难。

感恩能与大家在华为云遇见！希望能与大家一起在华为云社区共同成长。

本次开发到此完成，需要请大家注意：

• 因为本次开发想通过AI预测商品的具体楼层和货架，简单的模拟演示一下这个流程，为了减少操作的难度和时间长度，只用了少量的数据集用于训练，可能造成数据预测不是很准确的情况，请大家理解。

• 示例中我们选择的都是免费规格，如果大家领取了新手代金券，可以尝试使用付费规格获得更好的体验，但记得及时关闭相应服务哦！

Tips：实验结束后请及时停止在线服务，不然在线服务会持续收费有可能导致欠费，致使华为云账号被冻结而影响使用。 我们在在线服务管理页面单击对应服务列表后的"停止"按钮即可停止本在线服务。

【我的华为云体验之旅】有奖征文火热进行中：https://bbs.huaweicloud.com/blogs/306271