《Spark机器学习进阶实战》——3.6 本章小结

举报
华章计算机 发表于 2019/06/01 22:47:01 2019/06/01
【摘要】 本书摘自《Spark机器学习进阶实战》——书中的第3章,第3.6节,作者是马海平、于俊、吕昕、向海。

3.6 本章小结

本章主要介绍了MLlib中提供的各类分类模型,讨论了分类模型的常见算法,以及算法的合理使用场景、分类模型效果的评估方法,如正确率、准确率、召回率、F1值、ROC和AUC等。还讨论了如何在给定的输入数据中训练模型,如何用之前介绍的技术处理特征以得到更好的性能,以及如何对模型参数进行调优。最后扩展了一些分类模型的知识。

对于一些可以从Spark官网上获取的算法示例代码,我们没有进行展示,包括示例代码也没有在书中展示,需要的读者可以从本书目录https://github.com/datadance下载。

本章使用的数据集是从360应用市场爬取下来的应用数据。

在下一章中,我们将使用类似的方法研究MLlib的聚类模型。


【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。