人工智能(1):机器学习工作流程

这篇具有很好参考价值的文章主要介绍了人工智能(1):机器学习工作流程。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

1 什么是机器学习

机器学习是从数据中自动分析获得模型,并利用模型对未知数据进行预测。

人工智能(1):机器学习工作流程

2 机器学习工作流程

人工智能(1):机器学习工作流程

机器学习工作流程总结

1 获取数据

2 数据基本处理

3 特征工程

4 机器学习(模型训练)

5 模型评估

  • 结果达到要求,上线服务
  • 没有达到要求,重新上面步骤

2.1 获取到的数据集介绍

  • 数据简介

在数据集中一般:

        一行数据我们称为一个样本

        一列数据我们成为一个特征

        有些数据有目标值(标签值),有些数据没有目标值(如上表中,电影类型就是这个数据集的目标值)

人工智能(1):机器学习工作流程

 

  • 数据类型构成:

        数据类型一:特征值+目标值(目标值是连续的和离散的)如上图

        数据类型二:只有特征值,没有目标值,如下图

人工智能(1):机器学习工作流程

 

  • 数据分割:

        机器学习一般的数据集会划分为两个部分:

                训练数据:用于训练,构建模型

                测试数据:在模型检验时使用,用于评估模型是否有效

        划分比例:

                训练集:70% 80% 75%

                测试集:30% 20% 25%

2.2 数据基本处理

即对数据进行缺失值、去除异常值等处理

2.3 特征工程

2.3.1什么是特征工程

特征工程是使用专业背景知识和技巧处理数据,使得特征能在机器学习算法上发挥更好的作用的过程。

意义:会直接影响机器学习的效果

2.3.2 为什么需要特征工程(Feature Engineering)

机器学习领域的大神Andrew Ng(吴恩达)老师说“Coming up with features is difficult, time-consuming, requires expert knowledge. “Applied machine learning” is basically feature engineering. ”

注:业界广泛流传:数据和特征决定了机器学习的上限,而模型和算法只是逼近这个上限而已。

2.3.3 特征工程包含内容

  • 特征提取
  • 特征预处理
  • 特征降维

2.3.4 各概念具体解释

  • 特征提取

将任意数据(如文本或图像)转换为可用于机器学习的数字特征

人工智能(1):机器学习工作流程

  • 特征预处理

通过一些转换函数将特征数据转换成更加适合算法模型的特征数据过程

 人工智能(1):机器学习工作流程

  • 特征降维

指在某些限定条件下,降低随机变量(特征)个数,得到一组“不相关”主变量的过程

人工智能(1):机器学习工作流程

2.4 机器学习

选择合适的算法对模型进行训练(后续详细讲解)

2.5 模型评估

对训练好的模型进行评估(后续详细讲解)

3 小结

机器学习定义【掌握】

  • 机器学习是从数据中自动分析获得模型,并利用模型对未知数据进行预测

机器学习工作流程总结【掌握】

1 获取数据

2 数据基本处理

3 特征工程

4 机器学习(模型训练)

5 模型评估

  • 结果达到要求,上线服务
  • 没有达到要求,重新上面步骤

获取到的数据集介绍【掌握】

  • 数据集中一行数据一般称为一个样本,一列数据一般称为一个特征。
  • 数据集的构成:

        由特征值+目标值(部分数据集没有)构成

  • 为了模型的训练和测试,把数据集分为:

        训练数据(70%-80%)和测试数据(20%-30%)

特征工程包含内容【了解】文章来源地址https://www.toymoban.com/news/detail-498980.html

  • 特征提取
  • 特征预处理
  • 特征降维

到了这里,关于人工智能(1):机器学习工作流程的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包