于剑《机器学习》第一章引言笔记

对象特性输入表示：观测得到的对象特性描述。
对象特性输出表示：学习得到的对象特性描述。

丑小鸭定理

不存在独立于问题而普遍适用的特征表示，特征的有效与否是问题依赖的。——“如果选定的特征不合理，那么世界上所有事物之间的相似程度都一样，丑小鸭与白天鹅之间的区别和两只白天鹅之间的区别一样大。”

No free lunch 定理：

在大量廉价数据中，普遍存在错误和无关紧要的测量。

对象特性输入表示

通常分为：向量表示 ，网络表示和混合表示。
设有N个对象，
O={o1,o2,...,oN}O = \{o_1,o_2,...,o_N\}O={o1,o2,...,oN}表示对象集合，其中oko_kok表示第k个对象。
X={x1,x2,...,xN}X = \{x_1,x_2,...,x_N\}X={x1,x2,...,xN}表示对象特性输入表示，xkx_kxk表示对象oko_kok的特性输入表示，xk=[x1k,x2k,...,xpk]Tx_k = {[x_{1k},x_{2k},...,x_{pk}]}^Txk=[x1k,x2k,...,xpk]T，ppp表示对象输入特征的维数，因此，X=[xτk]p×NX = [x_{\tau k}]_{p\times N}X=[xτk]p×N
相似性矩阵： S(X)=[skl]N×NS(X) = [s_{kl}]_{N\times N}S(X)=[skl]N×N，其中skls_{kl}skl表示对象oko_kok和对象olo_lol的相似性，skls_{kl}skl越大则对象oko_kok和olo_lol之间相似性越大，对象oko_kok可以由行向量[sk1,sk2...,skN][s_{k1},s_{k2}...,s_{kN}][sk1,sk2...,skN]表示。
同理，相异性矩阵： D(X)=[dkl]N×ND(X)=[d_{kl}]_{N\times N}D(X)=[dkl]N×N,其中dkld_{kl}dkl表示对象oko_kok和对象olo_lol的相异性，dkld_{kl}dkl越大则对象oko_kok和olo_lol之间相异性越大，对象oko_kok可以由行向量[dk1,dk2...,dkN][d_{k1},d_{k2}...,d_{kN}][dk1,dk2...,dkN]表示。

对象特性输出表示

Y=y1,y2,...,yNY = {y_1,y_2,...,y_N}Y=y1,y2,...,yN，其中yky_kyk表示对象oko_kok的特性输出表示，通常用矩阵[yτk]d×N[y_{\tau k}]_{d\times N}[yτk]d×N来表示，其中ddd表示对象输出特征的维数。

于剑《机器学习》第一章笔记相关推荐

《Python深度学习》第一章笔记
<Python深度学习>第一章笔记 1.1人工智能.机器学习.深度学习人工智能机器学习深度学习深度学习的工作原理 1.2深度学习之前:机器学习简史概率建模早期神经网络核方法 ...
python 机器学习第一章
机器学习是一门能够发掘数据价值的算法和应用,是计算机科学中最激动人心的一个领域之一. 接下来的时间,开始学习吧! python机器学习第一章 1.机器学习方法分为三类:监督学习,无监督学习,强化学习. ...
计算机应用基础自学手写笔记,计算机应用基础第一章笔记.docx
计算机应用基础第一章笔记 1.计算机工具的变迁 2.计算机的发展过程 3.冯.诺依曼计算机的工作原理 4.计算机系统的硬件和软件组成 5.计算机的性能指标 6.影响计算机的性能因素 7.数据在计算机中 ...
Spring第一章笔记
Spring第一章笔记第一步: 配置pom文件导入依赖 <dependencies><dependency><groupId>org.springframewor ...
【智能计算系统笔记】第一章笔记及课后习题
第一章笔记及课后习题笔记课后习题 1. 简述强人工智能和弱人工智能的区别. 2. 简述人工智能研究的三个学派. 3. 一个有两个输入的单个神经元构成的感知机能完成什么任务? 4. 深度学习的局限性 ...
app研发录第一章笔记
app研发录第一章笔记
模式识别与机器学习·第一章——概论
模式识别与机器学习·第一章--概论开篇模式识别模式识别机器学习研究目的发展历史模式识别简史机器学习简史系统方法系统目标假说的获得系统的构成小结开篇这系列博客主要用来回忆 ...
机器学习基石（林轩田）第一章笔记与感悟总结
第一章学习问题 1.1课程生产老师观点:从基础学起不要成为机器学习的奴隶. 1.2什么是机器学习学习是从观察出发,视听嗅觉. 观察 - >学习 - >技能电脑的观察是资料,然后进行处 ...
css高级教程第一章笔记
2019独角兽企业重金招聘Python工程师标准>>> 大年30,今天刚刚看完第一章,上传上来一些笔记. 1.css:可以将文档的表现部分与内容分开 2.id:是唯一的,id可以用来 ...

于剑《机器学习》第一章笔记