《机器学习-西瓜书1》_导论(开始啃西瓜)(待更新)

立Flag:从今天晚上开始啃西瓜啦!南京大学周志华老师的西瓜书在机器学习领域的重要性不言而喻,基础真的很重要,扎实的基础才能走的更远!为甚么称之为西瓜书?因为书中大多数栗子都是以西瓜例的,故而得名!

接下来的札记会用到大量的公式,笔者会采用LaTex进行编写,参考了几篇博客,学习了下语法,记录以示感谢
Latex数学公式表
在LaTeX中插入数学公式

image.png

目录

  • 绪论
  • 模型评估和选择
  • 线性模型
  • 决策树
  • 神经网络
  • 支持向量机
  • 贝叶斯分类
  • 集成学习
  • 聚类
  • 降维与度量学习
  • 特征选择与稀疏学习
  • 计算学习理论
  • 半监督学习
  • 概率图模型
  • 规则学习
  • 强化学习

机器学习的定义

正如我们根据过去的经验来判断明天的天气,吃货们希望从购买经验中挑选一个好瓜,那能不能让计算机帮助人类来实现这个呢?机器学习正是这样的一门学科,人的“经验”对应计算机中的“数据”,让计算机来学习这些经验数据,生成一个算法模型,在面对新的情况中,计算机便能作出有效的判断,这便是机器学习。

基本术语

  • 样本/示例instance:每条记录关于一个事件或者对象的描述
  • 特征向量feature vector:一个示例称为一个特征向量
  • 数据集data set:由记录组成集合
  • 特征/属性 attribute:用于描述事物特点
  • 属性空间/样本空间/输入空间sample space:由属性张成的空间

对于数据集D,表示含有m个示例或者说样本的数据,d个属性或者特征,同时d也称之为维度。
D=\{x_1, x_2,...,x_i,...,x_m\};其中x_i=\{x_{i1},x_{i2},...,x_{ij},...,x_{id}\}表示是d维空间中的一个向量,称之为“特征向量”。其中xij表示xi在第j个属性上的取值

... 属性1 属性2 ... 属性j ... 属性d 输出y
1 x11 x12 ... x1j ... x1d y1
2 x21 x22 ... x2j ... x2d y2
... ...
i xi1 xi2 .. xij ... xid yi
... ...
m xm1 xm2 ... xij ... xmd ym
  • 学习:从数据中学的模型称之为“学习training”或者“训练learning”,通过执行算法来完成该过程
  • 训练数据:在学习的过程中使用的数据称之为“训练数据training data
  • 训练样本:训练集数据的每个样本称之为“训练样本training sample
  • 训练集:训练样本组成的集合称之为“训练集training set
  • 假设:通过上面的学习得到关于数据的某种潜在规律称为“假设hypotyesis”;这种潜在的规律称之为“真相”,学习的目的就是为了找出或者逼近这个“真相”。
  • 标记:示例的结果信息yi称之为“标记”
  • 样例:有了标记信息的示例

一般的用xi

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 200,392评论 5 470
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 84,258评论 2 377
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 147,417评论 0 332
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,992评论 1 272
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,930评论 5 360
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,199评论 1 277
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,652评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,327评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,463评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,382评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,432评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,118评论 3 315
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,704评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,787评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,999评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,476评论 2 346
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,057评论 2 341