吴军:期望值最大化原则和它的应用

机器学习,各种预测都是最优化问题。其做法是只要给出一个收益函数,在每一时刻算出能够最大化收益的方向,沿着这个方向走一小步,然后再从新的起点重复这个过程,那么不论从什么地方开始,最后一定能够达到收益最大的那个终点。这里提到的收益函数也可以被称为利润函数,就是期望值最大化。

简单的说,这就是一个迭代的过程,一步比一步优化。在机器学习中,这个过程是由计算机自动完成的,这也是为什么AlphaGo最终能够找到一部棋最佳走法的原因。

上面那个描述或许还有一点儿抽象,举个现实生活中的例子。比如说,俄罗斯世界杯预选赛中国足球队在主场输给小组最弱的对手叙利亚之后,又客场输给了乌兹别克斯坦队提前出局。经过近40年快两代人的努力,中国足球队终于从亚洲强队变成了亚洲的软柿子,虽然各级领导都着急,但无论是砸钱还是换帅都没用,其实有一个很简单的方法,不仅让中国足球能够冲出亚洲,而且还有望夺得世界冠军,怎么办呢?只要教育部宣布从今往后高考成绩,一半看文化课的分数,另一半看足球成绩,马上所有的广场都会被踢球的孩子所占领,那些大妈、奶奶们为了儿子、孙子也不跳广场舞了,家长给孩子安排的课外活动都会是足球,各省市也都会被足球砸钱。类似,如果宣布百米跑成绩占高考的一半,那满大街就都会是冲刺的,中国不知道能出多少个奥运冠军。

回到刚才的理论,高考中足球或者是百米的成绩,就是前面所说的收益函数,只要这个函数一确定,整个社会就变成了一个机器学习的系统,期望值最大化方法,会自动优化全社会,让足球成绩达到最大值。

期望值最大化方法也被看成是宇宙演变和物种进化背后的动力。在宇宙的进化中,也遵守物理学的基本原理。各种物质之间的四种基本作用力,其实就是收益函数。质子和中子通过强核力形成原子核;弱核力保证原子核不要太大;电磁力保证原子核和电子能够形成原子,以至原子可以结合形成各种分子甚至万物;万有引力保证物质能够形成星球等等。宇宙的演变,其实就是在这很少的几条规则限制之下,不断优化的过程,最后孕育出生命。而物种的进化也是如此,其实我们的DNA也是处于一个不断优化适应环境的过程中。

在人和人的关系上,在一个组织内部,也是不自觉的按照期望值最大化方法在不断的完善。一个人交朋友,开始可能有比较大的随意性,但是在他的内心其实是有一个衡量标准,也就是收益函数,也就是要最大化自己的收益。久而久之,对他好的人,彼此能够产生所谓的化学反应的人,以及距离比较近的人就成了他的朋友,其他人就渐渐的淡出了他的生活圈。当然,每个人内心的收益函数是不同。

在一个组织里,尤其是一个公司里更是如此,创始人定下一个什么样的价值观,也就是收益函数,员工就会不自觉的会去朝着收益最大化的方向去努力。

有一家大公司在制定年终奖时,标准是把每个员工的一半奖金和他对公司价值观的认可挂钩,久而久之就会发现他们的员工出去说话都是怪怪的,有意无意的在宣传他们的价值观。外人相不相信不知道,但是天天说至少把自己都能说的相信了。

在美国IBM公司申请专利和员工绩效挂钩,于是它就成为了历年来获得美国专利的绝对冠军。谷歌对员工发专利,最初有不错的激励机制,也就是收益函数,但是一度因为为了省那点小钱,大幅降低了对员工申请专利的奖励,结果却是谷歌人均申请专利数锐减,以至于后来在和微软苹果的专利之争上非常被动。于是谷歌又把专利改了,申请一个专利可以获得一万美元的奖金,很快,在专利榜上默默无闻的谷歌,一下子挤进了前十名。

从这些例子可以看出,公司设置什么样的收益函数,员工就会最大化它,这也是为什么说创始人的基因会决定公司的基因,以及创始人一开始最重要的事情就是定规矩。谷歌从小公司开始给单元测试写得好的员工发奖金,给代码经常出错的员工小小的惩戒,于是它自然而然地就发展成了一个重视工程质量的公司。Facebook从一开始就强调产品的迭代速度,因此它就成为了一个以产品驱动的公司。有的公司一开始就给部门定销售指标,那些公司就成为了只盯着下个季度ppi的短视的公司。

在一个现代组织中,但凡有点独立思考能力的人,都会发现那些领导有意无意设定的收益函数,然后不自觉的调整自己的行为,去最大化自己的利益。与其教育员工,不如设置一个好的收益函数,既然宇宙的演变都遵循这样的规律,又怎么可能要求员工降低自己的期望值,同时又保证公司的收益呢?

如果你是老板,不妨给大家设置一个好的收益函数,如果你是员工,按照公司的章程,最大化自己的收益,是合情合理的事情。

科学原理不仅适用于科学本身,也适用于生活。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,457评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,837评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,696评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,183评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,057评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,105评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,520评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,211评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,482评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,574评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,353评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,213评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,576评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,897评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,174评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,489评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,683评论 2 335

推荐阅读更多精彩内容

  • 做为一个担负着五千年苦难伤痕的中国人,看见另外一个民族,这样懂得享受他们热爱的生命,这样坦诚的开放着他们的心灵,在...
    小酌日历阅读 1,131评论 0 1
  • 日精进:一个强大的人可以带着一帮人创造一片天地,一个狭隘的人会因为一句话否定了自己所有的努力,所谓宰相肚里能撑船,...
    胡玉梅阅读 111评论 0 0