初识数据结构之算法的时间复杂度和空间复杂度

空间复杂度:

根据算法写成的程序在执行时占用存储单元的长度。这个长度往往与输入数据的规模有关。空间复杂度过高的算法可能导致使用的内存超限,造成程序非正常中断。

我们要处理一个变量N,如下面程序,要输出0-N之间的所有整数。

由于这是一个递归程序,加入N=100000,那么在程序结束之前要在存储空间中存下所有1-100000的所有数据。如图:

就是说内存需要的空间随着N做线性增长。所以空间复杂度可以用一个常数*N来表示。即:S(N)=C\cdot N

时间复杂度:

根据算法写成的程序在执行时耗费时间的长度。这个长度往往与输入数据的规模有关。时间复杂度过高的算法可能导致我们在有生之年都等不到运行的结果。

数据运算主要是做加减乘除四则运算,而计算机做加减法的速率比乘除法要快的多,加减法可以忽略不计,所以时间复杂度主要是看程序做了多少次乘除法运算。


比如上面是一个多项式的运算的程序,主要的运算都是在for循环里面做的,pow(x,i)求的是x的i次方,所以做了i-1次乘法,再加上最前面乘以a[i]的一次,每一个for循环里面做了i次乘法,一共n次循环,所以一共做了(1+2+3+...+n)=(n^2+n )/2次乘法。用时间复杂度表示为:T_{1} (n)=C_{1}n^2+C_{2}n

第二个程序是求同一个多项式运算的程序,这个程序里面每次for循环只做了一次乘法,所以一共做了n次乘法。用时间复杂度表示为T_{2} (n)=C\cdot n

比较上面两个程序,虽然不知道C1,C2和C分别为多少,但是当n足够大时,n²远远大于n,所以这个时候第一个程序的时间复杂度要大于第二个程序的时间复杂度!


复杂度的渐进表示法:

        当我们在分析算法复杂度的时候,其实是没有必要分析这个算法把什么操作做了多少次的,我们只需要知道随着处理数据规模的增大,这个复杂度增长的性质会怎么样就足够了。比如说比较前面两个算法的时候,我们只要知道当n足够大的时候,T1是n²在起主要作用,T2是n在起主要作用,所以在n足够大的时候T1肯定比T2大就可以了。

        所以就有了复杂度的渐进表示法:

        我们如果把一个时间复杂度T(n)写成是一个O(f(n))的形式,即T(n)=O(f(n))表示存在常数C>0,n_{0} >0使得当n\geq n_{0} 的时候,f(n)大概表现的是T(n)的一个上界,即T(n)\leq C\cdot f(n)。简单表示来说对于充分大的n而言,O(f(n))表示f(n)是T(n)的某种上界。

        类似的,如果是一个T(n)=\Omega (g(n))的形式,表示存在常数C>0,n_{0}>0使得当n\geq n_{0} 的时候,g(n)就是T(n)的某种下界,即T(n)\geq  C\cdot f(n)

        如果是T(n)=\Theta (h(n))的形式,那就表示对于这个\Theta 里面的函数来说,O和Ω是同时成立的,它既是上界也是下界。即同时有T(n)=O(h(n))T(n)=\Omega (h(n))


上面关于时间复杂度的渐进表示法同样适用于空间复杂度。但是我们要注意到一个函数的上界和下界并不是唯一的,比如一个算法的复杂度是n的常数倍,那么我们既可以把它写成O(n),也可以写成O(n²),还可以写成O(n³)...下界也是一样。但是太大的上界和太小的下界对于分析算法的效率而言是没有什么帮助的。我们在分析算法效率的时候希望它的上界和下界和真实情况越贴近越好,所以我们一般在写的时候通常写的是我们能力范围内找到的最小的上界和最大的下界。

下面三张图分别为不同函数的增长速度数值表、不同函数增长速度线形图和每秒10亿指令计算机的运行时间表可供参考。

不同函数随着n的增长的增长速度
不同函数的增长速率


每秒10亿指令计算机的运行时间表
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,456评论 5 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,370评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,337评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,583评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,596评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,572评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,936评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,595评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,850评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,601评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,685评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,371评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,951评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,934评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,167评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,636评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,411评论 2 342

推荐阅读更多精彩内容