进程和线程

并行与并发

1. 计算机是如何执行程序指令的?
image.png
2. 计算机是如何实现并发?

轮询调度实现并发执行


image.png
3. 真正的并行需要依赖什么?
image.png

总结:
并行是基于多处理器多核而言的,让多个处理器多核真正同时跑多个程序或多个进程。而并发是单个处理器而言的,同一时刻每个处理器只会执行一个进程,然后在不同进程间快速切换,宏观上给人以多个程序同时运行的感觉,但微观上单个处理器还是串行工作的。同理,在一个进程中,程序的执行也是不同线程间进行切换的,每个线程执行程序的的不同部分。这就意味着当一个线程等待网页下载时,进程可以切换到其他线程执行,避免浪费处理器时间。因此,为了充分利用计算机中的所有资源尽可能快地下载数据,我们需要将下载分发到多个进程和线程中。
并发是指一次处理多件事,而并行是指一次做多件事。二者不同,但互相有联系。

多进程实现并行

什么是进程?

  • 计算机程序是存储在磁盘上的文件。
    只有把它们加载到内存中,并被操作系统调用它们才会拥有其自己的生命周期。
  • 进程表示一个正在执行的程序。
    每个进程都有独立地址空间以及其他的辅助数据
进程(Process)

是计算机中已运行程序的实例。

python中使用进程

我们先看一个程序

import time

def func(data,num):
    while True:
        print('我是子进程{}-{}'.format(data,num))

def main():
    while True:
        print('我是主进程')

if __name__ == '__main__':
    func(1, 2)
    print('-------------')
    main()

结果:


image.png

从结果这样如果直接调用func,则一直在循环,而不能打印下面的语句main()
此时我们可以利用多进程来做,两个不干扰。

进程使用步骤:
image.png
import time

import multiprocessing

def func(data,num):
    while True:
        print('我是子进程{}-{}'.format(data,num))

def main():
    while True:
        print('我是主进程')

if __name__ == '__main__':
    #func(1, 2)
    process = multiprocessing.Process(target=func, args=(1,2)) #创建一个进程
    process.start()   #运行创建好的进程
    main()

结果:


image.png

从结果可以看出来,两个函数来回调用。

多进程并行的必要条件:

总进程数量不多于cpu核心数量!如果不满足,那么运行的程序都是轮询调度产生的假象。

多线程实现并发

什么是线程

  • 线程被称作轻量级进程。
    线程是进程中的一个实体,操作系统不会为进程分配内存空间,它只有一点在运行中必不可少的资源
  • 线程被包含在进程中,是进程中的实际运作单位
    同一个进程内的多个线程会共享相同的上下文,也就是共享资源(内存和数据)。
  • 线程(thread)
    是操作系统能够进行运算调度的最小单位。

python中使用线程

线程使用步骤:


image.png
import time

import multiprocessing

import threading

def func(data,num):
    while True:
        print('我是线程1{}-{}'.format(data,num))

def main():
    while True:
        print('我是线程2')

if __name__ == '__main__':
    #func(1, 2)
    # process = multiprocessing.Process(target=func, args=(1,2)) #创建一个进程
    # process.start()   #运行创建好的进程

    thread = threading.Thread(target=func, args=(1,2))
    thread.start()
    main()

结果与使用进程一样。

进程 VS 线程

  • 稳定性
    进程具有独立的地址空间,一个进程崩溃后,不会对其它进程产生影响。
    线程共享地址空间,一个线程非法操作共享数据崩溃后,整个进程就崩溃了。
  • 创建开销
    创建进程操作系统是要分配内存空间和一些其他资源的。开销很大
    创建线程操作系统不需要再单独分配资源,开销较小。
  • 切换开销
    不同进程直接是独立的, 切换需要耗费较大资源线程共享进程地址空间, 切换开销小。

GIL锁(线程锁)

Python在设计的时候,还没有多核处理器的概念。因此,为了设计方便与线程安全,直接设计了一个锁。这个锁要求,任何进程中,一次只能有一个线程在执行。因此,并不能为多个线程分配多个CPU。所以Python中的线程只能实现并发,而不能实现真正的并行。
但是Python3中的GIL锁有一个很棒的设计,在遇到阻塞(不是耗时)的时候,会自动切换线程。
遇到阻塞就自动切换。我们可以利用这种机制来充分利用CPU。

使用多进程与多线程来实现并发服务器

关键点:

  1. 多进程是并行执行, 相当于分别独立得处理各个请求。
  2. 多线程,虽然不能并行运行, 但是可以通过避开阻塞切换线程来实现并发的效果,并且不浪费cpu。
import socket

import multiprocessing

server = socket.socket()
server.bind(('0.0.0.0', 7001))
server.listen()

print('等待连接.....')
def recv_data(conn):
    while True:
        data = conn.recv(1024)

        if data:
            print('接受的数据>>>{}'.format(data.decode()))
            conn.send(data)
        else:
            conn.close()
            break

def accept():
    while True:
        conn, addr = server.accept()
        print('来自{}的连接'.format(addr))
        #每生成一个对等连接套接字,就生成一个进程,并交给这个进程去处理。
        process = multiprocessing.Process(target=recv_data, args=(conn,))
        process.start()


process = multiprocessing.Process(target=accept)
process.start()

多线程类似。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,839评论 6 482
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,543评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 153,116评论 0 344
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,371评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,384评论 5 374
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,111评论 1 285
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,416评论 3 400
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,053评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,558评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,007评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,117评论 1 334
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,756评论 4 324
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,324评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,315评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,539评论 1 262
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,578评论 2 355
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,877评论 2 345

推荐阅读更多精彩内容