进程基础(操作系统中的概念)
进程调度算法(四种算法)
进程的并行和并发的概念
同步异步阻塞非阻塞的概念
创建进程(进程类Process)
Process类的参数
Process类的方法
如何开启多进程
基于TCP协议的高并发程序
进程它是操作系统中最重要的概念,也是最基本的一个概念
线程也是操作系统中的一个很重要的概念
进程和线程都是有操作系统来调度使用的,我们程序员是不能控制的,这里就设计到调度算法
什么是进程?什么是线程?什么是程序?
进程和程序是两码事、完全不一样
程序:其实是一个死的东西、一堆代码就是程序,他也没有生命周期
进程:它是有生命周期的,这个任务做完,进程就不存在了
在一个进程中,可以有多个线程,一个进程中只有一个线程,也是可以的。
一个进程中至少要有一个线程
进程和线程他们都是有操作系统来调度的,程序员级别是没办法来调度的,协程就是程序员级别的,协程的调度它就是有我们程序员自己来调度的,在操作系统中是没有协程这个概念的,是我们人为的抽象出来的
进程》》》线程》》》协程
消耗资源对比:进程》》》线程》》》协程
单个cpu一次只能运行一个任务
cpu的工作机制:
1.遇到I/O的时候,cpu会交出执行权限
2.当cpu遇到耗时比较长的时候,也会自动交出执行权限,切换到其他任务
I/O密集型
他会被时间所阻塞,不会占用大量的cpu资源,比如sleep(3)
计算机密集型
不占用大量的时候, 会占用大量的cpu资源,这种情况就是计算机密集型,没有时间的大量消耗
- for i in range(10000000):
- i+=1
一、先来先服务调度算法
二、短作业优先调度算法
三、时间片轮转法
四、多级反馈队列
并行:统一时刻同时运行
如果cpu是单核的,同一时刻能不能做到同时执行多个任务,不能
如果是多核,就可以同一时刻做到
核是2,最多同一时刻最多执行2个任务
核是4,同一时刻最多执行4个任务
并发:一段时间内看起来是同时运行
如果是单核的cpu,听课、看视频、浏览网页能不能一起操作,是可以的,cpu的切换达到的
所谓同步,就是在发出一个*调用*时,在没有得到结果之前,该*调用*就不返回。但是一旦调用返回,就得到返回值了。
换句话说,就是由*调用者*主动等待这个*调用*的结果。
而异步则是相反,*调用*在发出之后,这个调用就直接返回了,所以没有返回结果。换句话说,当一个异步过程调用发出后,调用者不会立刻得到结果。而是在*调用*发出后,*被调用者*通过状态、通知来通知调用者,或通过回调函数处理这个调用。
典型的异步编程模型比如Node.js
阻塞和非阻塞关注的是程序在等待调用结果(消息,返回值)时的状态.
阻塞调用是指调用结果返回之前,当前线程会被挂起。调用线程只有在得到结果之后才会返回。
非阻塞调用指在不能立刻得到结果之前,该调用不会阻塞当前线程
- from multiprocessing import Process
- def task():
- with open('a.txt','w',encoding='utf-8') as f:
- f.write('helloworld')
-
- if __name__ == '__main__': # windows平台上必须写在这个里面
- p = Process(target=task) # 实例出来一个进程类,让这个进程执行task任务
- p.start() # 真正的开始进程
- from multiprocessing import Process
-
-
- def task(name, age, gender):
- print(name, age, gender)
- with open('a.txt', 'w', encoding='utf-8') as f:
- f.write('helloworld')
-
- """现在这个写法还没有开启进程"""
- """Windows平台上必须写在这个里面"""
- if __name__ == '__main__':
- """
- group=None, target=None, name=None, args=(), kwargs={},
- *, daemon=None
- """
- p = Process(target=task, name='process-2', args=(), kwargs={'name':'jerry', 'age':20, 'gender':'male'}) # 实例出来一个进程类, 让这个进程执行task任务
- p.start() # 真正的开启进程
- # 操作系统是负责把这个进程开起来
- # 开启一个进程来执行task任务,真正是谁在执行这个任务,是线程,进程里面至少要有一个线程
- """进程的几个属性:1. 进程名 2. 进程号pid kill """
- # 如何查看进程的名称
- print(p.name) # Process-1
- # 怎么改进程名字
- # p.name = '这是新的进程名'
- # print(p.name) # 这是新的进程名
- from multiprocessing import Process
-
- import time
- def task(name, age, gender):
- print(name, age, gender)
- # with open('a.txt', 'w', encoding='utf-8') as f:
- # f.write('helloworld')
- time.sleep(3)
- print("子进程的代码")
-
- """现在这个写法还没有开启进程"""
- """Windows平台上必须写在这个里面"""
- if __name__ == '__main__':
- """
- group=None, target=None, name=None, args=(), kwargs={},
- *, daemon=None
- """
- # 子进程 主进程
- """只是通知操作系统去开进程,并不是立马把进程开起来,他是需要消耗一定的时间的,侧面的反应了开启进程其实消耗很大"""
- p = Process(target=task, name='process-2', args=(), kwargs={'name':'jerry', 'age':20, 'gender':'male'}) # 实例出来一个进程类, 让这个进程执行task任务
- p.start() # 真正的开启进程
- # 操作系统是负责把这个进程开起来
- # 开启一个进程来执行task任务,真正是谁在执行这个任务,是线程,进程里面至少要有一个线程
- """进程的几个属性:1. 进程名 2. 进程号pid kill """
- # 如何查看进程的名称
- # print(p.name) # Process-1
- # 怎么改进程名字
- # p.name = '这是新的进程名'
- # print(p.name) # 这是新的进程名
-
- ## 如何查看进程号
- # print(p.pid) # process id
-
- # print(p.is_alive()) # True
- # p.terminate() # 杀死进程,结束任务
- # import time
- # time.sleep(1)
- # print(p.is_alive())
- p.join() # 等待子进程的代码全部执行完毕,在走主进程的
- print("主进程的代码执行完毕")
- 多进程就意味着可以同时做多个任务嘛, 一个进程做一个任务,多个进程肯定是做多个任务
- from multiprocessing import Process
-
- import time
- def task(name):
- # print(name)
- # with open('a.txt', 'a', encoding='utf-8') as f:
- # f.write('helloworld')
- print("子进程")
- time.sleep(1)
- if __name__ == '__main__':
- """理论上你是可以一直开进程,单是你需要考虑资源的消耗情况"""
- start_time = time.time()
- ll = []
- for i in range(10):
- p=Process(target=task, kwargs={'name':'kevin'})
- p.start()
- # p.join() #
- ll.append(p)
-
- for j in ll:
- j.join()
-
- print("主进程, 总时间:", time.time() - start_time)
- 一个服务端不能够同时给多个客户端发送消息
- import socket # python提供的socket模块
-
- def task(conn):
- while True:
- try:
- # 异常了一个bug,粘包现象
- data = conn.recv(1024) # 括号里面写的是接收的字节数,最多接收1024个字节
- if len(data) == 0:
- continue
- print(data) # 还是bytes类型
-
- # 服务端开始给客户端也发送一个数据
- conn.send(data.upper())
- except Exception as e:
- print(e)
- break
-
- conn.close()
-
-
- from multiprocessing import Process
-
- if __name__ == '__main__':
- # 1. 买手机
- # SOCK_STREAM ====> 代表的是TCP协议
- # socket.socket(socket.AF_INET, socket.SOCK_STREAM)
- # socket.socket(socket.AF_INET, socket.SOCK_DGRAM) # udp协议
- server = socket.socket() # 默认是TCP协议
-
- # 2. 买手机卡
- # '0.0.0.0' =====> 代表允许任何的ip链接
- # server.bind(('0.0.0.0', 8000)) # 服务端绑定一个地址
- server.bind(('127.0.0.1', 8001)) # 服务端绑定一个地址
-
- # 3. 开机
- server.listen(1) # 监听,半连接池
- print('服务端正在准备接收客户端消息:')
- while True:
- conn, client_addr = server.accept() # 接收, 程序启动之后,会在accept这里夯住,阻塞
- p = Process(target=task, args=(conn,))
- p.start()