• linux深入理解多进程间通信

    1.进程间通信

    1.1 进程间通信目的

    • 数据传输：一个进程需要将它的数据发送给另一个进程
    • 资源共享：多个进程之间共享同样的资源。
    • 通知事件：一个进程需要向另一个或一组进程发送消息，通知它（它们）发生了某种事件（如进程终止时要通知父进程）。
    • 进程控制：有些进程希望完全控制另一个进程的执行（如Debug进程），此时控制进程希望能够拦截另一个进程的所有陷入和异常，并能够及时知道它的状态改变。 
    1. 数据传输：一个进程需要将它的数据发送给另一个进程
    2. 资源共享：多个进程之间共享同样的资源。
    3. 通知事件：一个进程需要向另一个或一组进程发送消息，通知它（它们）发生了某种事件（如进程终止
    4. 时要通知父进程）。
    5. 进程控制：有些进程希望完全控制另一个进程的执行（如Debug进程），此时控制进程希望能够拦截另
    6. 一个进程的所有陷入和异常，并能够及时知道它的状态改变。

    1.2 进程间通信发展 

    • 管道
    • System V进程间通信
    • POSIX进程间通信

    1.3 进程间通信分类

    1.3.1 管道

    • 匿名管道pipe
    • 命名管道

    1.3.2 System V IPC

    • System V 消息队列
    • System V 共享内存
    • System V 信号量

    1.3.3 POSIX IPC

    • 消息队列
    • 共享内存
    • 信号量
    • 互斥量
    • 条件变量
    • 读写锁

    2.管道（具有亲缘关系）

    管道是Unix中最古老的进程间通信的形式。

    我们把从一个进程连接到另一个进程的一个数据流称为一个“管道”

    2.1 用fork来共享管道原理

    2.2 匿名管道 

    1. #include 
    2. 功能:创建一无名管道
    3. 原型
    4. int pipe(int fd[2]);
    5. 参数
    6. fd：文件描述符数组,其中fd[0]表示读端, fd[1]表示写端
    7. 返回值:成功返回0，失败返回错误代码

    实例代码 

    1. 打开管道
    2. 获取键盘stdin的数据读到buf中
    3. 把buf中的数据写到管道中
    4. 从管道中把数据写到回buf中
    5. 再把buf中的数据写到stdout中

    2.3 站在文件描述符角度-深度理解管道

    2.4 站在内核角度-管道本质 

    所以，看待管道，就如同看待文件一样！管道的使用和文件一致，迎合了“Linux一切皆文件思想”。 

    在my_shell中添加管道的实现：

    添加功能

    2.5 管道读写规则

    1. 当没有数据可读时
    2. O_NONBLOCK disable：read调用阻塞，即进程暂停执行，一直等到有数据来到为止。
    3. O_NONBLOCK enable：read调用返回-1，errno值为EAGAIN。
    4. 当管道满的时候
    5. O_NONBLOCK disable： write调用阻塞，直到有进程读走数据
    6. O_NONBLOCK enable：调用返回-1，errno值为EAGAIN
    7. 如果所有管道写端对应的文件描述符被关闭，则read返回0
    8. 如果所有管道读端对应的文件描述符被关闭，则write操作会产生信号SIGPIPE,进而可能导致write进程
    9. 退出
    10. 当要写入的数据量不大于PIPE_BUF时，linux将保证写入的原子性。
    11. 当要写入的数据量大于PIPE_BUF时，linux将不再保证写入的原子性。

    2.6 管道特点

    linux中一个匿名管道的文件描述符被关闭就不能再被打开了，所以只能实现单向通信

    1. 只能用于具有共同祖先的进程（具有亲缘关系的进程）之间进行通信；通常，一个管道由一个进程创
    2. 建，然后该进程调用fork，此后父、子进程之间就可应用该管道。
    3. 管道提供流式服务
    4. 一般而言，进程退出，管道释放，所以管道的生命周期随进程
    5. 一般而言，内核会对管道操作进行同步与互斥
    6. 管道是半双工的，数据只能向一个方向流动；需要双方通信时，需要建立起两个管道

    3. 命名管道

    • 管道应用的一个限制就是只能在具有共同祖先（具有亲缘关系）的进程间通信。
    • 如果我们想在不相关的进程之间交换数据，可以使用FIFO文件来做这项工作，它经常被称为命名管道。
    • 命名管道是一种特殊类型的文件

    3.1 创建命名管道

    命令行方式创建

    mkfifo filename

    在代码中创建

    int mkfifo(const char *filename,mode_t mode);

    真实权限收到umask的影响

    匿名管道与命名管道的区别

    1. 匿名管道由pipe函数创建并打开。
    2. 命名管道由mkfifo函数创建，打开用open
    3. FIFO（命名管道）与pipe（匿名管道）之间唯一的区别在它们创建与打开的方式不同，一但这些工作完
    4. 成之后，它们具有相同的语义。

    命名管道的打开规则

    1. 如果当前打开操作是为读而打开FIFO时
    2. O_NONBLOCK disable：阻塞直到有相应进程为写而打开该FIFO
    3. O_NONBLOCK enable：立刻返回成功
    4. 如果当前打开操作是为写而打开FIFO时
    5. O_NONBLOCK disable：阻塞直到有相应进程为读而打开该FIFO
    6. O_NONBLOCK enable：立刻返回失败，错误码为ENXIO

    实验1-用命名管道实现文件拷贝

    实验2-用命名管道实现server&client通信

    3. system V共享内存

    共享内存区是最快的IPC形式。一旦这样的内存映射到共享它的进程的地址空间，这些进程间数据传递不再涉及到 内核，换句话说是进程不再通过执行进入内核的系统调用来传递彼此的数据

    共享内存数据结构

    1. struct shmid_ds {
    2.  struct ipc_perm shm_perm; /* operation perms */
    3.  int shm_segsz; /* size of segment (bytes) */
    4.  __kernel_time_t shm_atime; /* last attach time */
    5.  __kernel_time_t shm_dtime; /* last detach time */
    6.  __kernel_time_t shm_ctime; /* last change time */
    7.  __kernel_ipc_pid_t shm_cpid; /* pid of creator */
    8.  __kernel_ipc_pid_t shm_lpid; /* pid of last operator */
    9.  unsigned short shm_nattch; /* no. of current attaches */
    10.  unsigned short shm_unused; /* compatibility */
    11.  void *shm_unused2; /* ditto - used by DIPC */
    12.  void *shm_unused3; /* unused */
    13. };

     

    共享内存函数

    shmget函数

    1. 功能：用来创建共享内存
    2. 原型
    3.  int shmget(key_t key, size_t size, int shmflg);
    4. 参数
    5.  key:这个共享内存段名字
    6.  size:共享内存大小
    7.  shmflg:由九个权限标志构成，它们的用法和创建文件时使用的mode模式标志是一样的
    8. 返回值：成功返回一个非负整数，即该共享内存段的标识码；失败返回-1

    shmat函数

    1. 功能：将共享内存段连接到进程地址空间
    2. 原型
    3.  void *shmat(int shmid, const void *shmaddr, int shmflg);
    4. 参数
    5.  shmid: 共享内存标识
    6.  shmaddr:指定连接的地址
    7.  shmflg:它的两个可能取值是SHM_RND和SHM_RDONLY
    8. 返回值：成功返回一个指针，指向共享内存第一个节；失败返回-1
    9.  
    10. shmaddr为NULL，核心自动选择一个地址
    11. shmaddr不为NULL且shmflg无SHM_RND标记，则以shmaddr为连接地址。
    12. shmaddr不为NULL且shmflg设置了SHM_RND标记，则连接的地址会自动向下调整为SHMLBA的整数倍。公式：shmaddr - 
    13. (shmaddr % SHMLBA)
    14. shmflg=SHM_RDONLY，表示连接操作用来只读共享内存

    shmdt函数

    1. 功能：将共享内存段与当前进程脱离
    2. 原型
    3.  int shmdt(const void *shmaddr);
    4. 参数
    5.  shmaddr: 由shmat所返回的指针
    6. 返回值：成功返回0；失败返回-1
    7. 注意：将共享内存段与当前进程脱离不等于删除共享内存段

    shmctl函数

    1. 功能：用于控制共享内存
    2. 原型
    3.  int shmctl(int shmid, int cmd, struct shmid_ds *buf);
    4. 参数
    5.  shmid:由shmget返回的共享内存标识码
    6.  cmd:将要采取的动作（有三个可取值）
    7.  buf:指向一个保存着共享内存的模式状态和访问权限的数据结构
    8. 返回值：成功返回0；失败返回-1

    cmd

    IPC_STAT：得到共享内存的状态，把共享内存的shmid_ds结构复制到buf中

    IPC_SET：改变共享内存的状态，把buf所指的shmid_ds结构中的uid、gid、mode复制到共享内存的shmid_ds结构内

    IPC_RMID：删除这片共享内存

     

    • 键就是共享内存的key；
    • shmid是共享内存的编号；
    • semid是信号量数组的编号；
    • nsems对应信号量集中信号量的个数
    • pid就是进程ip,可通过 ps -ef | grep pid 查看详情
    • semnum是信号量的编号
    • ncount是等待该信号的进程数
    • 拥有者就是创建它的用户（owner）；
    • 权限也就是perms；
    • 字节为创建的大小bytes；
    • 连接数为连接到共享内存的进程数nattach；
    • 状态是共享内存的状态status。
       

    4. system V消息队列

    5. system V信号量

    6.进程互斥

    • 由于各进程要求共享资源，而且有些资源需要互斥使用，因此各进程间竞争使用这些资源，进程的这种关系为进程的互斥
    • 系统中某些资源一次只允许一个进程使用，称这样的资源为临界资源或互斥资源。在进程中涉及到互斥资源的程序段叫临界区
    • 特性上：IPC资源必须删除，否则不会自动清除，除非重启，所以system V IPC资源的生命周期随内核
  • 相关阅读:
    std::c++ 中格式化任意字符串
    mac切换本地node版本
    API网关之Nginx作为网关的优势及实战
    Redisson 分布式锁实战应用解析
    Spark系列之Spark安装部署
    天气预报查询数据接口、实时天气、未来24小时、7天/15天预报
    关于java中的static关键字
    【C++】unordered_set与unordered_map的封装
    女性必看——“黄体破裂”到底有多可怕？
    devops学习(八) 搭建镜像仓库---jenkins推送镜像
  • 原文地址：https://blog.csdn.net/m0_74234485/article/details/132646671