码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • webrtc学习--一对一通话


    文章目录

    • webrtc一对一通话
      • 0. 前言
      • 1. webrtc一对一通话时序图
      • 2. webrtc一对一通话
        • 2.1 webrtc一对一通话简述
        • 2.2 webrtc 一对一通话步骤
          • 2.2.1 webrtc一对一通话--信令服务连接
          • 2.2.2 webrtc一对一通话--发起者创建offer过程
          • 2.2.3 webrtc一对一通话--接收者创建answer过程
          • 2.2.4 webrtc一对一通话--媒体协商完毕
          • 2.2.5 webrtc一对一通话--p2p会话建立
      • 3. webrtc一对一通话测试
        • 3.1 安装虚拟摄像头
        • 3.2 测试代码
      • 4. 参考博客

    webrtc一对一通话

    在webrtc一对一通话中,所涉及到的方面很多,本章节主要讲一对一通话中的信令部分,对于其他的采集,编码,传输,解码,渲染部分,直接通过API来进行。不涉及深入部分。webrtc源码中,peerconnection中的例子,就是一个一对一的通话demo。这里面,暂时先不讲c++版本。先以js版本来进行了解和学习。

    0. 前言

    推荐一个零声学院免费教程,个人觉得老师讲得不错,
    分享给大家:[Linux,Nginx,ZeroMQ,MySQL,Redis,
    fastdfs,MongoDB,ZK,流媒体,CDN,P2P,K8S,Docker,
    TCP/IP,协程,DPDK等技术内容,点击立即学习:

    1. webrtc一对一通话时序图

    PeerA signal_server stun/turn server PeerB connect connect Create PeerConnection Add Streams Create Offer setLocalDescription bind request send SDP Offer relay SDP Offer Create PeerConnection Add Streams setRemoteDescription Create Answer setLocalDescription send SDP Answer relay SDP Answer bind request setRemoteDescription ICE Requst onIceCandidate send candidate relay candidate add ice candidate ICE Requst onIceCandidate send candidate relay candidate P2P Channelsss onAddStreams loop [P2P] PeerA signal_server stun/turn server PeerB

    2. webrtc一对一通话

    2.1 webrtc一对一通话简述

    在一对一通话中,我们需要的是,在同一个房间里面,有且仅有两个人,当房间已有两个人时,该房间就不能再有其余的人进入房间了,当该房间不足两人时,才可以再次进入该房间,而且也需要满足最多只能有两个人在该房间中。

    2.2 webrtc 一对一通话步骤

    在一对一通话中,有上面的时序图所示,开始时,我们需要开启信令服务器(singnal_server服务)和ICE服务器(stun/turn服务)。会话双方都需要连接信令服务器。发起者首先创建offer并发送给信令服务器。信令服务器接收到offer并转发给接收者,接收者设置相应的参数后,创建与之对应的answer,并通过信令服务器转发给发起者。发起者接收answer,并设置对应的参数。开始打洞服务了。在理想的状态下(可以打洞)。首先,发起者,接收者绑定打洞服务器。发起者发送一个candidate给信令服务器,信令服务器转发给接收者,接收者添加发送者的candidate,开始向ICE服务器发送ICE Requst。

    2.2.1 webrtc一对一通话–信令服务连接

    一对一双方通话,首先双方都要连接在同一个信令服务器中,并保持连接正常。

    2.2.2 webrtc一对一通话–发起者创建offer过程

    发起者创建offer类型的SDP消息,调用setLocalDescription方法将该Offer保存到,然后通过信令服务器将Offer发送给被呼叫方。

    2.2.3 webrtc一对一通话–接收者创建answer过程

    接收者收到Offer类型的SDP消息后,调用setRemoteDescription方法将Offer保存,接收者创建Answer SDP消息,调用setLocalDescription方法保存。接收者将Answer消息通过信令服务器发送给发送者。

    2.2.4 webrtc一对一通话–媒体协商完毕

    发起者接收到信令服务器转发的Answer SDP后,调用setRemoteDescription方法将Answer保存,媒体协商完毕。

    2.2.5 webrtc一对一通话–p2p会话建立

    发起者和接收者完成上面的步骤后,开始向ICE服务请求打洞了,通过onIceCandidate回调获取打洞信息(Candidate)并通过信令服务器发送给对方。其中,如果打洞成功,那么开始p2p传输数据。如果打洞失败,那么开始进行中继转发数据。

    3. webrtc一对一通话测试

    测试前,需要准备好摄像头。这里面,我就采用虚拟摄像头来进行。

    3.1 安装虚拟摄像头

    run.bat

    @echo off
    rem 卸载screen-capture-recorder-x64.dll
    regsvr32 /u /s screen-capture-recorder-x64.dll
    rem 安装screen-capture-recorder-x64.dll
    regsvr32 /s screen-capture-recorder-x64.dll
    
    rem 卸载virtual-audio/audio_sniffer-x64.dll
    regsvr32 /u /s virtual-audio/audio_sniffer-x64.dll
    rem 安装virtual-audio/audio_sniffer-x64.dll
    regsvr32 /s virtual-audio/audio_sniffer-x64.dll
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10

    3.2 测试代码

    代码来源于码云上,可以通过例子来进行下载和学习
    https://gitee.com/sevenzyh/learn-webrtc
    https://github.com/Jhuster/RTCStartupDemo

    在代码中,可以很方便的来进行一对一通话。

    4. 参考博客

    webrtc 入门第五章 一对一视频通话实现

    WebRTC系列–js 实现一对一通话

    WebRTC一对一通话

    webrtc笔记(2): 1对1实时视频/语音通讯原理概述

    webrtc一对一通话

    学习WebRTC过程总结

    PeerConnectionClient Demo 视频源为window抓屏

    WebRTC ICE介绍

  • 相关阅读:
    UltraISO制作U盘启动盘安装Win11系统攻略
    C++ 内存模型 write_x_read_y 试例构造
    带你彻底认识String
    CVE-2021-4034 polkit提权漏洞复现
    从 MySQL 到 ClickHouse 实时数据同步 —— MaterializeMySQL + Materialized View
    使用phpMyAdmin管理WordPress数据库入门指南
    WINDOWS核心编程--Windows程序内部运行机制
    DN gc影响hbase查询性能
    [附源码]Python计算机毕业设计SSM健康饮食推荐系统(程序+LW)
    【JAVA学习笔记】44 - 注解,元注解
  • 原文地址:https://blog.csdn.net/qq_18286031/article/details/126226393
  • 最新文章
  • 【JVM】编译执行与解释执行的区别是什么?JVM 使用哪种方式?
    用 Hashids 优雅解决 C 端自增 ID 暴露问题
    V8引擎 精品漫游指南--Ignition篇(上) 指令 栈帧 槽位 调用约定 内存布局 基础内容
    LLVM Pass快速入门(四):代码插桩
    milkup:桌面端 markdown AI续写和即时渲染
    基于项目工程构建SBOM(软件物料清单)的研究
    鸿蒙应用开发UI基础第二节:鸿蒙应用程序框架核心解析与实操
    .NET 中如何快速实现 List 集合去重?
    扣子Coze实战:从0到1打造抖音+小红书热点监控智能体
    浅谈数据访问层
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号