实时通讯技术 WebRTC 介绍

WebRTC

WebRTC（Web Real-Time Communication）是一个支持网页浏览器进行实时语音对话或视频对话的技术。

历史

  1. 2010年5月，Google以6820万美元收购VoIP软件开发商Global IP Solutions的GIPS引擎，并改为名为“WebRTC”。WebRTC使用GIPS引擎，实现了基于网页的视频会议，并支持722，PCM，ILBC，ISAC等编码，同时使用谷歌自家的VP8视频解码器；同时支持RTP/SRTP传输等。
  2. 2011年，Google开源了libwebRTC，这是WebRTC技术发展的重要里程碑
  3. 2013年，Chrome和Firefox之间实现了首次跨浏览器视频通话，这是WebRTC发展史上的一个重要事件。
  4. 2014年，实现了第一次跨浏览器数据传输，这标志着通过客户端进行实时通信的新趋势。
  5. 2021年1月26日，W3C（万维网联盟）和IETF（互联网工程任务组）宣布WebRTC成为正式标准，这标志着WebRTC技术正式成熟并得到广泛认可。
  6. 到了2021年，WebRTC已经被集成到Chrome、Mozilla Firefox、Opera、Safari、Edge、iOS和Android等主流浏览器和操作系统中，成为日常使用的通信技术之一。
    在这里插入图片描述

支持情况

  1. 桌面PC端
    Microsoft Edge、Google Chrome 23、Mozilla Firefox 22、Opera 18、Safari 11（仍处于开发者预览阶段）
  2. Android端
    Google Chrome 28（从版本29开始默认开启）、Mozilla Firefox 24、Opera Mobile 12
  3. Google Chrome OS
  4. Firefox OS
  5. iOS 11
  6. Blackberry 10 内置浏览器
    Bowser

应用

WebRTC技术的应用非常广泛，它允许在网页浏览器之间进行实时的音视频对话，无需安装任何插件或扩展
在线会议和视频通话：WebRTC 可以用于实现在线会议和视频通话功能，如 Google Meet、Zoom 等。

主要应用场景：

  • 远程教育和在线课堂：WebRTC 可以支持教师和学生之间的实时互动，提供远程教育和在线培训服务。

  • 远程医疗服务：医生可以通过 WebRTC 提供远程医疗咨询和在线心理咨询服务。

  • 客户支持系统：WebRTC 可以集成到客户支持系统中，提供实时的视频和语音支持。

  • 社交网络平台：社交平台可以利用 WebRTC 实现用户间的实时音视频聊天功能，如 QQ、微信、Facebook 等。

  • 直播服务：WebRTC 可以用于实现低延迟的直播服务，如 Facebook Live、Twitch 等。

  • 物联网（IoT）：WebRTC 可以用于实现物联网设备与浏览器之间的实时通信，进行设备控制和状态同步。

  • 在线游戏：WebRTC 可以支持基于浏览器的多人在线游戏，提供实时的音频和视频通信。

  • 文件共享和数据传输：WebRTC 提供了数据通道（RTCDataChannel）API，可以用于文件共享和实时数据传输。

  • 增强现实（AR）和虚拟现实（VR）：WebRTC 可以用于实现 AR 和 VR 应用中的实时通信和数据交换。

  • 云游戏：WebRTC 可以用于云游戏平台，如 Google Stadia，通过浏览器提供低延迟的游戏体验。

  • 远程教育和协作工具：WebRTC 可以用于开发支持实时协作的工具，如共享白板和文档编辑。

相关代码和文档

  • git仓库：https://github.com/webrtc
    在这里插入图片描述
  1. 中文官网：https://webrtc.org/?hl=zh-cn
    在这里插入图片描述
  2. 社区：https://www.rtcdeveloper.cn/cn/community/
    在这里插入图片描述

技术介绍

技术特点

WebRTC（Web Real-Time Communication）技术具有多个显著特点，使其成为现代网页实时通信的首选技术之一。

WebRTC的一些关键技术特点：

  • 实时通讯：WebRTC允许在网页浏览器之间进行实时的音视频通信和数据传输，无需任何插件或额外软件。

  • 无需依赖插件：WebRTC技术允许浏览器直接进行实时通信，无需安装第三方插件或软件，降低了用户的使用门槛。

  • 协议栈众多：WebRTC不是单一的协议，而是由多个协议组成的套件，包括媒体、加密、传输层等协议，以及基于JavaScript的API。

  • 点对点连接：WebRTC支持浏览器之间的点对点（P2P）连接，减少了服务器中转的需要，从而降低了通信延迟并提高了效率。

  • NAT穿透技术：WebRTC使用ICE、STUN和TURN等协议来处理NAT（网络地址转换）穿透问题，使得大多数位于NAT后的用户也能实现P2P通信。

  • 端到端加密：WebRTC支持端到端加密，确保了通信内容的安全性和隐私保护。

  • 跨平台兼容性：WebRTC支持多种操作系统和设备，包括桌面和移动平台，提供了广泛的应用范围和一致的用户体验。

  • 网络适应性：WebRTC能够适应不同的网络条件，包括带宽变化和网络延迟，保持通信的稳定性和流畅性。

  • 开放标准和API：WebRTC是一个开放的API标准，由W3C和IETF等组织进行标准化，确保了不同浏览器和平台之间的互操作性。

  • 媒体流协议支持：WebRTC支持RTP/RTCP等媒体流协议，用于音视频数据的实时传输和控制信息的传递。

  • 数据通道：除了音视频传输，WebRTC还提供了数据通道（RTCDataChannel）API，允许在浏览器之间传输任意类型的数据。

  • 安全性和隐私：WebRTC设计了多种安全机制，包括使用DTLS和SRTP等协议来保护数据传输和媒体流的安全性。

  • 易于集成和使用：WebRTC提供了一套标准、优雅的API，使得开发者可以容易地在浏览器中应用，无需复杂的配置或额外的开发工具。

  • 低延迟：WebRTC在不考虑网络链路的情况下，可以将延时降到100-200毫秒左右，这对于需要实时性的应用场景非常重要。

  • 流量优化：WebRTC基于UDP的传输，协议头小，优化了流量使用，特别是在网络不佳的情况下，通过NACK等机制减少了重传包，提高了传输效率。

源码架构组件介绍

  1. 源码目录
    在这里插入图片描述
  2. 源码核心组件
组件介绍
API 层WebRTC的API层为开发者提供了接口，允许他们通过编程方式访问WebRTC的功能。这包括用于获取用户媒体、建立连接、发送和接收数据等的Web APIs
MediaStreamMediaStream对象在WebRTC中用于表示音频、视频或数据源。它涉及到音频和视频的捕获、编解码以及传输
RTCPeerConnection这是WebRTC中的核心组件，用于建立和管理浏览器之间的对等连接。它包括连接建立、媒体流的传输、编解码以及网络连接管理等功能
RTCDataChannelRTCDataChannel提供了一个在两个WebRTC对等体之间传输任意数据的通道。它支持建立一个可靠的、全双工的通信通道
信令（Signaling）信令是WebRTC中用于在通信对等方之间交换元数据的部分，以建立和管理连接。它通常依赖于WebSocket、HTTP等协议来进行消息的传输
媒体引擎（Media Engine）媒体引擎负责处理音频、视频和数据流的捕获、编码、传输和解码。WebRTC使用特定的编解码器，如VP8/VP9视频编码器和Opus音频编码器
网络传输（Network Transport）网络传输层负责建立和管理通信连接，包括TCP和UDP的实现。WebRTC使用STUN和TURN服务器进行网络地址转换和媒体转发
音频处理（Audio Processing）处理音频流的模块，包括噪声抑制、回声消除等功能
浏览器引擎浏览器引擎负责处理WebRTC的实现，包括音视频捕获、媒体处理和网络传输。它通常包括浏览器提供的接口和库，如Web Audio API、WebRTC Media Engine等
ICE框架交互式连接建立（ICE）框架用于连接管理，通过收集候选网络地址并交换SDP描述信息来建立连接
  1. 原理整体框架

在这里插入图片描述

参考

  • https://zh.wikipedia.org/wiki/WebRTC

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/pingmian/4326.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

大语言模型Ollama

大语言模型Ollama

版权声明 本文原创作者：谷哥的小弟作者博客地址：http://blog.csdn.net/lfdfhl Ollama简介 Ollama是一个开源的大语言模型平台，它允许用户在本地环境中运行、创建和共享大型语言模型。Ollama提供了丰富的功能和特性，使得用户可以…
阅读更多...
解决 Tomcat 跨域问题 - Tomcat 配置静态文件和 Java Web 服务（Spring MVC Springboot）同时允许跨域

解决 Tomcat 跨域问题 - Tomcat 配置静态文件和 Java Web 服务（Spring MVC Springboot）同时允许跨域

解决 Tomcat 跨域问题 - Tomcat 配置静态文件和 Java Web 服务（Spring MVC Springboot）同时允许跨域 Tomcat 配置允许跨域Web 项目配置允许跨域Tomcat 同时允许静态文件和 Web 服务跨域 偶尔遇到一个 Tomcat 部署项目跨域问题，因为已经处理过…
阅读更多...
mysql 连接数配置，解决Too many connections错误

mysql 连接数配置，解决Too many connections错误

参考：https://developer.aliyun.com/article/824585 查看当前连接数 SHOW full PROCESSLIST; 查看最大连接数配置 show variables like ‘%max_connections%’; 配置 [mysqld] # 通过修改 MySQL 配置文件调整最大连接数 max_connections 5266# 设置超时时间&am…
阅读更多...
为什么MySQL使用B+树而不是跳表

为什么MySQL使用B+树而不是跳表

1. 磁盘IO效率问题 MySQL是基于磁盘存储系统，而B树的设计就很符合磁盘存储系统，它可以最大化地减少磁盘IO操作。而磁盘IO的读写速度远小于内存的读写速度，所以减少磁盘IO操作对于MySQL性能的提升至关重要，与之相对，Re…
阅读更多...
mysql-sql-练习题-1

mysql-sql-练习题-1

文章目录 环境注释建表 5张建库学生表课程表教师表分数表总表 语法书写顺序in学过/没学过完全相同 环境 Windows cmd（普通用户/管理员） mysql -uroot -pmysql版本，模式（可自定义） select version(),global.sql_mode…
阅读更多...
在PR中使用 obs 和 vokoscreen 录制的视频遇到的问题

在PR中使用 obs 和 vokoscreen 录制的视频遇到的问题

1. obs 录制的视频 在 Adobe Premiere Pro CS6 中只有音频没有视频 2. vokoscreen 录制的视频，没有声音 这是是和视频录制的编码有关系，也和显卡驱动关系 首先 obs 点击 文件 ---> 设置 录制的视频都是可以正常播放的，在PR不行。更…
阅读更多...
用NuGet安装 Oracle ODP.NET

用NuGet安装 Oracle ODP.NET

oracle官网原文：Using NuGet to Install and Configure Oracle Data Provider for .NET Using NuGet to Install and Configure Oracle Data Provider for .NET In this section, you will install ODP.NET NuGet packages from nuget.org. Select View > Solut…
阅读更多...
【网站项目】图书推荐系统

【网站项目】图书推荐系统

🙊作者简介：拥有多年开发工作经验，分享技术代码帮助学生学习，独立完成自己的项目或者毕业设计。 代码可以私聊博主获取。🌹赠送计算机毕业设计600个选题excel文件，帮助大学选题。赠送开题报告模板&#xff…
阅读更多...
力扣练习4.26

力扣练习4.26

2. 两数相加 解题思路 竖式相加。 要注意的点： 1.链表不等长，因此要在某个链表节点不够的情况下补0。 2.有可能连续进位，使得最后的数字超出最长的链表节点数，所以要判断进位变量的最后状态，若还有值，要新…
阅读更多...
数据结构-图搜索算法详解

数据结构-图搜索算法详解

图搜索算法是数据结构和算法学科中的一个重要领域，它们用于在图中搜索顶点（节点）和边（连接节点的线）。图可以是有向的（边有方向）或无向的（边没有方向）。图搜索算法主要用…
阅读更多...
C++高级特性：C/C++内存结构模型（十一）

C++高级特性：C/C++内存结构模型（十一）

1、内存结构 C/C语言一只被认为是一种底层语言，与其他语言不一样，对内存结构理解是C/C程序员从入门到入土的开端。 其他编程语言对内存管理是透明的，程序员无序关心可以认为是一个黑盒；而C/C不一样理解好内存结构有利于编写健壮性…
阅读更多...
使用C++实现尾插式循环链表结构

使用C++实现尾插式循环链表结构

在编码中避免不了使用链表，特别是循环链表，很多同学使用时为了省事直接使用C STL库中的链表实现，这样当然很简单也不容易出错，但同时也不可避免的带来了一些问题： 是半个黑盒，虽然能看源码，但是…
阅读更多...
一个缓存泛型自动处理队列，留有处理事件接口

一个缓存泛型自动处理队列，留有处理事件接口

在C#中，创建一个通用泛型缓存队列工具通常涉及到使用泛型（T）来支持任意类型的队列项，并且实现先进先出（FIFO）的队列逻辑。为了提供自动处理和事件通知的功能，我们可以使用后台线程来处理队列中的…
阅读更多...
【禅道客户案例】同方智慧能源数智化转型新实践 禅道助力前行

【禅道客户案例】同方智慧能源数智化转型新实践 禅道助力前行

同方智慧能源是同方股份有限公司的骨干企业。依托中核集团、清华大学的科技优势，坚持技术和资源双核驱动，基于30多年行业积淀，面向建筑、交通、工业、北方供热、数据中心等主要用能场景提供设计咨询、产品技术、投资建设、运营服务&#xff0…
阅读更多...
Redis集合 set 详解

Redis集合 set 详解

Set简介 set 类似于 Java 中的 HashSet ,是redis中的一种数据结构，它是一个无序并且唯一的键值集合，并且储存时不会按照插入的先后顺序进行.一个集合中最多可以储存2^32 -1个元素。当你需要存储一个列表数据，又不希望出现重复数据时&#xf…
阅读更多...
day26 java lambda

day26 java lambda

lambda lambda表达式 &#xff1a;对匿名内部类的对象的一种简写lambda表达式的格式 : (形参列表) -> {方法体}说明 &#xff1a;-> : lambda操作符 例:&#xff1a;Comparator 原代码&#xff1a; Collections.sort(list, new Comparator<Integer>() {Override…
阅读更多...
DELL PowerEdge服务器通过iDRAC升级BIOS遇到的问题

DELL PowerEdge服务器通过iDRAC升级BIOS遇到的问题

本文对PowerEdge 12G系统&#xff0c;也就是iDRAC 7版本升级BIOS中遇到的几个问题做个总结&#xff0c;对于其他版本理论上应该也是适用的。如果还遇到其他问题&#xff0c;可以添加VX&#xff0c;VX号为 StorageExpert 进行进一步的分析探讨。 第一个问题&#xff0c;成功下载…
阅读更多...
Android 11 裁剪系统显示区域(适配异形屏)

Android 11 裁剪系统显示区域(适配异形屏)

概述 在显示技术中&#xff0c;"OverScan"&#xff08;超扫描&#xff09;是一种调整显示图像边界的技术。通常情况下&#xff0c;OverScan 会在显示屏的边缘周围裁剪一小部分图像。这种裁剪是为了确保显示内容在屏幕上的完整可见性&#xff0c;尤其是在老式电视或投…
阅读更多...
ZABAPGIT问题，导入github上的程序包时报 DBSQL_DUPLICATE_KEY_ERROR

ZABAPGIT问题，导入github上的程序包时报 DBSQL_DUPLICATE_KEY_ERROR

跟踪程序发现在94050行 INSERT seocompotx FROM TABLE it_descriptions 报的错 刚开始&#xff0c;不想着改动他&#xff0c;把seocompotx 表的数据做下指定清楚&#xff0c;但是5次清楚后&#xff0c;果断注释掉 改成 MODIFY seocompotx FROM TABLE it_descriptions。 在用…
阅读更多...
航片水体空洞修补

航片水体空洞修补

水体空洞情况如下图所示&#xff1a; 水体空洞修补结果如下图所示&#xff1a; 操作视频教程&#xff1a; MCM智拼图软件V8.5-漏洞空洞修补-水体修补_哔哩哔哩_bilibili
阅读更多...
最新文章

Copyright @ 2022~2023