我是靠谱客的博主 缓慢溪流,这篇文章主要介绍音视频学习笔记----4,音视频编码基础学习之-webrtc基础到架构(音频处理),现在分享给大家,希望可以做个参考。

WebRTC概念

 Web Real-Time Communication,web实时通信技术。简单说就是在web浏览器里边引入实时通信,包括音视频通话等。

WebRTC提供了视频会议的核心技术,包括音视频采集、编解码、网络传输、显示等功能,支持跨平台:Windows,Linux,Mac,Android,尤其是在实时通信方面的很多技术可以灵活嫁接到非RTC类流媒体系统中,例如,在低带宽下的视频抖动控制,图像效果增强,通用NAT穿透过程等等。

WebRTC结构

从WEB-RTC方面分析WEBRTC在浏览器上的接口结构,在浏览器端主要实现了三个接口:

1,MediaStream,实现对本地音视频资源的封装,表示一个媒体流数据,一个MediaStreamTrack表示MediaStream中的一个媒体源,如音频、视频、字幕等;

       接口名称为getUserMedia,该接口为上层提供同步的音视频流

2,RTCPeerConnection,语音或者视频通话过程,包含呼叫。应答、穿透、加密、传输及会话管理等一系列流程,一个RTCPeerConnection代表对话过程中的一端;

     主要是用来处理点到点之间的连接和数据传输,使整个过程能够稳定且高效。在RTCPeerConnection下,封装了大量的编解码、通信协议的工作来实现整个实时通信过程,甚至是在不能提 供稳定带宽情况下的实时通信,主要功能点包括:

  • 丢包补偿(packet loss concealment)
  • 回音消除(echo cancellation)
  • 自适应带宽(bandwidth adaptivity)
  • 视频抖动缓冲器(dynamic jitter buffering)
  • 自动增益控制(automatic gain control)
  • 噪声降低和抑制(noise reduction and suppression)
  • 图像清理(image 'cleaning')(!暂且这么翻译吧)

3,RTCDataChannel,在RTCPeerConnection之上,传输自定义数据。

WebRTC架构

                 

                                                                           WebRTC架构图(网上摘取)

(1)Web开发者API层;

(2)蓝色实线部分是面向浏览器厂商的API层

(3)蓝色虚线部分浏览器厂商可以自定义实现

这里有一个讲的很详细的博客,分享下:https://blog.csdn.net/fishmai/article/details/69681595 

 

 

 

 

 

 

 

 

最后

以上就是缓慢溪流最近收集整理的关于音视频学习笔记----4,音视频编码基础学习之-webrtc基础到架构(音频处理)的全部内容,更多相关音视频学习笔记----4内容请搜索靠谱客的其他文章。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(56)

评论列表共有 0 条评论

立即
投稿
返回
顶部