webrtc中的Track,MediaChannel,MediaStream

原创 已于 2024-12-28 08:58:25 修改 · 2.1k 阅读 · 31 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#webrtc #网络

于 2024-04-14 21:30:06 首次发布

文章目录

Track,MediaChannel,MediaStream的关系

Audio/Video track，MediaChannel，MediaStream是Webrtc的业务核心，对媒体的操作都是围绕着这三个对象进行，弄清出它们见的关系及作用，就等于弄清了Webrtc的骨架，对阅读Webrtc的代码大有益处。先看下面一张图:

image.png

三层结构：

将这些关系归纳为三层结构，分别如下：

  1. Session层，即对外的接口层
  • Track就在这层中，对应的类为VideoTrack和AudiTrack，代表了视频和音频的源。
  • 通过PeerConnectionFactoryInterface的CreateVideoTrack和CreateAudioTrack来创建。
  • 通过PeerConnectionInterface的AddTrack加入到pc对象中。
  • 这些Track最终会体现在本地的sdp中。
  1. MediaEngine层

根据本地sdp或sdp的协商结果，来产生MediaChannel。

MediaChannel代表一个Video或Audio通道，它里面会有多个不同方向的stream。

  1. Call层

Call中也管理着一种stream，但它与MediaEngine

最低0.47元/天 解锁文章

200万优质内容无限畅学
【WebRTC---入门篇】（七）MediaStream
用可见的方式来记录和分享每一次收获
09-25 1249
MediaStream方法 MediaStream.addTrack( ) 功能：向流媒体中加入不同的轨 MediaStream.removeTrack( ) 功能：从流媒体中移除不同的轨 MediaStream.getVideoTracks( ) 功能：从流媒体中取出所有的视频轨 MediaStream.getAudioTracks( ) 功能：从流媒体中取出所有的音频轨 MediaStream事件 MediaStream.onaddtrack 功能：添加媒体轨到媒体流...
WebRTC 概念介绍--一篇读懂source、track、sink、mediastream
一蓑烟雨任平生 也无风雨也无晴
02-15 2395
名词解释 source：媒体流提供者 track：应用持有的媒体流，可以用来播放 sink：媒体流接受者 source是生产媒体资源的，sink负责消费 source —(提供媒体流)—> track —(输出媒体流)—> sink 对于流媒体系统来说，产生数据的装置叫Source，接收数据的装置叫Sink。 如果一个source 可以属于多个track, 这样就可以让不同的sink 绑定同一个source，会导致无法应对多种状态 track 中保存了一些状态信息和处理，这样就和source .
WebRTC手记Channel概念
weixin_30795127的博客
04-07 232
转载请注明出处：http://www.cnblogs.com/fangkm/p/4401075.html 前面两篇博文完整地介绍了WebRTC音视频的采集模块，接下来应该开始介绍关键的音视频编码模块。不过在介绍音视频编码模块之前，需要介绍一下Channel概念，WebRTC的每路数据的传输流程都封装成一个Channel对象。详细UML图如下： MediaChannel及其派生类封装了待传...
WebTracing：一站式前端埋点监控解决方案
最新发布
qq_40603125的博客
06-03 1215
WebTracing是一款功能全面的前端埋点SDK，支持8种监控功能，包括行为、性能、异常、请求等监控。提供核心JS包和Vue2/3专用版本，支持CDN和npm安装。配置灵活，可控制监控开关、数据缓存和采样率，并提供生命周期钩子进行数据处理。适用于各类前端项目，帮助开发者全面追踪用户行为和应用性能。
WebRTC MediaStream接口
crazy_victor的博客
05-08 7395
MediaStream API旨在方便地从用户本地摄像机和麦克风访问媒体流。getUserMedia()方法是访问本机输入设备的主要方式。API有几个关键点: 1. 实时视频或音频以流对象的形式表示。 2. 一定的安全控制,在web应用程序开始获取流数据之前,它通过询问用户是否授权。 3. 输入设备的选择由MediaStream 处理(例如,当本地计算机有两个或者两个以上的摄像头或麦克风连接时)....
【webrtc】mediastream（17）
沛沛呀、
09-21 313
文档gitbook地址 文档github地址
webrtc的source、track和stream
NB_vol_1的专栏
12-04 1762
media stream是track的集合（即track的容器） source是track的输入 一个sender或者receiver对应于一个track，它们负责track的发送或者接收
WebRTC学习六：MediaStream 常用API介绍
wel_006的博客
10-28 973
WebRTC（Web Real-Time Communication）是一个强大的技术，可以让网页应用程序和网站进行实时音频、视频和数据共享。通过使用 WebRTC，开发者可以实现高质量的音视频通话，构建实时多媒体应用，而无需用户安装任何插件。本文将在前面文章的基础上进一步介绍 WebRTC 中的 MediaStream API，这是一组用于处理音频和视频流的常用方法。我们将深入探讨这些方法的用法，并给出一个简单的示例，帮助大家更好地理解如何在实际应用中运用这些 API。
webrtc-data-track:使用WebRTC和Twilio数据跟踪API的浏览器消息传递
05-25
webrtc数据跟踪 这是一个使用WebRTC数据轨道的简单Web浏览器消息传递示例。 安装说明 要在系统上安装该应用程序，请按照下列步骤操作： （如果您还没有）。 免费！ 为您的帐户。 克隆此存储库 创建一个virtualenv...
WebRTC 中有关 Media Stream & Track & Channel 之间的关系
freeabc的专栏
07-02 3969
有些接触 webrtc 的朋友，对有些概念名词和概念，以及它们之间的关系云里雾里，常常被它们绕晕。下面我就带大家理一理它们之间的关系。仅供参考！ 1. Media Content 我们看到所有发布的媒体内容( Media Content ) 其实是由媒体流( Media Stream ) 组成的，一个 Media Content 最常见的展现形式就是一个音视频文件，形式各种各种，也可以包括一个场景。 是个广义的定义。每个 Media Content 可以由一个或多个 Media Stream 组
Webrtc中的各种Channel
风平浪静的专栏
08-14 4248
背景 自己决定整理整理之前的笔记，今天整理的这一篇是webrtc相关的，自己在这方面已经工作了几年了，之前也总结了一些文档，正好借助网络的平台整理整理 对象图 channelmanager_class.png 对象图分析 这张图我觉得是一个非常宏观的图了，我们研究的最多的音视频模块，居然在这张图里，也只是一小部分而已。现在重新来看这张图，回忆当时绘图的思路，总结总结。 WebRtc...
MediaStream 的媒体流对象 (stream) 和流媒体轨道 (track) 详解
m0_67793437的博客
09-05 2016
代表中的音频或视频轨道。每个轨道独立于其他轨道，可以单独控制、启用、禁用、或通过clone()方法复制。通常，轨道通过调用返回的对象获取。例如，一个可以包含一条音频轨道和一条视频轨道。
webrtc 代码学习（十八）Create Audio Channel （audio\channel.cc）
Miracle_包子
11-12 965
Create Audio Channel （audio\channel.cc） 作者：LanPZzzz 文章目录1. Audio Channel （audio\channel.cc） 是WebRTC 中Audio 上的重要部分，包括frame保存，decoder，encoder，jitter buffer 等 1. Audio Channel （audio\channel.cc） 是WebRT...
WebRTC 之 MediaStream: 用你的摄像头拍照
温故而知新
01-19 1602
概述 先看一下效果，你可以在这里亲自动手试试 https://www.fanyamin.com/webrtc/examples/media_stream.html WebRTC 中对媒体流 Media Stream 做了内置的支持，可以从电脑的摄像头，麦克风中捕获音频或视频流，并在 HTML5 所支持的 <video> 或 <audio> 或 <canvas...
webrtc-m79-webrtc:::VideoRtpReceiver 中的 media_channel_的设置
hclbeloved的博客
07-08 260
1 代码 //unified plan 会进入到这里 //音频和视频都有各自的 RtpTransceiver RTCError PeerConnection::UpdateTransceiverChannel( rtc::scoped_refptr<RtpTransceiverProxyWithInternal<RtpTransceiver>> transceiver, const cricket::ContentInfo& conten
webrtc学习———记录三：mediaStreamTrack
weixin_30566063的博客
11-03 726
参考： https://developer.mozilla.org/en-US/docs/Web/API/MediaStreamTrack 转自http://c.tieba.baidu.com/p/3312565203 http://c.tieba.baidu.com/p/3312569139 http://c.tieba.baidu.com/p/3312680272 Networ...
【webrtc】使用音视频source创建音视频track
突围
03-04 739
创建一个rtc::AdaptedVideoTrackSource 作为 video track source ，用来创建video track , 送给owt 创建localstream ， peer_connection_factory 创建track G:\GERRIT\src\third_party\webrtc\pc\peer_connection_factory.cc 只需要传递指针 OWT封装了，也还是传递指针 webrtc::VideoTrackSourceInte..
【WebRTC-11】如何理解webrtc的Source、Track&Sink
vx number：zzr_admin，拉入技术交流群。
03-24 1288
如何理解VideoSource、VideoTrack&VideoSink三者的关系？它们只能是1v1v1的关系吗？有前三者，还有一个MediaStream，如何理解其作用？
WebRTC
Dominic_W的博客
04-17 1103
WebRTC是一个Google开源的音视频处理+即时通讯的开源库，是一个跨平台的多媒体框架，能实现音视频的实时互动。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

mo4776

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值