rtp协议整理

一、协议头


20140912153130104.png

V:RTP协议的版本号,占2位,当前协议版本号为2
P:填充标志,占1位,如果P=1,则在该报文的尾部填充一个或多个额外的八位组,它们不是有效载荷的一部分。
X:扩展标志,占1位,如果X=1,则在RTP报头后跟有一个扩展报头
CC:CSRC计数器,占4位,指示CSRC 标识符的个数
M: 标记,占1位,不同的有效载荷有不同的含义,对于视频,标记一帧的结束;对于音频,标记会话的开始。
PT: 有效荷载类型,占7位,用于说明RTP报文中有效载荷的类型,如GSM音频、JPEM图像等,在流媒体中大部分是用来区分音频流和视频流的,这样便于客户端进行解析。

这里重点聊下X扩展字段,别的字段应用简单
贴一个简单例子:
90 60 1e e2 12 e9 c2 4d 0b a9 e9 05 be de 00 02 21 04 a1 30 31 00...
90 二进制 1001 0000 对应 V=2,P=0,X=1,CC=0
可以得出 M=1,PT=96(264)
1e e2 二进制 00011110 11100010 sequence number=7906
12 e9 c2 4d 二进制 00010010 11101001 11000010 01001101 timestamp=317309517
0b a9 e9 05 SSRC=0x0ba9e905
展开解释:X 扩展位
根据RFC5285的规定,RTP扩展头部有两种格式:one byte header和two byte header。
https://tools.ietf.org/html/rfc5285

(1)one byte header : 
   0 1 2 3 4 5 6 7
  +-+-+-+-+-+-+-+-+
  |  ID  |  len   |
  +-+-+-+-+-+-+-+-+

be de (the first version of this specification was written on the
feast day of the Venerable Bede) 定死的。没啥实际意思,协议写的时候是这个节日子
00 02 extension length 2 个扩展单元
21 04 a1 (Id=2 Len=2 extension data 04a1) 3031 (id =3 ;len =1 extend data 31)

image.png

这个长度 4-bit比较有意思,0表示1, 1表示2个字节有效位,绕吧!“程序员计量体系从0开始么”

image.png

(2)Two-Byte Header

image.png

二、一些概念
VCL NALU Annex B MTU(1500?)=udp_header+rtp_header+data
具体分包大小:分包大小:<= 1500-20(IP头)-8(UDP)-12(rtp) 1460
extend(data) 可能还有拨号ppp协议头8字节
分析webrtc抓包分析:分析策略: 小于1460 基本每个nal发送大小相同。

image.png

NALU类型:
image.png

14、20类型

三、h264的rtp封装详细介绍
1、单一rtp包
单个NAL单元包(1-23)
对于 NALU 的长度小于MTU 大小的包,一般采用单个NAL 单元模式.一个原始的 H.264 NALU 单元常由 [Start Code] [NALU Header][NALU Payload]三部分组成, 其中 Start Code 用于标示这是一个 NALU 单元的开始, 必须是"00 00 00 01" 或 "00 00 01", NALU 头仅一个字节, 其后都是 NALU 单元内容.打包时去除 "00 00 01" 或 "00 00 00 01" 的开始码, 把其他数据封包的 RTP 包即可
如图:

image.png

2、分包
h264包在传输的时候,如果包太大,会被分成多个片。NALU头会被如下的2个自己代替。
Type=28 FU-A
+---------------+---------------+---------------
|0|1|2|3|4|5|6|7|0|1|2|3|4|5|6|7|
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-++-+-+
|F|NRI| Type:28 |S|E|R| Type |
+---------------+---------------+-----------------

例:
0x7C85=01111100 10000101 (开始包)
0x7C05=01111100 00000101 (中间包)
0x7C45=01111100 01000101 (结束包)

3、组合rtp包
Type=24 STAP-A

image.png

STRP-A and FU-A 图解
https://www.jianshu.com/p/5aa012b76951

三、详细例子
详细见gitee分享
https://gitee.com/wuji0447/h264rtpFenBaoZuBaoLiuCheng.git
对264实现拆包和组包,vlc播放数据。

四、扩展
vp8 等协议rtp流程

rfc:https://tools.ietf.org/html/rfc6386#section-9.1

参考这个大牛的blog:https://blog.csdn.net/CrystalShaw/article/details/81289617

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,319评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,801评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,567评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,156评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,019评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,090评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,500评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,192评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,474评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,566评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,338评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,212评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,572评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,890评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,169评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,478评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,661评论 2 335

推荐阅读更多精彩内容

  • 原文地址:RFC3550 RTP 中文版 英文版原文:RFC3550英文版 - RTP: A Transport ...
    云上听风阅读 12,932评论 0 13
  • 网络抽象层单元类型 (NALU): NALU头由一个字节组成,它的语法如下: F: 1个比特. forbidde...
    ai___believe阅读 8,085评论 0 9
  • 从摄像头获取的视频数据,经过编码后(当然,也可以不编码,如果你觉得也很ok的话),可以视频录制,同时如果需要,当然...
    oliverabc阅读 436评论 0 0
  • ️一个人从来到这个世界,孩童时代就学会与男、女(父、母)相处。男孩与父亲锻练男性与男性的关系,与母亲锻练与异性的关...
    Eunice宝文阅读 473评论 0 1
  • 原创:小小盘子 01 无意中发现一个孩子的微信头像是我和她的合影,虽然拍得不是很好,她却视若珍宝。 02 中午放学...
    盘子阅读 298评论 4 4