安卓开发几年,经常会被人问起直播相关的功能该如何实现。直播功能应用非常广泛:除开一般的直播App,远程教育、远程会议、视频聊天、甚至是简易的手机家庭监视器、蔬菜大棚监控都需要使用相关的技术,至于直播功能的子集——游戏语音聊天,aac编解码的使用场景就更加广泛了。
这样重要的功能当然不能甘心接入第三方了事,而且第三方的收费也是产品运营的一大成本,所以当然是独立实现的好。但是对FFmpeg和NDK打包不熟悉的同学该怎么最快地实现相关功能呢,不要着急,安卓提供的应编解码Api完全可以完成上述需求。
首先,独立完成一个最基本的硬解码的直播需求需要掌握以下技能:
今天我们主要讲其中一个部分,即h264码流的播放,其它部分以后会逐步发上来(socket开发除外),和大家一起完成硬编解码直播技能树的拼图。
以下正式介绍MediaCodec的简单使用流程:
1、首先创建MediaCodec实体,用于编码或者解码:
mediaCodec = MediaCodec.createDecoderByType(MediaFormat.MIMETYPE_VIDEO_AVC);
2、预设置视频的宽度和高度,生成surfaceView的MediaFormat对象:
MediaFormat.createVideoFormat(mediaFormatStr, surfaceView.width, surfaceView.height);
3、将SurfaceView和MediaFormat绑定(必须在SurfaceView初始化完成之后才可以进行此操作):
mediaCodec.configure(mediaFormat, surfaceView.holder.surface, null, 0);
4、将h264码流分帧,h264码流每一帧的开头标记都是 00000001 或者 000001 ,在字节数组里面找到这个标记把每一帧的数据分开就可以了,这一段逻辑应该写在子线程里面。
5、把每一帧的数据塞进mediaCodec的输入流队列,往里面把一帧一阵的数据塞进去,这一段逻辑应该写在子线程里面:
6、从mediaCodec的队列中拿出解码完成的数据并播放,这一段逻辑应该写在子线程里面:
7、surfaceView资源回收:
按照以上步骤一步步写下来,一个简单的h264硬解码播放就算是写好了。当然,为了适配不同宽高的h264的测试视频,我这边还做了SurfaceView的宽高动态修改。
同时为了部分开发者迅速用起来,我已经将h264播放器的核心代码封装成了一个工具类,工具类的使用示例从这里点击下载:Demo获取链接
如果有需要h264测试文件的同学,可以到我的csdn上下载,为了搜罗这些测试文件,我也是花了一点钱,所以会向下载测试文件的同学回收一点C币。测试文件包在这里点击下载:h264测试文件包 这个测试文件包中一共有五个h264文件,分辨率涵盖了 128p ~ 1080p,已经算是很良心的测试资源了
今天的h264硬解码播放的技术共享到此结束,码子辛苦,转载请注明出处,以上~