转载请把头部出处链接和尾部二维码一起转载,本文出自:http://blog.csdn.net/hejjunlin/article/details/52392430

前言:前一篇的mediaPlayer框架,对于各个模块的关系,得先从核心类MediaPlayer铺开,同样看下今天的Agenda:

  • MediaPlayer从create到setDisplay时序图
  • MediaPlayer的create过程
  • MediaPlayer的setDataSource过程
  • MediaPlayer的setDisplay过程

今天分析的是从MediaPlayer创建到MediaPlayer调用setDataSource过程

以往总是把时序图放在最后总结,有些人觉得一上来没有个大概,无从下手,所以,先把时序图附上,一步一步对着时序图看看每个阶段经历的过程

MediaPlayer从创建到setDisplay时序图

MediaPlayer时序图一(create->setDataSource, 后面文章还有,暂且这么命名):

MediaPlayer的创建过程

当外部调用MediaPlayer.create(this,”http://www.xxx.mp4“)时,进入我们MediaPlayer的创建过程:

以上代码可以总结为:当MediaPlayer通过Create方式创建播放器时,内部new出MediaPlayer对象 ,并setDataSource,并做好prepare的动作。这时外面只须调用下start方法,音视频资源将能播放起来。

通常我们用通过构造MediaPlayer,然后自己setDataSource,prepare等操作。无论哪种都要先经过new MediaPlayer(),我们看下构造中做了什么操作:

注意这里有个EventHandler,虽然今天不是重点要说的,我们可以先了解下它:

接下来看native层如何创建一个mediaplayer,在说native_up之前,我们注意,一般加载so都是在静态代码块中, 在MediaPlayer中有一段静态代码块,用于初始jni相关,早于构造方法,在加载类时就执行。一般是全局性的数据,变量,可以放在这。这里是加载media_jni.so文件。

开始进入android_media_MediaPlayer.cpp分析,第一个方法,就是在java静态代码块调入的native_init:

被native层调用,就是反向调用,仅被使用EventHandler post事件回到主线程中,很多用post开头,基本都是post到主线程,用软引用指向原生的MediaPlayer,以便native代码是安全的,当MediaPlayer可在native释放,调到java中的实现部分如下:

以上就是native_init方法,可以看到,就是做了一些准备工作,获取一些方法,一些要用的成员变量。接着回到之前说的,create中MediaPlayer构造函数,有一个native_setup,在android_media_MediaPlayer.cpp找到对应方法:

可以看到会设置一些回调用的listener及创建c++中的MediaPlayer对象。

MediaPlayer的setDataSource过程

上面就是MediaPlayer的构造过程:构造后接下来要设置数据源,进而到了setDataSource操作,我们看下setDataSource做了什么操作:



先看看如果送的setDataSource中的uri是文件类型:

开始进入jni层,发现找不到android_media_MediaPlayer_setDataSource方法,可以发现有一个方法名对应映射方法声明:

以上这个方法名字映射,如果看过JNIEnv * 源码的话,对上面这些并不陌生,无非也是映射,不影响我们分析,在这里我们接下来要去找android_media_MediaPlayer_setDataSourceFD这个函数看看:

接着看process_media_player_call方法:

以上代码总结为:当 mp->setDataSource(fd, offset, length)方法后得到status后,对各种状态进行notify。有异常的直接抛出,这样也就不会影响mediaplayer后面的执行过程。

接下来看下以http/rtsp传入到jni中,在java层对应的nativeSetDataSource方法:

在jni中通过映射表,可对应到android_media_MediaPlayer_setDataSourceAndHeaders:

到此,setDataSource的过程就完成了。这里要注意两个点,一个是从Java->jni->c++正向调用过程(前面从java到native都是正向过程),一种是c++ -> jni -> java层过程(如 mp->setDataSource( httpService, pathStr, headersVector.size() > 0? &headersVector : NULL),那有人肯定会问了?这样来回调的好处是什么?

  • 安全性,封装在native层的代码以so形式,破环性风险小
  • 效率快,在运行速度上c++执行时间快,且底层也是c++写的。可以对复杂的渲染及对时间要求高的,放在native是最好不过的选择了。
  • 连通性,正向调用将值进行传入,反向调用把处理过值通知回去。相当于一根管道一样。

MediaPlayer的setDisplay过程

接下来看下在setDataSource之后,开始进行mp.setDisplay(holder)

MediaPLayer.java -> setDisplay

对于2,同样在android_media_MediaPlayer.cpp找到其对应方法:





这里有几个概念要理解下:

  • SurfaceTexture: SurfaceTexture是从Android3.0(API 11)加入的一个新类。这个类跟SurfaceView很像,可以从video decode里面获取图像流(image stream)。但是,和SurfaceView不同的是,SurfaceTexture在接收图像流之后,不需要显示出来。SurfaceTexture不需要显示到屏幕上,因此我们可以用SurfaceTexture接收来自decode出来的图像流,然后从SurfaceTexture中取得图像帧的拷贝进行处理,处理完毕后再送给另一个SurfaceView用于显示即可。
  • Surface: 处理被屏幕排序的原生的buffer,Android中的Surface就是一个用来画图形(graphics)或图像(image)的地方,对于View及其子类,都是画在Surface上,各Surface对象通过Surfaceflinger合成到frameBuffer,每个Surface都是双缓冲(实际上就是两个线程,一个渲染线程,一个UI更新线程),它有一个backBuffer和一个frontBuffer,Surface中创建了Canvas对象,用来管理Surface绘图操作,Canvas对应Bitmap,存储Surface中的内容。
  • SurfaceView: 这个可能经常被说起,在Camera,MediaRecorder,MediaPlayer中用来显示图像的。SurfaceView是View的子类,且实现了Parcelable接口且实现了Parcelable接口,其中内嵌了一个专门用于绘制的Surface,SurfaceView可以控制这个Surface的格式和尺寸,以及Surface的绘制位置。可以理解为Surface就是管理数据的地方,SurfaceView就是展示数据的地方。
  • SurfaceHolder:顾名思义,一个管理SurfaceHolder的容器。SurfaceHolder是一个接口,可理解为一个Surface的监听器。

    通过回调方法addCallback(SurfaceHolder.Callback callback )监听Surface的创建

    通过获取Surface中的Canvas对象,并锁定之。所得到的Canvas对象

    通过当修改Surface中的数据完成后,释放同步锁,并提交改变Surface的状态及图像,将新的图像数据进行展示。
  • 而最后综合:SurfaceView中调用getHolder方法,可以获得当前SurfaceView中的Surface对应的SurfaceHolder,SurfaceHolder开始对Surface进行管理操作。这里其实按MVC模式理解的话,可以更好理解。M:Surface(图像数据),V:SurfaceView(图像展示),C:SurfaceHolder(图像数据管理)。MediaPlayer.java中setDisPlay的操作就是对将要显示的视频设预设置。

    以上就是setDisPlay过程,java中setDisPlay最后一行,就是通过jni返回的Surface,时时做好更新准备。

第一时间获得博客更新提醒,以及更多android干货,源码分析,欢迎关注我的微信公众号,扫一扫下方二维码或者长按识别二维码,即可关注。

如果你觉得好,随手点赞,也是对笔者的肯定,也可以分享此公众号给你更多的人,原创不易

Android Multimedia框架总结(三)MediaPlayer中创建到setDataSource过程的更多相关文章

  1. MediaPlayer中创建AudioTrack的过程

    使用MediaPlayer播放音视频时,会创建AudioTrack对象用于播放音频数据.下面就来看看MediaPlayer创建AudioTrack的过程: 1.创建AudioTrack对象MediaP ...

  2. Android Multimedia框架总结(七)C++中MediaPlayer的C/S架构补充及MediaService介绍

    转载请把头部出处链接和尾部二维码一起转载,本文出自逆流的鱼,文章链接: http://blog.csdn.net/hejjunlin/article/details/52465168 前面一篇主要介绍 ...

  3. Android Multimedia框架总结(四)MediaPlayer中从Java层到C++层类关系及prepare及之后其他过程

    转载请把头部出处链接和尾部二维码一起转载,本文出自:http://blog.csdn.net/hejjunlin/article/details/52420803 前言:在上篇中,分析了MediaPl ...

  4. Android Multimedia框架总结(六)C++中MediaPlayer的C/S架构

    转载请把头部出处链接和尾部二维码一起转载,本文出自: http://blog.csdn.net/hejjunlin/article/details/52435789 前面几节中,都是通过java层调用 ...

  5. Android Multimedia框架总结(二十二)MediaCodec中C++中创建到start过程及状态变换

    上一章介绍MediaCodec中创建到start过程(到jni部分),从今天开始,将深入源码中看看其c++过程,看下Agenda如下: mediacodec.h CreateByType initMe ...

  6. Android Multimedia框架总结(一)MediaPlayer介绍之状态图及生命周期

    请尊重分享成果,转载请注明出处: http://blog.csdn.net/hejjunlin/article/details/52349221 前言:从本篇开始,将进入Multimedia框架,包含 ...

  7. Android Multimedia框架总结(十五)Camera框架之Camera2补充

    转载请把头部出处链接和尾部二维码一起转载,本文出自逆流的鱼yuiop:http://blog.csdn.net/hejjunlin/article/details/52751055 前言:监于5.0之 ...

  8. Android Multimedia框架总结(十一)CodeC部分之AwesomePlayer到OMX服务

    转载请把头部出处链接和尾部二维码一起转载,本文出自逆流的鱼yuiop:http://blog.csdn.net/hejjunlin/article/details/52623882 前言:上篇文< ...

  9. Android Multimedia框架总结(九)Stagefright框架之数据处理及到OMXCodec过程

    转载请把头部出处链接和尾部二维码一起转载,本文出自逆流的鱼:http://blog.csdn.net/hejjunlin/article/details/52532085 不知不觉到第九篇了,感觉还有 ...

随机推荐

  1. JavaScript数组操作总结

    以前特别相信自己的大脑,后来,再也不相信了!大脑是虚无的,重要的东西一定要让它有一个物质的具体的副本.事无巨细! 1.创建数组: new Array(); new Array(size); new A ...

  2. js在光标处插入内容

    //场景一 简易的页面可以这样写var range = window.getSelection().getRangeAt(0);range.insertNode(document.createText ...

  3. Scrapy选择器的用法

    1.构造选择器: >>> response = HtmlResponse(url='http://example.com', body=body) >>> Sele ...

  4. 使用Keras对交通标志进行分类

    # 使用Keras对交通标志进行分类 一.概述 本文主要记录的在使用Keras过程中,实现交通标志分类,数据集使用的是. 文本主要使用的环境为: Python3.5.2 Tensorflow 1.7 ...

  5. P3928 SAC E#1 - 一道简单题 Sequence2

    题目背景 小强和阿米巴是好朋友. 题目描述 小强喜欢数列.有一天,他心血来潮,写下了三个长度均为n的数列. 阿米巴也很喜欢数列.但是他只喜欢其中一种,波动数列. 阿米巴把他的喜好告诉了小强.小强便打算 ...

  6. [JSOI2007]祖码Zuma

    题目描述 这是一个流行在Jsoi的游戏,名称为祖玛. 精致细腻的背景,外加神秘的印加音乐衬托,彷佛置身在古老的国度里面,进行一个神秘的游戏——这就是著名的祖玛游戏.祖玛游戏的主角是一只石青蛙,石青蛙会 ...

  7. ●codeforces 553E Kyoya and Train

    题链: http://codeforces.com/problemset/problem/623/E 题解: FFT,DP 题意: 一个有向图,给出每条边的起点u,终点v,费用c,以及花费每种时间的概 ...

  8. bzoj3156防御准备 斜率优化dp

    3156: 防御准备 Time Limit: 10 Sec  Memory Limit: 512 MBSubmit: 2279  Solved: 959[Submit][Status][Discuss ...

  9. Unity3d 简单的小球沿贝塞尔曲线运动(适合场景漫游使用)

        简单的小球沿贝塞尔曲线运动,适合场景漫游使用 贝塞尔曲线:(贝塞尔曲线的基本想法部分摘自http://blog.csdn.net/u010019717/article/details/4768 ...

  10. Python中文件的操作

    文件的操作介绍 文件打开的方法 主要有两种: no with 格式:open(file, mode='r', buffering=-1, encoding=None, errors=None, new ...