【GStreamer开发】GStreamer播放教程04——既看式流
目的
在《GStreamer基础教程——流》里面我们展示了如何在较差的网络条件下使用缓冲这个机制来提升用户体验。本教程在《GStreamer基础教程——流》的基础上在扩展了一下,增加了把流的内容在本地存储。并且展示了:
如何开启既看式下载
如何知道下载的是什么
如何知道在哪里下载
如何限制下载数据的总量
介绍
当播放流的时候,从网络上获得的数据被锁住之后,会创建称为future-data的一个小的缓冲区。然而,在数据播放渲染之后就会被丢弃。这就意味着,如果用户想要倒回前面去看,相应地数据仍然需要再次下载。
像YouTube一样,播放流时播放器往往会裁剪,通常会把所有下载的数据都在本地保存,还会提供一个图形化的界面来显示已经下载了多少内容。
playbin2通过DOWNLOAD标志提供了一个比较类似的功能,它会把数据在本次临时保存起来用于在播放已经下载的部分时可以保持顺畅。
代码里面同时展示了如何使用缓冲查询,它可以让你知道哪部分的文件已经可用了。
一个适应网络并在本地存储数据的例子
- <span style="font-size:14px;">#include <gst/gst.h>
- #include <string.h>
- #define GRAPH_LENGTH 80
- /* playbin2 flags */
- typedef enum {
- << 7) /* Enable progressive download (on selected formats) */
- } GstPlayFlags;
- typedef struct _CustomData {
- gboolean is_live;
- GstElement *pipeline;
- GMainLoop *loop;
- gint buffering_level;
- } CustomData;
- static void got_location (GstObject *gstobject, GstObject *prop_object, GParamSpec *prop, gpointer data) {
- gchar *location;
- g_object_get (G_OBJECT (prop_object), "temp-location", &location, NULL);
- g_print ("Temporary file: %s\n", location);
- /* Uncomment this line to keep the temporary file after the program exits */
- /* g_object_set (G_OBJECT (prop_object), "temp-remove", FALSE, NULL); */
- }
- static void cb_message (GstBus *bus, GstMessage *msg, CustomData *data) {
- switch (GST_MESSAGE_TYPE (msg)) {
- case GST_MESSAGE_ERROR: {
- GError *err;
- gchar *debug;
- gst_message_parse_error (msg, &err, &debug);
- g_print ("Error: %s\n", err->message);
- g_error_free (err);
- g_free (debug);
- gst_element_set_state (data->pipeline, GST_STATE_READY);
- g_main_loop_quit (data->loop);
- break;
- }
- case GST_MESSAGE_EOS:
- /* end-of-stream */
- gst_element_set_state (data->pipeline, GST_STATE_READY);
- g_main_loop_quit (data->loop);
- break;
- case GST_MESSAGE_BUFFERING:
- /* If the stream is live, we do not care about buffering. */
- if (data->is_live) break;
- gst_message_parse_buffering (msg, &data->buffering_level);
- /* Wait until buffering is complete before start/resume playing */
- 00)
- gst_element_set_state (data->pipeline, GST_STATE_PAUSED);
- else
- gst_element_set_state (data->pipeline, GST_STATE_PLAYING);
- break;
- case GST_MESSAGE_CLOCK_LOST:
- /* Get a new clock */
- gst_element_set_state (data->pipeline, GST_STATE_PAUSED);
- gst_element_set_state (data->pipeline, GST_STATE_PLAYING);
- break;
- default:
- /* Unhandled message */
- break;
- }
- }
- static gboolean refresh_ui (CustomData *data) {
- GstQuery *query;
- gboolean result;
- query = gst_query_new_buffering (GST_FORMAT_PERCENT);
- result = gst_element_query (data->pipeline, query);
- if (result) {
- gint n_ranges, range, i;
- gchar graph[GRAPH_LENGTH + 1];
- GstFormat format = GST_FORMAT_TIME;
- 4 position = 0, duration = 0;
- memset (graph, ' ', GRAPH_LENGTH);
- graph[GRAPH_LENGTH] = '\0';
- n_ranges = gst_query_get_n_buffering_ranges (query);
- ; range < n_ranges; range++) {
- 4 start, stop;
- gst_query_parse_nth_buffering_range (query, range, &start, &stop);
- 00;
- 00;
- for (i = (gint)start; i < stop; i++)
- graph [i] = '-';
- }
- if (gst_element_query_position (data->pipeline, &format, &position) &&
- GST_CLOCK_TIME_IS_VALID (position) &&
- gst_element_query_duration (data->pipeline, &format, &duration) &&
- GST_CLOCK_TIME_IS_VALID (duration)) {
- ));
- 00 ? 'X' : '>';
- }
- g_print ("[%s]", graph);
- 00) {
- g_print (" Buffering: %3d%%", data->buffering_level);
- } else {
- g_print (" ");
- }
- g_print ("\r");
- }
- return TRUE;
- }
- int main(int argc, charchar *argv[]) {
- GstElement *pipeline;
- GstBus *bus;
- GstStateChangeReturn ret;
- GMainLoop *main_loop;
- CustomData data;
- guint flags;
- /* Initialize GStreamer */
- gst_init (&argc, &argv);
- /* Initialize our data structure */
- , sizeof (data));
- 00;
- /* Build the pipeline */
- pipeline = gst_parse_launch ("playbin2 uri=http://docs.gstreamer.com/media/sintel_trailer-480p.webm", NULL);
- bus = gst_element_get_bus (pipeline);
- /* Set the download flag */
- g_object_get (pipeline, "flags", &flags, NULL);
- flags |= GST_PLAY_FLAG_DOWNLOAD;
- g_object_set (pipeline, "flags", flags, NULL);
- /* Uncomment this line to limit the amount of downloaded data */
- /* g_object_set (pipeline, "ring-buffer-max-size", (guint64)4000000, NULL); */
- /* Start playing */
- ret = gst_element_set_state (pipeline, GST_STATE_PLAYING);
- if (ret == GST_STATE_CHANGE_FAILURE) {
- g_printerr ("Unable to set the pipeline to the playing state.\n");
- gst_object_unref (pipeline);
- ;
- } else if (ret == GST_STATE_CHANGE_NO_PREROLL) {
- data.is_live = TRUE;
- }
- main_loop = g_main_loop_new (NULL, FALSE);
- data.loop = main_loop;
- data.pipeline = pipeline;
- gst_bus_add_signal_watch (bus);
- g_signal_connect (bus, "message", G_CALLBACK (cb_message), &data);
- g_signal_connect (pipeline, "deep-notify::temp-location", G_CALLBACK (got_location), NULL);
- /* Register a function that GLib will call every second */
- , (GSourceFunc)refresh_ui, &data);
- g_main_loop_run (main_loop);
- /* Free resources */
- g_main_loop_unref (main_loop);
- gst_object_unref (bus);
- gst_element_set_state (pipeline, GST_STATE_NULL);
- gst_object_unref (pipeline);
- g_print ("\n");
- ;
- }</span>
工作流程
这份代码是基于《GStreamer基础教程——流》里面例子的,我们仅仅看一下不同的地方即可。
创建
- <span style="font-size:14px;"> /* Set the download flag */
- g_object_get (pipeline, "flags", &flags, NULL);
- flags |= GST_PLAY_FLAG_DOWNLOAD;
- g_object_set (pipeline, "flags", flags, NULL);</span>
通过设置这个标志,playbin2通知它内部的queue存储所有下载的数据。
- <span style="font-size:14px;">g_signal_connect (pipeline, "deep-notify::temp-location", G_CALLBACK (got_location), NULL);</span>
当它们的子element属性发生变化时,playbin2就会发出deep-notify信号。在这里我们希望知道temp-location属性是什么时候变化的,了解queue2会把下载的数据存在哪里。
- <span style="font-size:14px;">static void got_location (GstObject *gstobject, GstObject *prop_object, GParamSpec *prop, gpointer data) {
- gchar *location;
- g_object_get (G_OBJECT (prop_object), "temp-location", &location, NULL);
- g_print ("Temporary file: %s\n", location);
- /* Uncomment this line to keep the temporary file after the program exits */
- /* g_object_set (G_OBJECT (prop_object), "temp-remove", FALSE, NULL); */
- }</span>
这个temp-location属性是从发出信号的element那里获得的并打印出来。
当pipeline状态从PAUSED切换到READY时,这个文件会被删除。正如注释里面写的那样,你可以通过设置queue2的temp-remove属性位FALSE来保留下载的数据。
UI
在main函数里我们启动了一个1s的定时器,这样可以每秒刷新一下UI界面。
- /* Register a function that GLib will call every second */
- , (GSourceFunc)refresh_ui, &data);
refresh_ui方法会查询pipeline来了解当前下载的数据在文件的位置以及当前播放的位置。并且用一种动画的方式在屏幕上显示出来。
- [---->------- ]
这里的'-'代表的是下载的部分,'>'代表的是当前播放的位置(当暂停的时候变成'X'位置)。当你的网络速度足够快得时候你可能会看不到下载的动画,在开始的时候就下载结束了。
- static gboolean refresh_ui (CustomData *data) {
- GstQuery *query;
- gboolean result;
- query = gst_query_new_buffering (GST_FORMAT_PERCENT);
- result = gst_element_query (data->pipeline, query);
我们在refresh_ui里面做的第一件事是就是用gst_query_new_buffering()创建一个GstQuery对象,并用gst_element_query()传给playbin2。在《GStreamer基础教程04——时间管理》里面我们展示了如何用明确的方法来查询位置/播放总时间等,如果要查询更复杂一些的内容(比如缓冲),那么我们会用更通用的gst_element_query()方法。
缓冲的查询可以基于不同的GstFormat,并非所有的element都可以响应所有格式的查询,所以需要检查在pipeline里支持哪些格式。如果gst_element_query()返回TRUE,那么查询是成功的。查询的结果用GstQuery封装起来,可以用下面的方法来解析:
- n_ranges = gst_query_get_n_buffering_ranges (query);
- ; range < n_ranges; range++) {
- 4 start, stop;
- gst_query_parse_nth_buffering_range (query, range, &start, &stop);
- 00;
- 00;
- for (i = (gint)start; i < stop; i++)
- graph [i] = '-';
- }
数据并不需要保证被按照顺序从头开始下载,因为跳跃播放时会让下载从一个新的地方开始。因此,gst_query_get_n_buffering_ranges()返回下载块的数目或者范围,然后我们用gst_query_parse_nth_buffering_rang()方法来解析下载块的位置和大小。
我们在调用gst_query_new_buffering()的请求会决定返回数据的格式,在这个例子里面,返回值是比例。这些查询到得数据用来绘制UI的下载动画。
- if (gst_element_query_position (data->pipeline, &format, &position) &&
- GST_CLOCK_TIME_IS_VALID (position) &&
- gst_element_query_duration (data->pipeline, &format, &duration) &&
- GST_CLOCK_TIME_IS_VALID (duration)) {
- ));
- 00 ? 'X' : '>';
- }
下一步就是当前位置的查询。它也支持比例的格式,所以代码和前面应该比较类似。不过这部分目前支持不是很好,所以我们使用了时间这个格式。
当前位置使用'>'或者'X'来表示,如果缓冲不到100%,cb_message会让pipeline处于PAUSE状态,那样我们就显示'X',如果已经满了100%,那么pipeline就在PLAYING状态,我们就显示'>'。
- 00) {
- g_print (" Buffering: %3d%%", data->buffering_level);
- } else {
- g_print (" ");
- }
最后,如果缓冲时钟小于100%,我们就把这个数据显示出来。
限制下载文件的大小
- /* Uncomment this line to limit the amount of downloaded data */
- /* g_object_set (pipeline, "ring-buffer-max-size", (guint64)4000000, NULL); */
打开139行的注释,让我们看看这个是如何做到的。缩小临时文件的大小,这样播放过的区域就会被覆盖。
【GStreamer开发】GStreamer播放教程04——既看式流的更多相关文章
- IE开发人员工具教程
写在前面 一直非常谷歌的控制台,因为我是做前端的,谷歌浏览器在我看来是解析JS最快的浏览器,所谓的熟能生巧,用熟悉了谷歌浏览器之后就特别喜欢用谷歌的控制台调试脚本.改变样式.查看HTML.查看资源加载 ...
- 【GStreamer开发】GStreamer基础教程13——播放速度
目标 快进,倒放和慢放是trick模式的共同技巧,它们有一个共同点就是它们都修改了播放的速度.本教程会展示如何来获得这些效果和如何进行逐帧的跳跃.主要内容是: 如何来变换播放的速度,变快或者变慢,前进 ...
- 【GStreamer开发】GStreamer基础教程04——时间管理
目标 本教程主要讲述一些和时间相关的内容.主要包括: 1. 如何问pipeline查询到流的总时间和当前播放的时间 2. 如何在流内部实现跳转功能 介绍 GstQuery是向一个element或者pa ...
- 【GStreamer开发】GStreamer播放教程01——playbin2的使用
目标 我们前面已经使用过了playbin2这个element,它可以让我们做的很少而实现很多.本教程会展示当这个element的默认设置在一些特殊情形下不符合我们的需求是可以做的一些深度定制,我们会看 ...
- 【GStreamer开发】GStreamer基础教程05——集成GUI工具
目标 本教程展示了如何在GStreamer集成一个GUI(比如:GTK+).最基本的原则是GStreamer处理多媒体的播放而GUI处理和用户的交互. 在这个教程里面,我们可以学到: 如何告诉GStr ...
- gstreamer应用开发(播放器)之旅
GStreamer开发,主要分为两块:应用开发.插件开发. 插件开发人员,通常是编解码库的作者(做出了编解码库后,希望gstreamer能用起来这个库,因此增加这个适配层).芯片原厂人员(将自家的hw ...
- 【转】一步一步教你在Ubuntu12.04搭建gstreamer开发环境
原文网址:http://blog.csdn.net/xsl1990/article/details/8333062 闲得蛋疼 无聊寂寞冷 随便写写弄弄 看到网上蛮多搭建gstreamer开 ...
- 安装gstreamer开发环境
ubuntu中安装gstreamer开发环境: * 安装gstreamer基本库,工具,以及插件 sudo apt--dev gstreamer-tools gstreamer0.-tools gst ...
- C#开发Unity游戏教程循环遍历做出判断及Unity游戏示例
C#开发Unity游戏教程循环遍历做出判断及Unity游戏示例 Unity中循环遍历每个数据,并做出判断 很多时候,游戏在玩家做出判断以后,游戏程序会遍历玩家身上大量的所需数据,然后做出判断,即首先判 ...
随机推荐
- 10分钟用Python告诉你两个机器人聊天能聊出什么火花
欲直接下载代码文件,关注我们的公众号哦!查看历史消息即可! 现在不是讲各种各样的人工智能嘛,AI下棋,AI客服,AI玩家--其实我一直很好奇,两个AI碰上会怎样,比如一起下棋,一起打游戏-- 今天做个 ...
- HTML meta pragma no-cache 页面缓存
HTML meta pragma no-cache 页面缓存不缓存页面(为了提高速度一些浏览器会缓存浏览者浏览过的页面,通过下面的定义,浏览器一般不会缓存页面,而且浏览器无法脱机浏览.) <me ...
- EasyTrader踩坑之旅总结
easytrader是用python写的可以调用主要券商完成自动化炒股的一个软件 ,但我用的是同花顺,在研究过程中,发现同花顺暂时调不通.后来搜索发现thstrade的源码作者说是easytrad ...
- IDEA控制台乱码终极解决方案
1. 问题描述 由于本机的IDEA 2019.1出现了无法连接插件商店和Spring Boot模板的问题,就重装了了最新的IDEA 2019.2.4版本,使用了一段时间以后,没有改任何的配置,控制台的 ...
- Git的使用(5) —— 在IDEA上使用
1. 在IDEA中配置Git 前言:IDEA中鼓捣Git是真的费劲,建议还是用TortoiseGit. 打开IDEA的Settings,左侧菜单列表中的Version Control里面找到Git. ...
- 2019-2020-1 20175313 《信息安全系统设计基础》实现mypwd
目录 MyPWD 一.题目要求 二.题目理解 三.需求分析 四.设计思路 五.伪代码分析 六.码云链接 七.运行结果截图 MyPWD 一.题目要求 学习pwd命令 研究pwd实现需要的系统调用(man ...
- Oracle通过一个字段的值将一条记录拆分为多条记录
前言 之前遇到了一次这样的需求,当时没有记录,这一次又赶上了,简单的记录一下. 本文个人拙见,若有出入,请指出--来自菜的颤抖 场景 表A中存放了集装箱的信息,一个集装箱一条记录,表B中存放了对于集装 ...
- 如何登陆Tomcat的控制台
当我们成功安装启动Tomcat服务后,在浏览器输入http://localhost:8080(8080是Tomcat的默认端口,可自行修改)回车 右上角可以看到三个控制台:Server Status. ...
- 查看 systemctl 崩溃日志 及 运行日志
vi /var/log/syslog 查看指定服务的: grep "bx" /var/log/syslog
- 文献阅读 | Benchmarking single cell RNA-sequencing analysis pipelines using mixture control experiments
资源: sci-hub paper CellBench package - github CellBench_data - code for the paper 现在单细胞领域的突出问题就是工具过多, ...