plugins/elements/gstdownloadbuffer.c

   1 /* GStreamer
   2  * Copyright (C) 2014 Wim Taymans <wim.taymans@gmail.com>
   3  *
   4  * gstdownloadbuffer.c:
   5  *
   6  * This library is free software; you can redistribute it and/or
   7  * modify it under the terms of the GNU Library General Public
   8  * License as published by the Free Software Foundation; either
   9  * version 2 of the License, or (at your option) any later version.
  10  *
  11  * This library is distributed in the hope that it will be useful,
  12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  14  * Library General Public License for more details.
  15  *
  16  * You should have received a copy of the GNU Library General Public
  17  * License along with this library; if not, write to the
  18  * Free Software Foundation, Inc., 51 Franklin St, Fifth Floor,
  19  * Boston, MA 02110-1301, USA.
  20  */
  21
  22 /**
  23  * SECTION:element-downloadbuffer
  24  * @title: downloadbuffer
  25  *
  26  * The downloadbuffer element provides on-disk buffering and caching of, typically,
  27  * a network file. temp-template should be set to a value such as
  28  * /tmp/gstreamer-XXXXXX and the element will allocate a random free filename and
  29  * buffer the data in the file.
  30  *
  31  * With max-size-bytes and max-size-time you can configure the buffering limits.
  32  * The downloadbuffer element will try to read-ahead these amounts of data. When
  33  * the amount of read-ahead data drops below low-percent of the configured max,
  34  * the element will start emitting BUFFERING messages until high-percent of max is
  35  * reached again.
  36  *
  37  * The downloadbuffer provides push and pull based scheduling on its source pad
  38  * and will efficiently seek in the upstream element when needed.
  39  *
  40  * The temp-location property will be used to notify the application of the
  41  * allocated filename.
  42  *
  43  * When the downloadbuffer has completely downloaded the media, it will
  44  * post an application message named  <classname>&quot;GstCacheDownloadComplete&quot;</classname>
  45  * with the following information:
  46  *
  47  * *
  48  *   G_TYPE_STRING
  49  *   <classname>&quot;location&quot;</classname>:
  50  *   the location of the completely downloaded file.
  51  *
  52  */
  53
  54 #ifdef HAVE_CONFIG_H
  55 #include "config.h"
  56 #endif
  57
  58 #include "gstdownloadbuffer.h"
  59
  60 #include <glib/gstdio.h>
  61
  62 #include "gst/gst-i18n-lib.h"
  63 #include "gst/glib-compat-private.h"
  64
  65 #include <string.h>
  66
  67 #ifdef G_OS_WIN32
  68 #include <io.h>                 /* lseek, open, close, read */
  69 #undef lseek
  70 #define lseek _lseeki64
  71 #else
  72 #include <unistd.h>
  73 #endif
  74
  75 #ifdef __BIONIC__
  76 #include <fcntl.h>
  77 #endif
  78
  79 static GstStaticPadTemplate sinktemplate = GST_STATIC_PAD_TEMPLATE ("sink",
  80     GST_PAD_SINK,
  81     GST_PAD_ALWAYS,
  82     GST_STATIC_CAPS_ANY);
  83
  84 static GstStaticPadTemplate srctemplate = GST_STATIC_PAD_TEMPLATE ("src",
  85     GST_PAD_SRC,
  86     GST_PAD_ALWAYS,
  87     GST_STATIC_CAPS_ANY);
  88
  89 GST_DEBUG_CATEGORY_STATIC (downloadbuffer_debug);
  90 #define GST_CAT_DEFAULT (downloadbuffer_debug)
  91
  92 enum
  93 {
  94   LAST_SIGNAL
  95 };
  96
  97 /* other defines */
  98 #define DEFAULT_BUFFER_SIZE 4096
  99
 100 /* default property values */
 101 #define DEFAULT_MAX_SIZE_BYTES     (2 * 1024 * 1024)    /* 2 MB */
 102 #define DEFAULT_MAX_SIZE_TIME      2 * GST_SECOND       /* 2 seconds */
 103 #define DEFAULT_LOW_PERCENT        10
 104 #define DEFAULT_HIGH_PERCENT       99
 105 #define DEFAULT_TEMP_REMOVE        TRUE
 106
 107 enum
 108 {
 109   PROP_0,
 110   PROP_MAX_SIZE_BYTES,
 111   PROP_MAX_SIZE_TIME,
 112   PROP_LOW_PERCENT,
 113   PROP_HIGH_PERCENT,
 114   PROP_TEMP_TEMPLATE,
 115   PROP_TEMP_LOCATION,
 116   PROP_TEMP_REMOVE,
 117   PROP_LAST
 118 };
 119
 120 #define GST_DOWNLOAD_BUFFER_CLEAR_LEVEL(l) G_STMT_START {         \
 121   l.bytes = 0;                                          \
 122   l.time = 0;                                           \
 123 } G_STMT_END
 124
 125 #define STATUS(elem, pad, msg) \
 126   GST_LOG_OBJECT (elem, "(%s:%s) " msg ": %u of %u " \
 127                       "bytes, %" G_GUINT64_FORMAT " of %" G_GUINT64_FORMAT \
 128                       " ns", \
 129                       GST_DEBUG_PAD_NAME (pad), \
 130                       elem->cur_level.bytes, \
 131                       elem->max_level.bytes, \
 132                       elem->cur_level.time, \
 133                       elem->max_level.time)
 134
 135 #define GST_DOWNLOAD_BUFFER_MUTEX_LOCK(q) G_STMT_START {                          \
 136   g_mutex_lock (&q->qlock);                                              \
 137 } G_STMT_END
 138
 139 #define GST_DOWNLOAD_BUFFER_MUTEX_LOCK_CHECK(q,res,label) G_STMT_START {         \
 140   GST_DOWNLOAD_BUFFER_MUTEX_LOCK (q);                                            \
 141   if (res != GST_FLOW_OK)                                               \
 142     goto label;                                                         \
 143 } G_STMT_END
 144
 145 #define GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK(q) G_STMT_START {                        \
 146   g_mutex_unlock (&q->qlock);                                            \
 147 } G_STMT_END
 148
 149 #define GST_DOWNLOAD_BUFFER_WAIT_ADD_CHECK(q, res, o, label) G_STMT_START {       \
 150   STATUS (q, q->srcpad, "wait for ADD");                            \
 151   q->waiting_add = TRUE;                                                \
 152   q->waiting_offset = o;                                                \
 153   g_cond_wait (&q->item_add, &q->qlock);                                \
 154   q->waiting_add = FALSE;                                               \
 155   if (res != GST_FLOW_OK) {                                             \
 156     STATUS (q, q->srcpad, "received ADD wakeup");                   \
 157     goto label;                                                         \
 158   }                                                                     \
 159   STATUS (q, q->srcpad, "received ADD");                            \
 160 } G_STMT_END
 161
 162 #define GST_DOWNLOAD_BUFFER_SIGNAL_ADD(q, o) G_STMT_START {                       \
 163   if (q->waiting_add && q->waiting_offset <= o) {                       \
 164     STATUS (q, q->sinkpad, "signal ADD");                               \
 165     g_cond_signal (&q->item_add);                                       \
 166   }                                                                     \
 167 } G_STMT_END
 168
 169 #define _do_init \
 170     GST_DEBUG_CATEGORY_INIT (downloadbuffer_debug, "downloadbuffer", 0, \
 171         "downloadbuffer element");
 172
 173 #define gst_download_buffer_parent_class parent_class
 174 G_DEFINE_TYPE_WITH_CODE (GstDownloadBuffer, gst_download_buffer,
 175     GST_TYPE_ELEMENT, _do_init);
 176
 177 static GstMessage *update_buffering (GstDownloadBuffer * dlbuf);
 178
 179 static void gst_download_buffer_finalize (GObject * object);
 180
 181 static void gst_download_buffer_set_property (GObject * object,
 182     guint prop_id, const GValue * value, GParamSpec * pspec);
 183 static void gst_download_buffer_get_property (GObject * object,
 184     guint prop_id, GValue * value, GParamSpec * pspec);
 185
 186 static GstFlowReturn gst_download_buffer_chain (GstPad * pad,
 187     GstObject * parent, GstBuffer * buffer);
 188 static void gst_download_buffer_loop (GstPad * pad);
 189
 190 static gboolean gst_download_buffer_handle_sink_event (GstPad * pad,
 191     GstObject * parent, GstEvent * event);
 192 static gboolean gst_download_buffer_handle_sink_query (GstPad * pad,
 193     GstObject * parent, GstQuery * query);
 194
 195 static gboolean gst_download_buffer_handle_src_event (GstPad * pad,
 196     GstObject * parent, GstEvent * event);
 197 static gboolean gst_download_buffer_handle_src_query (GstPad * pad,
 198     GstObject * parent, GstQuery * query);
 199 static gboolean gst_download_buffer_handle_query (GstElement * element,
 200     GstQuery * query);
 201
 202 static GstFlowReturn gst_download_buffer_get_range (GstPad * pad,
 203     GstObject * parent, guint64 offset, guint length, GstBuffer ** buffer);
 204
 205 static gboolean gst_download_buffer_src_activate_mode (GstPad * pad,
 206     GstObject * parent, GstPadMode mode, gboolean active);
 207 static gboolean gst_download_buffer_sink_activate_mode (GstPad * pad,
 208     GstObject * parent, GstPadMode mode, gboolean active);
 209 static GstStateChangeReturn gst_download_buffer_change_state (GstElement *
 210     element, GstStateChange transition);
 211
 212 /* static guint gst_download_buffer_signals[LAST_SIGNAL] = { 0 }; */
 213
 214 static void
 215 gst_download_buffer_class_init (GstDownloadBufferClass * klass)
 216 {
 217   GObjectClass *gobject_class = G_OBJECT_CLASS (klass);
 218   GstElementClass *gstelement_class = GST_ELEMENT_CLASS (klass);
 219
 220   gobject_class->set_property = gst_download_buffer_set_property;
 221   gobject_class->get_property = gst_download_buffer_get_property;
 222
 223   /* properties */
 224   g_object_class_install_property (gobject_class, PROP_MAX_SIZE_BYTES,
 225       g_param_spec_uint ("max-size-bytes", "Max. size (kB)",
 226           "Max. amount of data to buffer (bytes, 0=disable)",
 227           0, G_MAXUINT, DEFAULT_MAX_SIZE_BYTES,
 228           G_PARAM_READWRITE | GST_PARAM_MUTABLE_PLAYING |
 229           G_PARAM_STATIC_STRINGS));
 230   g_object_class_install_property (gobject_class, PROP_MAX_SIZE_TIME,
 231       g_param_spec_uint64 ("max-size-time", "Max. size (ns)",
 232           "Max. amount of data to buffer (in ns, 0=disable)", 0, G_MAXUINT64,
 233           DEFAULT_MAX_SIZE_TIME, G_PARAM_READWRITE | GST_PARAM_MUTABLE_PLAYING |
 234           G_PARAM_STATIC_STRINGS));
 235
 236   g_object_class_install_property (gobject_class, PROP_LOW_PERCENT,
 237       g_param_spec_int ("low-percent", "Low percent",
 238           "Low threshold for buffering to start. Only used if use-buffering is True",
 239           0, 100, DEFAULT_LOW_PERCENT,
 240           G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
 241   g_object_class_install_property (gobject_class, PROP_HIGH_PERCENT,
 242       g_param_spec_int ("high-percent", "High percent",
 243           "High threshold for buffering to finish. Only used if use-buffering is True",
 244           0, 100, DEFAULT_HIGH_PERCENT,
 245           G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
 246
 247   g_object_class_install_property (gobject_class, PROP_TEMP_TEMPLATE,
 248       g_param_spec_string ("temp-template", "Temporary File Template",
 249           "File template to store temporary files in, should contain directory "
 250           "and XXXXXX. (NULL == disabled)",
 251           NULL, G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
 252
 253   g_object_class_install_property (gobject_class, PROP_TEMP_LOCATION,
 254       g_param_spec_string ("temp-location", "Temporary File Location",
 255           "Location to store temporary files in (Only read this property, "
 256           "use temp-template to configure the name template)",
 257           NULL, G_PARAM_READABLE | G_PARAM_STATIC_STRINGS));
 258
 259   /**
 260    * GstDownloadBuffer:temp-remove
 261    *
 262    * When temp-template is set, remove the temporary file when going to READY.
 263    */
 264   g_object_class_install_property (gobject_class, PROP_TEMP_REMOVE,
 265       g_param_spec_boolean ("temp-remove", "Remove the Temporary File",
 266           "Remove the temp-location after use",
 267           DEFAULT_TEMP_REMOVE, G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
 268
 269   /* set several parent class virtual functions */
 270   gobject_class->finalize = gst_download_buffer_finalize;
 271
 272   gst_element_class_add_static_pad_template (gstelement_class, &srctemplate);
 273   gst_element_class_add_static_pad_template (gstelement_class, &sinktemplate);
 274
 275   gst_element_class_set_static_metadata (gstelement_class, "DownloadBuffer",
 276       "Generic", "Download Buffer element",
 277       "Wim Taymans <wim.taymans@gmail.com>");
 278
 279   gstelement_class->change_state =
 280       GST_DEBUG_FUNCPTR (gst_download_buffer_change_state);
 281   gstelement_class->query =
 282       GST_DEBUG_FUNCPTR (gst_download_buffer_handle_query);
 283 }
 284
 285 static void
 286 gst_download_buffer_init (GstDownloadBuffer * dlbuf)
 287 {
 288   dlbuf->sinkpad = gst_pad_new_from_static_template (&sinktemplate, "sink");
 289
 290   gst_pad_set_chain_function (dlbuf->sinkpad,
 291       GST_DEBUG_FUNCPTR (gst_download_buffer_chain));
 292   gst_pad_set_activatemode_function (dlbuf->sinkpad,
 293       GST_DEBUG_FUNCPTR (gst_download_buffer_sink_activate_mode));
 294   gst_pad_set_event_function (dlbuf->sinkpad,
 295       GST_DEBUG_FUNCPTR (gst_download_buffer_handle_sink_event));
 296   gst_pad_set_query_function (dlbuf->sinkpad,
 297       GST_DEBUG_FUNCPTR (gst_download_buffer_handle_sink_query));
 298   GST_PAD_SET_PROXY_CAPS (dlbuf->sinkpad);
 299   gst_element_add_pad (GST_ELEMENT (dlbuf), dlbuf->sinkpad);
 300
 301   dlbuf->srcpad = gst_pad_new_from_static_template (&srctemplate, "src");
 302
 303   gst_pad_set_activatemode_function (dlbuf->srcpad,
 304       GST_DEBUG_FUNCPTR (gst_download_buffer_src_activate_mode));
 305   gst_pad_set_getrange_function (dlbuf->srcpad,
 306       GST_DEBUG_FUNCPTR (gst_download_buffer_get_range));
 307   gst_pad_set_event_function (dlbuf->srcpad,
 308       GST_DEBUG_FUNCPTR (gst_download_buffer_handle_src_event));
 309   gst_pad_set_query_function (dlbuf->srcpad,
 310       GST_DEBUG_FUNCPTR (gst_download_buffer_handle_src_query));
 311   GST_PAD_SET_PROXY_CAPS (dlbuf->srcpad);
 312   gst_element_add_pad (GST_ELEMENT (dlbuf), dlbuf->srcpad);
 313
 314   /* levels */
 315   GST_DOWNLOAD_BUFFER_CLEAR_LEVEL (dlbuf->cur_level);
 316   dlbuf->max_level.bytes = DEFAULT_MAX_SIZE_BYTES;
 317   dlbuf->max_level.time = DEFAULT_MAX_SIZE_TIME;
 318   dlbuf->low_percent = DEFAULT_LOW_PERCENT;
 319   dlbuf->high_percent = DEFAULT_HIGH_PERCENT;
 320
 321   dlbuf->srcresult = GST_FLOW_FLUSHING;
 322   dlbuf->sinkresult = GST_FLOW_FLUSHING;
 323   dlbuf->in_timer = g_timer_new ();
 324   dlbuf->out_timer = g_timer_new ();
 325
 326   g_mutex_init (&dlbuf->qlock);
 327   dlbuf->waiting_add = FALSE;
 328   g_cond_init (&dlbuf->item_add);
 329
 330   /* tempfile related */
 331   dlbuf->temp_template = NULL;
 332   dlbuf->temp_location = NULL;
 333   dlbuf->temp_remove = DEFAULT_TEMP_REMOVE;
 334 }
 335
 336 /* called only once, as opposed to dispose */
 337 static void
 338 gst_download_buffer_finalize (GObject * object)
 339 {
 340   GstDownloadBuffer *dlbuf = GST_DOWNLOAD_BUFFER (object);
 341
 342   g_mutex_clear (&dlbuf->qlock);
 343   g_cond_clear (&dlbuf->item_add);
 344   g_timer_destroy (dlbuf->in_timer);
 345   g_timer_destroy (dlbuf->out_timer);
 346
 347   /* temp_file path cleanup  */
 348   g_free (dlbuf->temp_template);
 349   g_free (dlbuf->temp_location);
 350
 351   G_OBJECT_CLASS (parent_class)->finalize (object);
 352 }
 353
 354 static void
 355 reset_positions (GstDownloadBuffer * dlbuf)
 356 {
 357   dlbuf->write_pos = 0;
 358   dlbuf->read_pos = 0;
 359   dlbuf->filling = TRUE;
 360   dlbuf->buffering_percent = 0;
 361   dlbuf->is_buffering = TRUE;
 362   dlbuf->seeking = FALSE;
 363   GST_DOWNLOAD_BUFFER_CLEAR_LEVEL (dlbuf->cur_level);
 364 }
 365
 366 static void
 367 reset_rate_timer (GstDownloadBuffer * dlbuf)
 368 {
 369   dlbuf->bytes_in = 0;
 370   dlbuf->bytes_out = 0;
 371   dlbuf->byte_in_rate = 0.0;
 372   dlbuf->byte_in_period = 0;
 373   dlbuf->byte_out_rate = 0.0;
 374   dlbuf->last_in_elapsed = 0.0;
 375   dlbuf->last_out_elapsed = 0.0;
 376   dlbuf->in_timer_started = FALSE;
 377   dlbuf->out_timer_started = FALSE;
 378 }
 379
 380 /* the interval in seconds to recalculate the rate */
 381 #define RATE_INTERVAL    0.2
 382 /* Tuning for rate estimation. We use a large window for the input rate because
 383  * it should be stable when connected to a network. The output rate is less
 384  * stable (the elements preroll, queues behind a demuxer fill, ...) and should
 385  * therefore adapt more quickly.
 386  * However, initial input rate may be subject to a burst, and should therefore
 387  * initially also adapt more quickly to changes, and only later on give higher
 388  * weight to previous values. */
 389 #define AVG_IN(avg,val,w1,w2)  ((avg) * (w1) + (val) * (w2)) / ((w1) + (w2))
 390 #define AVG_OUT(avg,val) ((avg) * 3.0 + (val)) / 4.0
 391
 392 static void
 393 update_levels (GstDownloadBuffer * dlbuf, guint bytes)
 394 {
 395   dlbuf->cur_level.bytes = bytes;
 396
 397   if (dlbuf->byte_in_rate > 0.0) {
 398     dlbuf->cur_level.time =
 399         dlbuf->cur_level.bytes / dlbuf->byte_in_rate * GST_SECOND;
 400   }
 401
 402   GST_DEBUG ("levels: bytes %u/%u, time %" GST_TIME_FORMAT "/%" GST_TIME_FORMAT,
 403       dlbuf->cur_level.bytes, dlbuf->max_level.bytes,
 404       GST_TIME_ARGS (dlbuf->cur_level.time),
 405       GST_TIME_ARGS (dlbuf->max_level.time));
 406 }
 407
 408 static void
 409 update_in_rates (GstDownloadBuffer * dlbuf)
 410 {
 411   gdouble elapsed, period;
 412   gdouble byte_in_rate;
 413
 414   if (!dlbuf->in_timer_started) {
 415     dlbuf->in_timer_started = TRUE;
 416     g_timer_start (dlbuf->in_timer);
 417     return;
 418   }
 419
 420   elapsed = g_timer_elapsed (dlbuf->in_timer, NULL);
 421
 422   /* recalc after each interval. */
 423   if (dlbuf->last_in_elapsed + RATE_INTERVAL < elapsed) {
 424     period = elapsed - dlbuf->last_in_elapsed;
 425
 426     GST_DEBUG_OBJECT (dlbuf,
 427         "rates: period %f, in %" G_GUINT64_FORMAT ", global period %f",
 428         period, dlbuf->bytes_in, dlbuf->byte_in_period);
 429
 430     byte_in_rate = dlbuf->bytes_in / period;
 431
 432     if (dlbuf->byte_in_rate == 0.0)
 433       dlbuf->byte_in_rate = byte_in_rate;
 434     else
 435       dlbuf->byte_in_rate = AVG_IN (dlbuf->byte_in_rate, byte_in_rate,
 436           (double) dlbuf->byte_in_period, period);
 437
 438     /* another data point, cap at 16 for long time running average */
 439     if (dlbuf->byte_in_period < 16 * RATE_INTERVAL)
 440       dlbuf->byte_in_period += period;
 441
 442     /* reset the values to calculate rate over the next interval */
 443     dlbuf->last_in_elapsed = elapsed;
 444     dlbuf->bytes_in = 0;
 445     GST_DEBUG_OBJECT (dlbuf, "rates: in %f", dlbuf->byte_in_rate);
 446   }
 447 }
 448
 449 static void
 450 update_out_rates (GstDownloadBuffer * dlbuf)
 451 {
 452   gdouble elapsed, period;
 453   gdouble byte_out_rate;
 454
 455   if (!dlbuf->out_timer_started) {
 456     dlbuf->out_timer_started = TRUE;
 457     g_timer_start (dlbuf->out_timer);
 458     return;
 459   }
 460
 461   elapsed = g_timer_elapsed (dlbuf->out_timer, NULL);
 462
 463   /* recalc after each interval. */
 464   if (dlbuf->last_out_elapsed + RATE_INTERVAL < elapsed) {
 465     period = elapsed - dlbuf->last_out_elapsed;
 466
 467     GST_DEBUG_OBJECT (dlbuf,
 468         "rates: period %f, out %" G_GUINT64_FORMAT, period, dlbuf->bytes_out);
 469
 470     byte_out_rate = dlbuf->bytes_out / period;
 471
 472     if (dlbuf->byte_out_rate == 0.0)
 473       dlbuf->byte_out_rate = byte_out_rate;
 474     else
 475       dlbuf->byte_out_rate = AVG_OUT (dlbuf->byte_out_rate, byte_out_rate);
 476
 477     /* reset the values to calculate rate over the next interval */
 478     dlbuf->last_out_elapsed = elapsed;
 479     dlbuf->bytes_out = 0;
 480     GST_DEBUG_OBJECT (dlbuf, "rates: out %f", dlbuf->byte_out_rate);
 481   }
 482 }
 483
 484 static gboolean
 485 get_buffering_percent (GstDownloadBuffer * dlbuf, gboolean * is_buffering,
 486     gint * percent)
 487 {
 488   gint perc;
 489
 490   if (dlbuf->high_percent <= 0) {
 491     if (percent)
 492       *percent = 100;
 493     if (is_buffering)
 494       *is_buffering = FALSE;
 495     return FALSE;
 496   }
 497
 498   /* Ensure the variables used to calculate buffering state are up-to-date. */
 499   update_in_rates (dlbuf);
 500   update_out_rates (dlbuf);
 501
 502   /* figure out the percent we are filled, we take the max of all formats. */
 503   if (dlbuf->max_level.bytes > 0) {
 504     if (dlbuf->cur_level.bytes >= dlbuf->max_level.bytes)
 505       perc = 100;
 506     else
 507       perc = dlbuf->cur_level.bytes * 100 / dlbuf->max_level.bytes;
 508   } else
 509     perc = 0;
 510
 511   if (dlbuf->max_level.time > 0) {
 512     if (dlbuf->cur_level.time >= dlbuf->max_level.time)
 513       perc = 100;
 514     else
 515       perc = MAX (perc, dlbuf->cur_level.time * 100 / dlbuf->max_level.time);
 516   } else
 517     perc = MAX (0, perc);
 518
 519   if (is_buffering)
 520     *is_buffering = dlbuf->is_buffering;
 521
 522   /* scale to high percent so that it becomes the 100% mark */
 523   perc = perc * 100 / dlbuf->high_percent;
 524   /* clip */
 525   if (perc > 100)
 526     perc = 100;
 527
 528   if (percent)
 529     *percent = perc;
 530
 531   GST_DEBUG_OBJECT (dlbuf, "buffering %d, percent %d", dlbuf->is_buffering,
 532       perc);
 533
 534   return TRUE;
 535 }
 536
 537 static void
 538 get_buffering_stats (GstDownloadBuffer * dlbuf, gint percent,
 539     GstBufferingMode * mode, gint * avg_in, gint * avg_out,
 540     gint64 * buffering_left)
 541 {
 542   if (mode)
 543     *mode = GST_BUFFERING_DOWNLOAD;
 544
 545   if (avg_in)
 546     *avg_in = dlbuf->byte_in_rate;
 547   if (avg_out)
 548     *avg_out = dlbuf->byte_out_rate;
 549
 550   if (buffering_left) {
 551     guint64 max, cur;
 552
 553     *buffering_left = (percent == 100 ? 0 : -1);
 554
 555     max = dlbuf->max_level.time;
 556     cur = dlbuf->cur_level.time;
 557
 558     if (percent != 100 && max > cur)
 559       *buffering_left = (max - cur) / 1000000;
 560   }
 561 }
 562
 563 static GstMessage *
 564 update_buffering (GstDownloadBuffer * dlbuf)
 565 {
 566   gint percent;
 567   gboolean post = FALSE;
 568   GstMessage *message = NULL;
 569
 570   if (!get_buffering_percent (dlbuf, NULL, &percent))
 571     return NULL;
 572
 573   if (dlbuf->is_buffering) {
 574     post = TRUE;
 575     /* if we were buffering see if we reached the high watermark */
 576     if (percent >= dlbuf->high_percent)
 577       dlbuf->is_buffering = FALSE;
 578   } else {
 579     /* we were not buffering, check if we need to start buffering if we drop
 580      * below the low threshold */
 581     if (percent < dlbuf->low_percent) {
 582       dlbuf->is_buffering = TRUE;
 583       post = TRUE;
 584     }
 585   }
 586
 587   if (post) {
 588     if (percent == dlbuf->buffering_percent)
 589       post = FALSE;
 590     else
 591       dlbuf->buffering_percent = percent;
 592   }
 593
 594   if (post) {
 595     GstBufferingMode mode;
 596     gint avg_in, avg_out;
 597     gint64 buffering_left;
 598
 599     get_buffering_stats (dlbuf, percent, &mode, &avg_in, &avg_out,
 600         &buffering_left);
 601
 602     message = gst_message_new_buffering (GST_OBJECT_CAST (dlbuf),
 603         (gint) percent);
 604     gst_message_set_buffering_stats (message, mode,
 605         avg_in, avg_out, buffering_left);
 606   }
 607
 608   return message;
 609 }
 610
 611 static gboolean
 612 perform_seek_to_offset (GstDownloadBuffer * dlbuf, guint64 offset)
 613 {
 614   GstEvent *event;
 615   gboolean res;
 616
 617   if (dlbuf->seeking)
 618     return TRUE;
 619
 620   /* until we receive the FLUSH_STOP from this seek, we skip data */
 621   dlbuf->seeking = TRUE;
 622   dlbuf->write_pos = offset;
 623   dlbuf->filling = FALSE;
 624   GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
 625
 626   GST_DEBUG_OBJECT (dlbuf, "Seeking to %" G_GUINT64_FORMAT, offset);
 627
 628   event =
 629       gst_event_new_seek (1.0, GST_FORMAT_BYTES,
 630       GST_SEEK_FLAG_FLUSH | GST_SEEK_FLAG_ACCURATE, GST_SEEK_TYPE_SET, offset,
 631       GST_SEEK_TYPE_NONE, -1);
 632
 633   res = gst_pad_push_event (dlbuf->sinkpad, event);
 634   GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
 635
 636   return res;
 637 }
 638
 639 /* get the threshold for when we decide to seek rather than wait */
 640 static guint64
 641 get_seek_threshold (GstDownloadBuffer * dlbuf)
 642 {
 643   guint64 threshold;
 644
 645   /* FIXME, find a good threshold based on the incoming rate. */
 646   threshold = 1024 * 512;
 647
 648   return threshold;
 649 }
 650
 651 /* called with DOWNLOAD_BUFFER_MUTEX */
 652 static void
 653 gst_download_buffer_update_upstream_size (GstDownloadBuffer * dlbuf)
 654 {
 655   gint64 upstream_size = 0;
 656
 657   if (gst_pad_peer_query_duration (dlbuf->sinkpad, GST_FORMAT_BYTES,
 658           &upstream_size)) {
 659     GST_INFO_OBJECT (dlbuf, "upstream size: %" G_GINT64_FORMAT, upstream_size);
 660     dlbuf->upstream_size = upstream_size;
 661   }
 662 }
 663
 664 /* called with DOWNLOAD_BUFFER_MUTEX */
 665 static GstFlowReturn
 666 gst_download_buffer_wait_for_data (GstDownloadBuffer * dlbuf, guint64 offset,
 667     guint length)
 668 {
 669   gsize start, stop;
 670   guint64 wanted;
 671   gboolean started;
 672
 673   GST_DEBUG_OBJECT (dlbuf, "wait for %" G_GUINT64_FORMAT ", length %u",
 674       offset, length);
 675
 676   wanted = offset + length;
 677
 678   /* pause the timer while we wait. The fact that we are waiting does not mean
 679    * the byterate on the output pad is lower */
 680   if ((started = dlbuf->out_timer_started))
 681     g_timer_stop (dlbuf->out_timer);
 682
 683   /* check range before us */
 684   if (gst_sparse_file_get_range_before (dlbuf->file, offset, &start, &stop)) {
 685     GST_DEBUG_OBJECT (dlbuf,
 686         "range before %" G_GSIZE_FORMAT " - %" G_GSIZE_FORMAT, start, stop);
 687     if (start <= offset && offset < stop) {
 688       GST_DEBUG_OBJECT (dlbuf, "we have the offset");
 689       /* we have the range, continue it */
 690       offset = stop;
 691     } else {
 692       guint64 threshold, dist;
 693
 694       /* there is a range before us, check how far away it is */
 695       threshold = get_seek_threshold (dlbuf);
 696       dist = offset - stop;
 697
 698       if (dist <= threshold) {
 699         GST_DEBUG_OBJECT (dlbuf, "not too far");
 700         /* not far away, continue it */
 701         offset = stop;
 702       }
 703     }
 704   }
 705
 706   if (dlbuf->write_pos != offset)
 707     perform_seek_to_offset (dlbuf, offset);
 708
 709   dlbuf->filling = TRUE;
 710   if (dlbuf->write_pos > dlbuf->read_pos)
 711     update_levels (dlbuf, dlbuf->write_pos - dlbuf->read_pos);
 712   else
 713     update_levels (dlbuf, 0);
 714
 715   /* now wait for more data */
 716   GST_DEBUG_OBJECT (dlbuf, "waiting for more data");
 717   GST_DOWNLOAD_BUFFER_WAIT_ADD_CHECK (dlbuf, dlbuf->srcresult, wanted,
 718       out_flushing);
 719   GST_DEBUG_OBJECT (dlbuf, "got more data");
 720
 721   /* and continue if we were running before */
 722   if (started)
 723     g_timer_continue (dlbuf->out_timer);
 724
 725   return GST_FLOW_OK;
 726
 727 out_flushing:
 728   {
 729     GST_DEBUG_OBJECT (dlbuf, "we are flushing");
 730     return GST_FLOW_FLUSHING;
 731   }
 732 }
 733
 734 /* called with DOWNLOAD_BUFFER_MUTEX */
 735 static gboolean
 736 check_upstream_size (GstDownloadBuffer * dlbuf, gsize offset, guint * length)
 737 {
 738   gsize stop = offset + *length;
 739   /* catch any reads beyond the size of the file here to make sure cache
 740    * doesn't send seek events beyond the size of the file upstream, since
 741    * that would confuse elements such as souphttpsrc and/or http servers.
 742    * Demuxers often just loop until EOS at the end of the file to figure out
 743    * when they've read all the end-headers or index chunks. */
 744   if (G_UNLIKELY (dlbuf->upstream_size == -1 || stop >= dlbuf->upstream_size)) {
 745     gst_download_buffer_update_upstream_size (dlbuf);
 746   }
 747
 748   if (dlbuf->upstream_size != -1) {
 749     if (offset >= dlbuf->upstream_size)
 750       return FALSE;
 751
 752     if (G_UNLIKELY (stop > dlbuf->upstream_size)) {
 753       *length = dlbuf->upstream_size - offset;
 754       GST_DEBUG_OBJECT (dlbuf, "adjusting length downto %u", *length);
 755     }
 756   }
 757   return TRUE;
 758 }
 759
 760 /* called with DOWNLOAD_BUFFER_MUTEX */
 761 static GstFlowReturn
 762 gst_download_buffer_read_buffer (GstDownloadBuffer * dlbuf, guint64 offset,
 763     guint length, GstBuffer ** buffer)
 764 {
 765   GstBuffer *buf;
 766   GstMapInfo info;
 767   GstFlowReturn ret = GST_FLOW_OK;
 768   gsize res, remaining;
 769   GError *error = NULL;
 770
 771   length = (length == -1) ? DEFAULT_BUFFER_SIZE : length;
 772   offset = (offset == -1) ? dlbuf->read_pos : offset;
 773
 774   if (!check_upstream_size (dlbuf, offset, &length))
 775     goto hit_eos;
 776
 777   /* allocate the output buffer of the requested size */
 778   if (*buffer == NULL)
 779     buf = gst_buffer_new_allocate (NULL, length, NULL);
 780   else
 781     buf = *buffer;
 782
 783   if (!gst_buffer_map (buf, &info, GST_MAP_WRITE))
 784     goto map_failed;
 785
 786   GST_DEBUG_OBJECT (dlbuf, "Reading %u bytes from %" G_GUINT64_FORMAT, length,
 787       offset);
 788
 789   dlbuf->read_pos = offset;
 790
 791   do {
 792     res =
 793         gst_sparse_file_read (dlbuf->file, offset, info.data, length,
 794         &remaining, &error);
 795     if (G_UNLIKELY (res == 0)) {
 796       switch (error->code) {
 797         case GST_SPARSE_FILE_IO_ERROR_WOULD_BLOCK:
 798           /* we don't have the requested data in the file, decide what to
 799            * do next. */
 800           ret = gst_download_buffer_wait_for_data (dlbuf, offset, length);
 801           if (ret != GST_FLOW_OK)
 802             goto out_flushing;
 803           break;
 804         default:
 805           goto read_error;
 806       }
 807       g_clear_error (&error);
 808     }
 809   } while (res == 0);
 810
 811   gst_buffer_unmap (buf, &info);
 812   gst_buffer_resize (buf, 0, res);
 813
 814   dlbuf->bytes_out += res;
 815   dlbuf->read_pos += res;
 816
 817   GST_DEBUG_OBJECT (dlbuf,
 818       "Read %" G_GSIZE_FORMAT " bytes, remaining %" G_GSIZE_FORMAT, res,
 819       remaining);
 820
 821   if (dlbuf->read_pos + remaining == dlbuf->upstream_size)
 822     update_levels (dlbuf, dlbuf->max_level.bytes);
 823   else
 824     update_levels (dlbuf, remaining);
 825
 826   GST_BUFFER_OFFSET (buf) = offset;
 827   GST_BUFFER_OFFSET_END (buf) = offset + res;
 828
 829   *buffer = buf;
 830
 831   return ret;
 832
 833   /* ERRORS */
 834 hit_eos:
 835   {
 836     GST_DEBUG_OBJECT (dlbuf, "EOS hit");
 837     return GST_FLOW_EOS;
 838   }
 839 map_failed:
 840   {
 841     GST_ELEMENT_ERROR (dlbuf, RESOURCE, BUSY,
 842         (_("Failed to map buffer.")), ("failed to map buffer in WRITE mode"));
 843     if (*buffer == NULL)
 844       gst_buffer_unref (buf);
 845     return GST_FLOW_ERROR;
 846   }
 847 out_flushing:
 848   {
 849     GST_DEBUG_OBJECT (dlbuf, "we are flushing");
 850     g_clear_error (&error);
 851     gst_buffer_unmap (buf, &info);
 852     if (*buffer == NULL)
 853       gst_buffer_unref (buf);
 854     return GST_FLOW_FLUSHING;
 855   }
 856 read_error:
 857   {
 858     GST_DEBUG_OBJECT (dlbuf, "we have a read error: %s", error->message);
 859     g_clear_error (&error);
 860     gst_buffer_unmap (buf, &info);
 861     if (*buffer == NULL)
 862       gst_buffer_unref (buf);
 863     return ret;
 864   }
 865 }
 866
 867 /* must be called with MUTEX_LOCK. Will briefly release the lock when notifying
 868  * the temp filename. */
 869 static gboolean
 870 gst_download_buffer_open_temp_location_file (GstDownloadBuffer * dlbuf)
 871 {
 872   gint fd = -1;
 873   gchar *name = NULL;
 874
 875   if (dlbuf->file)
 876     goto already_opened;
 877
 878   GST_DEBUG_OBJECT (dlbuf, "opening temp file %s", dlbuf->temp_template);
 879
 880   /* If temp_template was set, allocate a filename and open that file */
 881
 882   /* nothing to do */
 883   if (dlbuf->temp_template == NULL)
 884     goto no_directory;
 885
 886   /* make copy of the template, we don't want to change this */
 887   name = g_strdup (dlbuf->temp_template);
 888 #ifdef __BIONIC__
 889   fd = g_mkstemp_full (name, O_RDWR | O_LARGEFILE, S_IRUSR | S_IWUSR);
 890 #else
 891   fd = g_mkstemp (name);
 892 #endif
 893   if (fd == -1)
 894     goto mkstemp_failed;
 895
 896   /* open the file for update/writing */
 897   dlbuf->file = gst_sparse_file_new ();
 898   /* error creating file */
 899   if (!gst_sparse_file_set_fd (dlbuf->file, fd))
 900     goto open_failed;
 901
 902   g_free (dlbuf->temp_location);
 903   dlbuf->temp_location = name;
 904   dlbuf->temp_fd = fd;
 905   reset_positions (dlbuf);
 906
 907   GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
 908
 909   /* we can't emit the notify with the lock */
 910   g_object_notify (G_OBJECT (dlbuf), "temp-location");
 911
 912   GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
 913
 914   GST_DEBUG_OBJECT (dlbuf, "opened temp file %s", dlbuf->temp_template);
 915
 916   return TRUE;
 917
 918   /* ERRORS */
 919 already_opened:
 920   {
 921     GST_DEBUG_OBJECT (dlbuf, "temp file was already open");
 922     return TRUE;
 923   }
 924 no_directory:
 925   {
 926     GST_ELEMENT_ERROR (dlbuf, RESOURCE, NOT_FOUND,
 927         (_("No Temp directory specified.")), (NULL));
 928     return FALSE;
 929   }
 930 mkstemp_failed:
 931   {
 932     GST_ELEMENT_ERROR (dlbuf, RESOURCE, OPEN_READ,
 933         (_("Could not create temp file \"%s\"."), dlbuf->temp_template),
 934         GST_ERROR_SYSTEM);
 935     g_free (name);
 936     return FALSE;
 937   }
 938 open_failed:
 939   {
 940     GST_ELEMENT_ERROR (dlbuf, RESOURCE, OPEN_READ,
 941         (_("Could not open file \"%s\" for reading."), name), GST_ERROR_SYSTEM);
 942     g_free (name);
 943     if (fd != -1)
 944       close (fd);
 945     return FALSE;
 946   }
 947 }
 948
 949 static void
 950 gst_download_buffer_close_temp_location_file (GstDownloadBuffer * dlbuf)
 951 {
 952   /* nothing to do */
 953   if (dlbuf->file == NULL)
 954     return;
 955
 956   GST_DEBUG_OBJECT (dlbuf, "closing sparse file");
 957
 958   if (dlbuf->temp_remove) {
 959     if (remove (dlbuf->temp_location) < 0) {
 960       GST_WARNING_OBJECT (dlbuf, "Failed to remove temporary file %s: %s",
 961           dlbuf->temp_location, g_strerror (errno));
 962     }
 963   }
 964   gst_sparse_file_free (dlbuf->file);
 965   close (dlbuf->temp_fd);
 966   dlbuf->file = NULL;
 967 }
 968
 969 static void
 970 gst_download_buffer_flush_temp_file (GstDownloadBuffer * dlbuf)
 971 {
 972   if (dlbuf->file == NULL)
 973     return;
 974
 975   GST_DEBUG_OBJECT (dlbuf, "flushing temp file");
 976
 977   gst_sparse_file_clear (dlbuf->file);
 978 }
 979
 980 static void
 981 gst_download_buffer_locked_flush (GstDownloadBuffer * dlbuf, gboolean full,
 982     gboolean clear_temp)
 983 {
 984   if (clear_temp)
 985     gst_download_buffer_flush_temp_file (dlbuf);
 986   reset_positions (dlbuf);
 987   gst_event_replace (&dlbuf->stream_start_event, NULL);
 988   gst_event_replace (&dlbuf->segment_event, NULL);
 989 }
 990
 991 static gboolean
 992 gst_download_buffer_handle_sink_event (GstPad * pad, GstObject * parent,
 993     GstEvent * event)
 994 {
 995   gboolean ret = TRUE;
 996   GstDownloadBuffer *dlbuf;
 997
 998   dlbuf = GST_DOWNLOAD_BUFFER (parent);
 999
1000   switch (GST_EVENT_TYPE (event)) {
1001     case GST_EVENT_FLUSH_START:
1002     {
1003       GST_LOG_OBJECT (dlbuf, "received flush start event");
1004       if (GST_PAD_MODE (dlbuf->srcpad) == GST_PAD_MODE_PUSH) {
1005         /* forward event */
1006         ret = gst_pad_push_event (dlbuf->srcpad, event);
1007
1008         /* now unblock the chain function */
1009         GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1010         dlbuf->srcresult = GST_FLOW_FLUSHING;
1011         dlbuf->sinkresult = GST_FLOW_FLUSHING;
1012         /* unblock the loop and chain functions */
1013         GST_DOWNLOAD_BUFFER_SIGNAL_ADD (dlbuf, -1);
1014         GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1015
1016         /* make sure it pauses, this should happen since we sent
1017          * flush_start downstream. */
1018         gst_pad_pause_task (dlbuf->srcpad);
1019         GST_LOG_OBJECT (dlbuf, "loop stopped");
1020       } else {
1021         GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1022         /* flush the sink pad */
1023         dlbuf->sinkresult = GST_FLOW_FLUSHING;
1024         GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1025
1026         gst_event_unref (event);
1027       }
1028       break;
1029     }
1030     case GST_EVENT_FLUSH_STOP:
1031     {
1032       GST_LOG_OBJECT (dlbuf, "received flush stop event");
1033
1034       if (GST_PAD_MODE (dlbuf->srcpad) == GST_PAD_MODE_PUSH) {
1035         /* forward event */
1036         ret = gst_pad_push_event (dlbuf->srcpad, event);
1037
1038         GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1039         gst_download_buffer_locked_flush (dlbuf, FALSE, TRUE);
1040         dlbuf->srcresult = GST_FLOW_OK;
1041         dlbuf->sinkresult = GST_FLOW_OK;
1042         dlbuf->unexpected = FALSE;
1043         dlbuf->seeking = FALSE;
1044         /* reset rate counters */
1045         reset_rate_timer (dlbuf);
1046         gst_pad_start_task (dlbuf->srcpad,
1047             (GstTaskFunction) gst_download_buffer_loop, dlbuf->srcpad, NULL);
1048         GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1049       } else {
1050         GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1051         dlbuf->unexpected = FALSE;
1052         dlbuf->sinkresult = GST_FLOW_OK;
1053         dlbuf->seeking = FALSE;
1054         GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1055
1056         gst_event_unref (event);
1057       }
1058       break;
1059     }
1060     default:
1061       if (GST_EVENT_IS_SERIALIZED (event)) {
1062         GstMessage *msg = NULL;
1063
1064         /* serialized events go in the buffer */
1065         GST_DOWNLOAD_BUFFER_MUTEX_LOCK_CHECK (dlbuf, dlbuf->sinkresult,
1066             out_flushing);
1067         switch (GST_EVENT_TYPE (event)) {
1068           case GST_EVENT_EOS:
1069             GST_DEBUG_OBJECT (dlbuf, "we have EOS");
1070             /* Zero the thresholds, this makes sure the dlbuf is completely
1071              * filled and we can read all data from the dlbuf. */
1072             /* update the buffering status */
1073             update_levels (dlbuf, dlbuf->max_level.bytes);
1074             /* update the buffering */
1075             msg = update_buffering (dlbuf);
1076             /* wakeup the waiter and let it recheck */
1077             GST_DOWNLOAD_BUFFER_SIGNAL_ADD (dlbuf, -1);
1078             break;
1079           case GST_EVENT_SEGMENT:
1080             gst_event_replace (&dlbuf->segment_event, event);
1081             /* a new segment allows us to accept more buffers if we got EOS
1082              * from downstream */
1083             dlbuf->unexpected = FALSE;
1084             break;
1085           case GST_EVENT_STREAM_START:
1086             gst_event_replace (&dlbuf->stream_start_event, event);
1087             break;
1088           default:
1089             break;
1090         }
1091         gst_event_unref (event);
1092         GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1093         if (msg != NULL)
1094           gst_element_post_message (GST_ELEMENT_CAST (dlbuf), msg);
1095       } else {
1096         /* non-serialized events are passed upstream. */
1097         ret = gst_pad_push_event (dlbuf->srcpad, event);
1098       }
1099       break;
1100   }
1101   return ret;
1102
1103   /* ERRORS */
1104 out_flushing:
1105   {
1106     GST_DEBUG_OBJECT (dlbuf, "refusing event, we are flushing");
1107     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1108     gst_event_unref (event);
1109     return FALSE;
1110   }
1111 }
1112
1113 static gboolean
1114 gst_download_buffer_handle_sink_query (GstPad * pad, GstObject * parent,
1115     GstQuery * query)
1116 {
1117   GstDownloadBuffer *dlbuf;
1118   gboolean res;
1119
1120   dlbuf = GST_DOWNLOAD_BUFFER (parent);
1121
1122   switch (GST_QUERY_TYPE (query)) {
1123     default:
1124       if (GST_QUERY_IS_SERIALIZED (query)) {
1125         GST_LOG_OBJECT (dlbuf, "received query %p", query);
1126         GST_DEBUG_OBJECT (dlbuf, "refusing query, we are not using the dlbuf");
1127         res = FALSE;
1128       } else {
1129         res = gst_pad_query_default (pad, parent, query);
1130       }
1131       break;
1132   }
1133   return res;
1134 }
1135
1136 static GstFlowReturn
1137 gst_download_buffer_chain (GstPad * pad, GstObject * parent, GstBuffer * buffer)
1138 {
1139   GstDownloadBuffer *dlbuf;
1140   GstMapInfo info;
1141   guint64 offset;
1142   gsize res, available;
1143   GError *error = NULL;
1144   GstMessage *msg = NULL;
1145
1146   dlbuf = GST_DOWNLOAD_BUFFER (parent);
1147
1148   GST_LOG_OBJECT (dlbuf, "received buffer %p of "
1149       "size %" G_GSIZE_FORMAT ", time %" GST_TIME_FORMAT ", duration %"
1150       GST_TIME_FORMAT, buffer, gst_buffer_get_size (buffer),
1151       GST_TIME_ARGS (GST_BUFFER_TIMESTAMP (buffer)),
1152       GST_TIME_ARGS (GST_BUFFER_DURATION (buffer)));
1153
1154   /* we have to lock the dlbuf since we span threads */
1155   GST_DOWNLOAD_BUFFER_MUTEX_LOCK_CHECK (dlbuf, dlbuf->sinkresult, out_flushing);
1156   /* when we received unexpected from downstream, refuse more buffers */
1157   if (dlbuf->unexpected)
1158     goto out_eos;
1159
1160   /* while we didn't receive the newsegment, we're seeking and we skip data */
1161   if (dlbuf->seeking)
1162     goto out_seeking;
1163
1164   /* put buffer in dlbuf now */
1165   offset = dlbuf->write_pos;
1166
1167   /* sanity check */
1168   if (GST_BUFFER_OFFSET_IS_VALID (buffer) &&
1169       GST_BUFFER_OFFSET (buffer) != offset) {
1170     GST_WARNING_OBJECT (dlbuf, "buffer offset does not match current writing "
1171         "position! %" G_GINT64_FORMAT " != %" G_GINT64_FORMAT,
1172         GST_BUFFER_OFFSET (buffer), offset);
1173   }
1174
1175   if (!gst_buffer_map (buffer, &info, GST_MAP_READ))
1176     goto map_error;
1177
1178   GST_DEBUG_OBJECT (dlbuf, "Writing %" G_GSIZE_FORMAT " bytes to %"
1179       G_GUINT64_FORMAT, info.size, offset);
1180
1181   res =
1182       gst_sparse_file_write (dlbuf->file, offset, info.data, info.size,
1183       &available, &error);
1184   if (res == 0)
1185     goto write_error;
1186
1187   gst_buffer_unmap (buffer, &info);
1188   gst_buffer_unref (buffer);
1189
1190   dlbuf->write_pos = offset + info.size;
1191   dlbuf->bytes_in += info.size;
1192
1193   GST_DOWNLOAD_BUFFER_SIGNAL_ADD (dlbuf, dlbuf->write_pos + available);
1194
1195   /* we hit the end, see what to do */
1196   if (dlbuf->write_pos + available == dlbuf->upstream_size) {
1197     gsize start, stop;
1198
1199     /* we have everything up to the end, find a region to fill */
1200     if (gst_sparse_file_get_range_after (dlbuf->file, 0, &start, &stop)) {
1201       if (stop < dlbuf->upstream_size) {
1202         /* a hole to fill, seek to its end */
1203         perform_seek_to_offset (dlbuf, stop);
1204       } else {
1205         /* we filled all the holes, we are done */
1206         goto completed;
1207       }
1208     }
1209   } else {
1210     /* see if we need to skip this region or just read it again. The idea
1211      * is that when the region is not big, we want to avoid a seek and just
1212      * let it reread */
1213     guint64 threshold = get_seek_threshold (dlbuf);
1214
1215     if (available > threshold) {
1216       /* further than threshold, it's better to skip than to reread */
1217       perform_seek_to_offset (dlbuf, dlbuf->write_pos + available);
1218     }
1219   }
1220   if (dlbuf->filling) {
1221     if (dlbuf->write_pos > dlbuf->read_pos)
1222       update_levels (dlbuf, dlbuf->write_pos - dlbuf->read_pos);
1223     else
1224       update_levels (dlbuf, 0);
1225   }
1226
1227   /* update the buffering */
1228   msg = update_buffering (dlbuf);
1229
1230   GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1231
1232   if (msg != NULL)
1233     gst_element_post_message (GST_ELEMENT_CAST (dlbuf), msg);
1234
1235   return GST_FLOW_OK;
1236
1237   /* ERRORS */
1238 out_flushing:
1239   {
1240     GstFlowReturn ret = dlbuf->sinkresult;
1241     GST_LOG_OBJECT (dlbuf,
1242         "exit because task paused, reason: %s", gst_flow_get_name (ret));
1243     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1244     gst_buffer_unref (buffer);
1245     return ret;
1246   }
1247 out_eos:
1248   {
1249     GST_LOG_OBJECT (dlbuf, "exit because we received EOS");
1250     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1251     gst_buffer_unref (buffer);
1252     return GST_FLOW_EOS;
1253   }
1254 out_seeking:
1255   {
1256     GST_LOG_OBJECT (dlbuf, "exit because we are seeking");
1257     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1258     gst_buffer_unref (buffer);
1259     return GST_FLOW_OK;
1260   }
1261 map_error:
1262   {
1263     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1264     gst_buffer_unref (buffer);
1265     GST_ELEMENT_ERROR (dlbuf, RESOURCE, BUSY,
1266         (_("Failed to map buffer.")), ("failed to map buffer in READ mode"));
1267     return GST_FLOW_ERROR;
1268   }
1269 write_error:
1270   {
1271     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1272     gst_buffer_unmap (buffer, &info);
1273     gst_buffer_unref (buffer);
1274     GST_ELEMENT_ERROR (dlbuf, RESOURCE, WRITE,
1275         (_("Error while writing to download file.")), ("%s", error->message));
1276     g_clear_error (&error);
1277     return GST_FLOW_ERROR;
1278   }
1279 completed:
1280   {
1281     GST_LOG_OBJECT (dlbuf, "we completed the download");
1282     dlbuf->write_pos = dlbuf->upstream_size;
1283     dlbuf->filling = FALSE;
1284     update_levels (dlbuf, dlbuf->max_level.bytes);
1285     msg = update_buffering (dlbuf);
1286
1287     gst_element_post_message (GST_ELEMENT_CAST (dlbuf),
1288         gst_message_new_element (GST_OBJECT_CAST (dlbuf),
1289             gst_structure_new ("GstCacheDownloadComplete",
1290                 "location", G_TYPE_STRING, dlbuf->temp_location, NULL)));
1291
1292     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1293
1294     if (msg != NULL)
1295       gst_element_post_message (GST_ELEMENT_CAST (dlbuf), msg);
1296
1297     return GST_FLOW_EOS;
1298   }
1299 }
1300
1301 /* called repeatedly with @pad as the source pad. This function should push out
1302  * data to the peer element. */
1303 static void
1304 gst_download_buffer_loop (GstPad * pad)
1305 {
1306   GstDownloadBuffer *dlbuf;
1307   GstFlowReturn ret;
1308   GstBuffer *buffer = NULL;
1309   GstMessage *msg = NULL;
1310
1311   dlbuf = GST_DOWNLOAD_BUFFER (GST_PAD_PARENT (pad));
1312
1313   /* have to lock for thread-safety */
1314   GST_DOWNLOAD_BUFFER_MUTEX_LOCK_CHECK (dlbuf, dlbuf->srcresult, out_flushing);
1315
1316   if (dlbuf->stream_start_event != NULL) {
1317     gst_pad_push_event (dlbuf->srcpad, dlbuf->stream_start_event);
1318     dlbuf->stream_start_event = NULL;
1319   }
1320   if (dlbuf->segment_event != NULL) {
1321     gst_pad_push_event (dlbuf->srcpad, dlbuf->segment_event);
1322     dlbuf->segment_event = NULL;
1323   }
1324
1325   ret = gst_download_buffer_read_buffer (dlbuf, -1, -1, &buffer);
1326   if (ret != GST_FLOW_OK)
1327     goto out_flushing;
1328
1329   /* update the buffering */
1330   msg = update_buffering (dlbuf);
1331
1332   g_atomic_int_set (&dlbuf->downstream_may_block, 1);
1333   GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1334
1335   if (msg != NULL)
1336     gst_element_post_message (GST_ELEMENT_CAST (dlbuf), msg);
1337
1338   ret = gst_pad_push (dlbuf->srcpad, buffer);
1339   g_atomic_int_set (&dlbuf->downstream_may_block, 0);
1340
1341   /* need to check for srcresult here as well */
1342   GST_DOWNLOAD_BUFFER_MUTEX_LOCK_CHECK (dlbuf, dlbuf->srcresult, out_flushing);
1343   dlbuf->srcresult = ret;
1344   dlbuf->sinkresult = ret;
1345   if (ret != GST_FLOW_OK)
1346     goto out_flushing;
1347   GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1348
1349   return;
1350
1351   /* ERRORS */
1352 out_flushing:
1353   {
1354     GstFlowReturn ret = dlbuf->srcresult;
1355
1356     gst_pad_pause_task (dlbuf->srcpad);
1357     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1358     GST_LOG_OBJECT (dlbuf, "pause task, reason:  %s", gst_flow_get_name (ret));
1359     /* let app know about us giving up if upstream is not expected to do so */
1360     if (ret == GST_FLOW_EOS) {
1361       /* FIXME perform EOS logic, this is really a basesrc operating on a
1362        * file. */
1363       gst_pad_push_event (dlbuf->srcpad, gst_event_new_eos ());
1364     } else if ((ret == GST_FLOW_NOT_LINKED || ret < GST_FLOW_EOS)) {
1365       GST_ELEMENT_FLOW_ERROR (dlbuf, ret);
1366       gst_pad_push_event (dlbuf->srcpad, gst_event_new_eos ());
1367     }
1368     return;
1369   }
1370 }
1371
1372 static gboolean
1373 gst_download_buffer_handle_src_event (GstPad * pad, GstObject * parent,
1374     GstEvent * event)
1375 {
1376   gboolean res = TRUE;
1377   GstDownloadBuffer *dlbuf = GST_DOWNLOAD_BUFFER (parent);
1378
1379 #ifndef GST_DISABLE_GST_DEBUG
1380   GST_DEBUG_OBJECT (dlbuf, "got event %p (%s)",
1381       event, GST_EVENT_TYPE_NAME (event));
1382 #endif
1383
1384   switch (GST_EVENT_TYPE (event)) {
1385     case GST_EVENT_FLUSH_START:
1386       /* now unblock the getrange function */
1387       GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1388       GST_DEBUG_OBJECT (dlbuf, "flushing");
1389       dlbuf->srcresult = GST_FLOW_FLUSHING;
1390       GST_DOWNLOAD_BUFFER_SIGNAL_ADD (dlbuf, -1);
1391       GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1392
1393       /* when using a temp file, we eat the event */
1394       res = TRUE;
1395       gst_event_unref (event);
1396       break;
1397     case GST_EVENT_FLUSH_STOP:
1398       /* now unblock the getrange function */
1399       GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1400       dlbuf->srcresult = GST_FLOW_OK;
1401       GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1402
1403       /* when using a temp file, we eat the event */
1404       res = TRUE;
1405       gst_event_unref (event);
1406       break;
1407     case GST_EVENT_RECONFIGURE:
1408       GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1409       /* assume downstream is linked now and try to push again */
1410       if (dlbuf->srcresult == GST_FLOW_NOT_LINKED) {
1411         dlbuf->srcresult = GST_FLOW_OK;
1412         dlbuf->sinkresult = GST_FLOW_OK;
1413         if (GST_PAD_MODE (pad) == GST_PAD_MODE_PUSH) {
1414           gst_pad_start_task (pad, (GstTaskFunction) gst_download_buffer_loop,
1415               pad, NULL);
1416         }
1417       }
1418       GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1419
1420       res = gst_pad_push_event (dlbuf->sinkpad, event);
1421       break;
1422     default:
1423       res = gst_pad_push_event (dlbuf->sinkpad, event);
1424       break;
1425   }
1426
1427   return res;
1428 }
1429
1430 static gboolean
1431 gst_download_buffer_handle_src_query (GstPad * pad, GstObject * parent,
1432     GstQuery * query)
1433 {
1434   GstDownloadBuffer *dlbuf;
1435
1436   dlbuf = GST_DOWNLOAD_BUFFER (parent);
1437
1438   switch (GST_QUERY_TYPE (query)) {
1439     case GST_QUERY_POSITION:
1440     {
1441       gint64 peer_pos;
1442       GstFormat format;
1443
1444       if (!gst_pad_peer_query (dlbuf->sinkpad, query))
1445         goto peer_failed;
1446
1447       /* get peer position */
1448       gst_query_parse_position (query, &format, &peer_pos);
1449
1450       /* FIXME: this code assumes that there's no discont in the dlbuf */
1451       switch (format) {
1452         case GST_FORMAT_BYTES:
1453           peer_pos -= dlbuf->cur_level.bytes;
1454           if (peer_pos < 0)     /* Clamp result to 0 */
1455             peer_pos = 0;
1456           break;
1457         case GST_FORMAT_TIME:
1458           peer_pos -= dlbuf->cur_level.time;
1459           if (peer_pos < 0)     /* Clamp result to 0 */
1460             peer_pos = 0;
1461           break;
1462         default:
1463           GST_WARNING_OBJECT (dlbuf, "dropping query in %s format, don't "
1464               "know how to adjust value", gst_format_get_name (format));
1465           return FALSE;
1466       }
1467       /* set updated position */
1468       gst_query_set_position (query, format, peer_pos);
1469       break;
1470     }
1471     case GST_QUERY_DURATION:
1472     {
1473       GST_DEBUG_OBJECT (dlbuf, "doing peer query");
1474
1475       if (!gst_pad_peer_query (dlbuf->sinkpad, query))
1476         goto peer_failed;
1477
1478       GST_DEBUG_OBJECT (dlbuf, "peer query success");
1479       break;
1480     }
1481     case GST_QUERY_BUFFERING:
1482     {
1483       gint percent;
1484       gboolean is_buffering;
1485       GstBufferingMode mode;
1486       gint avg_in, avg_out;
1487       gint64 buffering_left;
1488
1489       GST_DEBUG_OBJECT (dlbuf, "query buffering");
1490
1491       get_buffering_percent (dlbuf, &is_buffering, &percent);
1492       gst_query_set_buffering_percent (query, is_buffering, percent);
1493
1494       get_buffering_stats (dlbuf, percent, &mode, &avg_in, &avg_out,
1495           &buffering_left);
1496       gst_query_set_buffering_stats (query, mode, avg_in, avg_out,
1497           buffering_left);
1498
1499       {
1500         /* add ranges for download and ringbuffer buffering */
1501         GstFormat format;
1502         gint64 start, stop;
1503         guint64 write_pos;
1504         gint64 estimated_total;
1505         gint64 duration;
1506         gsize offset, range_start, range_stop;
1507
1508         GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1509         write_pos = dlbuf->write_pos;
1510
1511         /* get duration of upstream in bytes */
1512         gst_download_buffer_update_upstream_size (dlbuf);
1513         duration = dlbuf->upstream_size;
1514
1515         GST_DEBUG_OBJECT (dlbuf, "percent %d, duration %" G_GINT64_FORMAT
1516             ", writing %" G_GINT64_FORMAT, percent, duration, write_pos);
1517
1518         gst_query_parse_buffering_range (query, &format, NULL, NULL, NULL);
1519
1520         /* fill out the buffered ranges */
1521         start = offset = 0;
1522         stop = -1;
1523         estimated_total = -1;
1524         while (gst_sparse_file_get_range_after (dlbuf->file, offset,
1525                 &range_start, &range_stop)) {
1526           gboolean current_range;
1527
1528           GST_DEBUG_OBJECT (dlbuf,
1529               "range starting at %" G_GSIZE_FORMAT " and finishing at %"
1530               G_GSIZE_FORMAT, range_start, range_stop);
1531
1532           offset = range_stop;
1533
1534           /* find the range we are currently downloading, we'll remember it
1535            * after we convert to the target format */
1536           if (range_start <= write_pos && range_stop >= write_pos) {
1537             current_range = TRUE;
1538             /* calculate remaining and total download time */
1539             if (duration >= range_stop && avg_in > 0.0)
1540               estimated_total = ((duration - range_stop) * 1000) / avg_in;
1541           } else
1542             current_range = FALSE;
1543
1544           switch (format) {
1545             case GST_FORMAT_PERCENT:
1546               /* get our available data relative to the duration */
1547               if (duration == -1) {
1548                 range_start = 0;
1549                 range_stop = 0;
1550               } else {
1551                 range_start = gst_util_uint64_scale (GST_FORMAT_PERCENT_MAX,
1552                     range_start, duration);
1553                 range_stop = gst_util_uint64_scale (GST_FORMAT_PERCENT_MAX,
1554                     range_stop, duration);
1555               }
1556               break;
1557             case GST_FORMAT_BYTES:
1558               break;
1559             default:
1560               range_start = -1;
1561               range_stop = -1;
1562               break;
1563           }
1564
1565           if (current_range) {
1566             /* we are currently downloading this range */
1567             start = range_start;
1568             stop = range_stop;
1569           }
1570           GST_DEBUG_OBJECT (dlbuf,
1571               "range to format: %" G_GSIZE_FORMAT " - %" G_GSIZE_FORMAT,
1572               range_start, range_stop);
1573           if (range_start == range_stop)
1574             continue;
1575           gst_query_add_buffering_range (query, range_start, range_stop);
1576         }
1577
1578         GST_DEBUG_OBJECT (dlbuf, "estimated-total %" G_GINT64_FORMAT,
1579             estimated_total);
1580
1581         gst_query_set_buffering_range (query, format, start, stop,
1582             estimated_total);
1583
1584         GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1585       }
1586       break;
1587     }
1588     case GST_QUERY_SCHEDULING:
1589     {
1590       GstSchedulingFlags flags = 0;
1591
1592       if (!gst_pad_peer_query (dlbuf->sinkpad, query))
1593         goto peer_failed;
1594
1595       gst_query_parse_scheduling (query, &flags, NULL, NULL, NULL);
1596
1597       /* we can operate in pull mode when we are using a tempfile */
1598       flags |= GST_SCHEDULING_FLAG_SEEKABLE;
1599       gst_query_set_scheduling (query, flags, 0, -1, 0);
1600       gst_query_add_scheduling_mode (query, GST_PAD_MODE_PULL);
1601       gst_query_add_scheduling_mode (query, GST_PAD_MODE_PUSH);
1602       break;
1603     }
1604     default:
1605       /* peer handled other queries */
1606       if (!gst_pad_query_default (pad, parent, query))
1607         goto peer_failed;
1608       break;
1609   }
1610
1611   return TRUE;
1612
1613   /* ERRORS */
1614 peer_failed:
1615   {
1616     GST_DEBUG_OBJECT (dlbuf, "failed peer query");
1617     return FALSE;
1618   }
1619 }
1620
1621 static gboolean
1622 gst_download_buffer_handle_query (GstElement * element, GstQuery * query)
1623 {
1624   GstDownloadBuffer *dlbuf = GST_DOWNLOAD_BUFFER (element);
1625
1626   /* simply forward to the srcpad query function */
1627   return gst_download_buffer_handle_src_query (dlbuf->srcpad,
1628       GST_OBJECT_CAST (element), query);
1629 }
1630
1631 static GstFlowReturn
1632 gst_download_buffer_get_range (GstPad * pad, GstObject * parent, guint64 offset,
1633     guint length, GstBuffer ** buffer)
1634 {
1635   GstDownloadBuffer *dlbuf;
1636   GstFlowReturn ret;
1637   GstMessage *msg = NULL;
1638
1639   dlbuf = GST_DOWNLOAD_BUFFER_CAST (parent);
1640
1641   GST_DOWNLOAD_BUFFER_MUTEX_LOCK_CHECK (dlbuf, dlbuf->srcresult, out_flushing);
1642   /* FIXME - function will block when the range is not yet available */
1643   ret = gst_download_buffer_read_buffer (dlbuf, offset, length, buffer);
1644   /* update the buffering */
1645   msg = update_buffering (dlbuf);
1646
1647   GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1648
1649   if (msg != NULL)
1650     gst_element_post_message (GST_ELEMENT_CAST (dlbuf), msg);
1651
1652   return ret;
1653
1654   /* ERRORS */
1655 out_flushing:
1656   {
1657     ret = dlbuf->srcresult;
1658
1659     GST_DEBUG_OBJECT (dlbuf, "we are flushing");
1660     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1661     return ret;
1662   }
1663 }
1664
1665 /* sink currently only operates in push mode */
1666 static gboolean
1667 gst_download_buffer_sink_activate_mode (GstPad * pad, GstObject * parent,
1668     GstPadMode mode, gboolean active)
1669 {
1670   gboolean result;
1671   GstDownloadBuffer *dlbuf;
1672
1673   dlbuf = GST_DOWNLOAD_BUFFER (parent);
1674
1675   switch (mode) {
1676     case GST_PAD_MODE_PUSH:
1677       if (active) {
1678         GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1679         GST_DEBUG_OBJECT (dlbuf, "activating push mode");
1680         dlbuf->srcresult = GST_FLOW_OK;
1681         dlbuf->sinkresult = GST_FLOW_OK;
1682         dlbuf->unexpected = FALSE;
1683         reset_rate_timer (dlbuf);
1684         GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1685       } else {
1686         /* unblock chain function */
1687         GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1688         GST_DEBUG_OBJECT (dlbuf, "deactivating push mode");
1689         dlbuf->srcresult = GST_FLOW_FLUSHING;
1690         dlbuf->sinkresult = GST_FLOW_FLUSHING;
1691         GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1692
1693         /* wait until it is unblocked and clean up */
1694         GST_PAD_STREAM_LOCK (pad);
1695         GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1696         gst_download_buffer_locked_flush (dlbuf, TRUE, FALSE);
1697         GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1698         GST_PAD_STREAM_UNLOCK (pad);
1699       }
1700       result = TRUE;
1701       break;
1702     default:
1703       result = FALSE;
1704       break;
1705   }
1706   return result;
1707 }
1708
1709 /* src operating in push mode, we start a task on the source pad that pushes out
1710  * buffers from the dlbuf */
1711 static gboolean
1712 gst_download_buffer_src_activate_push (GstPad * pad, GstObject * parent,
1713     gboolean active)
1714 {
1715   gboolean result = FALSE;
1716   GstDownloadBuffer *dlbuf;
1717
1718   dlbuf = GST_DOWNLOAD_BUFFER (parent);
1719
1720   if (active) {
1721     GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1722     GST_DEBUG_OBJECT (dlbuf, "activating push mode");
1723     dlbuf->srcresult = GST_FLOW_OK;
1724     dlbuf->sinkresult = GST_FLOW_OK;
1725     dlbuf->unexpected = FALSE;
1726     result =
1727         gst_pad_start_task (pad, (GstTaskFunction) gst_download_buffer_loop,
1728         pad, NULL);
1729     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1730   } else {
1731     /* unblock loop function */
1732     GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1733     GST_DEBUG_OBJECT (dlbuf, "deactivating push mode");
1734     dlbuf->srcresult = GST_FLOW_FLUSHING;
1735     dlbuf->sinkresult = GST_FLOW_FLUSHING;
1736     /* the item add signal will unblock */
1737     GST_DOWNLOAD_BUFFER_SIGNAL_ADD (dlbuf, -1);
1738     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1739
1740     /* step 2, make sure streaming finishes */
1741     result = gst_pad_stop_task (pad);
1742   }
1743
1744   return result;
1745 }
1746
1747 /* pull mode, downstream will call our getrange function */
1748 static gboolean
1749 gst_download_buffer_src_activate_pull (GstPad * pad, GstObject * parent,
1750     gboolean active)
1751 {
1752   gboolean result;
1753   GstDownloadBuffer *dlbuf;
1754
1755   dlbuf = GST_DOWNLOAD_BUFFER (parent);
1756
1757   if (active) {
1758     GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1759     /* open the temp file now */
1760     result = gst_download_buffer_open_temp_location_file (dlbuf);
1761     GST_DEBUG_OBJECT (dlbuf, "activating pull mode");
1762     dlbuf->srcresult = GST_FLOW_OK;
1763     dlbuf->sinkresult = GST_FLOW_OK;
1764     dlbuf->unexpected = FALSE;
1765     dlbuf->upstream_size = 0;
1766     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1767   } else {
1768     GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1769     GST_DEBUG_OBJECT (dlbuf, "deactivating pull mode");
1770     dlbuf->srcresult = GST_FLOW_FLUSHING;
1771     dlbuf->sinkresult = GST_FLOW_FLUSHING;
1772     /* this will unlock getrange */
1773     GST_DOWNLOAD_BUFFER_SIGNAL_ADD (dlbuf, -1);
1774     result = TRUE;
1775     GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1776   }
1777
1778   return result;
1779 }
1780
1781 static gboolean
1782 gst_download_buffer_src_activate_mode (GstPad * pad, GstObject * parent,
1783     GstPadMode mode, gboolean active)
1784 {
1785   gboolean res;
1786
1787   switch (mode) {
1788     case GST_PAD_MODE_PULL:
1789       res = gst_download_buffer_src_activate_pull (pad, parent, active);
1790       break;
1791     case GST_PAD_MODE_PUSH:
1792       res = gst_download_buffer_src_activate_push (pad, parent, active);
1793       break;
1794     default:
1795       GST_LOG_OBJECT (pad, "unknown activation mode %d", mode);
1796       res = FALSE;
1797       break;
1798   }
1799   return res;
1800 }
1801
1802 static GstStateChangeReturn
1803 gst_download_buffer_change_state (GstElement * element,
1804     GstStateChange transition)
1805 {
1806   GstDownloadBuffer *dlbuf;
1807   GstStateChangeReturn ret = GST_STATE_CHANGE_SUCCESS;
1808
1809   dlbuf = GST_DOWNLOAD_BUFFER (element);
1810
1811   switch (transition) {
1812     case GST_STATE_CHANGE_NULL_TO_READY:
1813       break;
1814     case GST_STATE_CHANGE_READY_TO_PAUSED:
1815       GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1816       if (!gst_download_buffer_open_temp_location_file (dlbuf))
1817         ret = GST_STATE_CHANGE_FAILURE;
1818       gst_event_replace (&dlbuf->stream_start_event, NULL);
1819       gst_event_replace (&dlbuf->segment_event, NULL);
1820       GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1821       break;
1822     case GST_STATE_CHANGE_PAUSED_TO_PLAYING:
1823       break;
1824     default:
1825       break;
1826   }
1827
1828   if (ret == GST_STATE_CHANGE_FAILURE)
1829     return ret;
1830
1831   ret = GST_ELEMENT_CLASS (parent_class)->change_state (element, transition);
1832
1833   if (ret == GST_STATE_CHANGE_FAILURE)
1834     return ret;
1835
1836   switch (transition) {
1837     case GST_STATE_CHANGE_PLAYING_TO_PAUSED:
1838       break;
1839     case GST_STATE_CHANGE_PAUSED_TO_READY:
1840       GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1841       gst_download_buffer_close_temp_location_file (dlbuf);
1842       gst_event_replace (&dlbuf->stream_start_event, NULL);
1843       gst_event_replace (&dlbuf->segment_event, NULL);
1844       GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1845       break;
1846     case GST_STATE_CHANGE_READY_TO_NULL:
1847       break;
1848     default:
1849       break;
1850   }
1851
1852   return ret;
1853 }
1854
1855 #define CAPACITY_CHANGE(elem) \
1856   update_buffering (elem);
1857
1858 static void
1859 gst_download_buffer_set_temp_template (GstDownloadBuffer * dlbuf,
1860     const gchar * template)
1861 {
1862   GstState state;
1863
1864   /* the element must be stopped in order to do this */
1865   GST_OBJECT_LOCK (dlbuf);
1866   state = GST_STATE (dlbuf);
1867   if (state != GST_STATE_READY && state != GST_STATE_NULL)
1868     goto wrong_state;
1869   GST_OBJECT_UNLOCK (dlbuf);
1870
1871   /* set new location */
1872   g_free (dlbuf->temp_template);
1873   dlbuf->temp_template = g_strdup (template);
1874
1875   return;
1876
1877 /* ERROR */
1878 wrong_state:
1879   {
1880     GST_WARNING_OBJECT (dlbuf, "setting temp-template property in wrong state");
1881     GST_OBJECT_UNLOCK (dlbuf);
1882   }
1883 }
1884
1885 static void
1886 gst_download_buffer_set_property (GObject * object,
1887     guint prop_id, const GValue * value, GParamSpec * pspec)
1888 {
1889   GstDownloadBuffer *dlbuf = GST_DOWNLOAD_BUFFER (object);
1890   GstMessage *msg = NULL;
1891
1892   /* someone could change levels here, and since this
1893    * affects the get/put funcs, we need to lock for safety. */
1894   GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1895
1896   switch (prop_id) {
1897     case PROP_MAX_SIZE_BYTES:
1898       dlbuf->max_level.bytes = g_value_get_uint (value);
1899       msg = CAPACITY_CHANGE (dlbuf);
1900       break;
1901     case PROP_MAX_SIZE_TIME:
1902       dlbuf->max_level.time = g_value_get_uint64 (value);
1903       msg = CAPACITY_CHANGE (dlbuf);
1904       break;
1905     case PROP_LOW_PERCENT:
1906       dlbuf->low_percent = g_value_get_int (value);
1907       break;
1908     case PROP_HIGH_PERCENT:
1909       dlbuf->high_percent = g_value_get_int (value);
1910       break;
1911     case PROP_TEMP_TEMPLATE:
1912       gst_download_buffer_set_temp_template (dlbuf, g_value_get_string (value));
1913       break;
1914     case PROP_TEMP_REMOVE:
1915       dlbuf->temp_remove = g_value_get_boolean (value);
1916       break;
1917     default:
1918       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
1919       break;
1920   }
1921
1922   GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1923
1924   if (msg != NULL)
1925     gst_element_post_message (GST_ELEMENT_CAST (dlbuf), msg);
1926
1927 }
1928
1929 static void
1930 gst_download_buffer_get_property (GObject * object,
1931     guint prop_id, GValue * value, GParamSpec * pspec)
1932 {
1933   GstDownloadBuffer *dlbuf = GST_DOWNLOAD_BUFFER (object);
1934
1935   GST_DOWNLOAD_BUFFER_MUTEX_LOCK (dlbuf);
1936
1937   switch (prop_id) {
1938     case PROP_MAX_SIZE_BYTES:
1939       g_value_set_uint (value, dlbuf->max_level.bytes);
1940       break;
1941     case PROP_MAX_SIZE_TIME:
1942       g_value_set_uint64 (value, dlbuf->max_level.time);
1943       break;
1944     case PROP_LOW_PERCENT:
1945       g_value_set_int (value, dlbuf->low_percent);
1946       break;
1947     case PROP_HIGH_PERCENT:
1948       g_value_set_int (value, dlbuf->high_percent);
1949       break;
1950     case PROP_TEMP_TEMPLATE:
1951       g_value_set_string (value, dlbuf->temp_template);
1952       break;
1953     case PROP_TEMP_LOCATION:
1954       g_value_set_string (value, dlbuf->temp_location);
1955       break;
1956     case PROP_TEMP_REMOVE:
1957       g_value_set_boolean (value, dlbuf->temp_remove);
1958       break;
1959     default:
1960       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
1961       break;
1962   }
1963
1964   GST_DOWNLOAD_BUFFER_MUTEX_UNLOCK (dlbuf);
1965 }