libs/gst/base/gstaggregator.c

   1 /* GStreamer aggregator base class
   2  * Copyright (C) 2014 Mathieu Duponchelle <mathieu.duponchelle@opencreed.com>
   3  * Copyright (C) 2014 Thibault Saunier <tsaunier@gnome.org>
   4  *
   5  * gstaggregator.c:
   6  *
   7  * This library is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Library General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2 of the License, or (at your option) any later version.
  11  *
  12  * This library is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Library General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Library General Public
  18  * License along with this library; if not, write to the
  19  * Free Software Foundation, Inc., 51 Franklin St, Fifth Floor,
  20  * Boston, MA 02110-1301, USA.
  21  */
  22 /**
  23  * SECTION: gstaggregator
  24  * @short_description: manages a set of pads with the purpose of
  25  * aggregating their buffers.
  26  * @see_also: gstcollectpads for historical reasons.
  27  *
  28  * Manages a set of pads with the purpose of aggregating their buffers.
  29  * Control is given to the subclass when all pads have data.
  30  * <itemizedlist>
  31  *  <listitem><para>
  32  *    Base class for mixers and muxers. Subclasses should at least implement
  33  *    the #GstAggregatorClass.aggregate() virtual method.
  34  *  </para></listitem>
  35  *  <listitem><para>
  36  *    When data is queued on all pads, tha aggregate vmethod is called.
  37  *  </para></listitem>
  38  *  <listitem><para>
  39  *    One can peek at the data on any given GstAggregatorPad with the
  40  *    gst_aggregator_pad_get_buffer () method, and take ownership of it
  41  *    with the gst_aggregator_pad_steal_buffer () method. When a buffer
  42  *    has been taken with steal_buffer (), a new buffer can be queued
  43  *    on that pad.
  44  *  </para></listitem>
  45  *  <listitem><para>
  46  *    If the subclass wishes to push a buffer downstream in its aggregate
  47  *    implementation, it should do so through the
  48  *    gst_aggregator_finish_buffer () method. This method will take care
  49  *    of sending and ordering mandatory events such as stream start, caps
  50  *    and segment.
  51  *  </para></listitem>
  52  *  <listitem><para>
  53  *    Same goes for EOS events, which should not be pushed directly by the
  54  *    subclass, it should instead return GST_FLOW_EOS in its aggregate
  55  *    implementation.
  56  *  </para></listitem>
  57  * </itemizedlist>
  58  */
  59
  60 #ifdef HAVE_CONFIG_H
  61 #  include "config.h"
  62 #endif
  63
  64 #include <string.h>             /* strlen */
  65
  66 #include "gstaggregator.h"
  67
  68
  69 /*  Might become API */
  70 static void gst_aggregator_merge_tags (GstAggregator * aggregator,
  71     const GstTagList * tags, GstTagMergeMode mode);
  72 static void gst_aggregator_set_latency_property (GstAggregator * agg,
  73     gint64 latency);
  74 static gint64 gst_aggregator_get_latency_property (GstAggregator * agg);
  75
  76
  77 GST_DEBUG_CATEGORY_STATIC (aggregator_debug);
  78 #define GST_CAT_DEFAULT aggregator_debug
  79
  80 /* GstAggregatorPad definitions */
  81 #define PAD_LOCK_EVENT(pad)   G_STMT_START {                            \
  82   GST_TRACE_OBJECT (pad, "Taking EVENT lock from thread %p",            \
  83         g_thread_self());                                               \
  84   g_mutex_lock(&pad->priv->event_lock);                                 \
  85   GST_TRACE_OBJECT (pad, "Took EVENT lock from thread %p",              \
  86         g_thread_self());                                               \
  87   } G_STMT_END
  88
  89 #define PAD_UNLOCK_EVENT(pad)  G_STMT_START {                           \
  90   GST_TRACE_OBJECT (pad, "Releasing EVENT lock from thread %p",         \
  91         g_thread_self());                                               \
  92   g_mutex_unlock(&pad->priv->event_lock);                               \
  93   GST_TRACE_OBJECT (pad, "Release EVENT lock from thread %p",           \
  94         g_thread_self());                                               \
  95   } G_STMT_END
  96
  97
  98 #define PAD_WAIT_EVENT(pad)   G_STMT_START {                            \
  99   GST_LOG_OBJECT (pad, "Waiting for EVENT on thread %p",                \
 100         g_thread_self());                                               \
 101   g_cond_wait(&(((GstAggregatorPad* )pad)->priv->event_cond),           \
 102       &(pad->priv->event_lock));                                        \
 103   GST_LOG_OBJECT (pad, "DONE Waiting for EVENT on thread %p",           \
 104         g_thread_self());                                               \
 105   } G_STMT_END
 106
 107 #define PAD_BROADCAST_EVENT(pad) G_STMT_START {                        \
 108   GST_LOG_OBJECT (pad, "Signaling EVENT from thread %p",               \
 109         g_thread_self());                                              \
 110   g_cond_broadcast(&(((GstAggregatorPad* )pad)->priv->event_cond));    \
 111   } G_STMT_END
 112
 113 #define GST_AGGREGATOR_SETCAPS_LOCK(self)   G_STMT_START {        \
 114   GST_TRACE_OBJECT (self, "Taking SETCAPS lock from thread %p",   \
 115         g_thread_self());                                         \
 116   g_mutex_lock(&self->priv->setcaps_lock);                        \
 117   GST_TRACE_OBJECT (self, "Took SETCAPS lock from thread %p",     \
 118         g_thread_self());                                         \
 119   } G_STMT_END
 120
 121 #define GST_AGGREGATOR_SETCAPS_UNLOCK(self)   G_STMT_START {        \
 122   GST_TRACE_OBJECT (self, "Releasing SETCAPS lock from thread %p",  \
 123         g_thread_self());                                           \
 124   g_mutex_unlock(&self->priv->setcaps_lock);                        \
 125   GST_TRACE_OBJECT (self, "Took SETCAPS lock from thread %p",       \
 126         g_thread_self());                                           \
 127   } G_STMT_END
 128
 129 #define PAD_STREAM_LOCK(pad)   G_STMT_START {                           \
 130   GST_TRACE_OBJECT (pad, "Taking lock from thread %p",                  \
 131         g_thread_self());                                               \
 132   g_mutex_lock(&pad->priv->stream_lock);                                \
 133   GST_TRACE_OBJECT (pad, "Took lock from thread %p",                    \
 134         g_thread_self());                                               \
 135   } G_STMT_END
 136
 137 #define PAD_STREAM_UNLOCK(pad)  G_STMT_START {                          \
 138   GST_TRACE_OBJECT (pad, "Releasing lock from thread %p",               \
 139         g_thread_self());                                               \
 140   g_mutex_unlock(&pad->priv->stream_lock);                              \
 141   GST_TRACE_OBJECT (pad, "Release lock from thread %p",                 \
 142         g_thread_self());                                               \
 143   } G_STMT_END
 144
 145 #define SRC_STREAM_LOCK(self)   G_STMT_START {                             \
 146   GST_TRACE_OBJECT (self, "Taking src STREAM lock from thread %p",         \
 147         g_thread_self());                                                  \
 148   g_mutex_lock(&self->priv->src_lock);                                     \
 149   GST_TRACE_OBJECT (self, "Took src STREAM lock from thread %p",           \
 150         g_thread_self());                                                  \
 151   } G_STMT_END
 152
 153 #define SRC_STREAM_UNLOCK(self)  G_STMT_START {                            \
 154   GST_TRACE_OBJECT (self, "Releasing src STREAM lock from thread %p",      \
 155         g_thread_self());                                                  \
 156   g_mutex_unlock(&self->priv->src_lock);                                   \
 157   GST_TRACE_OBJECT (self, "Released src STREAM lock from thread %p",       \
 158         g_thread_self());                                                  \
 159   } G_STMT_END
 160
 161 #define SRC_STREAM_WAIT(self) G_STMT_START {                               \
 162   GST_LOG_OBJECT (self, "Waiting for src STREAM on thread %p",             \
 163         g_thread_self());                                                  \
 164   g_cond_wait(&(self->priv->src_cond), &(self->priv->src_lock));           \
 165   GST_LOG_OBJECT (self, "DONE Waiting for src STREAM on thread %p",        \
 166         g_thread_self());                                                  \
 167   } G_STMT_END
 168
 169 #define SRC_STREAM_BROADCAST(self) G_STMT_START {                 \
 170     GST_LOG_OBJECT (self, "Signaling src STREAM from thread %p",           \
 171         g_thread_self());                                                  \
 172     if (self->priv->aggregate_id)                                          \
 173       gst_clock_id_unschedule (self->priv->aggregate_id);                  \
 174     g_cond_broadcast(&(self->priv->src_cond));                             \
 175   } G_STMT_END
 176
 177 struct _GstAggregatorPadPrivate
 178 {
 179   gboolean pending_flush_start;
 180   gboolean pending_flush_stop;
 181   gboolean pending_eos;
 182   gboolean flushing;
 183
 184   GMutex event_lock;
 185   GCond event_cond;
 186
 187   GMutex stream_lock;
 188 };
 189
 190 static gboolean
 191 gst_aggregator_pad_flush (GstAggregatorPad * aggpad, GstAggregator * agg)
 192 {
 193   GstAggregatorPadClass *klass = GST_AGGREGATOR_PAD_GET_CLASS (aggpad);
 194
 195   aggpad->eos = FALSE;
 196   aggpad->priv->flushing = FALSE;
 197
 198   if (klass->flush)
 199     return klass->flush (aggpad, agg);
 200
 201   return TRUE;
 202 }
 203
 204 /*************************************
 205  * GstAggregator implementation  *
 206  *************************************/
 207 static GstElementClass *aggregator_parent_class = NULL;
 208
 209 struct _GstAggregatorPrivate
 210 {
 211   gint padcount;
 212
 213   /* Our state is >= PAUSED */
 214   gboolean running;             /* protected by SRC_STREAM_LOCK */
 215
 216
 217   gint seqnum;
 218   gboolean send_stream_start;
 219   gboolean send_segment;
 220   gboolean flush_seeking;
 221   gboolean pending_flush_start;
 222   gboolean send_eos;
 223   GstFlowReturn flow_return;
 224
 225   GstCaps *srccaps;
 226
 227   GstTagList *tags;
 228   gboolean tags_changed;
 229
 230   /* Lock to prevent two src setcaps from happening at the same time  */
 231   GMutex setcaps_lock;
 232
 233   gboolean latency_live;
 234   GstClockTime latency_min;
 235   GstClockTime latency_max;
 236
 237   GstClockTime sub_latency_min;
 238   GstClockTime sub_latency_max;
 239
 240   /* aggregate */
 241   GstClockID aggregate_id;
 242   GMutex src_lock;
 243   GCond src_cond;
 244
 245   /* properties */
 246   gint64 latency;
 247 };
 248
 249 typedef struct
 250 {
 251   GstEvent *event;
 252   gboolean result;
 253   gboolean flush;
 254
 255   gboolean one_actually_seeked;
 256 } EventData;
 257
 258 #define DEFAULT_LATENCY        0
 259
 260 enum
 261 {
 262   PROP_0,
 263   PROP_LATENCY,
 264   PROP_LAST
 265 };
 266
 267 /**
 268  * gst_aggregator_iterate_sinkpads:
 269  * @self: The #GstAggregator
 270  * @func: (scope call): The function to call.
 271  * @user_data: (closure): The data to pass to @func.
 272  *
 273  * Iterate the sinkpads of aggregator to call a function on them.
 274  *
 275  * This method guarantees that @func will be called only once for each
 276  * sink pad.
 277  */
 278 gboolean
 279 gst_aggregator_iterate_sinkpads (GstAggregator * self,
 280     GstAggregatorPadForeachFunc func, gpointer user_data)
 281 {
 282   gboolean result = FALSE;
 283   GstIterator *iter;
 284   gboolean done = FALSE;
 285   GValue item = { 0, };
 286   GList *seen_pads = NULL;
 287
 288   iter = gst_element_iterate_sink_pads (GST_ELEMENT (self));
 289
 290   if (!iter)
 291     goto no_iter;
 292
 293   while (!done) {
 294     switch (gst_iterator_next (iter, &item)) {
 295       case GST_ITERATOR_OK:
 296       {
 297         GstAggregatorPad *pad;
 298
 299         pad = g_value_get_object (&item);
 300
 301         /* if already pushed, skip. FIXME, find something faster to tag pads */
 302         if (pad == NULL || g_list_find (seen_pads, pad)) {
 303           g_value_reset (&item);
 304           break;
 305         }
 306
 307         GST_LOG_OBJECT (pad, "calling function %s on pad",
 308             GST_DEBUG_FUNCPTR_NAME (func));
 309
 310         result = func (self, pad, user_data);
 311
 312         done = !result;
 313
 314         seen_pads = g_list_prepend (seen_pads, pad);
 315
 316         g_value_reset (&item);
 317         break;
 318       }
 319       case GST_ITERATOR_RESYNC:
 320         gst_iterator_resync (iter);
 321         break;
 322       case GST_ITERATOR_ERROR:
 323         GST_ERROR_OBJECT (self,
 324             "Could not iterate over internally linked pads");
 325         done = TRUE;
 326         break;
 327       case GST_ITERATOR_DONE:
 328         done = TRUE;
 329         break;
 330     }
 331   }
 332   g_value_unset (&item);
 333   gst_iterator_free (iter);
 334
 335   if (seen_pads == NULL) {
 336     GST_DEBUG_OBJECT (self, "No pad seen");
 337     return FALSE;
 338   }
 339
 340   g_list_free (seen_pads);
 341
 342 no_iter:
 343   return result;
 344 }
 345
 346 static gboolean
 347 gst_aggregator_check_pads_ready (GstAggregator * self)
 348 {
 349   GstAggregatorPad *pad;
 350   GList *l, *sinkpads;
 351
 352   GST_LOG_OBJECT (self, "checking pads");
 353
 354   GST_OBJECT_LOCK (self);
 355
 356   sinkpads = GST_ELEMENT_CAST (self)->sinkpads;
 357   if (sinkpads == NULL)
 358     goto no_sinkpads;
 359
 360   for (l = sinkpads; l != NULL; l = l->next) {
 361     pad = l->data;
 362
 363     if (pad->buffer == NULL && !pad->eos)
 364       goto pad_not_ready;
 365   }
 366
 367   GST_OBJECT_UNLOCK (self);
 368   GST_LOG_OBJECT (self, "pads are ready");
 369   return TRUE;
 370
 371 no_sinkpads:
 372   {
 373     GST_LOG_OBJECT (self, "pads not ready: no sink pads");
 374     GST_OBJECT_UNLOCK (self);
 375     return FALSE;
 376   }
 377 pad_not_ready:
 378   {
 379     GST_LOG_OBJECT (pad, "pad not ready to be aggregated yet");
 380     GST_OBJECT_UNLOCK (self);
 381     return FALSE;
 382   }
 383 }
 384
 385 static void
 386 gst_aggregator_reset_flow_values (GstAggregator * self)
 387 {
 388   self->priv->flow_return = GST_FLOW_FLUSHING;
 389   self->priv->send_stream_start = TRUE;
 390   self->priv->send_segment = TRUE;
 391   gst_segment_init (&self->segment, GST_FORMAT_TIME);
 392 }
 393
 394 static inline void
 395 gst_aggregator_push_mandatory_events (GstAggregator * self)
 396 {
 397   GstAggregatorPrivate *priv = self->priv;
 398
 399   if (self->priv->send_stream_start) {
 400     gchar s_id[32];
 401
 402     GST_INFO_OBJECT (self, "pushing stream start");
 403     /* stream-start (FIXME: create id based on input ids) */
 404     g_snprintf (s_id, sizeof (s_id), "agg-%08x", g_random_int ());
 405     if (!gst_pad_push_event (self->srcpad, gst_event_new_stream_start (s_id))) {
 406       GST_WARNING_OBJECT (self->srcpad, "Sending stream start event failed");
 407     }
 408     self->priv->send_stream_start = FALSE;
 409   }
 410
 411   if (self->priv->srccaps) {
 412
 413     GST_INFO_OBJECT (self, "pushing caps: %" GST_PTR_FORMAT,
 414         self->priv->srccaps);
 415     if (!gst_pad_push_event (self->srcpad,
 416             gst_event_new_caps (self->priv->srccaps))) {
 417       GST_WARNING_OBJECT (self->srcpad, "Sending caps event failed");
 418     }
 419     gst_caps_unref (self->priv->srccaps);
 420     self->priv->srccaps = NULL;
 421   }
 422
 423   if (g_atomic_int_get (&self->priv->send_segment)) {
 424     if (!g_atomic_int_get (&self->priv->flush_seeking)) {
 425       GstEvent *segev = gst_event_new_segment (&self->segment);
 426
 427       if (!self->priv->seqnum)
 428         self->priv->seqnum = gst_event_get_seqnum (segev);
 429       else
 430         gst_event_set_seqnum (segev, self->priv->seqnum);
 431
 432       GST_DEBUG_OBJECT (self, "pushing segment %" GST_PTR_FORMAT, segev);
 433       gst_pad_push_event (self->srcpad, segev);
 434       g_atomic_int_set (&self->priv->send_segment, FALSE);
 435     }
 436   }
 437
 438   if (priv->tags && priv->tags_changed) {
 439     gst_pad_push_event (self->srcpad,
 440         gst_event_new_tag (gst_tag_list_ref (priv->tags)));
 441     priv->tags_changed = FALSE;
 442   }
 443 }
 444
 445 /**
 446  * gst_aggregator_set_src_caps:
 447  * @self: The #GstAggregator
 448  * @caps: The #GstCaps to set on the src pad.
 449  *
 450  * Sets the caps to be used on the src pad.
 451  */
 452 void
 453 gst_aggregator_set_src_caps (GstAggregator * self, GstCaps * caps)
 454 {
 455   GST_AGGREGATOR_SETCAPS_LOCK (self);
 456   gst_caps_replace (&self->priv->srccaps, caps);
 457   gst_aggregator_push_mandatory_events (self);
 458   GST_AGGREGATOR_SETCAPS_UNLOCK (self);
 459 }
 460
 461 /**
 462  * gst_aggregator_finish_buffer:
 463  * @self: The #GstAggregator
 464  * @buffer: (transfer full): the #GstBuffer to push.
 465  *
 466  * This method will push the provided output buffer downstream. If needed,
 467  * mandatory events such as stream-start, caps, and segment events will be
 468  * sent before pushing the buffer.
 469  */
 470 GstFlowReturn
 471 gst_aggregator_finish_buffer (GstAggregator * self, GstBuffer * buffer)
 472 {
 473   gst_aggregator_push_mandatory_events (self);
 474
 475   if (!g_atomic_int_get (&self->priv->flush_seeking) &&
 476       gst_pad_is_active (self->srcpad)) {
 477     GST_TRACE_OBJECT (self, "pushing buffer %" GST_PTR_FORMAT, buffer);
 478     return gst_pad_push (self->srcpad, buffer);
 479   } else {
 480     GST_INFO_OBJECT (self, "Not pushing (active: %i, flushing: %i)",
 481         g_atomic_int_get (&self->priv->flush_seeking),
 482         gst_pad_is_active (self->srcpad));
 483     gst_buffer_unref (buffer);
 484     return GST_FLOW_OK;
 485   }
 486 }
 487
 488 static void
 489 gst_aggregator_push_eos (GstAggregator * self)
 490 {
 491   GstEvent *event;
 492   gst_aggregator_push_mandatory_events (self);
 493
 494   self->priv->send_eos = FALSE;
 495   event = gst_event_new_eos ();
 496   gst_event_set_seqnum (event, self->priv->seqnum);
 497   gst_pad_push_event (self->srcpad, event);
 498 }
 499
 500 static GstClockTime
 501 gst_aggregator_get_next_time (GstAggregator * self)
 502 {
 503   GstAggregatorClass *klass = GST_AGGREGATOR_GET_CLASS (self);
 504
 505   if (klass->get_next_time)
 506     return klass->get_next_time (self);
 507
 508   return GST_CLOCK_TIME_NONE;
 509 }
 510
 511 /* called with the src STREAM lock */
 512 static gboolean
 513 gst_aggregator_wait_and_check (GstAggregator * self, gboolean * timeout)
 514 {
 515   GstClockTime latency_max, latency_min;
 516   GstClockTime start;
 517   gboolean live, res;
 518
 519   *timeout = FALSE;
 520
 521   SRC_STREAM_LOCK (self);
 522
 523   gst_aggregator_get_latency (self, &live, &latency_min, &latency_max);
 524
 525   if (gst_aggregator_check_pads_ready (self)) {
 526     GST_DEBUG_OBJECT (self, "all pads have data");
 527     SRC_STREAM_UNLOCK (self);
 528
 529     return TRUE;
 530   }
 531
 532   /* Before waiting, check if we're actually still running */
 533   if (!self->priv->running || !self->priv->send_eos) {
 534     SRC_STREAM_UNLOCK (self);
 535
 536     return FALSE;
 537   }
 538
 539   start = gst_aggregator_get_next_time (self);
 540
 541   if (!live || !GST_IS_CLOCK (GST_ELEMENT_CLOCK (self))
 542       || !GST_CLOCK_TIME_IS_VALID (start)) {
 543     /* We wake up here when something happened, and below
 544      * then check if we're ready now. If we return FALSE,
 545      * we will be directly called again.
 546      */
 547     SRC_STREAM_WAIT (self);
 548   } else {
 549     GstClockTime base_time, time;
 550     GstClock *clock;
 551     GstClockReturn status;
 552     GstClockTimeDiff jitter;
 553
 554     GST_DEBUG_OBJECT (self, "got subclass start time: %" GST_TIME_FORMAT,
 555         GST_TIME_ARGS (start));
 556
 557     GST_OBJECT_LOCK (self);
 558     base_time = GST_ELEMENT_CAST (self)->base_time;
 559     clock = GST_ELEMENT_CLOCK (self);
 560     if (clock)
 561       gst_object_ref (clock);
 562     GST_OBJECT_UNLOCK (self);
 563
 564     time = base_time + start;
 565
 566     if (GST_CLOCK_TIME_IS_VALID (latency_min)) {
 567       time += latency_min;
 568     } else {
 569       time += self->priv->latency;
 570     }
 571
 572     GST_DEBUG_OBJECT (self, "possibly waiting for clock to reach %"
 573         GST_TIME_FORMAT " (base %" GST_TIME_FORMAT " start %" GST_TIME_FORMAT
 574         " latency max %" GST_TIME_FORMAT " latency min %" GST_TIME_FORMAT
 575         " current %" GST_TIME_FORMAT ")", GST_TIME_ARGS (time),
 576         GST_TIME_ARGS (GST_ELEMENT_CAST (self)->base_time),
 577         GST_TIME_ARGS (start), GST_TIME_ARGS (latency_max),
 578         GST_TIME_ARGS (latency_min),
 579         GST_TIME_ARGS (gst_clock_get_time (clock)));
 580
 581     self->priv->aggregate_id = gst_clock_new_single_shot_id (clock, time);
 582     gst_object_unref (clock);
 583     SRC_STREAM_UNLOCK (self);
 584
 585     jitter = 0;
 586     status = gst_clock_id_wait (self->priv->aggregate_id, &jitter);
 587
 588     SRC_STREAM_LOCK (self);
 589     if (self->priv->aggregate_id) {
 590       gst_clock_id_unref (self->priv->aggregate_id);
 591       self->priv->aggregate_id = NULL;
 592     }
 593
 594     GST_DEBUG_OBJECT (self,
 595         "clock returned %d (jitter: %s%" GST_TIME_FORMAT ")",
 596         status, (jitter < 0 ? "-" : " "),
 597         GST_TIME_ARGS ((jitter < 0 ? -jitter : jitter)));
 598
 599     /* we timed out */
 600     if (status == GST_CLOCK_OK || status == GST_CLOCK_EARLY) {
 601       SRC_STREAM_UNLOCK (self);
 602       *timeout = TRUE;
 603       return TRUE;
 604     }
 605   }
 606
 607   res = gst_aggregator_check_pads_ready (self);
 608   SRC_STREAM_UNLOCK (self);
 609
 610   return res;
 611 }
 612
 613 static void
 614 gst_aggregator_aggregate_func (GstAggregator * self)
 615 {
 616   GstAggregatorPrivate *priv = self->priv;
 617   GstAggregatorClass *klass = GST_AGGREGATOR_GET_CLASS (self);
 618   gboolean timeout = FALSE;
 619
 620   if (self->priv->running == FALSE) {
 621     GST_DEBUG_OBJECT (self, "Not running anymore");
 622     return;
 623   }
 624
 625   GST_LOG_OBJECT (self, "Checking aggregate");
 626   while (priv->send_eos && priv->running) {
 627     if (!gst_aggregator_wait_and_check (self, &timeout))
 628       continue;
 629
 630     GST_TRACE_OBJECT (self, "Actually aggregating!");
 631
 632     priv->flow_return = klass->aggregate (self, timeout);
 633
 634     if (priv->flow_return == GST_FLOW_EOS) {
 635       gst_aggregator_push_eos (self);
 636     }
 637
 638     if (priv->flow_return == GST_FLOW_FLUSHING &&
 639         g_atomic_int_get (&priv->flush_seeking))
 640       priv->flow_return = GST_FLOW_OK;
 641
 642     GST_LOG_OBJECT (self, "flow return is %s",
 643         gst_flow_get_name (priv->flow_return));
 644
 645     if (priv->flow_return != GST_FLOW_OK)
 646       break;
 647   }
 648 }
 649
 650 static gboolean
 651 gst_aggregator_start (GstAggregator * self)
 652 {
 653   GstAggregatorClass *klass;
 654   gboolean result;
 655
 656   self->priv->running = TRUE;
 657   self->priv->send_stream_start = TRUE;
 658   self->priv->send_segment = TRUE;
 659   self->priv->send_eos = TRUE;
 660   self->priv->srccaps = NULL;
 661   self->priv->flow_return = GST_FLOW_OK;
 662
 663   klass = GST_AGGREGATOR_GET_CLASS (self);
 664
 665   if (klass->start)
 666     result = klass->start (self);
 667   else
 668     result = TRUE;
 669
 670   return result;
 671 }
 672
 673 static gboolean
 674 _check_pending_flush_stop (GstAggregatorPad * pad)
 675 {
 676   return (!pad->priv->pending_flush_stop && !pad->priv->pending_flush_start);
 677 }
 678
 679 static gboolean
 680 gst_aggregator_stop_srcpad_task (GstAggregator * self, GstEvent * flush_start)
 681 {
 682   gboolean res = TRUE;
 683
 684   GST_INFO_OBJECT (self, "%s srcpad task",
 685       flush_start ? "Pausing" : "Stopping");
 686
 687   SRC_STREAM_LOCK (self);
 688   self->priv->running = FALSE;
 689   SRC_STREAM_BROADCAST (self);
 690   SRC_STREAM_UNLOCK (self);
 691
 692   if (flush_start) {
 693     res = gst_pad_push_event (self->srcpad, flush_start);
 694   }
 695
 696   gst_pad_stop_task (self->srcpad);
 697
 698   return res;
 699 }
 700
 701 static void
 702 gst_aggregator_start_srcpad_task (GstAggregator * self)
 703 {
 704   GST_INFO_OBJECT (self, "Starting srcpad task");
 705
 706   self->priv->running = TRUE;
 707   gst_pad_start_task (GST_PAD (self->srcpad),
 708       (GstTaskFunction) gst_aggregator_aggregate_func, self, NULL);
 709 }
 710
 711 static GstFlowReturn
 712 gst_aggregator_flush (GstAggregator * self)
 713 {
 714   GstFlowReturn ret = GST_FLOW_OK;
 715   GstAggregatorPrivate *priv = self->priv;
 716   GstAggregatorClass *klass = GST_AGGREGATOR_GET_CLASS (self);
 717
 718   GST_DEBUG_OBJECT (self, "Flushing everything");
 719   g_atomic_int_set (&priv->send_segment, TRUE);
 720   g_atomic_int_set (&priv->flush_seeking, FALSE);
 721   g_atomic_int_set (&priv->tags_changed, FALSE);
 722   if (klass->flush)
 723     ret = klass->flush (self);
 724
 725   return ret;
 726 }
 727
 728 static gboolean
 729 gst_aggregator_all_flush_stop_received (GstAggregator * self)
 730 {
 731   GList *tmp;
 732   GstAggregatorPad *tmppad;
 733
 734   GST_OBJECT_LOCK (self);
 735   for (tmp = GST_ELEMENT (self)->sinkpads; tmp; tmp = tmp->next) {
 736     tmppad = (GstAggregatorPad *) tmp->data;
 737
 738     if (_check_pending_flush_stop (tmppad) == FALSE) {
 739       GST_DEBUG_OBJECT (tmppad, "Is not last %i -- %i",
 740           tmppad->priv->pending_flush_start, tmppad->priv->pending_flush_stop);
 741       GST_OBJECT_UNLOCK (self);
 742       return FALSE;
 743     }
 744   }
 745   GST_OBJECT_UNLOCK (self);
 746
 747   return TRUE;
 748 }
 749
 750 static void
 751 gst_aggregator_flush_start (GstAggregator * self, GstAggregatorPad * aggpad,
 752     GstEvent * event)
 753 {
 754   GstBuffer *tmpbuf;
 755   GstAggregatorPrivate *priv = self->priv;
 756   GstAggregatorPadPrivate *padpriv = aggpad->priv;
 757
 758   g_atomic_int_set (&aggpad->priv->flushing, TRUE);
 759   /*  Remove pad buffer and wake up the streaming thread */
 760   tmpbuf = gst_aggregator_pad_steal_buffer (aggpad);
 761   gst_buffer_replace (&tmpbuf, NULL);
 762   PAD_STREAM_LOCK (aggpad);
 763   if (g_atomic_int_compare_and_exchange (&padpriv->pending_flush_start,
 764           TRUE, FALSE) == TRUE) {
 765     GST_DEBUG_OBJECT (aggpad, "Expecting FLUSH_STOP now");
 766     g_atomic_int_set (&padpriv->pending_flush_stop, TRUE);
 767   }
 768
 769   if (g_atomic_int_get (&priv->flush_seeking)) {
 770     /* If flush_seeking we forward the first FLUSH_START */
 771     if (g_atomic_int_compare_and_exchange (&priv->pending_flush_start,
 772             TRUE, FALSE) == TRUE) {
 773
 774       GST_INFO_OBJECT (self, "Flushing, pausing srcpad task");
 775       gst_aggregator_stop_srcpad_task (self, event);
 776       priv->flow_return = GST_FLOW_OK;
 777
 778       GST_INFO_OBJECT (self, "Getting STREAM_LOCK while seeking");
 779       GST_PAD_STREAM_LOCK (self->srcpad);
 780       GST_LOG_OBJECT (self, "GOT STREAM_LOCK");
 781       event = NULL;
 782     } else {
 783       gst_event_unref (event);
 784     }
 785   } else {
 786     gst_event_unref (event);
 787   }
 788   PAD_STREAM_UNLOCK (aggpad);
 789
 790   tmpbuf = gst_aggregator_pad_steal_buffer (aggpad);
 791   gst_buffer_replace (&tmpbuf, NULL);
 792 }
 793
 794 /* GstAggregator vmethods default implementations */
 795 static gboolean
 796 gst_aggregator_default_sink_event (GstAggregator * self,
 797     GstAggregatorPad * aggpad, GstEvent * event)
 798 {
 799   gboolean res = TRUE;
 800   GstPad *pad = GST_PAD (aggpad);
 801   GstAggregatorPrivate *priv = self->priv;
 802
 803   switch (GST_EVENT_TYPE (event)) {
 804     case GST_EVENT_FLUSH_START:
 805     {
 806       gst_aggregator_flush_start (self, aggpad, event);
 807       /* We forward only in one case: right after flush_seeking */
 808       event = NULL;
 809       goto eat;
 810     }
 811     case GST_EVENT_FLUSH_STOP:
 812     {
 813       GST_DEBUG_OBJECT (aggpad, "Got FLUSH_STOP");
 814
 815       gst_aggregator_pad_flush (aggpad, self);
 816       if (g_atomic_int_get (&priv->flush_seeking)) {
 817         g_atomic_int_set (&aggpad->priv->pending_flush_stop, FALSE);
 818
 819         if (g_atomic_int_get (&priv->flush_seeking)) {
 820           if (gst_aggregator_all_flush_stop_received (self)) {
 821             /* That means we received FLUSH_STOP/FLUSH_STOP on
 822              * all sinkpads -- Seeking is Done... sending FLUSH_STOP */
 823             gst_aggregator_flush (self);
 824             gst_pad_push_event (self->srcpad, event);
 825             event = NULL;
 826             SRC_STREAM_LOCK (self);
 827             priv->send_eos = TRUE;
 828             SRC_STREAM_BROADCAST (self);
 829             SRC_STREAM_UNLOCK (self);
 830
 831             GST_INFO_OBJECT (self, "Releasing source pad STREAM_LOCK");
 832             GST_PAD_STREAM_UNLOCK (self->srcpad);
 833             gst_aggregator_start_srcpad_task (self);
 834           }
 835         }
 836       }
 837
 838       /* We never forward the event */
 839       goto eat;
 840     }
 841     case GST_EVENT_EOS:
 842     {
 843       GST_DEBUG_OBJECT (aggpad, "EOS");
 844
 845       /* We still have a buffer, and we don't want the subclass to have to
 846        * check for it. Mark pending_eos, eos will be set when steal_buffer is
 847        * called
 848        */
 849       SRC_STREAM_LOCK (self);
 850       PAD_LOCK_EVENT (aggpad);
 851       if (!aggpad->buffer) {
 852         aggpad->eos = TRUE;
 853       } else {
 854         aggpad->priv->pending_eos = TRUE;
 855       }
 856       PAD_UNLOCK_EVENT (aggpad);
 857
 858       SRC_STREAM_BROADCAST (self);
 859       SRC_STREAM_UNLOCK (self);
 860       goto eat;
 861     }
 862     case GST_EVENT_SEGMENT:
 863     {
 864       PAD_LOCK_EVENT (aggpad);
 865       gst_event_copy_segment (event, &aggpad->segment);
 866       self->priv->seqnum = gst_event_get_seqnum (event);
 867       PAD_UNLOCK_EVENT (aggpad);
 868       goto eat;
 869     }
 870     case GST_EVENT_STREAM_START:
 871     {
 872       goto eat;
 873     }
 874     case GST_EVENT_TAG:
 875     {
 876       GstTagList *tags;
 877
 878       gst_event_parse_tag (event, &tags);
 879
 880       if (gst_tag_list_get_scope (tags) == GST_TAG_SCOPE_STREAM) {
 881         gst_aggregator_merge_tags (self, tags, GST_TAG_MERGE_REPLACE);
 882         gst_event_unref (event);
 883         event = NULL;
 884         goto eat;
 885       }
 886       break;
 887     }
 888     default:
 889     {
 890       break;
 891     }
 892   }
 893
 894   GST_DEBUG_OBJECT (pad, "Forwarding event: %" GST_PTR_FORMAT, event);
 895   return gst_pad_event_default (pad, GST_OBJECT (self), event);
 896
 897 eat:
 898   GST_DEBUG_OBJECT (pad, "Eating event: %" GST_PTR_FORMAT, event);
 899   if (event)
 900     gst_event_unref (event);
 901
 902   return res;
 903 }
 904
 905 static inline gboolean
 906 gst_aggregator_stop_pad (GstAggregator * self, GstAggregatorPad * pad,
 907     gpointer unused_udata)
 908 {
 909   gst_aggregator_pad_flush (pad, self);
 910
 911   return TRUE;
 912 }
 913
 914 static gboolean
 915 gst_aggregator_stop (GstAggregator * agg)
 916 {
 917   GstAggregatorClass *klass;
 918   gboolean result;
 919
 920   gst_aggregator_reset_flow_values (agg);
 921
 922   gst_aggregator_iterate_sinkpads (agg, gst_aggregator_stop_pad, NULL);
 923
 924   if (agg->priv->tags)
 925     gst_tag_list_unref (agg->priv->tags);
 926   agg->priv->tags = NULL;
 927
 928   klass = GST_AGGREGATOR_GET_CLASS (agg);
 929
 930   if (klass->stop)
 931     result = klass->stop (agg);
 932   else
 933     result = TRUE;
 934
 935   return result;
 936 }
 937
 938 /* GstElement vmethods implementations */
 939 static GstStateChangeReturn
 940 gst_aggregator_change_state (GstElement * element, GstStateChange transition)
 941 {
 942   GstStateChangeReturn ret;
 943   GstAggregator *self = GST_AGGREGATOR (element);
 944
 945   switch (transition) {
 946     case GST_STATE_CHANGE_READY_TO_PAUSED:
 947       if (!gst_aggregator_start (self))
 948         goto error_start;
 949       break;
 950     default:
 951       break;
 952   }
 953
 954   if ((ret =
 955           GST_ELEMENT_CLASS (aggregator_parent_class)->change_state (element,
 956               transition)) == GST_STATE_CHANGE_FAILURE)
 957     goto failure;
 958
 959
 960   switch (transition) {
 961     case GST_STATE_CHANGE_PAUSED_TO_READY:
 962       if (!gst_aggregator_stop (self)) {
 963         /* What to do in this case? Error out? */
 964         GST_ERROR_OBJECT (self, "Subclass failed to stop.");
 965       }
 966       break;
 967     default:
 968       break;
 969   }
 970
 971   return ret;
 972
 973 /* ERRORS */
 974 failure:
 975   {
 976     GST_ERROR_OBJECT (element, "parent failed state change");
 977     return ret;
 978   }
 979 error_start:
 980   {
 981     GST_ERROR_OBJECT (element, "Subclass failed to start");
 982     return GST_STATE_CHANGE_FAILURE;
 983   }
 984 }
 985
 986 static void
 987 gst_aggregator_release_pad (GstElement * element, GstPad * pad)
 988 {
 989   GstAggregator *self = GST_AGGREGATOR (element);
 990   GstBuffer *tmpbuf;
 991
 992   GstAggregatorPad *aggpad = GST_AGGREGATOR_PAD (pad);
 993
 994   GST_INFO_OBJECT (pad, "Removing pad");
 995
 996   SRC_STREAM_LOCK (self);
 997   g_atomic_int_set (&aggpad->priv->flushing, TRUE);
 998   tmpbuf = gst_aggregator_pad_steal_buffer (aggpad);
 999   gst_buffer_replace (&tmpbuf, NULL);
1000   gst_element_remove_pad (element, pad);
1001
1002   SRC_STREAM_BROADCAST (self);
1003   SRC_STREAM_UNLOCK (self);
1004 }
1005
1006 static GstPad *
1007 gst_aggregator_request_new_pad (GstElement * element,
1008     GstPadTemplate * templ, const gchar * req_name, const GstCaps * caps)
1009 {
1010   GstAggregator *self;
1011   GstAggregatorPad *agg_pad;
1012
1013   GstElementClass *klass = GST_ELEMENT_GET_CLASS (element);
1014   GstAggregatorPrivate *priv = GST_AGGREGATOR (element)->priv;
1015
1016   self = GST_AGGREGATOR (element);
1017
1018   if (templ == gst_element_class_get_pad_template (klass, "sink_%u")) {
1019     gint serial = 0;
1020     gchar *name = NULL;
1021
1022     GST_OBJECT_LOCK (element);
1023     if (req_name == NULL || strlen (req_name) < 6
1024         || !g_str_has_prefix (req_name, "sink_")) {
1025       /* no name given when requesting the pad, use next available int */
1026       priv->padcount++;
1027     } else {
1028       /* parse serial number from requested padname */
1029       serial = g_ascii_strtoull (&req_name[5], NULL, 10);
1030       if (serial >= priv->padcount)
1031         priv->padcount = serial;
1032     }
1033
1034     name = g_strdup_printf ("sink_%u", priv->padcount);
1035     agg_pad = g_object_new (GST_AGGREGATOR_GET_CLASS (self)->sinkpads_type,
1036         "name", name, "direction", GST_PAD_SINK, "template", templ, NULL);
1037     g_free (name);
1038
1039     GST_OBJECT_UNLOCK (element);
1040
1041   } else {
1042     return NULL;
1043   }
1044
1045   GST_DEBUG_OBJECT (element, "Adding pad %s", GST_PAD_NAME (agg_pad));
1046
1047   if (priv->running)
1048     gst_pad_set_active (GST_PAD (agg_pad), TRUE);
1049
1050   /* add the pad to the element */
1051   gst_element_add_pad (element, GST_PAD (agg_pad));
1052
1053   return GST_PAD (agg_pad);
1054 }
1055
1056 typedef struct
1057 {
1058   GstClockTime min, max;
1059   gboolean live;
1060 } LatencyData;
1061
1062 static gboolean
1063 gst_aggregator_query_sink_latency_foreach (GstAggregator * self,
1064     GstAggregatorPad * pad, gpointer user_data)
1065 {
1066   LatencyData *data = user_data;
1067   GstClockTime min, max;
1068   GstQuery *query;
1069   gboolean live, res;
1070
1071   query = gst_query_new_latency ();
1072   res = gst_pad_peer_query (GST_PAD_CAST (pad), query);
1073
1074   if (res) {
1075     gst_query_parse_latency (query, &live, &min, &max);
1076
1077     GST_LOG_OBJECT (pad, "got latency live:%s min:%" G_GINT64_FORMAT
1078         " max:%" G_GINT64_FORMAT, live ? "true" : "false", min, max);
1079
1080     if (min != GST_CLOCK_TIME_NONE && min > data->min)
1081       data->min = min;
1082
1083     if (max != GST_CLOCK_TIME_NONE &&
1084         ((data->max != GST_CLOCK_TIME_NONE && max < data->max) ||
1085             (data->max == GST_CLOCK_TIME_NONE)))
1086       data->max = max;
1087
1088     data->live |= live;
1089   }
1090
1091   gst_query_unref (query);
1092
1093   return TRUE;
1094 }
1095
1096 /**
1097  * gst_aggregator_get_latency:
1098  * @self: a #GstAggregator
1099  * @live: (out) (allow-none): whether @self is live
1100  * @min_latency: (out) (allow-none): the configured minimum latency of @self
1101  * @max_latency: (out) (allow-none): the configured maximum latency of @self
1102  *
1103  * Retreives the latency values reported by @self in response to the latency
1104  * query.
1105  *
1106  * Typically only called by subclasses.
1107  */
1108 void
1109 gst_aggregator_get_latency (GstAggregator * self, gboolean * live,
1110     GstClockTime * min_latency, GstClockTime * max_latency)
1111 {
1112   GstClockTime our_latency;
1113   GstClockTime min, max;
1114
1115   g_return_if_fail (GST_IS_AGGREGATOR (self));
1116
1117   /* latency_min is never GST_CLOCK_TIME_NONE by construction */
1118   min = self->priv->latency_min;
1119   max = self->priv->latency_max;
1120
1121   min += self->priv->sub_latency_min;
1122   if (GST_CLOCK_TIME_IS_VALID (max)
1123       && GST_CLOCK_TIME_IS_VALID (self->priv->sub_latency_max))
1124     max += self->priv->sub_latency_max;
1125
1126   our_latency = self->priv->latency;
1127   if (GST_CLOCK_TIME_IS_VALID (our_latency)) {
1128     min += our_latency;
1129     if (GST_CLOCK_TIME_IS_VALID (max))
1130       max += our_latency;
1131   }
1132
1133   if (live)
1134     *live = self->priv->latency_live;
1135   if (min_latency)
1136     *min_latency = min;
1137   if (max_latency)
1138     *max_latency = max;
1139 }
1140
1141 static gboolean
1142 gst_aggregator_query_latency (GstAggregator * self, GstQuery * query)
1143 {
1144   GstClockTime our_latency;
1145   LatencyData data;
1146
1147   data.min = 0;
1148   data.max = GST_CLOCK_TIME_NONE;
1149   data.live = FALSE;
1150
1151   /* query upstream's latency */
1152   SRC_STREAM_LOCK (self);
1153   gst_aggregator_iterate_sinkpads (self,
1154       gst_aggregator_query_sink_latency_foreach, &data);
1155   SRC_STREAM_UNLOCK (self);
1156
1157   our_latency = self->priv->latency;
1158
1159   if (data.live && GST_CLOCK_TIME_IS_VALID (our_latency) &&
1160       our_latency > data.max) {
1161     GST_ELEMENT_WARNING (self, CORE, NEGOTIATION,
1162         ("%s", "Latency too big"),
1163         ("The requested latency value is too big for the current pipeline.  "
1164             "Limiting to %" G_GINT64_FORMAT, data.max));
1165     self->priv->latency = data.max;
1166     /* FIXME: shouldn't we g_object_notify() the change here? */
1167   }
1168
1169   if (G_UNLIKELY (!GST_CLOCK_TIME_IS_VALID (data.min))) {
1170     GST_WARNING_OBJECT (self, "Invalid minimum latency, using 0");
1171     data.min = 0;
1172   }
1173
1174   if (G_UNLIKELY (data.min > data.max)) {
1175     GST_WARNING_OBJECT (self, "Minimum latency is greater than maximum latency "
1176         "(%" G_GINT64_FORMAT " > %" G_GINT64_FORMAT "). "
1177         "Clamping it at the maximum latency", data.min, data.max);
1178     data.min = data.max;
1179   }
1180
1181   self->priv->latency_live = data.live;
1182   self->priv->latency_min = data.min;
1183   self->priv->latency_max = data.max;
1184
1185   /* add our own */
1186   if (GST_CLOCK_TIME_IS_VALID (our_latency)) {
1187     if (GST_CLOCK_TIME_IS_VALID (data.min))
1188       data.min += our_latency;
1189     if (GST_CLOCK_TIME_IS_VALID (data.max))
1190       data.max += our_latency;
1191   }
1192
1193   if (GST_CLOCK_TIME_IS_VALID (self->priv->sub_latency_min)
1194       && GST_CLOCK_TIME_IS_VALID (data.min))
1195     data.min += self->priv->sub_latency_min;
1196   if (GST_CLOCK_TIME_IS_VALID (self->priv->sub_latency_max)
1197       && GST_CLOCK_TIME_IS_VALID (data.max))
1198     data.max += self->priv->sub_latency_max;
1199
1200   GST_DEBUG_OBJECT (self, "configured latency live:%s min:%" G_GINT64_FORMAT
1201       " max:%" G_GINT64_FORMAT, data.live ? "true" : "false", data.min,
1202       data.max);
1203
1204   gst_query_set_latency (query, data.live, data.min, data.max);
1205
1206   return TRUE;
1207 }
1208
1209 static gboolean
1210 gst_aggregator_send_event (GstElement * element, GstEvent * event)
1211 {
1212   GstAggregator *self = GST_AGGREGATOR (element);
1213
1214   GST_STATE_LOCK (element);
1215   if (GST_EVENT_TYPE (event) == GST_EVENT_SEEK &&
1216       GST_STATE (element) < GST_STATE_PAUSED) {
1217     gdouble rate;
1218     GstFormat fmt;
1219     GstSeekFlags flags;
1220     GstSeekType start_type, stop_type;
1221     gint64 start, stop;
1222
1223     gst_event_parse_seek (event, &rate, &fmt, &flags, &start_type,
1224         &start, &stop_type, &stop);
1225     gst_segment_do_seek (&self->segment, rate, fmt, flags, start_type, start,
1226         stop_type, stop, NULL);
1227
1228     self->priv->seqnum = gst_event_get_seqnum (event);
1229     GST_DEBUG_OBJECT (element, "Storing segment %" GST_PTR_FORMAT, event);
1230   }
1231   GST_STATE_UNLOCK (element);
1232
1233
1234   return GST_ELEMENT_CLASS (aggregator_parent_class)->send_event (element,
1235       event);
1236 }
1237
1238 static gboolean
1239 gst_aggregator_default_src_query (GstAggregator * self, GstQuery * query)
1240 {
1241   gboolean res = TRUE;
1242
1243   switch (GST_QUERY_TYPE (query)) {
1244     case GST_QUERY_SEEKING:
1245     {
1246       GstFormat format;
1247
1248       /* don't pass it along as some (file)sink might claim it does
1249        * whereas with a collectpads in between that will not likely work */
1250       gst_query_parse_seeking (query, &format, NULL, NULL, NULL);
1251       gst_query_set_seeking (query, format, FALSE, 0, -1);
1252       res = TRUE;
1253
1254       goto discard;
1255     }
1256     case GST_QUERY_LATENCY:
1257     {
1258       gboolean ret;
1259
1260       ret = gst_aggregator_query_latency (self, query);
1261       /* Wake up the src thread again, due to changed latencies
1262        * or changed live-ness we might have to adjust if we wait
1263        * on a deadline at all and how long.
1264        * This is only to unschedule the clock id, we don't really care
1265        * about the GCond here.
1266        */
1267       SRC_STREAM_LOCK (self);
1268       SRC_STREAM_BROADCAST (self);
1269       SRC_STREAM_UNLOCK (self);
1270       return ret;
1271     }
1272     default:
1273       break;
1274   }
1275
1276   return gst_pad_query_default (self->srcpad, GST_OBJECT (self), query);
1277
1278 discard:
1279   return res;
1280 }
1281
1282 static gboolean
1283 gst_aggregator_event_forward_func (GstPad * pad, gpointer user_data)
1284 {
1285   EventData *evdata = user_data;
1286   gboolean ret = TRUE;
1287   GstPad *peer = gst_pad_get_peer (pad);
1288   GstAggregatorPadPrivate *padpriv = GST_AGGREGATOR_PAD (pad)->priv;
1289
1290   if (peer) {
1291     ret = gst_pad_send_event (peer, gst_event_ref (evdata->event));
1292     GST_DEBUG_OBJECT (pad, "return of event push is %d", ret);
1293     gst_object_unref (peer);
1294   }
1295
1296   if (ret == FALSE) {
1297     if (GST_EVENT_TYPE (evdata->event) == GST_EVENT_SEEK)
1298       GST_ERROR_OBJECT (pad, "Event %" GST_PTR_FORMAT " failed", evdata->event);
1299
1300     if (GST_EVENT_TYPE (evdata->event) == GST_EVENT_SEEK) {
1301       GstQuery *seeking = gst_query_new_seeking (GST_FORMAT_TIME);
1302
1303       if (gst_pad_query (peer, seeking)) {
1304         gboolean seekable;
1305
1306         gst_query_parse_seeking (seeking, NULL, &seekable, NULL, NULL);
1307
1308         if (seekable == FALSE) {
1309           GST_INFO_OBJECT (pad,
1310               "Source not seekable, We failed but it does not matter!");
1311
1312           ret = TRUE;
1313         }
1314       } else {
1315         GST_ERROR_OBJECT (pad, "Query seeking FAILED");
1316       }
1317
1318       gst_query_unref (seeking);
1319     }
1320
1321     if (evdata->flush) {
1322       padpriv->pending_flush_start = FALSE;
1323       padpriv->pending_flush_stop = FALSE;
1324     }
1325   } else {
1326     evdata->one_actually_seeked = TRUE;
1327   }
1328
1329   evdata->result &= ret;
1330
1331   /* Always send to all pads */
1332   return FALSE;
1333 }
1334
1335 static EventData
1336 gst_aggregator_forward_event_to_all_sinkpads (GstAggregator * self,
1337     GstEvent * event, gboolean flush)
1338 {
1339   EventData evdata;
1340
1341   evdata.event = event;
1342   evdata.result = TRUE;
1343   evdata.flush = flush;
1344   evdata.one_actually_seeked = FALSE;
1345
1346   /* We first need to set all pads as flushing in a first pass
1347    * as flush_start flush_stop is sometimes sent synchronously
1348    * while we send the seek event */
1349   if (flush) {
1350     GList *l;
1351
1352     GST_OBJECT_LOCK (self);
1353     for (l = GST_ELEMENT_CAST (self)->sinkpads; l != NULL; l = l->next) {
1354       GstAggregatorPad *pad = l->data;
1355
1356       pad->priv->pending_flush_start = TRUE;
1357       pad->priv->pending_flush_stop = FALSE;
1358     }
1359     GST_OBJECT_UNLOCK (self);
1360   }
1361
1362   gst_pad_forward (self->srcpad, gst_aggregator_event_forward_func, &evdata);
1363
1364   gst_event_unref (event);
1365
1366   return evdata;
1367 }
1368
1369 static gboolean
1370 gst_aggregator_do_seek (GstAggregator * self, GstEvent * event)
1371 {
1372   gdouble rate;
1373   GstFormat fmt;
1374   GstSeekFlags flags;
1375   GstSeekType start_type, stop_type;
1376   gint64 start, stop;
1377   gboolean flush;
1378   EventData evdata;
1379   GstAggregatorPrivate *priv = self->priv;
1380
1381   gst_event_parse_seek (event, &rate, &fmt, &flags, &start_type,
1382       &start, &stop_type, &stop);
1383
1384   GST_INFO_OBJECT (self, "starting SEEK");
1385
1386   flush = flags & GST_SEEK_FLAG_FLUSH;
1387
1388   if (flush) {
1389     g_atomic_int_set (&priv->pending_flush_start, TRUE);
1390     g_atomic_int_set (&priv->flush_seeking, TRUE);
1391   }
1392
1393   gst_segment_do_seek (&self->segment, rate, fmt, flags, start_type, start,
1394       stop_type, stop, NULL);
1395
1396   /* forward the seek upstream */
1397   evdata = gst_aggregator_forward_event_to_all_sinkpads (self, event, flush);
1398   event = NULL;
1399
1400   if (!evdata.result || !evdata.one_actually_seeked) {
1401     g_atomic_int_set (&priv->flush_seeking, FALSE);
1402     g_atomic_int_set (&priv->pending_flush_start, FALSE);
1403   }
1404
1405   GST_INFO_OBJECT (self, "seek done, result: %d", evdata.result);
1406
1407   return evdata.result;
1408 }
1409
1410 static gboolean
1411 gst_aggregator_default_src_event (GstAggregator * self, GstEvent * event)
1412 {
1413   EventData evdata;
1414   gboolean res = TRUE;
1415
1416   switch (GST_EVENT_TYPE (event)) {
1417     case GST_EVENT_SEEK:
1418     {
1419       gst_event_ref (event);
1420       res = gst_aggregator_do_seek (self, event);
1421       gst_event_unref (event);
1422       event = NULL;
1423       goto done;
1424     }
1425     case GST_EVENT_NAVIGATION:
1426     {
1427       /* navigation is rather pointless. */
1428       res = FALSE;
1429       gst_event_unref (event);
1430       goto done;
1431     }
1432     default:
1433     {
1434       break;
1435     }
1436   }
1437
1438   evdata = gst_aggregator_forward_event_to_all_sinkpads (self, event, FALSE);
1439   res = evdata.result;
1440
1441 done:
1442   return res;
1443 }
1444
1445 static gboolean
1446 gst_aggregator_src_pad_event_func (GstPad * pad, GstObject * parent,
1447     GstEvent * event)
1448 {
1449   GstAggregatorClass *klass = GST_AGGREGATOR_GET_CLASS (parent);
1450
1451   return klass->src_event (GST_AGGREGATOR (parent), event);
1452 }
1453
1454 static gboolean
1455 gst_aggregator_src_pad_query_func (GstPad * pad, GstObject * parent,
1456     GstQuery * query)
1457 {
1458   GstAggregatorClass *klass = GST_AGGREGATOR_GET_CLASS (parent);
1459
1460   return klass->src_query (GST_AGGREGATOR (parent), query);
1461 }
1462
1463 static gboolean
1464 gst_aggregator_src_pad_activate_mode_func (GstPad * pad,
1465     GstObject * parent, GstPadMode mode, gboolean active)
1466 {
1467   GstAggregator *self = GST_AGGREGATOR (parent);
1468   GstAggregatorClass *klass = GST_AGGREGATOR_GET_CLASS (parent);
1469
1470   if (klass->src_activate) {
1471     if (klass->src_activate (self, mode, active) == FALSE) {
1472       return FALSE;
1473     }
1474   }
1475
1476   if (active == TRUE) {
1477     switch (mode) {
1478       case GST_PAD_MODE_PUSH:
1479       {
1480         GST_INFO_OBJECT (pad, "Activating pad!");
1481         gst_aggregator_start_srcpad_task (self);
1482         return TRUE;
1483       }
1484       default:
1485       {
1486         GST_ERROR_OBJECT (pad, "Only supported mode is PUSH");
1487         return FALSE;
1488       }
1489     }
1490   }
1491
1492   /* deactivating */
1493   GST_INFO_OBJECT (self, "Deactivating srcpad");
1494   gst_aggregator_stop_srcpad_task (self, FALSE);
1495
1496   return TRUE;
1497 }
1498
1499 static gboolean
1500 gst_aggregator_default_sink_query (GstAggregator * self,
1501     GstAggregatorPad * aggpad, GstQuery * query)
1502 {
1503   GstPad *pad = GST_PAD (aggpad);
1504
1505   return gst_pad_query_default (pad, GST_OBJECT (self), query);
1506 }
1507
1508 static void
1509 gst_aggregator_finalize (GObject * object)
1510 {
1511   GstAggregator *self = (GstAggregator *) object;
1512
1513   g_mutex_clear (&self->priv->setcaps_lock);
1514   g_mutex_clear (&self->priv->src_lock);
1515   g_cond_clear (&self->priv->src_cond);
1516
1517   G_OBJECT_CLASS (aggregator_parent_class)->finalize (object);
1518 }
1519
1520 /*
1521  * gst_aggregator_set_latency_property:
1522  * @agg: a #GstAggregator
1523  * @latency: the new latency value.
1524  *
1525  * Sets the new latency value to @latency. This value is used to limit the
1526  * amount of time a pad waits for data to appear before considering the pad
1527  * as unresponsive.
1528  */
1529 static void
1530 gst_aggregator_set_latency_property (GstAggregator * self, gint64 latency)
1531 {
1532   gboolean changed;
1533
1534   g_return_if_fail (GST_IS_AGGREGATOR (self));
1535
1536   GST_OBJECT_LOCK (self);
1537
1538   if (self->priv->latency_live && self->priv->latency_max != 0 &&
1539       GST_CLOCK_TIME_IS_VALID (latency) && latency > self->priv->latency_max) {
1540     GST_ELEMENT_WARNING (self, CORE, NEGOTIATION,
1541         ("%s", "Latency too big"),
1542         ("The requested latency value is too big for the latency in the "
1543             "current pipeline.  Limiting to %" G_GINT64_FORMAT,
1544             self->priv->latency_max));
1545     latency = self->priv->latency_max;
1546   }
1547
1548   changed = (self->priv->latency != latency);
1549   self->priv->latency = latency;
1550   GST_OBJECT_UNLOCK (self);
1551
1552   if (changed)
1553     gst_element_post_message (GST_ELEMENT_CAST (self),
1554         gst_message_new_latency (GST_OBJECT_CAST (self)));
1555 }
1556
1557 /*
1558  * gst_aggregator_get_latency_property:
1559  * @agg: a #GstAggregator
1560  *
1561  * Gets the latency value. See gst_aggregator_set_latency for
1562  * more details.
1563  *
1564  * Returns: The time in nanoseconds to wait for data to arrive on a sink pad
1565  * before a pad is deemed unresponsive. A value of -1 means an
1566  * unlimited time.
1567  */
1568 static gint64
1569 gst_aggregator_get_latency_property (GstAggregator * agg)
1570 {
1571   gint64 res;
1572
1573   g_return_val_if_fail (GST_IS_AGGREGATOR (agg), -1);
1574
1575   GST_OBJECT_LOCK (agg);
1576   res = agg->priv->latency;
1577   GST_OBJECT_UNLOCK (agg);
1578
1579   return res;
1580 }
1581
1582 static void
1583 gst_aggregator_set_property (GObject * object, guint prop_id,
1584     const GValue * value, GParamSpec * pspec)
1585 {
1586   GstAggregator *agg = GST_AGGREGATOR (object);
1587
1588   switch (prop_id) {
1589     case PROP_LATENCY:
1590       gst_aggregator_set_latency_property (agg, g_value_get_int64 (value));
1591       break;
1592     default:
1593       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
1594       break;
1595   }
1596 }
1597
1598 static void
1599 gst_aggregator_get_property (GObject * object, guint prop_id,
1600     GValue * value, GParamSpec * pspec)
1601 {
1602   GstAggregator *agg = GST_AGGREGATOR (object);
1603
1604   switch (prop_id) {
1605     case PROP_LATENCY:
1606       g_value_set_int64 (value, gst_aggregator_get_latency_property (agg));
1607       break;
1608     default:
1609       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
1610       break;
1611   }
1612 }
1613
1614 /* GObject vmethods implementations */
1615 static void
1616 gst_aggregator_class_init (GstAggregatorClass * klass)
1617 {
1618   GObjectClass *gobject_class = (GObjectClass *) klass;
1619   GstElementClass *gstelement_class = (GstElementClass *) klass;
1620
1621   aggregator_parent_class = g_type_class_peek_parent (klass);
1622   g_type_class_add_private (klass, sizeof (GstAggregatorPrivate));
1623
1624   GST_DEBUG_CATEGORY_INIT (aggregator_debug, "aggregator",
1625       GST_DEBUG_FG_MAGENTA, "GstAggregator");
1626
1627   klass->sinkpads_type = GST_TYPE_AGGREGATOR_PAD;
1628
1629   klass->sink_event = gst_aggregator_default_sink_event;
1630   klass->sink_query = gst_aggregator_default_sink_query;
1631
1632   klass->src_event = gst_aggregator_default_src_event;
1633   klass->src_query = gst_aggregator_default_src_query;
1634
1635   gstelement_class->request_new_pad =
1636       GST_DEBUG_FUNCPTR (gst_aggregator_request_new_pad);
1637   gstelement_class->send_event = GST_DEBUG_FUNCPTR (gst_aggregator_send_event);
1638   gstelement_class->release_pad =
1639       GST_DEBUG_FUNCPTR (gst_aggregator_release_pad);
1640   gstelement_class->change_state =
1641       GST_DEBUG_FUNCPTR (gst_aggregator_change_state);
1642
1643   gobject_class->set_property = gst_aggregator_set_property;
1644   gobject_class->get_property = gst_aggregator_get_property;
1645   gobject_class->finalize = gst_aggregator_finalize;
1646
1647   g_object_class_install_property (gobject_class, PROP_LATENCY,
1648       g_param_spec_int64 ("latency", "Buffer latency",
1649           "Additional latency in live mode to allow upstream "
1650           "to take longer to produce buffers for the current "
1651           "position", 0,
1652           (G_MAXLONG == G_MAXINT64) ? G_MAXINT64 : (G_MAXLONG * GST_SECOND - 1),
1653           DEFAULT_LATENCY, G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
1654
1655   GST_DEBUG_REGISTER_FUNCPTR (gst_aggregator_stop_pad);
1656   GST_DEBUG_REGISTER_FUNCPTR (gst_aggregator_query_sink_latency_foreach);
1657 }
1658
1659 static void
1660 gst_aggregator_init (GstAggregator * self, GstAggregatorClass * klass)
1661 {
1662   GstPadTemplate *pad_template;
1663   GstAggregatorPrivate *priv;
1664
1665   g_return_if_fail (klass->aggregate != NULL);
1666
1667   self->priv =
1668       G_TYPE_INSTANCE_GET_PRIVATE (self, GST_TYPE_AGGREGATOR,
1669       GstAggregatorPrivate);
1670
1671   priv = self->priv;
1672
1673   pad_template =
1674       gst_element_class_get_pad_template (GST_ELEMENT_CLASS (klass), "src");
1675   g_return_if_fail (pad_template != NULL);
1676
1677   priv->padcount = -1;
1678   priv->tags_changed = FALSE;
1679
1680   self->priv->latency_live = FALSE;
1681   self->priv->latency_min = self->priv->sub_latency_min = 0;
1682   self->priv->latency_max = self->priv->sub_latency_max = GST_CLOCK_TIME_NONE;
1683   gst_aggregator_reset_flow_values (self);
1684
1685   self->srcpad = gst_pad_new_from_template (pad_template, "src");
1686
1687   gst_pad_set_event_function (self->srcpad,
1688       GST_DEBUG_FUNCPTR (gst_aggregator_src_pad_event_func));
1689   gst_pad_set_query_function (self->srcpad,
1690       GST_DEBUG_FUNCPTR (gst_aggregator_src_pad_query_func));
1691   gst_pad_set_activatemode_function (self->srcpad,
1692       GST_DEBUG_FUNCPTR (gst_aggregator_src_pad_activate_mode_func));
1693
1694   gst_element_add_pad (GST_ELEMENT (self), self->srcpad);
1695
1696   self->priv->latency = DEFAULT_LATENCY;
1697
1698   g_mutex_init (&self->priv->setcaps_lock);
1699   g_mutex_init (&self->priv->src_lock);
1700   g_cond_init (&self->priv->src_cond);
1701 }
1702
1703 /* we can't use G_DEFINE_ABSTRACT_TYPE because we need the klass in the _init
1704  * method to get to the padtemplates */
1705 GType
1706 gst_aggregator_get_type (void)
1707 {
1708   static volatile gsize type = 0;
1709
1710   if (g_once_init_enter (&type)) {
1711     GType _type;
1712     static const GTypeInfo info = {
1713       sizeof (GstAggregatorClass),
1714       NULL,
1715       NULL,
1716       (GClassInitFunc) gst_aggregator_class_init,
1717       NULL,
1718       NULL,
1719       sizeof (GstAggregator),
1720       0,
1721       (GInstanceInitFunc) gst_aggregator_init,
1722     };
1723
1724     _type = g_type_register_static (GST_TYPE_ELEMENT,
1725         "GstAggregator", &info, G_TYPE_FLAG_ABSTRACT);
1726     g_once_init_leave (&type, _type);
1727   }
1728   return type;
1729 }
1730
1731 static GstFlowReturn
1732 gst_aggregator_pad_chain (GstPad * pad, GstObject * object, GstBuffer * buffer)
1733 {
1734   GstBuffer *actual_buf = buffer;
1735   GstAggregator *self = GST_AGGREGATOR (object);
1736   GstAggregatorPrivate *priv = self->priv;
1737   GstAggregatorPad *aggpad = GST_AGGREGATOR_PAD (pad);
1738   GstAggregatorClass *aggclass = GST_AGGREGATOR_GET_CLASS (object);
1739
1740   GST_DEBUG_OBJECT (aggpad, "Start chaining a buffer %" GST_PTR_FORMAT, buffer);
1741
1742   PAD_STREAM_LOCK (aggpad);
1743
1744   if (g_atomic_int_get (&aggpad->priv->flushing) == TRUE)
1745     goto flushing;
1746
1747   if (g_atomic_int_get (&aggpad->priv->pending_eos) == TRUE)
1748     goto eos;
1749
1750   PAD_LOCK_EVENT (aggpad);
1751
1752   while (aggpad->buffer && g_atomic_int_get (&aggpad->priv->flushing) == FALSE) {
1753     GST_DEBUG_OBJECT (aggpad, "Waiting for buffer to be consumed");
1754     PAD_WAIT_EVENT (aggpad);
1755   }
1756   PAD_UNLOCK_EVENT (aggpad);
1757
1758   if (g_atomic_int_get (&aggpad->priv->flushing) == TRUE)
1759     goto flushing;
1760
1761   if (aggclass->clip) {
1762     aggclass->clip (self, aggpad, buffer, &actual_buf);
1763   }
1764
1765   SRC_STREAM_LOCK (self);
1766   PAD_LOCK_EVENT (aggpad);
1767   if (aggpad->buffer)
1768     gst_buffer_unref (aggpad->buffer);
1769   aggpad->buffer = actual_buf;
1770   PAD_UNLOCK_EVENT (aggpad);
1771   PAD_STREAM_UNLOCK (aggpad);
1772
1773   if (gst_aggregator_check_pads_ready (self))
1774     SRC_STREAM_BROADCAST (self);
1775   SRC_STREAM_UNLOCK (self);
1776
1777   GST_DEBUG_OBJECT (aggpad, "Done chaining");
1778
1779   return priv->flow_return;
1780
1781 flushing:
1782   PAD_STREAM_UNLOCK (aggpad);
1783
1784   gst_buffer_unref (buffer);
1785   GST_DEBUG_OBJECT (aggpad, "We are flushing");
1786
1787   return GST_FLOW_FLUSHING;
1788
1789 eos:
1790   PAD_STREAM_UNLOCK (aggpad);
1791
1792   gst_buffer_unref (buffer);
1793   GST_DEBUG_OBJECT (pad, "We are EOS already...");
1794
1795   return GST_FLOW_EOS;
1796 }
1797
1798 static gboolean
1799 gst_aggregator_pad_query_func (GstPad * pad, GstObject * parent,
1800     GstQuery * query)
1801 {
1802   GstAggregatorPad *aggpad = GST_AGGREGATOR_PAD (pad);
1803   GstAggregatorClass *klass = GST_AGGREGATOR_GET_CLASS (parent);
1804
1805   if (GST_QUERY_IS_SERIALIZED (query)) {
1806     PAD_LOCK_EVENT (aggpad);
1807
1808     if (g_atomic_int_get (&aggpad->priv->flushing) == TRUE) {
1809       PAD_UNLOCK_EVENT (aggpad);
1810       goto flushing;
1811     }
1812
1813     while (aggpad->buffer
1814         && g_atomic_int_get (&aggpad->priv->flushing) == FALSE) {
1815       GST_DEBUG_OBJECT (aggpad, "Waiting for buffer to be consumed");
1816       PAD_WAIT_EVENT (aggpad);
1817     }
1818     PAD_UNLOCK_EVENT (aggpad);
1819
1820     if (g_atomic_int_get (&aggpad->priv->flushing) == TRUE)
1821       goto flushing;
1822   }
1823
1824   return klass->sink_query (GST_AGGREGATOR (parent),
1825       GST_AGGREGATOR_PAD (pad), query);
1826
1827 flushing:
1828   GST_DEBUG_OBJECT (aggpad, "Pad is flushing, dropping query");
1829   return FALSE;
1830 }
1831
1832 static gboolean
1833 gst_aggregator_pad_event_func (GstPad * pad, GstObject * parent,
1834     GstEvent * event)
1835 {
1836   GstAggregatorPad *aggpad = GST_AGGREGATOR_PAD (pad);
1837   GstAggregatorClass *klass = GST_AGGREGATOR_GET_CLASS (parent);
1838
1839   if (GST_EVENT_IS_SERIALIZED (event) && GST_EVENT_TYPE (event) != GST_EVENT_EOS
1840       && GST_EVENT_TYPE (event) != GST_EVENT_SEGMENT_DONE) {
1841     PAD_LOCK_EVENT (aggpad);
1842
1843     if (g_atomic_int_get (&aggpad->priv->flushing) == TRUE
1844         && GST_EVENT_TYPE (event) != GST_EVENT_FLUSH_STOP) {
1845       PAD_UNLOCK_EVENT (aggpad);
1846       goto flushing;
1847     }
1848
1849     while (aggpad->buffer
1850         && g_atomic_int_get (&aggpad->priv->flushing) == FALSE) {
1851       GST_DEBUG_OBJECT (aggpad, "Waiting for buffer to be consumed");
1852       PAD_WAIT_EVENT (aggpad);
1853     }
1854     PAD_UNLOCK_EVENT (aggpad);
1855
1856     if (g_atomic_int_get (&aggpad->priv->flushing) == TRUE
1857         && GST_EVENT_TYPE (event) != GST_EVENT_FLUSH_STOP)
1858       goto flushing;
1859   }
1860
1861   return klass->sink_event (GST_AGGREGATOR (parent),
1862       GST_AGGREGATOR_PAD (pad), event);
1863
1864 flushing:
1865   GST_DEBUG_OBJECT (aggpad, "Pad is flushing, dropping event");
1866   if (GST_EVENT_IS_STICKY (event))
1867     gst_pad_store_sticky_event (pad, event);
1868   gst_event_unref (event);
1869   return FALSE;
1870 }
1871
1872 static gboolean
1873 gst_aggregator_pad_activate_mode_func (GstPad * pad,
1874     GstObject * parent, GstPadMode mode, gboolean active)
1875 {
1876   GstAggregatorPad *aggpad = GST_AGGREGATOR_PAD (pad);
1877
1878   if (active == FALSE) {
1879     PAD_LOCK_EVENT (aggpad);
1880     g_atomic_int_set (&aggpad->priv->flushing, TRUE);
1881     gst_buffer_replace (&aggpad->buffer, NULL);
1882     PAD_BROADCAST_EVENT (aggpad);
1883     PAD_UNLOCK_EVENT (aggpad);
1884   } else {
1885     PAD_LOCK_EVENT (aggpad);
1886     g_atomic_int_set (&aggpad->priv->flushing, FALSE);
1887     PAD_BROADCAST_EVENT (aggpad);
1888     PAD_UNLOCK_EVENT (aggpad);
1889   }
1890
1891   return TRUE;
1892 }
1893
1894 /***********************************
1895  * GstAggregatorPad implementation  *
1896  ************************************/
1897 G_DEFINE_TYPE (GstAggregatorPad, gst_aggregator_pad, GST_TYPE_PAD);
1898
1899 static void
1900 gst_aggregator_pad_constructed (GObject * object)
1901 {
1902   GstPad *pad = GST_PAD (object);
1903
1904   gst_pad_set_chain_function (pad,
1905       GST_DEBUG_FUNCPTR (gst_aggregator_pad_chain));
1906   gst_pad_set_event_function (pad,
1907       GST_DEBUG_FUNCPTR (gst_aggregator_pad_event_func));
1908   gst_pad_set_query_function (pad,
1909       GST_DEBUG_FUNCPTR (gst_aggregator_pad_query_func));
1910   gst_pad_set_activatemode_function (pad,
1911       GST_DEBUG_FUNCPTR (gst_aggregator_pad_activate_mode_func));
1912 }
1913
1914 static void
1915 gst_aggregator_pad_finalize (GObject * object)
1916 {
1917   GstAggregatorPad *pad = (GstAggregatorPad *) object;
1918
1919   g_mutex_clear (&pad->priv->event_lock);
1920   g_cond_clear (&pad->priv->event_cond);
1921   g_mutex_clear (&pad->priv->stream_lock);
1922
1923   G_OBJECT_CLASS (gst_aggregator_pad_parent_class)->finalize (object);
1924 }
1925
1926 static void
1927 gst_aggregator_pad_dispose (GObject * object)
1928 {
1929   GstAggregatorPad *pad = (GstAggregatorPad *) object;
1930   GstBuffer *buf;
1931
1932   buf = gst_aggregator_pad_steal_buffer (pad);
1933   if (buf)
1934     gst_buffer_unref (buf);
1935
1936   G_OBJECT_CLASS (gst_aggregator_pad_parent_class)->dispose (object);
1937 }
1938
1939 static void
1940 gst_aggregator_pad_class_init (GstAggregatorPadClass * klass)
1941 {
1942   GObjectClass *gobject_class = (GObjectClass *) klass;
1943
1944   g_type_class_add_private (klass, sizeof (GstAggregatorPadPrivate));
1945
1946   gobject_class->constructed = gst_aggregator_pad_constructed;
1947   gobject_class->finalize = gst_aggregator_pad_finalize;
1948   gobject_class->dispose = gst_aggregator_pad_dispose;
1949 }
1950
1951 static void
1952 gst_aggregator_pad_init (GstAggregatorPad * pad)
1953 {
1954   pad->priv =
1955       G_TYPE_INSTANCE_GET_PRIVATE (pad, GST_TYPE_AGGREGATOR_PAD,
1956       GstAggregatorPadPrivate);
1957
1958   pad->buffer = NULL;
1959   g_mutex_init (&pad->priv->event_lock);
1960   g_cond_init (&pad->priv->event_cond);
1961
1962   g_mutex_init (&pad->priv->stream_lock);
1963 }
1964
1965 /**
1966  * gst_aggregator_pad_steal_buffer:
1967  * @pad: the pad to get buffer from
1968  *
1969  * Steal the ref to the buffer currently queued in @pad.
1970  *
1971  * Returns: (transfer full): The buffer in @pad or NULL if no buffer was
1972  *   queued. You should unref the buffer after usage.
1973  */
1974 GstBuffer *
1975 gst_aggregator_pad_steal_buffer (GstAggregatorPad * pad)
1976 {
1977   GstBuffer *buffer = NULL;
1978
1979   PAD_LOCK_EVENT (pad);
1980   if (pad->buffer) {
1981     GST_TRACE_OBJECT (pad, "Consuming buffer");
1982     buffer = pad->buffer;
1983     pad->buffer = NULL;
1984     if (pad->priv->pending_eos) {
1985       pad->priv->pending_eos = FALSE;
1986       pad->eos = TRUE;
1987     }
1988     PAD_BROADCAST_EVENT (pad);
1989     GST_DEBUG_OBJECT (pad, "Consumed: %" GST_PTR_FORMAT, buffer);
1990   }
1991   PAD_UNLOCK_EVENT (pad);
1992
1993   return buffer;
1994 }
1995
1996 /**
1997  * gst_aggregator_pad_get_buffer:
1998  * @pad: the pad to get buffer from
1999  *
2000  * Returns: (transfer full): A reference to the buffer in @pad or
2001  * NULL if no buffer was queued. You should unref the buffer after
2002  * usage.
2003  */
2004 GstBuffer *
2005 gst_aggregator_pad_get_buffer (GstAggregatorPad * pad)
2006 {
2007   GstBuffer *buffer = NULL;
2008
2009   PAD_LOCK_EVENT (pad);
2010   if (pad->buffer)
2011     buffer = gst_buffer_ref (pad->buffer);
2012   PAD_UNLOCK_EVENT (pad);
2013
2014   return buffer;
2015 }
2016
2017 /**
2018  * gst_aggregator_merge_tags:
2019  * @self: a #GstAggregator
2020  * @tags: a #GstTagList to merge
2021  * @mode: the #GstTagMergeMode to use
2022  *
2023  * Adds tags to so-called pending tags, which will be processed
2024  * before pushing out data downstream.
2025  *
2026  * Note that this is provided for convenience, and the subclass is
2027  * not required to use this and can still do tag handling on its own.
2028  *
2029  * MT safe.
2030  */
2031 void
2032 gst_aggregator_merge_tags (GstAggregator * self,
2033     const GstTagList * tags, GstTagMergeMode mode)
2034 {
2035   GstTagList *otags;
2036
2037   g_return_if_fail (GST_IS_AGGREGATOR (self));
2038   g_return_if_fail (tags == NULL || GST_IS_TAG_LIST (tags));
2039
2040   /* FIXME Check if we can use OBJECT lock here! */
2041   GST_OBJECT_LOCK (self);
2042   if (tags)
2043     GST_DEBUG_OBJECT (self, "merging tags %" GST_PTR_FORMAT, tags);
2044   otags = self->priv->tags;
2045   self->priv->tags = gst_tag_list_merge (self->priv->tags, tags, mode);
2046   if (otags)
2047     gst_tag_list_unref (otags);
2048   self->priv->tags_changed = TRUE;
2049   GST_OBJECT_UNLOCK (self);
2050 }
2051
2052 /**
2053  * gst_aggregator_set_latency:
2054  * @self: a #GstAggregator
2055  * @min_latency: minimum latency
2056  * @max_latency: maximum latency
2057  *
2058  * Lets #GstAggregator sub-classes tell the baseclass what their internal
2059  * latency is. Will also post a LATENCY message on the bus so the pipeline
2060  * can reconfigure its global latency.
2061  */
2062 void
2063 gst_aggregator_set_latency (GstAggregator * self,
2064     GstClockTime min_latency, GstClockTime max_latency)
2065 {
2066   g_return_if_fail (GST_IS_AGGREGATOR (self));
2067   g_return_if_fail (GST_CLOCK_TIME_IS_VALID (min_latency));
2068   g_return_if_fail (max_latency >= min_latency);
2069
2070   GST_OBJECT_LOCK (self);
2071   self->priv->sub_latency_min = min_latency;
2072   self->priv->sub_latency_max = max_latency;
2073   GST_OBJECT_UNLOCK (self);
2074
2075   gst_element_post_message (GST_ELEMENT_CAST (self),
2076       gst_message_new_latency (GST_OBJECT_CAST (self)));
2077 }