Merge branch 'master' into 0.11
[platform/upstream/gstreamer.git] / gst / gstbin.c
1 /* GStreamer
2  *
3  * Copyright (C) 1999,2000 Erik Walthinsen <omega@cse.ogi.edu>
4  *                    2004 Wim Taymans <wim.taymans@gmail.com>
5  *
6  * gstbin.c: GstBin container object and support code
7  *
8  * This library is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Library General Public
10  * License as published by the Free Software Foundation; either
11  * version 2 of the License, or (at your option) any later version.
12  *
13  * This library is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Library General Public License for more details.
17  *
18  * You should have received a copy of the GNU Library General Public
19  * License along with this library; if not, write to the
20  * Free Software Foundation, Inc., 59 Temple Place - Suite 330,
21  * Boston, MA 02111-1307, USA.
22  *
23  * MT safe.
24  */
25
26 /**
27  * SECTION:gstbin
28  * @short_description: Base class and element that can contain other elements
29  *
30  * #GstBin is an element that can contain other #GstElement, allowing them to be
31  * managed as a group.
32  * Pads from the child elements can be ghosted to the bin, see #GstGhostPad.
33  * This makes the bin look like any other elements and enables creation of
34  * higher-level abstraction elements.
35  *
36  * A new #GstBin is created with gst_bin_new(). Use a #GstPipeline instead if you
37  * want to create a toplevel bin because a normal bin doesn't have a bus or
38  * handle clock distribution of its own.
39  *
40  * After the bin has been created you will typically add elements to it with
41  * gst_bin_add(). You can remove elements with gst_bin_remove().
42  *
43  * An element can be retrieved from a bin with gst_bin_get_by_name(), using the
44  * elements name. gst_bin_get_by_name_recurse_up() is mainly used for internal
45  * purposes and will query the parent bins when the element is not found in the
46  * current bin.
47  *
48  * An iterator of elements in a bin can be retrieved with
49  * gst_bin_iterate_elements(). Various other iterators exist to retrieve the
50  * elements in a bin.
51  *
52  * gst_object_unref() is used to drop your reference to the bin.
53  *
54  * The #GstBin::element-added signal is fired whenever a new element is added to
55  * the bin. Likewise the #GstBin::element-removed signal is fired whenever an
56  * element is removed from the bin.
57  *
58  * <refsect2><title>Notes</title>
59  * <para>
60  * A #GstBin internally intercepts every #GstMessage posted by its children and
61  * implements the following default behaviour for each of them:
62  * <variablelist>
63  *   <varlistentry>
64  *     <term>GST_MESSAGE_EOS</term>
65  *     <listitem><para>This message is only posted by sinks in the PLAYING
66  *     state. If all sinks posted the EOS message, this bin will post and EOS
67  *     message upwards.</para></listitem>
68  *   </varlistentry>
69  *   <varlistentry>
70  *     <term>GST_MESSAGE_SEGMENT_START</term>
71  *     <listitem><para>just collected and never forwarded upwards.
72  *     The messages are used to decide when all elements have completed playback
73  *     of their segment.</para></listitem>
74  *   </varlistentry>
75  *   <varlistentry>
76  *     <term>GST_MESSAGE_SEGMENT_DONE</term>
77  *     <listitem><para> Is posted by #GstBin when all elements that posted
78  *     a SEGMENT_START have posted a SEGMENT_DONE.</para></listitem>
79  *   </varlistentry>
80  *   <varlistentry>
81  *     <term>GST_MESSAGE_DURATION</term>
82  *     <listitem><para> Is posted by an element that detected a change
83  *     in the stream duration. The default bin behaviour is to clear any
84  *     cached duration values so that the next duration query will perform
85  *     a full duration recalculation. The duration change is posted to the
86  *     application so that it can refetch the new duration with a duration
87  *     query. Note that these messages can be posted before the bin is
88  *     prerolled, in which case the duration query might fail.
89  *     </para></listitem>
90  *   </varlistentry>
91  *   <varlistentry>
92  *     <term>GST_MESSAGE_CLOCK_LOST</term>
93  *     <listitem><para> This message is posted by an element when it
94  *     can no longer provide a clock. The default bin behaviour is to
95  *     check if the lost clock was the one provided by the bin. If so and
96  *     the bin is currently in the PLAYING state, the message is forwarded to
97  *     the bin parent.
98  *     This message is also generated when a clock provider is removed from
99  *     the bin. If this message is received by the application, it should
100  *     PAUSE the pipeline and set it back to PLAYING to force a new clock
101  *     distribution.
102  *     </para></listitem>
103  *   </varlistentry>
104  *   <varlistentry>
105  *     <term>GST_MESSAGE_CLOCK_PROVIDE</term>
106  *     <listitem><para> This message is generated when an element
107  *     can provide a clock. This mostly happens when a new clock
108  *     provider is added to the bin. The default behaviour of the bin is to
109  *     mark the currently selected clock as dirty, which will perform a clock
110  *     recalculation the next time the bin is asked to provide a clock.
111  *     This message is never sent tot the application but is forwarded to
112  *     the parent of the bin.
113  *     </para></listitem>
114  *   </varlistentry>
115  *   <varlistentry>
116  *     <term>OTHERS</term>
117  *     <listitem><para> posted upwards.</para></listitem>
118  *   </varlistentry>
119  * </variablelist>
120  *
121  *
122  * A #GstBin implements the following default behaviour for answering to a
123  * #GstQuery:
124  * <variablelist>
125  *   <varlistentry>
126  *     <term>GST_QUERY_DURATION</term>
127  *     <listitem><para>If the query has been asked before with the same format
128  *     and the bin is a toplevel bin (ie. has no parent),
129  *     use the cached previous value. If no previous value was cached, the
130  *     query is sent to all sink elements in the bin and the MAXIMUM of all
131  *     values is returned. If the bin is a toplevel bin the value is cached.
132  *     If no sinks are available in the bin, the query fails.
133  *     </para></listitem>
134  *   </varlistentry>
135  *   <varlistentry>
136  *     <term>GST_QUERY_POSITION</term>
137  *     <listitem><para>The query is sent to all sink elements in the bin and the
138  *     MAXIMUM of all values is returned. If no sinks are available in the bin,
139  *     the query fails.
140  *     </para></listitem>
141  *   </varlistentry>
142  *   <varlistentry>
143  *     <term>OTHERS</term>
144  *     <listitem><para>the query is forwarded to all sink elements, the result
145  *     of the first sink that answers the query successfully is returned. If no
146  *     sink is in the bin, the query fails.</para></listitem>
147  *   </varlistentry>
148  * </variablelist>
149  *
150  * A #GstBin will by default forward any event sent to it to all sink elements.
151  * If all the sinks return TRUE, the bin will also return TRUE, else FALSE is
152  * returned. If no sinks are in the bin, the event handler will return TRUE.
153  *
154  * </para>
155  * </refsect2>
156  *
157  * Last reviewed on 2006-04-28 (0.10.6)
158  */
159
160 #include "gst_private.h"
161
162 #include "gstevent.h"
163 #include "gstbin.h"
164 #include "gstmarshal.h"
165 #include "gstinfo.h"
166 #include "gsterror.h"
167
168 #include "gstindex.h"
169 #include "gstindexfactory.h"
170 #include "gstutils.h"
171 #include "gstchildproxy.h"
172
173 /* enable for DURATION caching.
174  * FIXME currently too many elements don't update
175  * their duration when it changes so we return inaccurate values. */
176 #undef DURATION_CACHING
177
178 /* latency is by default enabled now.
179  * live-preroll and no-live-preroll in the environment var GST_COMPAT
180  * to enables or disable it respectively.
181  */
182 static gboolean enable_latency = TRUE;
183
184 GST_DEBUG_CATEGORY_STATIC (bin_debug);
185 #define GST_CAT_DEFAULT bin_debug
186
187 /* a bin is toplevel if it has no parent or when it is configured to behave like
188  * a toplevel bin */
189 #define BIN_IS_TOPLEVEL(bin) ((GST_OBJECT_PARENT (bin) == NULL) || bin->priv->asynchandling)
190
191 #define GST_BIN_GET_PRIVATE(obj)  \
192    (G_TYPE_INSTANCE_GET_PRIVATE ((obj), GST_TYPE_BIN, GstBinPrivate))
193
194 struct _GstBinPrivate
195 {
196   gboolean asynchandling;
197   /* if we get an ASYNC_DONE message from ourselves, this means that the
198    * subclass will simulate ASYNC behaviour without having ASYNC children. When
199    * such an ASYNC_DONE message is posted while we are doing a state change, we
200    * have to process the message after finishing the state change even when no
201    * child returned GST_STATE_CHANGE_ASYNC. */
202   gboolean pending_async_done;
203
204   guint32 structure_cookie;
205
206   /* cached index */
207   GstIndex *index;
208   /* forward messages from our children */
209   gboolean message_forward;
210 };
211
212 typedef struct
213 {
214   GstBin *bin;
215   guint32 cookie;
216   GstState pending;
217 } BinContinueData;
218
219 static void gst_bin_dispose (GObject * object);
220
221 static void gst_bin_set_property (GObject * object, guint prop_id,
222     const GValue * value, GParamSpec * pspec);
223 static void gst_bin_get_property (GObject * object, guint prop_id,
224     GValue * value, GParamSpec * pspec);
225
226 static GstStateChangeReturn gst_bin_change_state_func (GstElement * element,
227     GstStateChange transition);
228 static GstStateChangeReturn gst_bin_get_state_func (GstElement * element,
229     GstState * state, GstState * pending, GstClockTime timeout);
230 static void bin_handle_async_done (GstBin * bin, GstStateChangeReturn ret,
231     gboolean flag_pending);
232 static void bin_handle_async_start (GstBin * bin, gboolean new_base_time);
233 static void bin_push_state_continue (BinContinueData * data);
234
235 static gboolean gst_bin_add_func (GstBin * bin, GstElement * element);
236 static gboolean gst_bin_remove_func (GstBin * bin, GstElement * element);
237
238 static void gst_bin_set_index_func (GstElement * element, GstIndex * index);
239 static GstIndex *gst_bin_get_index_func (GstElement * element);
240
241 static GstClock *gst_bin_provide_clock_func (GstElement * element);
242 static gboolean gst_bin_set_clock_func (GstElement * element, GstClock * clock);
243
244 static void gst_bin_handle_message_func (GstBin * bin, GstMessage * message);
245 static gboolean gst_bin_send_event (GstElement * element, GstEvent * event);
246 static GstBusSyncReply bin_bus_handler (GstBus * bus,
247     GstMessage * message, GstBin * bin);
248 static gboolean gst_bin_query (GstElement * element, GstQuery * query);
249
250 static gboolean gst_bin_do_latency_func (GstBin * bin);
251
252 static void bin_remove_messages (GstBin * bin, GstObject * src,
253     GstMessageType types);
254 static void gst_bin_continue_func (BinContinueData * data);
255 static gint bin_element_is_sink (GstElement * child, GstBin * bin);
256 static gint bin_element_is_src (GstElement * child, GstBin * bin);
257
258 static GstIterator *gst_bin_sort_iterator_new (GstBin * bin);
259
260 /* Bin signals and properties */
261 enum
262 {
263   ELEMENT_ADDED,
264   ELEMENT_REMOVED,
265   DO_LATENCY,
266   LAST_SIGNAL
267 };
268
269 #define DEFAULT_ASYNC_HANDLING  FALSE
270 #define DEFAULT_MESSAGE_FORWARD FALSE
271
272 enum
273 {
274   PROP_0,
275   PROP_ASYNC_HANDLING,
276   PROP_MESSAGE_FORWARD,
277   PROP_LAST
278 };
279
280 static void gst_bin_child_proxy_init (gpointer g_iface, gpointer iface_data);
281
282 static guint gst_bin_signals[LAST_SIGNAL] = { 0 };
283
284 #define _do_init(type) \
285 { \
286   const gchar *compat; \
287   static const GInterfaceInfo iface_info = { \
288     gst_bin_child_proxy_init, \
289     NULL, \
290     NULL}; \
291   \
292   g_type_add_interface_static (type, GST_TYPE_CHILD_PROXY, &iface_info); \
293   \
294   GST_DEBUG_CATEGORY_INIT (bin_debug, "bin", GST_DEBUG_BOLD, \
295       "debugging info for the 'bin' container element"); \
296   \
297   /* compatibility stuff */ \
298   compat = g_getenv ("GST_COMPAT"); \
299   if (compat != NULL) { \
300     if (strstr (compat, "no-live-preroll")) \
301       enable_latency = FALSE; \
302     else if (strstr (compat, "live-preroll")) \
303       enable_latency = TRUE; \
304   } \
305 }
306
307 GST_BOILERPLATE_FULL (GstBin, gst_bin, GstElement, GST_TYPE_ELEMENT, _do_init);
308
309 static void
310 gst_bin_base_init (gpointer g_class)
311 {
312   GstElementClass *gstelement_class = GST_ELEMENT_CLASS (g_class);
313
314   gst_element_class_set_metadata (gstelement_class, "Generic bin",
315       "Generic/Bin",
316       "Simple container object",
317       "Erik Walthinsen <omega@cse.ogi.edu>,"
318       "Wim Taymans <wim.taymans@gmail.com>");
319 }
320
321 static GstObject *
322 gst_bin_child_proxy_get_child_by_index (GstChildProxy * child_proxy,
323     guint index)
324 {
325   GstObject *res;
326   GstBin *bin;
327
328   bin = GST_BIN_CAST (child_proxy);
329
330   GST_OBJECT_LOCK (bin);
331   if ((res = g_list_nth_data (bin->children, index)))
332     gst_object_ref (res);
333   GST_OBJECT_UNLOCK (bin);
334
335   return res;
336 }
337
338 static guint
339 gst_bin_child_proxy_get_children_count (GstChildProxy * child_proxy)
340 {
341   guint num;
342   GstBin *bin;
343
344   bin = GST_BIN_CAST (child_proxy);
345
346   GST_OBJECT_LOCK (bin);
347   num = bin->numchildren;
348   GST_OBJECT_UNLOCK (bin);
349
350   return num;
351 }
352
353 static void
354 gst_bin_child_proxy_init (gpointer g_iface, gpointer iface_data)
355 {
356   GstChildProxyInterface *iface = g_iface;
357
358   iface->get_children_count = gst_bin_child_proxy_get_children_count;
359   iface->get_child_by_index = gst_bin_child_proxy_get_child_by_index;
360 }
361
362 static gboolean
363 _gst_boolean_accumulator (GSignalInvocationHint * ihint,
364     GValue * return_accu, const GValue * handler_return, gpointer dummy)
365 {
366   gboolean myboolean;
367
368   myboolean = g_value_get_boolean (handler_return);
369   if (!(ihint->run_type & G_SIGNAL_RUN_CLEANUP))
370     g_value_set_boolean (return_accu, myboolean);
371
372   GST_DEBUG ("invocation %d, %d", ihint->run_type, myboolean);
373
374   /* stop emission */
375   return FALSE;
376 }
377
378 static void
379 gst_bin_class_init (GstBinClass * klass)
380 {
381   GObjectClass *gobject_class;
382   GstObjectClass *gstobject_class;
383   GstElementClass *gstelement_class;
384   GError *err;
385
386   gobject_class = (GObjectClass *) klass;
387   gstobject_class = (GstObjectClass *) klass;
388   gstelement_class = (GstElementClass *) klass;
389
390   g_type_class_add_private (klass, sizeof (GstBinPrivate));
391
392   gobject_class->set_property = gst_bin_set_property;
393   gobject_class->get_property = gst_bin_get_property;
394
395   /**
396    * GstBin:async-handling
397    *
398    * If set to #TRUE, the bin will handle asynchronous state changes.
399    * This should be used only if the bin subclass is modifying the state
400    * of its children on its own.
401    *
402    * Since: 0.10.13
403    */
404   g_object_class_install_property (gobject_class, PROP_ASYNC_HANDLING,
405       g_param_spec_boolean ("async-handling", "Async Handling",
406           "The bin will handle Asynchronous state changes",
407           DEFAULT_ASYNC_HANDLING, G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
408
409   /**
410    * GstBin::element-added:
411    * @bin: the #GstBin
412    * @element: the #GstElement that was added to the bin
413    *
414    * Will be emitted after the element was added to the bin.
415    */
416   gst_bin_signals[ELEMENT_ADDED] =
417       g_signal_new ("element-added", G_TYPE_FROM_CLASS (klass),
418       G_SIGNAL_RUN_FIRST, G_STRUCT_OFFSET (GstBinClass, element_added), NULL,
419       NULL, gst_marshal_VOID__OBJECT, G_TYPE_NONE, 1, GST_TYPE_ELEMENT);
420   /**
421    * GstBin::element-removed:
422    * @bin: the #GstBin
423    * @element: the #GstElement that was removed from the bin
424    *
425    * Will be emitted after the element was removed from the bin.
426    */
427   gst_bin_signals[ELEMENT_REMOVED] =
428       g_signal_new ("element-removed", G_TYPE_FROM_CLASS (klass),
429       G_SIGNAL_RUN_FIRST, G_STRUCT_OFFSET (GstBinClass, element_removed), NULL,
430       NULL, gst_marshal_VOID__OBJECT, G_TYPE_NONE, 1, GST_TYPE_ELEMENT);
431   /**
432    * GstBin::do-latency:
433    * @bin: the #GstBin
434    *
435    * Will be emitted when the bin needs to perform latency calculations. This
436    * signal is only emited for toplevel bins or when async-handling is
437    * enabled.
438    *
439    * Only one signal handler is invoked. If no signals are connected, the
440    * default handler is invoked, which will query and distribute the lowest
441    * possible latency to all sinks.
442    *
443    * Connect to this signal if the default latency calculations are not
444    * sufficient, like when you need different latencies for different sinks in
445    * the same pipeline.
446    *
447    * Since: 0.10.22
448    */
449   gst_bin_signals[DO_LATENCY] =
450       g_signal_new ("do-latency", G_TYPE_FROM_CLASS (klass),
451       G_SIGNAL_RUN_LAST, G_STRUCT_OFFSET (GstBinClass, do_latency),
452       _gst_boolean_accumulator, NULL, gst_marshal_BOOLEAN__VOID,
453       G_TYPE_BOOLEAN, 0, G_TYPE_NONE);
454
455   /**
456    * GstBin:message-forward
457    *
458    * Forward all children messages, even those that would normally be filtered by
459    * the bin. This can be interesting when one wants to be notified of the EOS
460    * state of individual elements, for example.
461    *
462    * The messages are converted to an ELEMENT message with the bin as the
463    * source. The structure of the message is named 'GstBinForwarded' and contains
464    * a field named 'message' of type GST_TYPE_MESSAGE that contains the original
465    * forwarded message.
466    *
467    * Since: 0.10.31
468    */
469   g_object_class_install_property (gobject_class, PROP_MESSAGE_FORWARD,
470       g_param_spec_boolean ("message-forward", "Message Forward",
471           "Forwards all children messages",
472           DEFAULT_MESSAGE_FORWARD, G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
473
474   gobject_class->dispose = gst_bin_dispose;
475
476   gstelement_class->change_state =
477       GST_DEBUG_FUNCPTR (gst_bin_change_state_func);
478   gstelement_class->get_state = GST_DEBUG_FUNCPTR (gst_bin_get_state_func);
479   gstelement_class->get_index = GST_DEBUG_FUNCPTR (gst_bin_get_index_func);
480   gstelement_class->set_index = GST_DEBUG_FUNCPTR (gst_bin_set_index_func);
481   gstelement_class->provide_clock =
482       GST_DEBUG_FUNCPTR (gst_bin_provide_clock_func);
483   gstelement_class->set_clock = GST_DEBUG_FUNCPTR (gst_bin_set_clock_func);
484
485   gstelement_class->send_event = GST_DEBUG_FUNCPTR (gst_bin_send_event);
486   gstelement_class->query = GST_DEBUG_FUNCPTR (gst_bin_query);
487
488   klass->add_element = GST_DEBUG_FUNCPTR (gst_bin_add_func);
489   klass->remove_element = GST_DEBUG_FUNCPTR (gst_bin_remove_func);
490   klass->handle_message = GST_DEBUG_FUNCPTR (gst_bin_handle_message_func);
491
492   klass->do_latency = GST_DEBUG_FUNCPTR (gst_bin_do_latency_func);
493
494   GST_DEBUG ("creating bin thread pool");
495   err = NULL;
496   klass->pool =
497       g_thread_pool_new ((GFunc) gst_bin_continue_func, NULL, -1, FALSE, &err);
498   if (err != NULL) {
499     g_critical ("could alloc threadpool %s", err->message);
500   }
501 }
502
503 static void
504 gst_bin_init (GstBin * bin, GstBinClass * klass)
505 {
506   GstBus *bus;
507
508   bin->numchildren = 0;
509   bin->children = NULL;
510   bin->children_cookie = 0;
511   bin->messages = NULL;
512   bin->provided_clock = NULL;
513   bin->clock_dirty = FALSE;
514
515   /* Set up a bus for listening to child elements */
516   bus = gst_bus_new ();
517   bin->child_bus = bus;
518   GST_DEBUG_OBJECT (bin, "using bus %" GST_PTR_FORMAT " to listen to children",
519       bus);
520   gst_bus_set_sync_handler (bus, (GstBusSyncHandler) bin_bus_handler, bin);
521   _priv_gst_bus_set_child_mode (bus);
522
523   bin->priv = GST_BIN_GET_PRIVATE (bin);
524   bin->priv->asynchandling = DEFAULT_ASYNC_HANDLING;
525   bin->priv->structure_cookie = 0;
526   bin->priv->message_forward = DEFAULT_MESSAGE_FORWARD;
527 }
528
529 static void
530 gst_bin_dispose (GObject * object)
531 {
532   GstBin *bin = GST_BIN_CAST (object);
533   GstBus **child_bus_p = &bin->child_bus;
534   GstClock **provided_clock_p = &bin->provided_clock;
535   GstElement **clock_provider_p = &bin->clock_provider;
536   GstIndex **index_p = &bin->priv->index;
537
538   GST_CAT_DEBUG_OBJECT (GST_CAT_REFCOUNTING, object, "dispose");
539
540   GST_OBJECT_LOCK (object);
541   gst_object_replace ((GstObject **) child_bus_p, NULL);
542   gst_object_replace ((GstObject **) provided_clock_p, NULL);
543   gst_object_replace ((GstObject **) clock_provider_p, NULL);
544   gst_object_replace ((GstObject **) index_p, NULL);
545   bin_remove_messages (bin, NULL, GST_MESSAGE_ANY);
546   GST_OBJECT_UNLOCK (object);
547
548   while (bin->children) {
549     gst_bin_remove (bin, GST_ELEMENT_CAST (bin->children->data));
550   }
551   if (G_UNLIKELY (bin->children != NULL)) {
552     g_critical ("could not remove elements from bin '%s'",
553         GST_STR_NULL (GST_OBJECT_NAME (object)));
554   }
555
556   G_OBJECT_CLASS (parent_class)->dispose (object);
557 }
558
559 /**
560  * gst_bin_new:
561  * @name: the name of the new bin
562  *
563  * Creates a new bin with the given name.
564  *
565  * Returns: (transfer full): a new #GstBin
566  */
567 GstElement *
568 gst_bin_new (const gchar * name)
569 {
570   return gst_element_factory_make ("bin", name);
571 }
572
573 static void
574 gst_bin_set_property (GObject * object, guint prop_id,
575     const GValue * value, GParamSpec * pspec)
576 {
577   GstBin *gstbin;
578
579   gstbin = GST_BIN_CAST (object);
580
581   switch (prop_id) {
582     case PROP_ASYNC_HANDLING:
583       GST_OBJECT_LOCK (gstbin);
584       gstbin->priv->asynchandling = g_value_get_boolean (value);
585       GST_OBJECT_UNLOCK (gstbin);
586       break;
587     case PROP_MESSAGE_FORWARD:
588       GST_OBJECT_LOCK (gstbin);
589       gstbin->priv->message_forward = g_value_get_boolean (value);
590       GST_OBJECT_UNLOCK (gstbin);
591       break;
592     default:
593       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
594       break;
595   }
596 }
597
598 static void
599 gst_bin_get_property (GObject * object, guint prop_id,
600     GValue * value, GParamSpec * pspec)
601 {
602   GstBin *gstbin;
603
604   gstbin = GST_BIN_CAST (object);
605
606   switch (prop_id) {
607     case PROP_ASYNC_HANDLING:
608       GST_OBJECT_LOCK (gstbin);
609       g_value_set_boolean (value, gstbin->priv->asynchandling);
610       GST_OBJECT_UNLOCK (gstbin);
611       break;
612     case PROP_MESSAGE_FORWARD:
613       GST_OBJECT_LOCK (gstbin);
614       g_value_set_boolean (value, gstbin->priv->message_forward);
615       GST_OBJECT_UNLOCK (gstbin);
616       break;
617     default:
618       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
619       break;
620   }
621 }
622
623 /* return the cached index */
624 static GstIndex *
625 gst_bin_get_index_func (GstElement * element)
626 {
627   GstBin *bin;
628   GstIndex *result;
629
630   bin = GST_BIN_CAST (element);
631
632   GST_OBJECT_LOCK (bin);
633   if ((result = bin->priv->index))
634     gst_object_ref (result);
635   GST_OBJECT_UNLOCK (bin);
636
637   return result;
638 }
639
640 /* set the index on all elements in this bin
641  *
642  * MT safe
643  */
644 static void
645 gst_bin_set_index_func (GstElement * element, GstIndex * index)
646 {
647   GstBin *bin;
648   gboolean done;
649   GstIterator *it;
650   GstIndex *old;
651
652   bin = GST_BIN_CAST (element);
653
654   GST_OBJECT_LOCK (bin);
655   old = bin->priv->index;
656   if (G_UNLIKELY (old == index))
657     goto was_set;
658   if (index)
659     gst_object_ref (index);
660   bin->priv->index = index;
661   GST_OBJECT_UNLOCK (bin);
662
663   if (old)
664     gst_object_unref (old);
665
666   it = gst_bin_iterate_elements (bin);
667
668   /* set the index on all elements in the bin */
669   done = FALSE;
670   while (!done) {
671     gpointer data;
672
673     switch (gst_iterator_next (it, &data)) {
674       case GST_ITERATOR_OK:
675       {
676         GstElement *child = GST_ELEMENT_CAST (data);
677
678         GST_DEBUG_OBJECT (bin, "setting index on '%s'",
679             GST_ELEMENT_NAME (child));
680         gst_element_set_index (child, index);
681
682         gst_object_unref (child);
683         break;
684       }
685       case GST_ITERATOR_RESYNC:
686         GST_DEBUG_OBJECT (bin, "iterator doing resync");
687         gst_iterator_resync (it);
688         break;
689       default:
690       case GST_ITERATOR_DONE:
691         GST_DEBUG_OBJECT (bin, "iterator done");
692         done = TRUE;
693         break;
694     }
695   }
696   gst_iterator_free (it);
697   return;
698
699 was_set:
700   {
701     GST_DEBUG_OBJECT (bin, "index was already set");
702     GST_OBJECT_UNLOCK (bin);
703     return;
704   }
705 }
706
707 /* set the clock on all elements in this bin
708  *
709  * MT safe
710  */
711 static gboolean
712 gst_bin_set_clock_func (GstElement * element, GstClock * clock)
713 {
714   GstBin *bin;
715   gboolean done;
716   GstIterator *it;
717   gboolean res = TRUE;
718
719   bin = GST_BIN_CAST (element);
720
721   it = gst_bin_iterate_elements (bin);
722
723   done = FALSE;
724   while (!done) {
725     gpointer data;
726
727     switch (gst_iterator_next (it, &data)) {
728       case GST_ITERATOR_OK:
729       {
730         GstElement *child = GST_ELEMENT_CAST (data);
731
732         res &= gst_element_set_clock (child, clock);
733
734         gst_object_unref (child);
735         break;
736       }
737       case GST_ITERATOR_RESYNC:
738         GST_DEBUG_OBJECT (bin, "iterator doing resync");
739         gst_iterator_resync (it);
740         res = TRUE;
741         break;
742       default:
743       case GST_ITERATOR_DONE:
744         GST_DEBUG_OBJECT (bin, "iterator done");
745         done = TRUE;
746         break;
747     }
748   }
749   gst_iterator_free (it);
750
751   return res;
752 }
753
754 /* get the clock for this bin by asking all of the children in this bin
755  *
756  * The ref of the returned clock in increased so unref after usage.
757  *
758  * We loop the elements in state order and pick the last clock we can
759  * get. This makes sure we get a clock from the source.
760  *
761  * MT safe
762  */
763 static GstClock *
764 gst_bin_provide_clock_func (GstElement * element)
765 {
766   GstClock *result = NULL;
767   GstElement *provider = NULL;
768   GstBin *bin;
769   GstIterator *it;
770   gpointer val;
771   GstClock **provided_clock_p;
772   GstElement **clock_provider_p;
773
774   bin = GST_BIN_CAST (element);
775
776   GST_OBJECT_LOCK (bin);
777   if (!bin->clock_dirty)
778     goto not_dirty;
779
780   GST_DEBUG_OBJECT (bin, "finding new clock");
781
782   it = gst_bin_sort_iterator_new (bin);
783
784   while (it->next (it, &val) == GST_ITERATOR_OK) {
785     GstElement *child = GST_ELEMENT_CAST (val);
786     GstClock *clock;
787
788     clock = gst_element_provide_clock (child);
789     if (clock) {
790       GST_DEBUG_OBJECT (bin, "found candidate clock %p by element %s",
791           clock, GST_ELEMENT_NAME (child));
792       if (result) {
793         gst_object_unref (result);
794         gst_object_unref (provider);
795       }
796       result = clock;
797       provider = child;
798     } else {
799       gst_object_unref (child);
800     }
801   }
802
803   provided_clock_p = &bin->provided_clock;
804   clock_provider_p = &bin->clock_provider;
805   gst_object_replace ((GstObject **) provided_clock_p, (GstObject *) result);
806   gst_object_replace ((GstObject **) clock_provider_p, (GstObject *) provider);
807   bin->clock_dirty = FALSE;
808   GST_DEBUG_OBJECT (bin,
809       "provided new clock %" GST_PTR_FORMAT " by provider %" GST_PTR_FORMAT,
810       result, provider);
811   /* Provider is not being returned to caller, just the result */
812   if (provider)
813     gst_object_unref (provider);
814   GST_OBJECT_UNLOCK (bin);
815
816   gst_iterator_free (it);
817
818   return result;
819
820 not_dirty:
821   {
822     if ((result = bin->provided_clock))
823       gst_object_ref (result);
824     GST_DEBUG_OBJECT (bin, "returning old clock %p", result);
825     GST_OBJECT_UNLOCK (bin);
826
827     return result;
828   }
829 }
830
831 /*
832  * functions for manipulating cached messages
833  */
834 typedef struct
835 {
836   GstObject *src;
837   GstMessageType types;
838 } MessageFind;
839
840 /* check if a message is of given src and type */
841 static gint
842 message_check (GstMessage * message, MessageFind * target)
843 {
844   gboolean eq = TRUE;
845
846   if (target->src)
847     eq &= GST_MESSAGE_SRC (message) == target->src;
848   if (target->types)
849     eq &= (GST_MESSAGE_TYPE (message) & target->types) != 0;
850   GST_LOG ("looking at message %p: %d", message, eq);
851
852   return (eq ? 0 : 1);
853 }
854
855 static GList *
856 find_message (GstBin * bin, GstObject * src, GstMessageType types)
857 {
858   GList *result;
859   MessageFind find;
860
861   find.src = src;
862   find.types = types;
863
864   result = g_list_find_custom (bin->messages, &find,
865       (GCompareFunc) message_check);
866
867   if (result) {
868     GST_DEBUG_OBJECT (bin, "we found a message %p from %s matching types %08x",
869         result->data, GST_OBJECT_NAME (GST_MESSAGE_CAST (result->data)->src),
870         types);
871   } else {
872     GST_DEBUG_OBJECT (bin, "no message found matching types %08x", types);
873 #ifndef GST_DISABLE_GST_DEBUG
874     {
875       guint i;
876
877       for (i = 0; i < 32; i++)
878         if (types & (1 << i))
879           GST_DEBUG_OBJECT (bin, "  %s", gst_message_type_get_name (1 << i));
880     }
881 #endif
882   }
883
884   return result;
885 }
886
887 /* with LOCK, returns TRUE if message had a valid SRC, takes ownership of
888  * the message.
889  *
890  * A message that is cached and has the same SRC and type is replaced
891  * by the given message.
892  */
893 static gboolean
894 bin_replace_message (GstBin * bin, GstMessage * message, GstMessageType types)
895 {
896   GList *previous;
897   GstObject *src;
898   gboolean res = TRUE;
899
900   if ((src = GST_MESSAGE_SRC (message))) {
901     /* first find the previous message posted by this element */
902     if ((previous = find_message (bin, src, types))) {
903       GstMessage *previous_msg;
904
905       /* if we found a previous message, replace it */
906       previous_msg = previous->data;
907       previous->data = message;
908
909       GST_DEBUG_OBJECT (bin, "replace old message %s from %s with %s message",
910           GST_MESSAGE_TYPE_NAME (previous_msg), GST_ELEMENT_NAME (src),
911           GST_MESSAGE_TYPE_NAME (message));
912
913       gst_message_unref (previous_msg);
914     } else {
915       /* keep new message */
916       bin->messages = g_list_prepend (bin->messages, message);
917
918       GST_DEBUG_OBJECT (bin, "got new message %p, %s from %s",
919           message, GST_MESSAGE_TYPE_NAME (message), GST_ELEMENT_NAME (src));
920     }
921   } else {
922     GST_DEBUG_OBJECT (bin, "got message %s from (NULL), not processing",
923         GST_MESSAGE_TYPE_NAME (message));
924     res = FALSE;
925     gst_message_unref (message);
926   }
927   return res;
928 }
929
930 /* with LOCK. Remove all messages of given types */
931 static void
932 bin_remove_messages (GstBin * bin, GstObject * src, GstMessageType types)
933 {
934   MessageFind find;
935   GList *walk, *next;
936
937   find.src = src;
938   find.types = types;
939
940   for (walk = bin->messages; walk; walk = next) {
941     GstMessage *message = (GstMessage *) walk->data;
942
943     next = g_list_next (walk);
944
945     if (message_check (message, &find) == 0) {
946       GST_DEBUG_OBJECT (GST_MESSAGE_SRC (message),
947           "deleting message %p of types 0x%08x", message, types);
948       bin->messages = g_list_delete_link (bin->messages, walk);
949       gst_message_unref (message);
950     } else {
951       GST_DEBUG_OBJECT (GST_MESSAGE_SRC (message),
952           "not deleting message %p of type 0x%08x", message,
953           GST_MESSAGE_TYPE (message));
954     }
955   }
956 }
957
958
959 /* Check if the bin is EOS. We do this by scanning all sinks and
960  * checking if they posted an EOS message.
961  *
962  * call with bin LOCK */
963 static gboolean
964 is_eos (GstBin * bin)
965 {
966   gboolean result;
967   GList *walk;
968
969   result = TRUE;
970   for (walk = bin->children; walk; walk = g_list_next (walk)) {
971     GstElement *element;
972
973     element = GST_ELEMENT_CAST (walk->data);
974     if (bin_element_is_sink (element, bin) == 0) {
975       /* check if element posted EOS */
976       if (find_message (bin, GST_OBJECT_CAST (element), GST_MESSAGE_EOS)) {
977         GST_DEBUG ("sink '%s' posted EOS", GST_ELEMENT_NAME (element));
978       } else {
979         GST_DEBUG ("sink '%s' did not post EOS yet",
980             GST_ELEMENT_NAME (element));
981         result = FALSE;
982         break;
983       }
984     }
985   }
986   return result;
987 }
988
989 static void
990 unlink_pads (GstPad * pad)
991 {
992   GstPad *peer;
993
994   if ((peer = gst_pad_get_peer (pad))) {
995     if (gst_pad_get_direction (pad) == GST_PAD_SRC)
996       gst_pad_unlink (pad, peer);
997     else
998       gst_pad_unlink (peer, pad);
999     gst_object_unref (peer);
1000   }
1001   gst_object_unref (pad);
1002 }
1003
1004 /* vmethod that adds an element to a bin
1005  *
1006  * MT safe
1007  */
1008 static gboolean
1009 gst_bin_add_func (GstBin * bin, GstElement * element)
1010 {
1011   gchar *elem_name;
1012   GstIterator *it;
1013   gboolean is_sink, is_source;
1014   GstMessage *clock_message = NULL, *async_message = NULL;
1015   GstStateChangeReturn ret;
1016
1017   GST_DEBUG_OBJECT (bin, "element :%s", GST_ELEMENT_NAME (element));
1018
1019   /* we obviously can't add ourself to ourself */
1020   if (G_UNLIKELY (GST_ELEMENT_CAST (element) == GST_ELEMENT_CAST (bin)))
1021     goto adding_itself;
1022
1023   /* get the element name to make sure it is unique in this bin. */
1024   GST_OBJECT_LOCK (element);
1025   elem_name = g_strdup (GST_ELEMENT_NAME (element));
1026   is_sink = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_IS_SINK);
1027   is_source = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_IS_SOURCE);
1028   GST_OBJECT_UNLOCK (element);
1029
1030   GST_OBJECT_LOCK (bin);
1031
1032   /* then check to see if the element's name is already taken in the bin,
1033    * we can safely take the lock here. This check is probably bogus because
1034    * you can safely change the element name after this check and before setting
1035    * the object parent. The window is very small though... */
1036   if (G_UNLIKELY (!gst_object_check_uniqueness (bin->children, elem_name)))
1037     goto duplicate_name;
1038
1039   /* set the element's parent and add the element to the bin's list of children */
1040   if (G_UNLIKELY (!gst_object_set_parent (GST_OBJECT_CAST (element),
1041               GST_OBJECT_CAST (bin))))
1042     goto had_parent;
1043
1044   /* if we add a sink we become a sink */
1045   if (is_sink) {
1046     GST_CAT_DEBUG_OBJECT (GST_CAT_PARENTAGE, bin, "element \"%s\" was sink",
1047         elem_name);
1048     GST_OBJECT_FLAG_SET (bin, GST_ELEMENT_IS_SINK);
1049   }
1050   if (is_source) {
1051     GST_CAT_DEBUG_OBJECT (GST_CAT_PARENTAGE, bin, "element \"%s\" was source",
1052         elem_name);
1053     GST_OBJECT_FLAG_SET (bin, GST_ELEMENT_IS_SOURCE);
1054   }
1055   if (gst_element_provides_clock (element)) {
1056     GST_DEBUG_OBJECT (bin, "element \"%s\" can provide a clock", elem_name);
1057     clock_message =
1058         gst_message_new_clock_provide (GST_OBJECT_CAST (element), NULL, TRUE);
1059   }
1060
1061   bin->children = g_list_prepend (bin->children, element);
1062   bin->numchildren++;
1063   bin->children_cookie++;
1064   bin->priv->structure_cookie++;
1065
1066   /* distribute the bus */
1067   gst_element_set_bus (element, bin->child_bus);
1068
1069   /* propagate the current base_time, start_time and clock */
1070   gst_element_set_base_time (element, GST_ELEMENT_CAST (bin)->base_time);
1071   gst_element_set_start_time (element, GST_ELEMENT_START_TIME (bin));
1072   /* it's possible that the element did not accept the clock but
1073    * that is not important right now. When the pipeline goes to PLAYING,
1074    * a new clock will be selected */
1075   gst_element_set_clock (element, GST_ELEMENT_CLOCK (bin));
1076   /* set the cached index on the children */
1077   if (bin->priv->index)
1078     gst_element_set_index (element, bin->priv->index);
1079
1080   ret = GST_STATE_RETURN (bin);
1081   /* no need to update the state if we are in error */
1082   if (ret == GST_STATE_CHANGE_FAILURE)
1083     goto no_state_recalc;
1084
1085   /* update the bin state, the new element could have been an ASYNC or
1086    * NO_PREROLL element */
1087   ret = GST_STATE_RETURN (element);
1088   GST_DEBUG_OBJECT (bin, "added %s element",
1089       gst_element_state_change_return_get_name (ret));
1090
1091   switch (ret) {
1092     case GST_STATE_CHANGE_ASYNC:
1093     {
1094       /* create message to track this aync element when it posts an async-done
1095        * message */
1096       async_message =
1097           gst_message_new_async_start (GST_OBJECT_CAST (element), FALSE);
1098       break;
1099     }
1100     case GST_STATE_CHANGE_NO_PREROLL:
1101       /* ignore all async elements we might have and commit our state */
1102       bin_handle_async_done (bin, ret, FALSE);
1103       break;
1104     case GST_STATE_CHANGE_FAILURE:
1105       break;
1106     default:
1107       break;
1108   }
1109
1110 no_state_recalc:
1111   GST_OBJECT_UNLOCK (bin);
1112
1113   /* post the messages on the bus of the element so that the bin can handle
1114    * them */
1115   if (clock_message)
1116     gst_element_post_message (GST_ELEMENT_CAST (element), clock_message);
1117
1118   if (async_message)
1119     gst_element_post_message (GST_ELEMENT_CAST (element), async_message);
1120
1121   /* unlink all linked pads */
1122   it = gst_element_iterate_pads (element);
1123   gst_iterator_foreach (it, (GFunc) unlink_pads, element);
1124   gst_iterator_free (it);
1125
1126   GST_CAT_DEBUG_OBJECT (GST_CAT_PARENTAGE, bin, "added element \"%s\"",
1127       elem_name);
1128   g_free (elem_name);
1129
1130   g_signal_emit (bin, gst_bin_signals[ELEMENT_ADDED], 0, element);
1131   gst_child_proxy_child_added ((GstObject *) bin, (GstObject *) element);
1132
1133   return TRUE;
1134
1135   /* ERROR handling here */
1136 adding_itself:
1137   {
1138     GST_OBJECT_LOCK (bin);
1139     g_warning ("Cannot add bin '%s' to itself", GST_ELEMENT_NAME (bin));
1140     GST_OBJECT_UNLOCK (bin);
1141     return FALSE;
1142   }
1143 duplicate_name:
1144   {
1145     g_warning ("Name '%s' is not unique in bin '%s', not adding",
1146         elem_name, GST_ELEMENT_NAME (bin));
1147     GST_OBJECT_UNLOCK (bin);
1148     g_free (elem_name);
1149     return FALSE;
1150   }
1151 had_parent:
1152   {
1153     g_warning ("Element '%s' already has parent", elem_name);
1154     GST_OBJECT_UNLOCK (bin);
1155     g_free (elem_name);
1156     return FALSE;
1157   }
1158 }
1159
1160 /**
1161  * gst_bin_add:
1162  * @bin: a #GstBin
1163  * @element: (transfer full): the #GstElement to add
1164  *
1165  * Adds the given element to the bin.  Sets the element's parent, and thus
1166  * takes ownership of the element. An element can only be added to one bin.
1167  *
1168  * If the element's pads are linked to other pads, the pads will be unlinked
1169  * before the element is added to the bin.
1170  *
1171  * <note>
1172  * When you add an element to an already-running pipeline, you will have to
1173  * take care to set the state of the newly-added element to the desired
1174  * state (usually PLAYING or PAUSED, same you set the pipeline to originally)
1175  * with gst_element_set_state(), or use gst_element_sync_state_with_parent().
1176  * The bin or pipeline will not take care of this for you.
1177  * </note>
1178  *
1179  * MT safe.
1180  *
1181  * Returns: TRUE if the element could be added, FALSE if
1182  * the bin does not want to accept the element.
1183  */
1184 gboolean
1185 gst_bin_add (GstBin * bin, GstElement * element)
1186 {
1187   GstBinClass *bclass;
1188   gboolean result;
1189
1190   g_return_val_if_fail (GST_IS_BIN (bin), FALSE);
1191   g_return_val_if_fail (GST_IS_ELEMENT (element), FALSE);
1192
1193   bclass = GST_BIN_GET_CLASS (bin);
1194
1195   if (G_UNLIKELY (bclass->add_element == NULL))
1196     goto no_function;
1197
1198   GST_CAT_DEBUG (GST_CAT_PARENTAGE, "adding element %s to bin %s",
1199       GST_STR_NULL (GST_ELEMENT_NAME (element)),
1200       GST_STR_NULL (GST_ELEMENT_NAME (bin)));
1201
1202   result = bclass->add_element (bin, element);
1203
1204   return result;
1205
1206   /* ERROR handling */
1207 no_function:
1208   {
1209     g_warning ("adding elements to bin '%s' is not supported",
1210         GST_ELEMENT_NAME (bin));
1211     return FALSE;
1212   }
1213 }
1214
1215 /* remove an element from the bin
1216  *
1217  * MT safe
1218  */
1219 static gboolean
1220 gst_bin_remove_func (GstBin * bin, GstElement * element)
1221 {
1222   gchar *elem_name;
1223   GstIterator *it;
1224   gboolean is_sink, is_source, othersink, othersource, found;
1225   GstMessage *clock_message = NULL;
1226   GstClock **provided_clock_p;
1227   GstElement **clock_provider_p;
1228   GList *walk, *next;
1229   gboolean other_async, this_async, have_no_preroll;
1230   GstStateChangeReturn ret;
1231
1232   GST_DEBUG_OBJECT (bin, "element :%s", GST_ELEMENT_NAME (element));
1233
1234   GST_OBJECT_LOCK (element);
1235   /* Check if the element is already being removed and immediately
1236    * return */
1237   if (G_UNLIKELY (GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_UNPARENTING)))
1238     goto already_removing;
1239
1240   GST_OBJECT_FLAG_SET (element, GST_ELEMENT_UNPARENTING);
1241   /* grab element name so we can print it */
1242   elem_name = g_strdup (GST_ELEMENT_NAME (element));
1243   is_sink = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_IS_SINK);
1244   is_source = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_IS_SOURCE);
1245   GST_OBJECT_UNLOCK (element);
1246
1247   /* unlink all linked pads */
1248   it = gst_element_iterate_pads (element);
1249   gst_iterator_foreach (it, (GFunc) unlink_pads, element);
1250   gst_iterator_free (it);
1251
1252   GST_OBJECT_LOCK (bin);
1253   found = FALSE;
1254   othersink = FALSE;
1255   othersource = FALSE;
1256   have_no_preroll = FALSE;
1257   /* iterate the elements, we collect which ones are async and no_preroll. We
1258    * also remove the element when we find it. */
1259   for (walk = bin->children; walk; walk = next) {
1260     GstElement *child = GST_ELEMENT_CAST (walk->data);
1261
1262     next = g_list_next (walk);
1263
1264     if (child == element) {
1265       found = TRUE;
1266       /* remove the element */
1267       bin->children = g_list_delete_link (bin->children, walk);
1268     } else {
1269       gboolean child_sink, child_source;
1270
1271       GST_OBJECT_LOCK (child);
1272       child_sink = GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_IS_SINK);
1273       child_source = GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_IS_SOURCE);
1274       /* when we remove a sink, check if there are other sinks. */
1275       if (is_sink && !othersink && child_sink)
1276         othersink = TRUE;
1277       if (is_source && !othersource && child_source)
1278         othersource = TRUE;
1279       /* check if we have NO_PREROLL children */
1280       if (GST_STATE_RETURN (child) == GST_STATE_CHANGE_NO_PREROLL)
1281         have_no_preroll = TRUE;
1282       GST_OBJECT_UNLOCK (child);
1283     }
1284   }
1285
1286   /* the element must have been in the bin's list of children */
1287   if (G_UNLIKELY (!found))
1288     goto not_in_bin;
1289
1290   /* we now removed the element from the list of elements, increment the cookie
1291    * so that others can detect a change in the children list. */
1292   bin->numchildren--;
1293   bin->children_cookie++;
1294   bin->priv->structure_cookie++;
1295
1296   if (is_sink && !othersink) {
1297     /* we're not a sink anymore */
1298     GST_DEBUG_OBJECT (bin, "we removed the last sink");
1299     GST_OBJECT_FLAG_UNSET (bin, GST_ELEMENT_IS_SINK);
1300   }
1301   if (is_source && !othersource) {
1302     /* we're not a source anymore */
1303     GST_DEBUG_OBJECT (bin, "we removed the last source");
1304     GST_OBJECT_FLAG_UNSET (bin, GST_ELEMENT_IS_SOURCE);
1305   }
1306
1307
1308   /* if the clock provider for this element is removed, we lost
1309    * the clock as well, we need to inform the parent of this
1310    * so that it can select a new clock */
1311   if (bin->clock_provider == element) {
1312     GST_DEBUG_OBJECT (bin, "element \"%s\" provided the clock", elem_name);
1313     bin->clock_dirty = TRUE;
1314     clock_message =
1315         gst_message_new_clock_lost (GST_OBJECT_CAST (bin), bin->provided_clock);
1316     provided_clock_p = &bin->provided_clock;
1317     clock_provider_p = &bin->clock_provider;
1318     gst_object_replace ((GstObject **) provided_clock_p, NULL);
1319     gst_object_replace ((GstObject **) clock_provider_p, NULL);
1320   }
1321
1322   /* remove messages for the element, if there was a pending ASYNC_START
1323    * message we must see if removing the element caused the bin to lose its
1324    * async state. */
1325   this_async = FALSE;
1326   other_async = FALSE;
1327   for (walk = bin->messages; walk; walk = next) {
1328     GstMessage *message = (GstMessage *) walk->data;
1329     GstElement *src = GST_ELEMENT_CAST (GST_MESSAGE_SRC (message));
1330     gboolean remove;
1331
1332     next = g_list_next (walk);
1333     remove = FALSE;
1334
1335     switch (GST_MESSAGE_TYPE (message)) {
1336       case GST_MESSAGE_ASYNC_START:
1337         if (src == element)
1338           this_async = TRUE;
1339         else
1340           other_async = TRUE;
1341
1342         GST_DEBUG_OBJECT (src, "looking at message %p", message);
1343         break;
1344       case GST_MESSAGE_STRUCTURE_CHANGE:
1345       {
1346         GstElement *owner;
1347
1348         GST_DEBUG_OBJECT (src, "looking at structure change message %p",
1349             message);
1350         /* it's unlikely that this message is still in the list of messages
1351          * because this would mean that a link/unlink is busy in another thread
1352          * while we remove the element. We still have to remove the message
1353          * because we might not receive the done message anymore when the element
1354          * is removed from the bin. */
1355         gst_message_parse_structure_change (message, NULL, &owner, NULL);
1356         if (owner == element)
1357           remove = TRUE;
1358         break;
1359       }
1360       default:
1361         break;
1362     }
1363     if (src == element)
1364       remove = TRUE;
1365
1366     if (remove) {
1367       /* delete all message types */
1368       GST_DEBUG_OBJECT (src, "deleting message %p of element \"%s\"",
1369           message, elem_name);
1370       bin->messages = g_list_delete_link (bin->messages, walk);
1371       gst_message_unref (message);
1372     }
1373   }
1374
1375   /* get last return */
1376   ret = GST_STATE_RETURN (bin);
1377
1378   /* no need to update the state if we are in error */
1379   if (ret == GST_STATE_CHANGE_FAILURE)
1380     goto no_state_recalc;
1381
1382   if (!other_async && this_async) {
1383     /* all other elements were not async and we removed the async one,
1384      * handle the async-done case because we are not async anymore now. */
1385     GST_DEBUG_OBJECT (bin,
1386         "we removed the last async element, have no_preroll %d",
1387         have_no_preroll);
1388
1389     /* the current state return of the bin depends on if there are no_preroll
1390      * elements in the pipeline or not */
1391     if (have_no_preroll)
1392       ret = GST_STATE_CHANGE_NO_PREROLL;
1393     else
1394       ret = GST_STATE_CHANGE_SUCCESS;
1395
1396     bin_handle_async_done (bin, ret, FALSE);
1397   } else {
1398     GST_DEBUG_OBJECT (bin,
1399         "recalc state preroll: %d, other async: %d, this async %d",
1400         have_no_preroll, other_async, this_async);
1401
1402     if (have_no_preroll) {
1403       ret = GST_STATE_CHANGE_NO_PREROLL;
1404     } else if (other_async) {
1405       /* there are other async elements and we were not doing an async state
1406        * change, change our pending state and go async */
1407       if (GST_STATE_PENDING (bin) == GST_STATE_VOID_PENDING) {
1408         GST_STATE_NEXT (bin) = GST_STATE (bin);
1409         GST_STATE_PENDING (bin) = GST_STATE (bin);
1410       }
1411       ret = GST_STATE_CHANGE_ASYNC;
1412     }
1413     GST_STATE_RETURN (bin) = ret;
1414   }
1415 no_state_recalc:
1416   GST_OBJECT_UNLOCK (bin);
1417
1418   if (clock_message)
1419     gst_element_post_message (GST_ELEMENT_CAST (bin), clock_message);
1420
1421   GST_CAT_INFO_OBJECT (GST_CAT_PARENTAGE, bin, "removed child \"%s\"",
1422       elem_name);
1423   g_free (elem_name);
1424
1425   gst_element_set_bus (element, NULL);
1426
1427   /* Clear the clock we provided to the element */
1428   gst_element_set_clock (element, NULL);
1429
1430   /* we ref here because after the _unparent() the element can be disposed
1431    * and we still need it to reset the UNPARENTING flag and fire a signal. */
1432   gst_object_ref (element);
1433   gst_object_unparent (GST_OBJECT_CAST (element));
1434
1435   GST_OBJECT_LOCK (element);
1436   GST_OBJECT_FLAG_UNSET (element, GST_ELEMENT_UNPARENTING);
1437   GST_OBJECT_UNLOCK (element);
1438
1439   g_signal_emit (bin, gst_bin_signals[ELEMENT_REMOVED], 0, element);
1440   gst_child_proxy_child_removed ((GstObject *) bin, (GstObject *) element);
1441
1442   /* element is really out of our control now */
1443   gst_object_unref (element);
1444
1445   return TRUE;
1446
1447   /* ERROR handling */
1448 not_in_bin:
1449   {
1450     g_warning ("Element '%s' is not in bin '%s'", elem_name,
1451         GST_ELEMENT_NAME (bin));
1452     GST_OBJECT_UNLOCK (bin);
1453     g_free (elem_name);
1454     return FALSE;
1455   }
1456 already_removing:
1457   {
1458     GST_CAT_INFO_OBJECT (GST_CAT_PARENTAGE, bin, "already removing child");
1459     GST_OBJECT_UNLOCK (element);
1460     return FALSE;
1461   }
1462 }
1463
1464 /**
1465  * gst_bin_remove:
1466  * @bin: a #GstBin
1467  * @element: (transfer none): the #GstElement to remove
1468  *
1469  * Removes the element from the bin, unparenting it as well.
1470  * Unparenting the element means that the element will be dereferenced,
1471  * so if the bin holds the only reference to the element, the element
1472  * will be freed in the process of removing it from the bin.  If you
1473  * want the element to still exist after removing, you need to call
1474  * gst_object_ref() before removing it from the bin.
1475  *
1476  * If the element's pads are linked to other pads, the pads will be unlinked
1477  * before the element is removed from the bin.
1478  *
1479  * MT safe.
1480  *
1481  * Returns: TRUE if the element could be removed, FALSE if
1482  * the bin does not want to remove the element.
1483  */
1484 gboolean
1485 gst_bin_remove (GstBin * bin, GstElement * element)
1486 {
1487   GstBinClass *bclass;
1488   gboolean result;
1489
1490   g_return_val_if_fail (GST_IS_BIN (bin), FALSE);
1491   g_return_val_if_fail (GST_IS_ELEMENT (element), FALSE);
1492
1493   bclass = GST_BIN_GET_CLASS (bin);
1494
1495   if (G_UNLIKELY (bclass->remove_element == NULL))
1496     goto no_function;
1497
1498   GST_CAT_DEBUG (GST_CAT_PARENTAGE, "removing element %s from bin %s",
1499       GST_ELEMENT_NAME (element), GST_ELEMENT_NAME (bin));
1500
1501   result = bclass->remove_element (bin, element);
1502
1503   return result;
1504
1505   /* ERROR handling */
1506 no_function:
1507   {
1508     g_warning ("removing elements from bin '%s' is not supported",
1509         GST_ELEMENT_NAME (bin));
1510     return FALSE;
1511   }
1512 }
1513
1514 static GstIteratorItem
1515 iterate_child (GstIterator * it, GstElement * child)
1516 {
1517   gst_object_ref (child);
1518   return GST_ITERATOR_ITEM_PASS;
1519 }
1520
1521 /**
1522  * gst_bin_iterate_elements:
1523  * @bin: a #GstBin
1524  *
1525  * Gets an iterator for the elements in this bin.
1526  *
1527  * Each element yielded by the iterator will have its refcount increased, so
1528  * unref after use.
1529  *
1530  * MT safe.  Caller owns returned value.
1531  *
1532  * Returns: (transfer full): a #GstIterator of #GstElement, or NULL
1533  */
1534 GstIterator *
1535 gst_bin_iterate_elements (GstBin * bin)
1536 {
1537   GstIterator *result;
1538
1539   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
1540
1541   GST_OBJECT_LOCK (bin);
1542   /* add ref because the iterator refs the bin. When the iterator
1543    * is freed it will unref the bin again using the provided dispose
1544    * function. */
1545   gst_object_ref (bin);
1546   result = gst_iterator_new_list (GST_TYPE_ELEMENT,
1547       GST_OBJECT_GET_LOCK (bin),
1548       &bin->children_cookie,
1549       &bin->children,
1550       bin,
1551       (GstIteratorItemFunction) iterate_child,
1552       (GstIteratorDisposeFunction) gst_object_unref);
1553   GST_OBJECT_UNLOCK (bin);
1554
1555   return result;
1556 }
1557
1558 static GstIteratorItem
1559 iterate_child_recurse (GstIterator * it, GstElement * child)
1560 {
1561   gst_object_ref (child);
1562   if (GST_IS_BIN (child)) {
1563     GstIterator *other = gst_bin_iterate_recurse (GST_BIN_CAST (child));
1564
1565     gst_iterator_push (it, other);
1566   }
1567   return GST_ITERATOR_ITEM_PASS;
1568 }
1569
1570 /**
1571  * gst_bin_iterate_recurse:
1572  * @bin: a #GstBin
1573  *
1574  * Gets an iterator for the elements in this bin.
1575  * This iterator recurses into GstBin children.
1576  *
1577  * Each element yielded by the iterator will have its refcount increased, so
1578  * unref after use.
1579  *
1580  * MT safe.  Caller owns returned value.
1581  *
1582  * Returns: (transfer full): a #GstIterator of #GstElement, or NULL
1583  */
1584 GstIterator *
1585 gst_bin_iterate_recurse (GstBin * bin)
1586 {
1587   GstIterator *result;
1588
1589   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
1590
1591   GST_OBJECT_LOCK (bin);
1592   /* add ref because the iterator refs the bin. When the iterator
1593    * is freed it will unref the bin again using the provided dispose
1594    * function. */
1595   gst_object_ref (bin);
1596   result = gst_iterator_new_list (GST_TYPE_ELEMENT,
1597       GST_OBJECT_GET_LOCK (bin),
1598       &bin->children_cookie,
1599       &bin->children,
1600       bin,
1601       (GstIteratorItemFunction) iterate_child_recurse,
1602       (GstIteratorDisposeFunction) gst_object_unref);
1603   GST_OBJECT_UNLOCK (bin);
1604
1605   return result;
1606 }
1607
1608 /* returns 0 when TRUE because this is a GCompareFunc */
1609 /* MT safe */
1610 static gint
1611 bin_element_is_sink (GstElement * child, GstBin * bin)
1612 {
1613   gboolean is_sink;
1614
1615   /* we lock the child here for the remainder of the function to
1616    * get its name and flag safely. */
1617   GST_OBJECT_LOCK (child);
1618   is_sink = GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_IS_SINK);
1619
1620   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin,
1621       "child %s %s sink", GST_OBJECT_NAME (child), is_sink ? "is" : "is not");
1622
1623   GST_OBJECT_UNLOCK (child);
1624   return is_sink ? 0 : 1;
1625 }
1626
1627 static gint
1628 sink_iterator_filter (GstElement * child, GstBin * bin)
1629 {
1630   if (bin_element_is_sink (child, bin) == 0) {
1631     /* returns 0 because this is a GCompareFunc */
1632     return 0;
1633   } else {
1634     /* child carries a ref from gst_bin_iterate_elements -- drop if not passing
1635        through */
1636     gst_object_unref (child);
1637     return 1;
1638   }
1639 }
1640
1641 /**
1642  * gst_bin_iterate_sinks:
1643  * @bin: a #GstBin
1644  *
1645  * Gets an iterator for all elements in the bin that have the
1646  * #GST_ELEMENT_IS_SINK flag set.
1647  *
1648  * Each element yielded by the iterator will have its refcount increased, so
1649  * unref after use.
1650  *
1651  * MT safe.  Caller owns returned value.
1652  *
1653  * Returns: (transfer full): a #GstIterator of #GstElement, or NULL
1654  */
1655 GstIterator *
1656 gst_bin_iterate_sinks (GstBin * bin)
1657 {
1658   GstIterator *children;
1659   GstIterator *result;
1660
1661   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
1662
1663   children = gst_bin_iterate_elements (bin);
1664   result = gst_iterator_filter (children,
1665       (GCompareFunc) sink_iterator_filter, bin);
1666
1667   return result;
1668 }
1669
1670 /* returns 0 when TRUE because this is a GCompareFunc */
1671 /* MT safe */
1672 static gint
1673 bin_element_is_src (GstElement * child, GstBin * bin)
1674 {
1675   gboolean is_src;
1676
1677   /* we lock the child here for the remainder of the function to
1678    * get its name and other info safely. */
1679   GST_OBJECT_LOCK (child);
1680   is_src = GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_IS_SOURCE);
1681
1682   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin,
1683       "child %s %s src", GST_OBJECT_NAME (child), is_src ? "is" : "is not");
1684
1685   GST_OBJECT_UNLOCK (child);
1686   return is_src ? 0 : 1;
1687 }
1688
1689 static gint
1690 src_iterator_filter (GstElement * child, GstBin * bin)
1691 {
1692   if (bin_element_is_src (child, bin) == 0) {
1693     /* returns 0 because this is a GCompareFunc */
1694     return 0;
1695   } else {
1696     /* child carries a ref from gst_bin_iterate_elements -- drop if not passing
1697        through */
1698     gst_object_unref (child);
1699     return 1;
1700   }
1701 }
1702
1703 /**
1704  * gst_bin_iterate_sources:
1705  * @bin: a #GstBin
1706  *
1707  * Gets an iterator for all elements in the bin that have the
1708  * #GST_ELEMENT_IS_SOURCE flag set.
1709  *
1710  * Each element yielded by the iterator will have its refcount increased, so
1711  * unref after use.
1712  *
1713  * MT safe.  Caller owns returned value.
1714  *
1715  * Returns: (transfer full): a #GstIterator of #GstElement, or NULL
1716  */
1717 GstIterator *
1718 gst_bin_iterate_sources (GstBin * bin)
1719 {
1720   GstIterator *children;
1721   GstIterator *result;
1722
1723   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
1724
1725   children = gst_bin_iterate_elements (bin);
1726   result = gst_iterator_filter (children,
1727       (GCompareFunc) src_iterator_filter, bin);
1728
1729   return result;
1730 }
1731
1732 /*
1733  * MT safe
1734  */
1735 static GstStateChangeReturn
1736 gst_bin_get_state_func (GstElement * element, GstState * state,
1737     GstState * pending, GstClockTime timeout)
1738 {
1739   GstStateChangeReturn ret;
1740
1741   GST_CAT_INFO_OBJECT (GST_CAT_STATES, element, "getting state");
1742
1743   ret = parent_class->get_state (element, state, pending, timeout);
1744
1745   return ret;
1746 }
1747
1748 /***********************************************
1749  * Topologically sorted iterator
1750  * see http://en.wikipedia.org/wiki/Topological_sorting
1751  *
1752  * For each element in the graph, an entry is kept in a HashTable
1753  * with its number of srcpad connections (degree).
1754  * We then change state of all elements without dependencies
1755  * (degree 0) and decrement the degree of all elements connected
1756  * on the sinkpads. When an element reaches degree 0, its state is
1757  * changed next.
1758  * When all elements are handled the algorithm stops.
1759  */
1760 typedef struct _GstBinSortIterator
1761 {
1762   GstIterator it;
1763   GQueue *queue;                /* elements queued for state change */
1764   GstBin *bin;                  /* bin we iterate */
1765   gint mode;                    /* adding or removing dependency */
1766   GstElement *best;             /* next element with least dependencies */
1767   gint best_deg;                /* best degree */
1768   GHashTable *hash;             /* hashtable with element dependencies */
1769   gboolean dirty;               /* we detected structure change */
1770 } GstBinSortIterator;
1771
1772 /* we add and subtract 1 to make sure we don't confuse NULL and 0 */
1773 #define HASH_SET_DEGREE(bit, elem, deg) \
1774     g_hash_table_replace (bit->hash, elem, GINT_TO_POINTER(deg+1))
1775 #define HASH_GET_DEGREE(bit, elem) \
1776     (GPOINTER_TO_INT(g_hash_table_lookup (bit->hash, elem))-1)
1777
1778 /* add element to queue of next elements in the iterator.
1779  * We push at the tail to give higher priority elements a
1780  * chance first */
1781 static void
1782 add_to_queue (GstBinSortIterator * bit, GstElement * element)
1783 {
1784   GST_DEBUG_OBJECT (bit->bin, "adding '%s' to queue",
1785       GST_ELEMENT_NAME (element));
1786   gst_object_ref (element);
1787   g_queue_push_tail (bit->queue, element);
1788   HASH_SET_DEGREE (bit, element, -1);
1789 }
1790
1791 static void
1792 remove_from_queue (GstBinSortIterator * bit, GstElement * element)
1793 {
1794   GList *find;
1795
1796   if ((find = g_queue_find (bit->queue, element))) {
1797     GST_DEBUG_OBJECT (bit->bin, "removing '%s' from queue",
1798         GST_ELEMENT_NAME (element));
1799
1800     g_queue_delete_link (bit->queue, find);
1801     gst_object_unref (element);
1802   } else {
1803     GST_DEBUG_OBJECT (bit->bin, "unable to remove '%s' from queue",
1804         GST_ELEMENT_NAME (element));
1805   }
1806 }
1807
1808 /* clear the queue, unref all objects as we took a ref when
1809  * we added them to the queue */
1810 static void
1811 clear_queue (GQueue * queue)
1812 {
1813   gpointer p;
1814
1815   while ((p = g_queue_pop_head (queue)))
1816     gst_object_unref (p);
1817 }
1818
1819 /* set all degrees to 0. Elements marked as a sink are
1820  * added to the queue immediatly. Since we only look at the SINK flag of the
1821  * element, it is possible that we add non-sinks to the queue. These will be
1822  * removed from the queue again when we can prove that it provides data for some
1823  * other element. */
1824 static void
1825 reset_degree (GstElement * element, GstBinSortIterator * bit)
1826 {
1827   gboolean is_sink;
1828
1829   /* sinks are added right away */
1830   GST_OBJECT_LOCK (element);
1831   is_sink = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_IS_SINK);
1832   GST_OBJECT_UNLOCK (element);
1833
1834   if (is_sink) {
1835     add_to_queue (bit, element);
1836   } else {
1837     /* others are marked with 0 and handled when sinks are done */
1838     HASH_SET_DEGREE (bit, element, 0);
1839   }
1840 }
1841
1842 /* adjust the degree of all elements connected to the given
1843  * element. If a degree of an element drops to 0, it is
1844  * added to the queue of elements to schedule next.
1845  *
1846  * We have to make sure not to cross the bin boundary this element
1847  * belongs to.
1848  */
1849 static void
1850 update_degree (GstElement * element, GstBinSortIterator * bit)
1851 {
1852   gboolean linked = FALSE;
1853
1854   GST_OBJECT_LOCK (element);
1855   /* don't touch degree if element has no sinkpads */
1856   if (element->numsinkpads != 0) {
1857     /* loop over all sinkpads, decrement degree for all connected
1858      * elements in this bin */
1859     GList *pads;
1860
1861     for (pads = element->sinkpads; pads; pads = g_list_next (pads)) {
1862       GstPad *pad, *peer;
1863
1864       pad = GST_PAD_CAST (pads->data);
1865
1866       /* we're iterating over the sinkpads, check if it's busy in a link/unlink */
1867       if (G_UNLIKELY (find_message (bit->bin, GST_OBJECT_CAST (pad),
1868                   GST_MESSAGE_STRUCTURE_CHANGE))) {
1869         /* mark the iterator as dirty because we won't be updating the degree
1870          * of the peer parent now. This would result in the 'loop detected'
1871          * later on because the peer parent element could become the best next
1872          * element with a degree > 0. We will simply continue our state
1873          * changes and we'll eventually resync when the unlink completed and
1874          * the iterator cookie is updated. */
1875         bit->dirty = TRUE;
1876         continue;
1877       }
1878
1879       if ((peer = gst_pad_get_peer (pad))) {
1880         GstElement *peer_element;
1881
1882         if ((peer_element = gst_pad_get_parent_element (peer))) {
1883           GST_OBJECT_LOCK (peer_element);
1884           /* check that we don't go outside of this bin */
1885           if (GST_OBJECT_CAST (peer_element)->parent ==
1886               GST_OBJECT_CAST (bit->bin)) {
1887             gint old_deg, new_deg;
1888
1889             old_deg = HASH_GET_DEGREE (bit, peer_element);
1890
1891             /* check to see if we added an element as sink that was not really a
1892              * sink because it was connected to some other element. */
1893             if (old_deg == -1) {
1894               remove_from_queue (bit, peer_element);
1895               old_deg = 0;
1896             }
1897             new_deg = old_deg + bit->mode;
1898
1899             GST_DEBUG_OBJECT (bit->bin,
1900                 "change element %s, degree %d->%d, linked to %s",
1901                 GST_ELEMENT_NAME (peer_element), old_deg, new_deg,
1902                 GST_ELEMENT_NAME (element));
1903
1904             /* update degree, it is possible that an element was in 0 and
1905              * reaches -1 here. This would mean that the element had no sinkpads
1906              * but became linked while the state change was happening. We will
1907              * resync on this with the structure change message. */
1908             if (new_deg == 0) {
1909               /* degree hit 0, add to queue */
1910               add_to_queue (bit, peer_element);
1911             } else {
1912               HASH_SET_DEGREE (bit, peer_element, new_deg);
1913             }
1914             linked = TRUE;
1915           }
1916           GST_OBJECT_UNLOCK (peer_element);
1917           gst_object_unref (peer_element);
1918         }
1919         gst_object_unref (peer);
1920       }
1921     }
1922   }
1923   if (!linked) {
1924     GST_DEBUG_OBJECT (bit->bin, "element %s not linked on any sinkpads",
1925         GST_ELEMENT_NAME (element));
1926   }
1927   GST_OBJECT_UNLOCK (element);
1928 }
1929
1930 /* find the next best element not handled yet. This is the one
1931  * with the lowest non-negative degree */
1932 static void
1933 find_element (GstElement * element, GstBinSortIterator * bit)
1934 {
1935   gint degree;
1936
1937   /* element is already handled */
1938   if ((degree = HASH_GET_DEGREE (bit, element)) < 0)
1939     return;
1940
1941   /* first element or element with smaller degree */
1942   if (bit->best == NULL || bit->best_deg > degree) {
1943     bit->best = element;
1944     bit->best_deg = degree;
1945   }
1946 }
1947
1948 /* get next element in iterator. the returned element has the
1949  * refcount increased */
1950 static GstIteratorResult
1951 gst_bin_sort_iterator_next (GstBinSortIterator * bit, gpointer * result)
1952 {
1953   GstBin *bin = bit->bin;
1954
1955   /* empty queue, we have to find a next best element */
1956   if (g_queue_is_empty (bit->queue)) {
1957     GstElement *best;
1958
1959     bit->best = NULL;
1960     bit->best_deg = G_MAXINT;
1961     g_list_foreach (bin->children, (GFunc) find_element, bit);
1962     if ((best = bit->best)) {
1963       /* when we detected an unlink, don't warn because our degrees might be
1964        * screwed up. We will resync later */
1965       if (bit->best_deg != 0 && !bit->dirty) {
1966         /* we don't fail on this one yet */
1967         GST_WARNING_OBJECT (bin, "loop dected in graph");
1968         g_warning ("loop detected in the graph of bin '%s'!!",
1969             GST_ELEMENT_NAME (bin));
1970       }
1971       /* best unhandled element, schedule as next element */
1972       GST_DEBUG_OBJECT (bin, "queue empty, next best: %s",
1973           GST_ELEMENT_NAME (best));
1974       gst_object_ref (best);
1975       HASH_SET_DEGREE (bit, best, -1);
1976       *result = best;
1977     } else {
1978       GST_DEBUG_OBJECT (bin, "queue empty, elements exhausted");
1979       /* no more unhandled elements, we are done */
1980       return GST_ITERATOR_DONE;
1981     }
1982   } else {
1983     /* everything added to the queue got reffed */
1984     *result = g_queue_pop_head (bit->queue);
1985   }
1986
1987   GST_DEBUG_OBJECT (bin, "queue head gives %s", GST_ELEMENT_NAME (*result));
1988   /* update degrees of linked elements */
1989   update_degree (GST_ELEMENT_CAST (*result), bit);
1990
1991   return GST_ITERATOR_OK;
1992 }
1993
1994 /* clear queues, recalculate the degrees and restart. */
1995 static void
1996 gst_bin_sort_iterator_resync (GstBinSortIterator * bit)
1997 {
1998   GstBin *bin = bit->bin;
1999
2000   GST_DEBUG_OBJECT (bin, "resync");
2001   bit->dirty = FALSE;
2002   clear_queue (bit->queue);
2003   /* reset degrees */
2004   g_list_foreach (bin->children, (GFunc) reset_degree, bit);
2005   /* calc degrees, incrementing */
2006   bit->mode = 1;
2007   g_list_foreach (bin->children, (GFunc) update_degree, bit);
2008   /* for the rest of the function we decrement the degrees */
2009   bit->mode = -1;
2010 }
2011
2012 /* clear queues, unref bin and free iterator. */
2013 static void
2014 gst_bin_sort_iterator_free (GstBinSortIterator * bit)
2015 {
2016   GstBin *bin = bit->bin;
2017
2018   GST_DEBUG_OBJECT (bin, "free");
2019   clear_queue (bit->queue);
2020   g_queue_free (bit->queue);
2021   g_hash_table_destroy (bit->hash);
2022   gst_object_unref (bin);
2023   g_free (bit);
2024 }
2025
2026 /* should be called with the bin LOCK held */
2027 static GstIterator *
2028 gst_bin_sort_iterator_new (GstBin * bin)
2029 {
2030   GstBinSortIterator *result;
2031
2032   /* we don't need an ItemFunction because we ref the items in the _next
2033    * method already */
2034   result = (GstBinSortIterator *)
2035       gst_iterator_new (sizeof (GstBinSortIterator),
2036       GST_TYPE_ELEMENT,
2037       GST_OBJECT_GET_LOCK (bin),
2038       &bin->priv->structure_cookie,
2039       (GstIteratorNextFunction) gst_bin_sort_iterator_next,
2040       (GstIteratorItemFunction) NULL,
2041       (GstIteratorResyncFunction) gst_bin_sort_iterator_resync,
2042       (GstIteratorFreeFunction) gst_bin_sort_iterator_free);
2043   result->queue = g_queue_new ();
2044   result->hash = g_hash_table_new (NULL, NULL);
2045   gst_object_ref (bin);
2046   result->bin = bin;
2047   gst_bin_sort_iterator_resync (result);
2048
2049   return (GstIterator *) result;
2050 }
2051
2052 /**
2053  * gst_bin_iterate_sorted:
2054  * @bin: a #GstBin
2055  *
2056  * Gets an iterator for the elements in this bin in topologically
2057  * sorted order. This means that the elements are returned from
2058  * the most downstream elements (sinks) to the sources.
2059  *
2060  * This function is used internally to perform the state changes
2061  * of the bin elements and for clock selection.
2062  *
2063  * Each element yielded by the iterator will have its refcount increased, so
2064  * unref after use.
2065  *
2066  * MT safe.  Caller owns returned value.
2067  *
2068  * Returns: (transfer full): a #GstIterator of #GstElement, or NULL
2069  */
2070 GstIterator *
2071 gst_bin_iterate_sorted (GstBin * bin)
2072 {
2073   GstIterator *result;
2074
2075   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
2076
2077   GST_OBJECT_LOCK (bin);
2078   result = gst_bin_sort_iterator_new (bin);
2079   GST_OBJECT_UNLOCK (bin);
2080
2081   return result;
2082 }
2083
2084 static GstStateChangeReturn
2085 gst_bin_element_set_state (GstBin * bin, GstElement * element,
2086     GstClockTime base_time, GstClockTime start_time, GstState current,
2087     GstState next)
2088 {
2089   GstStateChangeReturn ret;
2090   GstState pending, child_current, child_pending;
2091   gboolean locked;
2092   GList *found;
2093
2094   GST_STATE_LOCK (element);
2095
2096   GST_OBJECT_LOCK (element);
2097   /* set base_time and start time on child */
2098   GST_ELEMENT_START_TIME (element) = start_time;
2099   element->base_time = base_time;
2100   /* peel off the locked flag */
2101   locked = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_LOCKED_STATE);
2102   /* Get the previous set_state result to preserve NO_PREROLL and ASYNC */
2103   ret = GST_STATE_RETURN (element);
2104   child_current = GST_STATE (element);
2105   child_pending = GST_STATE_PENDING (element);
2106   GST_OBJECT_UNLOCK (element);
2107
2108   /* skip locked elements */
2109   if (G_UNLIKELY (locked))
2110     goto locked;
2111
2112   /* if the element was no preroll, just start changing the state regardless
2113    * if it had async elements (in the case of a bin) because they won't preroll
2114    * anyway. */
2115   if (G_UNLIKELY (ret == GST_STATE_CHANGE_NO_PREROLL)) {
2116     GST_DEBUG_OBJECT (element, "element is NO_PREROLL, ignore async elements");
2117     goto no_preroll;
2118   }
2119
2120   GST_OBJECT_LOCK (bin);
2121   pending = GST_STATE_PENDING (bin);
2122
2123   /* Try not to change the state of elements that are already in the state we're
2124    * going to */
2125   if (!(next == GST_STATE_PLAYING || child_pending != GST_STATE_VOID_PENDING ||
2126           (child_pending == GST_STATE_VOID_PENDING &&
2127               ((pending > child_current && next > child_current) ||
2128                   (pending < child_current && next < child_current)))))
2129     goto unneeded;
2130
2131   /* the element was busy with an upwards async state change, we must wait for
2132    * an ASYNC_DONE message before we attemp to change the state. */
2133   if ((found =
2134           find_message (bin, GST_OBJECT_CAST (element),
2135               GST_MESSAGE_ASYNC_START))) {
2136 #ifndef GST_DISABLE_GST_DEBUG
2137     GstMessage *message = GST_MESSAGE_CAST (found->data);
2138
2139     GST_DEBUG_OBJECT (element, "element message %p, %s async busy",
2140         message, GST_ELEMENT_NAME (GST_MESSAGE_SRC (message)));
2141 #endif
2142     /* only wait for upward state changes */
2143     if (next > current) {
2144       /* We found an async element check if we can force its state to change or
2145        * if we have to wait for it to preroll. */
2146       if (G_UNLIKELY (!enable_latency)) {
2147         g_warning ("Future versions of GStreamer will wait for element \"%s\"\n"
2148             "\tto preroll in order to perform correct latency calculations.\n"
2149             "\tPlease verify that the application continues to work correctly by\n"
2150             "\tsetting the environment variable GST_COMPAT to a value containing\n"
2151             "\tthe string 'live-preroll'.", GST_ELEMENT_NAME (element));
2152         goto no_latency;
2153       }
2154       goto was_busy;
2155     }
2156   }
2157 no_latency:
2158   GST_OBJECT_UNLOCK (bin);
2159
2160 no_preroll:
2161   GST_DEBUG_OBJECT (bin,
2162       "setting element %s to %s, base_time %" GST_TIME_FORMAT,
2163       GST_ELEMENT_NAME (element), gst_element_state_get_name (next),
2164       GST_TIME_ARGS (base_time));
2165
2166   /* change state */
2167   ret = gst_element_set_state (element, next);
2168
2169   GST_STATE_UNLOCK (element);
2170
2171   return ret;
2172
2173 locked:
2174   {
2175     GST_DEBUG_OBJECT (element,
2176         "element is locked, return previous return %s",
2177         gst_element_state_change_return_get_name (ret));
2178     GST_STATE_UNLOCK (element);
2179     return ret;
2180   }
2181 was_busy:
2182   {
2183     GST_DEBUG_OBJECT (element, "element was busy, delaying state change");
2184     GST_OBJECT_UNLOCK (bin);
2185     GST_STATE_UNLOCK (element);
2186     return GST_STATE_CHANGE_ASYNC;
2187   }
2188 unneeded:
2189   {
2190     GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2191         "skipping transition from %s to  %s, since bin pending"
2192         " is %s : last change state return follows",
2193         gst_element_state_get_name (child_current),
2194         gst_element_state_get_name (next),
2195         gst_element_state_get_name (pending));
2196     GST_OBJECT_UNLOCK (bin);
2197     GST_STATE_UNLOCK (element);
2198     return ret;
2199   }
2200 }
2201
2202 /* gst_iterator_fold functions for pads_activate
2203  * Note how we don't stop the iterator when we fail an activation. This is
2204  * probably a FIXME since when one pad activation fails, we don't want to
2205  * continue our state change. */
2206 static gboolean
2207 activate_pads (GstPad * pad, GValue * ret, gboolean * active)
2208 {
2209   if (!gst_pad_set_active (pad, *active))
2210     g_value_set_boolean (ret, FALSE);
2211   else if (!*active)
2212     gst_pad_set_caps (pad, NULL);
2213
2214   /* unref the object that was reffed for us by _fold */
2215   gst_object_unref (pad);
2216   return TRUE;
2217 }
2218
2219 /* returns false on error or early cutout (will never happen because the fold
2220  * function always returns TRUE, see FIXME above) of the fold, true if all
2221  * pads in @iter were (de)activated successfully. */
2222 static gboolean
2223 iterator_activate_fold_with_resync (GstIterator * iter, gpointer user_data)
2224 {
2225   GstIteratorResult ires;
2226   GValue ret = { 0 };
2227
2228   /* no need to unset this later, it's just a boolean */
2229   g_value_init (&ret, G_TYPE_BOOLEAN);
2230   g_value_set_boolean (&ret, TRUE);
2231
2232   while (1) {
2233     ires = gst_iterator_fold (iter, (GstIteratorFoldFunction) activate_pads,
2234         &ret, user_data);
2235     switch (ires) {
2236       case GST_ITERATOR_RESYNC:
2237         /* need to reset the result again */
2238         g_value_set_boolean (&ret, TRUE);
2239         gst_iterator_resync (iter);
2240         break;
2241       case GST_ITERATOR_DONE:
2242         /* all pads iterated, return collected value */
2243         goto done;
2244       default:
2245         /* iterator returned _ERROR or premature end with _OK,
2246          * mark an error and exit */
2247         g_value_set_boolean (&ret, FALSE);
2248         goto done;
2249     }
2250   }
2251 done:
2252   /* return collected value */
2253   return g_value_get_boolean (&ret);
2254 }
2255
2256 /* is called with STATE_LOCK
2257  */
2258 static gboolean
2259 gst_bin_src_pads_activate (GstBin * bin, gboolean active)
2260 {
2261   GstIterator *iter;
2262   gboolean fold_ok;
2263
2264   GST_DEBUG_OBJECT (bin, "src_pads_activate with active %d", active);
2265
2266   iter = gst_element_iterate_src_pads ((GstElement *) bin);
2267   fold_ok = iterator_activate_fold_with_resync (iter, &active);
2268   gst_iterator_free (iter);
2269   if (G_UNLIKELY (!fold_ok))
2270     goto failed;
2271
2272   GST_DEBUG_OBJECT (bin, "pads_activate successful");
2273
2274   return TRUE;
2275
2276   /* ERRORS */
2277 failed:
2278   {
2279     GST_DEBUG_OBJECT (bin, "source pads_activate failed");
2280     return FALSE;
2281   }
2282 }
2283
2284 /**
2285  * gst_bin_recalculate_latency:
2286  * @bin: a #GstBin
2287  *
2288  * Query @bin for the current latency using and reconfigures this latency to all the
2289  * elements with a LATENCY event.
2290  *
2291  * This method is typically called on the pipeline when a #GST_MESSAGE_LATENCY
2292  * is posted on the bus.
2293  *
2294  * This function simply emits the 'do-latency' signal so any custom latency
2295  * calculations will be performed.
2296  *
2297  * Returns: %TRUE if the latency could be queried and reconfigured.
2298  *
2299  * Since: 0.10.22.
2300  */
2301 gboolean
2302 gst_bin_recalculate_latency (GstBin * bin)
2303 {
2304   gboolean res;
2305
2306   g_signal_emit (bin, gst_bin_signals[DO_LATENCY], 0, &res);
2307   GST_DEBUG_OBJECT (bin, "latency returned %d", res);
2308
2309   return res;
2310 }
2311
2312 static gboolean
2313 gst_bin_do_latency_func (GstBin * bin)
2314 {
2315   GstQuery *query;
2316   GstElement *element;
2317   GstClockTime min_latency, max_latency;
2318   gboolean res;
2319
2320   g_return_val_if_fail (GST_IS_BIN (bin), FALSE);
2321
2322   element = GST_ELEMENT_CAST (bin);
2323
2324   GST_DEBUG_OBJECT (element, "querying latency");
2325
2326   query = gst_query_new_latency ();
2327   if ((res = gst_element_query (element, query))) {
2328     gboolean live;
2329
2330     gst_query_parse_latency (query, &live, &min_latency, &max_latency);
2331
2332     GST_DEBUG_OBJECT (element,
2333         "got min latency %" GST_TIME_FORMAT ", max latency %"
2334         GST_TIME_FORMAT ", live %d", GST_TIME_ARGS (min_latency),
2335         GST_TIME_ARGS (max_latency), live);
2336
2337     if (max_latency < min_latency) {
2338       /* this is an impossible situation, some parts of the pipeline might not
2339        * work correctly. We post a warning for now. */
2340       GST_ELEMENT_WARNING (element, CORE, CLOCK, (NULL),
2341           ("Impossible to configure latency: max %" GST_TIME_FORMAT " < min %"
2342               GST_TIME_FORMAT ". Add queues or other buffering elements.",
2343               GST_TIME_ARGS (max_latency), GST_TIME_ARGS (min_latency)));
2344     }
2345
2346     /* configure latency on elements */
2347     res = gst_element_send_event (element, gst_event_new_latency (min_latency));
2348     if (res) {
2349       GST_INFO_OBJECT (element, "configured latency of %" GST_TIME_FORMAT,
2350           GST_TIME_ARGS (min_latency));
2351     } else {
2352       GST_WARNING_OBJECT (element,
2353           "did not really configure latency of %" GST_TIME_FORMAT,
2354           GST_TIME_ARGS (min_latency));
2355     }
2356   } else {
2357     /* this is not a real problem, we just don't configure any latency. */
2358     GST_WARNING_OBJECT (element, "failed to query latency");
2359   }
2360   gst_query_unref (query);
2361
2362   return res;
2363 }
2364
2365 static GstStateChangeReturn
2366 gst_bin_change_state_func (GstElement * element, GstStateChange transition)
2367 {
2368   GstBin *bin;
2369   GstStateChangeReturn ret;
2370   GstState current, next;
2371   gboolean have_async;
2372   gboolean have_no_preroll;
2373   GstClockTime base_time, start_time;
2374   GstIterator *it;
2375   gboolean done;
2376
2377   /* we don't need to take the STATE_LOCK, it is already taken */
2378   current = (GstState) GST_STATE_TRANSITION_CURRENT (transition);
2379   next = (GstState) GST_STATE_TRANSITION_NEXT (transition);
2380
2381   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, element,
2382       "changing state of children from %s to %s",
2383       gst_element_state_get_name (current), gst_element_state_get_name (next));
2384
2385   bin = GST_BIN_CAST (element);
2386
2387   switch (next) {
2388     case GST_STATE_PLAYING:
2389     {
2390       gboolean toplevel;
2391
2392       GST_OBJECT_LOCK (bin);
2393       toplevel = BIN_IS_TOPLEVEL (bin);
2394       GST_OBJECT_UNLOCK (bin);
2395
2396       if (toplevel)
2397         gst_bin_recalculate_latency (bin);
2398       break;
2399     }
2400     case GST_STATE_PAUSED:
2401       /* Clear EOS list on next PAUSED */
2402       GST_OBJECT_LOCK (bin);
2403       GST_DEBUG_OBJECT (element, "clearing EOS elements");
2404       bin_remove_messages (bin, NULL, GST_MESSAGE_EOS);
2405       GST_OBJECT_UNLOCK (bin);
2406       if (current == GST_STATE_READY)
2407         if (!(gst_bin_src_pads_activate (bin, TRUE)))
2408           goto activate_failure;
2409       break;
2410     case GST_STATE_READY:
2411       /* Clear message list on next READY */
2412       GST_OBJECT_LOCK (bin);
2413       GST_DEBUG_OBJECT (element, "clearing all cached messages");
2414       bin_remove_messages (bin, NULL, GST_MESSAGE_ANY);
2415       GST_OBJECT_UNLOCK (bin);
2416       if (current == GST_STATE_PAUSED)
2417         if (!(gst_bin_src_pads_activate (bin, FALSE)))
2418           goto activate_failure;
2419       break;
2420     case GST_STATE_NULL:
2421       if (current == GST_STATE_READY)
2422         if (!(gst_bin_src_pads_activate (bin, FALSE)))
2423           goto activate_failure;
2424       break;
2425     default:
2426       break;
2427   }
2428
2429   /* this flag is used to make the async state changes return immediatly. We
2430    * don't want them to interfere with this state change */
2431   GST_OBJECT_LOCK (bin);
2432   bin->polling = TRUE;
2433   GST_OBJECT_UNLOCK (bin);
2434
2435   /* iterate in state change order */
2436   it = gst_bin_iterate_sorted (bin);
2437
2438   /* mark if we've seen an ASYNC element in the bin when we did a state change.
2439    * Note how we don't reset this value when a resync happens, the reason being
2440    * that the async element posted ASYNC_START and we want to post ASYNC_DONE
2441    * even after a resync when the async element is gone */
2442   have_async = FALSE;
2443
2444 restart:
2445   /* take base_time */
2446   base_time = gst_element_get_base_time (element);
2447   start_time = gst_element_get_start_time (element);
2448
2449   have_no_preroll = FALSE;
2450
2451   done = FALSE;
2452   while (!done) {
2453     gpointer data;
2454
2455     switch (gst_iterator_next (it, &data)) {
2456       case GST_ITERATOR_OK:
2457       {
2458         GstElement *child;
2459
2460         child = GST_ELEMENT_CAST (data);
2461
2462         /* set state and base_time now */
2463         ret = gst_bin_element_set_state (bin, child, base_time, start_time,
2464             current, next);
2465
2466         switch (ret) {
2467           case GST_STATE_CHANGE_SUCCESS:
2468             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2469                 "child '%s' changed state to %d(%s) successfully",
2470                 GST_ELEMENT_NAME (child), next,
2471                 gst_element_state_get_name (next));
2472             break;
2473           case GST_STATE_CHANGE_ASYNC:
2474           {
2475             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2476                 "child '%s' is changing state asynchronously to %s",
2477                 GST_ELEMENT_NAME (child), gst_element_state_get_name (next));
2478             have_async = TRUE;
2479             break;
2480           }
2481           case GST_STATE_CHANGE_FAILURE:{
2482             GstObject *parent;
2483
2484             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2485                 "child '%s' failed to go to state %d(%s)",
2486                 GST_ELEMENT_NAME (child),
2487                 next, gst_element_state_get_name (next));
2488
2489             /* Only fail if the child is still inside
2490              * this bin. It might've been removed already
2491              * because of the error by the bin subclass
2492              * to ignore the error.  */
2493             parent = gst_object_get_parent (GST_OBJECT_CAST (child));
2494             if (parent == GST_OBJECT_CAST (element)) {
2495               /* element is still in bin, really error now */
2496               gst_object_unref (child);
2497               gst_object_unref (parent);
2498               goto done;
2499             }
2500             /* child removed from bin, let the resync code redo the state
2501              * change */
2502             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2503                 "child '%s' was removed from the bin",
2504                 GST_ELEMENT_NAME (child));
2505
2506             if (parent)
2507               gst_object_unref (parent);
2508
2509             break;
2510           }
2511           case GST_STATE_CHANGE_NO_PREROLL:
2512             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2513                 "child '%s' changed state to %d(%s) successfully without preroll",
2514                 GST_ELEMENT_NAME (child), next,
2515                 gst_element_state_get_name (next));
2516             have_no_preroll = TRUE;
2517             break;
2518           default:
2519             g_assert_not_reached ();
2520             break;
2521         }
2522         gst_object_unref (child);
2523         break;
2524       }
2525       case GST_ITERATOR_RESYNC:
2526         GST_CAT_DEBUG (GST_CAT_STATES, "iterator doing resync");
2527         gst_iterator_resync (it);
2528         goto restart;
2529       default:
2530       case GST_ITERATOR_DONE:
2531         GST_CAT_DEBUG (GST_CAT_STATES, "iterator done");
2532         done = TRUE;
2533         break;
2534     }
2535   }
2536
2537   ret = parent_class->change_state (element, transition);
2538   if (G_UNLIKELY (ret == GST_STATE_CHANGE_FAILURE))
2539     goto done;
2540
2541   if (have_no_preroll) {
2542     GST_CAT_DEBUG (GST_CAT_STATES,
2543         "we have NO_PREROLL elements %s -> NO_PREROLL",
2544         gst_element_state_change_return_get_name (ret));
2545     ret = GST_STATE_CHANGE_NO_PREROLL;
2546   } else if (have_async) {
2547     GST_CAT_DEBUG (GST_CAT_STATES, "we have ASYNC elements %s -> ASYNC",
2548         gst_element_state_change_return_get_name (ret));
2549     ret = GST_STATE_CHANGE_ASYNC;
2550   }
2551
2552 done:
2553   gst_iterator_free (it);
2554
2555   GST_OBJECT_LOCK (bin);
2556   bin->polling = FALSE;
2557   /* it's possible that we did not get ASYNC from the children while the bin is
2558    * simulating ASYNC behaviour by posting an ASYNC_DONE message on the bus with
2559    * itself as the source. In that case we still want to check if the state
2560    * change completed. */
2561   if (ret != GST_STATE_CHANGE_ASYNC && !bin->priv->pending_async_done) {
2562     /* no element returned ASYNC and there are no pending async_done messages,
2563      * we can just complete. */
2564     GST_DEBUG_OBJECT (bin, "no async elements");
2565     goto state_end;
2566   }
2567   /* when we get here an ASYNC element was found */
2568   if (GST_STATE_TARGET (bin) <= GST_STATE_READY) {
2569     /* we ignore ASYNC state changes when we go to READY or NULL */
2570     GST_DEBUG_OBJECT (bin, "target state %s <= READY",
2571         gst_element_state_get_name (GST_STATE_TARGET (bin)));
2572     goto state_end;
2573   }
2574
2575   GST_DEBUG_OBJECT (bin, "check async elements");
2576   /* check if all elements managed to commit their state already */
2577   if (!find_message (bin, NULL, GST_MESSAGE_ASYNC_START)) {
2578     /* nothing found, remove all old ASYNC_DONE messages. This can happen when
2579      * all the elements commited their state while we were doing the state
2580      * change. We will still return ASYNC for consistency but we commit the
2581      * state already so that a _get_state() will return immediatly. */
2582     bin_remove_messages (bin, NULL, GST_MESSAGE_ASYNC_DONE);
2583
2584     GST_DEBUG_OBJECT (bin, "async elements commited");
2585     bin_handle_async_done (bin, GST_STATE_CHANGE_SUCCESS, FALSE);
2586   }
2587
2588 state_end:
2589   bin->priv->pending_async_done = FALSE;
2590   GST_OBJECT_UNLOCK (bin);
2591
2592   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, element,
2593       "done changing bin's state from %s to %s, now in %s, ret %s",
2594       gst_element_state_get_name (current),
2595       gst_element_state_get_name (next),
2596       gst_element_state_get_name (GST_STATE (element)),
2597       gst_element_state_change_return_get_name (ret));
2598
2599   return ret;
2600
2601   /* ERRORS */
2602 activate_failure:
2603   {
2604     GST_CAT_WARNING_OBJECT (GST_CAT_STATES, element,
2605         "failure (de)activating src pads");
2606     return GST_STATE_CHANGE_FAILURE;
2607   }
2608 }
2609
2610 /*
2611  * This function is a utility event handler for seek events.
2612  * It will send the event to all sinks or sources depending on the
2613  * event-direction.
2614  *
2615  * Applications are free to override this behaviour and
2616  * implement their own seek handler, but this will work for
2617  * pretty much all cases in practice.
2618  */
2619 static gboolean
2620 gst_bin_send_event (GstElement * element, GstEvent * event)
2621 {
2622   GstBin *bin = GST_BIN_CAST (element);
2623   GstIterator *iter;
2624   gboolean res = TRUE;
2625   gboolean done = FALSE;
2626
2627   if (GST_EVENT_IS_DOWNSTREAM (event)) {
2628     iter = gst_bin_iterate_sources (bin);
2629     GST_DEBUG_OBJECT (bin, "Sending %s event to src children",
2630         GST_EVENT_TYPE_NAME (event));
2631   } else {
2632     iter = gst_bin_iterate_sinks (bin);
2633     GST_DEBUG_OBJECT (bin, "Sending %s event to sink children",
2634         GST_EVENT_TYPE_NAME (event));
2635   }
2636
2637   while (!done) {
2638     gpointer data;
2639
2640     switch (gst_iterator_next (iter, &data)) {
2641       case GST_ITERATOR_OK:
2642       {
2643         GstElement *child;
2644
2645         gst_event_ref (event);
2646         child = GST_ELEMENT_CAST (data);
2647         res &= gst_element_send_event (child, event);
2648         gst_object_unref (child);
2649         break;
2650       }
2651       case GST_ITERATOR_RESYNC:
2652         gst_iterator_resync (iter);
2653         res = TRUE;
2654         break;
2655       case GST_ITERATOR_DONE:
2656         done = TRUE;
2657         break;
2658       case GST_ITERATOR_ERROR:
2659         g_assert_not_reached ();
2660         break;
2661     }
2662   }
2663   gst_iterator_free (iter);
2664   gst_event_unref (event);
2665
2666   return res;
2667 }
2668
2669 /* this is the function called by the threadpool. When async elements commit
2670  * their state, this function will attempt to bring the bin to the next state.
2671  */
2672 static void
2673 gst_bin_continue_func (BinContinueData * data)
2674 {
2675   GstBin *bin;
2676   GstState current, next, pending;
2677   GstStateChange transition;
2678
2679   bin = data->bin;
2680   pending = data->pending;
2681
2682   GST_DEBUG_OBJECT (bin, "waiting for state lock");
2683   GST_STATE_LOCK (bin);
2684
2685   GST_DEBUG_OBJECT (bin, "doing state continue");
2686   GST_OBJECT_LOCK (bin);
2687
2688   /* if a new state change happened after this thread was scheduled, we return
2689    * immediatly. */
2690   if (data->cookie != GST_ELEMENT_CAST (bin)->state_cookie)
2691     goto interrupted;
2692
2693   current = GST_STATE (bin);
2694   next = GST_STATE_GET_NEXT (current, pending);
2695   transition = (GstStateChange) GST_STATE_TRANSITION (current, next);
2696
2697   GST_STATE_NEXT (bin) = next;
2698   GST_STATE_PENDING (bin) = pending;
2699   /* mark busy */
2700   GST_STATE_RETURN (bin) = GST_STATE_CHANGE_ASYNC;
2701   GST_OBJECT_UNLOCK (bin);
2702
2703   GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
2704       "continue state change %s to %s, final %s",
2705       gst_element_state_get_name (current),
2706       gst_element_state_get_name (next), gst_element_state_get_name (pending));
2707
2708   gst_element_change_state (GST_ELEMENT_CAST (bin), transition);
2709
2710   GST_STATE_UNLOCK (bin);
2711   GST_DEBUG_OBJECT (bin, "state continue done");
2712   gst_object_unref (bin);
2713   g_slice_free (BinContinueData, data);
2714   return;
2715
2716 interrupted:
2717   {
2718     GST_OBJECT_UNLOCK (bin);
2719     GST_STATE_UNLOCK (bin);
2720     GST_DEBUG_OBJECT (bin, "state continue aborted due to intervening change");
2721     gst_object_unref (bin);
2722     g_slice_free (BinContinueData, data);
2723     return;
2724   }
2725 }
2726
2727 static GstBusSyncReply
2728 bin_bus_handler (GstBus * bus, GstMessage * message, GstBin * bin)
2729 {
2730   GstBinClass *bclass;
2731
2732   bclass = GST_BIN_GET_CLASS (bin);
2733   if (bclass->handle_message)
2734     bclass->handle_message (bin, message);
2735   else
2736     gst_message_unref (message);
2737
2738   return GST_BUS_DROP;
2739 }
2740
2741 static void
2742 bin_push_state_continue (BinContinueData * data)
2743 {
2744   GstBinClass *klass;
2745   GstBin *bin;
2746
2747   /* ref was taken */
2748   bin = data->bin;
2749   klass = GST_BIN_GET_CLASS (bin);
2750
2751   GST_DEBUG_OBJECT (bin, "pushing continue on thread pool");
2752   g_thread_pool_push (klass->pool, data, NULL);
2753 }
2754
2755 /* an element started an async state change, if we were not busy with a state
2756  * change, we perform a lost state.
2757  * This function is called with the OBJECT lock.
2758  */
2759 static void
2760 bin_handle_async_start (GstBin * bin, gboolean new_base_time)
2761 {
2762   GstState old_state, new_state;
2763   gboolean toplevel;
2764   GstMessage *amessage = NULL;
2765
2766   if (GST_STATE_RETURN (bin) == GST_STATE_CHANGE_FAILURE)
2767     goto had_error;
2768
2769   /* get our toplevel state */
2770   toplevel = BIN_IS_TOPLEVEL (bin);
2771
2772   /* prepare an ASYNC_START message, we always post the start message even if we
2773    * are busy with a state change or when we are NO_PREROLL. */
2774   if (!toplevel)
2775     /* non toplevel bin, prepare async-start for the parent */
2776     amessage =
2777         gst_message_new_async_start (GST_OBJECT_CAST (bin), new_base_time);
2778
2779   if (bin->polling || GST_STATE_PENDING (bin) != GST_STATE_VOID_PENDING)
2780     goto was_busy;
2781
2782   /* async starts are ignored when we are NO_PREROLL */
2783   if (GST_STATE_RETURN (bin) == GST_STATE_CHANGE_NO_PREROLL)
2784     goto was_no_preroll;
2785
2786   old_state = GST_STATE (bin);
2787
2788   /* when we PLAYING we go back to PAUSED, when preroll happens, we go back to
2789    * PLAYING after optionally redistributing the base_time. */
2790   if (old_state > GST_STATE_PAUSED)
2791     new_state = GST_STATE_PAUSED;
2792   else
2793     new_state = old_state;
2794
2795   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin,
2796       "lost state of %s, new %s", gst_element_state_get_name (old_state),
2797       gst_element_state_get_name (new_state));
2798
2799   GST_STATE (bin) = new_state;
2800   GST_STATE_NEXT (bin) = new_state;
2801   GST_STATE_PENDING (bin) = new_state;
2802   GST_STATE_RETURN (bin) = GST_STATE_CHANGE_ASYNC;
2803   GST_OBJECT_UNLOCK (bin);
2804
2805   /* post message */
2806   gst_element_post_message (GST_ELEMENT_CAST (bin),
2807       gst_message_new_state_changed (GST_OBJECT_CAST (bin),
2808           new_state, new_state, new_state));
2809
2810 post_start:
2811   if (amessage) {
2812     /* post our ASYNC_START. */
2813     GST_DEBUG_OBJECT (bin, "posting ASYNC_START to parent");
2814     gst_element_post_message (GST_ELEMENT_CAST (bin), amessage);
2815   }
2816   GST_OBJECT_LOCK (bin);
2817
2818   return;
2819
2820 had_error:
2821   {
2822     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "we had an error");
2823     return;
2824   }
2825 was_busy:
2826   {
2827     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "state change busy");
2828     GST_OBJECT_UNLOCK (bin);
2829     goto post_start;
2830   }
2831 was_no_preroll:
2832   {
2833     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "ignoring, we are NO_PREROLL");
2834     GST_OBJECT_UNLOCK (bin);
2835     goto post_start;
2836   }
2837 }
2838
2839 /* this function is called when there are no more async elements in the bin. We
2840  * post a state changed message and an ASYNC_DONE message.
2841  * This function is called with the OBJECT lock.
2842  */
2843 static void
2844 bin_handle_async_done (GstBin * bin, GstStateChangeReturn ret,
2845     gboolean flag_pending)
2846 {
2847   GstState current, pending, target;
2848   GstStateChangeReturn old_ret;
2849   GstState old_state, old_next;
2850   gboolean toplevel;
2851   GstMessage *smessage = NULL, *amessage = NULL;
2852   BinContinueData *cont = NULL;
2853
2854   if (GST_STATE_RETURN (bin) == GST_STATE_CHANGE_FAILURE)
2855     goto had_error;
2856
2857   pending = GST_STATE_PENDING (bin);
2858
2859   if (bin->polling)
2860     goto was_busy;
2861
2862   /* check if there is something to commit */
2863   if (pending == GST_STATE_VOID_PENDING)
2864     goto nothing_pending;
2865
2866   old_ret = GST_STATE_RETURN (bin);
2867   GST_STATE_RETURN (bin) = ret;
2868
2869   /* move to the next target state */
2870   target = GST_STATE_TARGET (bin);
2871   pending = GST_STATE_PENDING (bin) = target;
2872
2873   amessage = gst_message_new_async_done (GST_OBJECT_CAST (bin));
2874
2875   old_state = GST_STATE (bin);
2876   /* this is the state we should go to next */
2877   old_next = GST_STATE_NEXT (bin);
2878
2879   if (old_next != GST_STATE_PLAYING) {
2880     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
2881         "committing state from %s to %s, old pending %s",
2882         gst_element_state_get_name (old_state),
2883         gst_element_state_get_name (old_next),
2884         gst_element_state_get_name (pending));
2885
2886     /* update current state */
2887     current = GST_STATE (bin) = old_next;
2888   } else {
2889     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
2890         "setting state from %s to %s, pending %s",
2891         gst_element_state_get_name (old_state),
2892         gst_element_state_get_name (old_state),
2893         gst_element_state_get_name (pending));
2894     current = old_state;
2895   }
2896
2897   /* get our toplevel state */
2898   toplevel = BIN_IS_TOPLEVEL (bin);
2899
2900   /* see if we reached the final state. If we are not toplevel, we also have to
2901    * stop here, the parent will continue our state. */
2902   if ((pending == current) || !toplevel) {
2903     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
2904         "completed state change, pending VOID");
2905
2906     /* mark VOID pending */
2907     pending = GST_STATE_VOID_PENDING;
2908     GST_STATE_PENDING (bin) = pending;
2909     GST_STATE_NEXT (bin) = GST_STATE_VOID_PENDING;
2910   } else {
2911     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
2912         "continue state change, pending %s",
2913         gst_element_state_get_name (pending));
2914
2915     cont = g_slice_new (BinContinueData);
2916
2917     /* ref to the bin */
2918     cont->bin = gst_object_ref (bin);
2919     /* cookie to detect concurrent state change */
2920     cont->cookie = GST_ELEMENT_CAST (bin)->state_cookie;
2921     /* pending target state */
2922     cont->pending = pending;
2923     /* mark busy */
2924     GST_STATE_RETURN (bin) = GST_STATE_CHANGE_ASYNC;
2925     GST_STATE_NEXT (bin) = GST_STATE_GET_NEXT (old_state, pending);
2926   }
2927
2928   if (old_next != GST_STATE_PLAYING) {
2929     if (old_state != old_next || old_ret == GST_STATE_CHANGE_ASYNC) {
2930       smessage = gst_message_new_state_changed (GST_OBJECT_CAST (bin),
2931           old_state, old_next, pending);
2932     }
2933   }
2934   GST_OBJECT_UNLOCK (bin);
2935
2936   if (smessage) {
2937     GST_DEBUG_OBJECT (bin, "posting state change message");
2938     gst_element_post_message (GST_ELEMENT_CAST (bin), smessage);
2939   }
2940   if (amessage) {
2941     /* post our combined ASYNC_DONE when all is ASYNC_DONE. */
2942     GST_DEBUG_OBJECT (bin, "posting ASYNC_DONE to parent");
2943     gst_element_post_message (GST_ELEMENT_CAST (bin), amessage);
2944   }
2945
2946   GST_OBJECT_LOCK (bin);
2947   if (cont) {
2948     /* toplevel, start continue state */
2949     GST_DEBUG_OBJECT (bin, "all async-done, starting state continue");
2950     bin_push_state_continue (cont);
2951   } else {
2952     GST_DEBUG_OBJECT (bin, "state change complete");
2953     GST_STATE_BROADCAST (bin);
2954   }
2955   return;
2956
2957 had_error:
2958   {
2959     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "we had an error");
2960     return;
2961   }
2962 was_busy:
2963   {
2964     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "state change busy");
2965     /* if we were busy with a state change and we are requested to flag a
2966      * pending async done, we do so here */
2967     if (flag_pending)
2968       bin->priv->pending_async_done = TRUE;
2969     return;
2970   }
2971 nothing_pending:
2972   {
2973     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin, "nothing pending");
2974     return;
2975   }
2976 }
2977
2978 /* must be called with the object lock. This function releases the lock to post
2979  * the message. */
2980 static void
2981 bin_do_message_forward (GstBin * bin, GstMessage * message)
2982 {
2983   if (bin->priv->message_forward) {
2984     GstMessage *forwarded;
2985
2986     GST_DEBUG_OBJECT (bin, "pass %s message upward",
2987         GST_MESSAGE_TYPE_NAME (message));
2988     GST_OBJECT_UNLOCK (bin);
2989
2990     /* we need to convert these messages to element messages so that our parent
2991      * bin can easily ignore them and so that the application can easily
2992      * distinguish between the internally forwarded and the real messages. */
2993     forwarded = gst_message_new_element (GST_OBJECT_CAST (bin),
2994         gst_structure_new ("GstBinForwarded",
2995             "message", GST_TYPE_MESSAGE, message, NULL));
2996
2997     gst_element_post_message (GST_ELEMENT_CAST (bin), forwarded);
2998
2999     GST_OBJECT_LOCK (bin);
3000   }
3001 }
3002
3003 /* handle child messages:
3004  *
3005  * This method is called synchronously when a child posts a message on
3006  * the internal bus.
3007  *
3008  * GST_MESSAGE_EOS: This message is only posted by sinks
3009  *     in the PLAYING state. If all sinks posted the EOS message, post
3010  *     one upwards.
3011  *
3012  * GST_MESSAGE_STATE_DIRTY: Deprecated
3013  *
3014  * GST_MESSAGE_SEGMENT_START: just collect, never forward upwards. If an
3015  *     element posts segment_start twice, only the last message is kept.
3016  *
3017  * GST_MESSAGE_SEGMENT_DONE: replace SEGMENT_START message from same poster
3018  *     with the segment_done message. If there are no more segment_start
3019  *     messages, post segment_done message upwards.
3020  *
3021  * GST_MESSAGE_DURATION: remove all previously cached duration messages.
3022  *     Whenever someone performs a duration query on the bin, we store the
3023  *     result so we can answer it quicker the next time. Any element that
3024  *     changes its duration marks our cached values invalid.
3025  *     This message is also posted upwards. This is currently disabled
3026  *     because too many elements don't post DURATION messages when the
3027  *     duration changes.
3028  *
3029  * GST_MESSAGE_CLOCK_LOST: This message is posted by an element when it
3030  *     can no longer provide a clock. The default bin behaviour is to
3031  *     check if the lost clock was the one provided by the bin. If so and
3032  *     we are currently in the PLAYING state, we forward the message to
3033  *     our parent.
3034  *     This message is also generated when we remove a clock provider from
3035  *     a bin. If this message is received by the application, it should
3036  *     PAUSE the pipeline and set it back to PLAYING to force a new clock
3037  *     and a new base_time distribution.
3038  *
3039  * GST_MESSAGE_CLOCK_PROVIDE: This message is generated when an element
3040  *     can provide a clock. This mostly happens when we add a new clock
3041  *     provider to the bin. The default behaviour of the bin is to mark the
3042  *     currently selected clock as dirty, which will perform a clock
3043  *     recalculation the next time we are asked to provide a clock.
3044  *     This message is never sent to the application but is forwarded to
3045  *     the parent.
3046  *
3047  * GST_MESSAGE_ASYNC_START: Create an internal ELEMENT message that stores
3048  *     the state of the element and the fact that the element will need a
3049  *     new base_time. This message is not forwarded to the application.
3050  *
3051  * GST_MESSAGE_ASYNC_DONE: Find the internal ELEMENT message we kept for the
3052  *     element when it posted ASYNC_START. If all elements are done, post a
3053  *     ASYNC_DONE message to the parent.
3054  *
3055  * OTHER: post upwards.
3056  */
3057 static void
3058 gst_bin_handle_message_func (GstBin * bin, GstMessage * message)
3059 {
3060   GstObject *src;
3061   GstMessageType type;
3062   GstMessage *tmessage;
3063   guint32 seqnum;
3064
3065   src = GST_MESSAGE_SRC (message);
3066   type = GST_MESSAGE_TYPE (message);
3067
3068   GST_DEBUG_OBJECT (bin, "[msg %p] handling child %s message of type %s",
3069       message, src ? GST_ELEMENT_NAME (src) : "(NULL)",
3070       GST_MESSAGE_TYPE_NAME (message));
3071
3072   switch (type) {
3073     case GST_MESSAGE_ERROR:
3074     {
3075       GST_OBJECT_LOCK (bin);
3076       /* flag error */
3077       GST_DEBUG_OBJECT (bin, "got ERROR message, unlocking state change");
3078       GST_STATE_RETURN (bin) = GST_STATE_CHANGE_FAILURE;
3079       GST_STATE_BROADCAST (bin);
3080       GST_OBJECT_UNLOCK (bin);
3081
3082       goto forward;
3083     }
3084     case GST_MESSAGE_EOS:
3085     {
3086       gboolean eos;
3087
3088       /* collect all eos messages from the children */
3089       GST_OBJECT_LOCK (bin);
3090       bin_do_message_forward (bin, message);
3091       /* ref message for future use  */
3092       gst_message_ref (message);
3093       bin_replace_message (bin, message, GST_MESSAGE_EOS);
3094       eos = is_eos (bin);
3095       GST_OBJECT_UNLOCK (bin);
3096
3097       /* if we are completely EOS, we forward an EOS message */
3098       if (eos) {
3099         seqnum = gst_message_get_seqnum (message);
3100         tmessage = gst_message_new_eos (GST_OBJECT_CAST (bin));
3101         gst_message_set_seqnum (tmessage, seqnum);
3102
3103         GST_DEBUG_OBJECT (bin,
3104             "all sinks posted EOS, posting seqnum #%" G_GUINT32_FORMAT, seqnum);
3105         gst_element_post_message (GST_ELEMENT_CAST (bin), tmessage);
3106       }
3107       gst_message_unref (message);
3108       break;
3109     }
3110     case GST_MESSAGE_STATE_DIRTY:
3111     {
3112       GST_WARNING_OBJECT (bin, "received deprecated STATE_DIRTY message");
3113
3114       /* free message */
3115       gst_message_unref (message);
3116       break;
3117     }
3118     case GST_MESSAGE_SEGMENT_START:{
3119       gboolean post = FALSE;
3120       GstFormat format;
3121       gint64 position;
3122
3123       gst_message_parse_segment_start (message, &format, &position);
3124       seqnum = gst_message_get_seqnum (message);
3125
3126       GST_OBJECT_LOCK (bin);
3127       bin_do_message_forward (bin, message);
3128       /* if this is the first segment-start, post to parent but not to the
3129        * application */
3130       if (!find_message (bin, NULL, GST_MESSAGE_SEGMENT_START) &&
3131           (GST_OBJECT_PARENT (bin) != NULL)) {
3132         post = TRUE;
3133       }
3134       /* replace any previous segment_start message from this source
3135        * with the new segment start message */
3136       bin_replace_message (bin, message, GST_MESSAGE_SEGMENT_START);
3137       GST_OBJECT_UNLOCK (bin);
3138       if (post) {
3139         tmessage = gst_message_new_segment_start (GST_OBJECT_CAST (bin),
3140             format, position);
3141         gst_message_set_seqnum (tmessage, seqnum);
3142
3143         /* post segment start with initial format and position. */
3144         GST_DEBUG_OBJECT (bin, "posting SEGMENT_START (%u) bus message: %p",
3145             seqnum, message);
3146         gst_element_post_message (GST_ELEMENT_CAST (bin), tmessage);
3147       }
3148       break;
3149     }
3150     case GST_MESSAGE_SEGMENT_DONE:
3151     {
3152       gboolean post = FALSE;
3153       GstFormat format;
3154       gint64 position;
3155
3156       gst_message_parse_segment_done (message, &format, &position);
3157       seqnum = gst_message_get_seqnum (message);
3158
3159       GST_OBJECT_LOCK (bin);
3160       bin_do_message_forward (bin, message);
3161       bin_replace_message (bin, message, GST_MESSAGE_SEGMENT_START);
3162       /* if there are no more segment_start messages, everybody posted
3163        * a segment_done and we can post one on the bus. */
3164
3165       /* we don't care who still has a pending segment start */
3166       if (!find_message (bin, NULL, GST_MESSAGE_SEGMENT_START)) {
3167         /* nothing found */
3168         post = TRUE;
3169         /* remove all old segment_done messages */
3170         bin_remove_messages (bin, NULL, GST_MESSAGE_SEGMENT_DONE);
3171       }
3172       GST_OBJECT_UNLOCK (bin);
3173       if (post) {
3174         tmessage = gst_message_new_segment_done (GST_OBJECT_CAST (bin),
3175             format, position);
3176         gst_message_set_seqnum (tmessage, seqnum);
3177
3178         /* post segment done with latest format and position. */
3179         GST_DEBUG_OBJECT (bin, "posting SEGMENT_DONE (%u) bus message: %p",
3180             seqnum, message);
3181         gst_element_post_message (GST_ELEMENT_CAST (bin), tmessage);
3182       }
3183       break;
3184     }
3185     case GST_MESSAGE_DURATION:
3186     {
3187       /* remove all cached duration messages, next time somebody asks
3188        * for duration, we will recalculate. */
3189       GST_OBJECT_LOCK (bin);
3190       bin_remove_messages (bin, NULL, GST_MESSAGE_DURATION);
3191       GST_OBJECT_UNLOCK (bin);
3192       goto forward;
3193     }
3194     case GST_MESSAGE_CLOCK_LOST:
3195     {
3196       GstClock **provided_clock_p;
3197       GstElement **clock_provider_p;
3198       gboolean playing, provided, forward;
3199       GstClock *clock;
3200
3201       gst_message_parse_clock_lost (message, &clock);
3202
3203       GST_OBJECT_LOCK (bin);
3204       bin->clock_dirty = TRUE;
3205       /* if we lost the clock that we provided, post to parent but
3206        * only if we are PLAYING. */
3207       provided = (clock == bin->provided_clock);
3208       playing = (GST_STATE (bin) == GST_STATE_PLAYING);
3209       forward = playing & provided;
3210       if (provided) {
3211         GST_DEBUG_OBJECT (bin,
3212             "Lost clock %" GST_PTR_FORMAT " provided by %" GST_PTR_FORMAT,
3213             bin->provided_clock, bin->clock_provider);
3214         provided_clock_p = &bin->provided_clock;
3215         clock_provider_p = &bin->clock_provider;
3216         gst_object_replace ((GstObject **) provided_clock_p, NULL);
3217         gst_object_replace ((GstObject **) clock_provider_p, NULL);
3218       }
3219       GST_DEBUG_OBJECT (bin, "provided %d, playing %d, forward %d",
3220           provided, playing, forward);
3221       GST_OBJECT_UNLOCK (bin);
3222
3223       if (forward)
3224         goto forward;
3225
3226       /* free message */
3227       gst_message_unref (message);
3228       break;
3229     }
3230     case GST_MESSAGE_CLOCK_PROVIDE:
3231     {
3232       gboolean forward;
3233
3234       GST_OBJECT_LOCK (bin);
3235       bin->clock_dirty = TRUE;
3236       /* a new clock is available, post to parent but not
3237        * to the application */
3238       forward = GST_OBJECT_PARENT (bin) != NULL;
3239       GST_OBJECT_UNLOCK (bin);
3240
3241       if (forward)
3242         goto forward;
3243
3244       /* free message */
3245       gst_message_unref (message);
3246       break;
3247     }
3248     case GST_MESSAGE_ASYNC_START:
3249     {
3250       gboolean new_base_time;
3251       GstState target;
3252
3253       GST_DEBUG_OBJECT (bin, "ASYNC_START message %p, %s", message,
3254           src ? GST_OBJECT_NAME (src) : "(NULL)");
3255
3256       gst_message_parse_async_start (message, &new_base_time);
3257
3258       GST_OBJECT_LOCK (bin);
3259       bin_do_message_forward (bin, message);
3260
3261       /* we ignore the message if we are going to <= READY */
3262       if ((target = GST_STATE_TARGET (bin)) <= GST_STATE_READY)
3263         goto ignore_start_message;
3264
3265       /* takes ownership of the message */
3266       bin_replace_message (bin, message, GST_MESSAGE_ASYNC_START);
3267
3268       bin_handle_async_start (bin, new_base_time);
3269       GST_OBJECT_UNLOCK (bin);
3270       break;
3271
3272     ignore_start_message:
3273       {
3274         GST_DEBUG_OBJECT (bin, "ignoring message, target %s",
3275             gst_element_state_get_name (target));
3276         GST_OBJECT_UNLOCK (bin);
3277         gst_message_unref (message);
3278         break;
3279       }
3280     }
3281     case GST_MESSAGE_ASYNC_DONE:
3282     {
3283       GstState target;
3284
3285       GST_DEBUG_OBJECT (bin, "ASYNC_DONE message %p, %s", message,
3286           src ? GST_OBJECT_NAME (src) : "(NULL)");
3287
3288       GST_OBJECT_LOCK (bin);
3289       bin_do_message_forward (bin, message);
3290
3291       /* ignore messages if we are shutting down */
3292       if ((target = GST_STATE_TARGET (bin)) <= GST_STATE_READY)
3293         goto ignore_done_message;
3294
3295       bin_replace_message (bin, message, GST_MESSAGE_ASYNC_START);
3296       /* if there are no more ASYNC_START messages, everybody posted
3297        * a ASYNC_DONE and we can post one on the bus. When checking, we
3298        * don't care who still has a pending ASYNC_START */
3299       if (!find_message (bin, NULL, GST_MESSAGE_ASYNC_START)) {
3300         /* nothing found, remove all old ASYNC_DONE messages */
3301         bin_remove_messages (bin, NULL, GST_MESSAGE_ASYNC_DONE);
3302
3303         GST_DEBUG_OBJECT (bin, "async elements commited");
3304         /* when we get an async done message when a state change was busy, we
3305          * need to set the pending_done flag so that at the end of the state
3306          * change we can see if we need to verify pending async elements, hence
3307          * the TRUE argument here. */
3308         bin_handle_async_done (bin, GST_STATE_CHANGE_SUCCESS, TRUE);
3309       } else {
3310         GST_DEBUG_OBJECT (bin, "there are more async elements pending");
3311       }
3312       GST_OBJECT_UNLOCK (bin);
3313       break;
3314
3315     ignore_done_message:
3316       {
3317         GST_DEBUG_OBJECT (bin, "ignoring message, target %s",
3318             gst_element_state_get_name (target));
3319         GST_OBJECT_UNLOCK (bin);
3320         gst_message_unref (message);
3321         break;
3322       }
3323     }
3324     case GST_MESSAGE_STRUCTURE_CHANGE:
3325     {
3326       gboolean busy;
3327
3328       gst_message_parse_structure_change (message, NULL, NULL, &busy);
3329
3330       GST_OBJECT_LOCK (bin);
3331       if (busy) {
3332         /* while the pad is busy, avoid following it when doing state changes.
3333          * Don't update the cookie yet, we will do that after the structure
3334          * change finished and we are ready to inspect the new updated
3335          * structure. */
3336         bin_replace_message (bin, message, GST_MESSAGE_STRUCTURE_CHANGE);
3337         message = NULL;
3338       } else {
3339         /* a pad link/unlink ended, signal the state change iterator that we
3340          * need to resync by updating the structure_cookie. */
3341         bin_remove_messages (bin, GST_MESSAGE_SRC (message),
3342             GST_MESSAGE_STRUCTURE_CHANGE);
3343         bin->priv->structure_cookie++;
3344       }
3345       GST_OBJECT_UNLOCK (bin);
3346
3347       if (message)
3348         gst_message_unref (message);
3349
3350       break;
3351     }
3352     default:
3353       goto forward;
3354   }
3355   return;
3356
3357 forward:
3358   {
3359     /* Send all other messages upward */
3360     GST_DEBUG_OBJECT (bin, "posting message upward");
3361     gst_element_post_message (GST_ELEMENT_CAST (bin), message);
3362     return;
3363   }
3364 }
3365
3366 /* generic struct passed to all query fold methods */
3367 typedef struct
3368 {
3369   GstQuery *query;
3370   gint64 min;
3371   gint64 max;
3372   gboolean live;
3373 } QueryFold;
3374
3375 typedef void (*QueryInitFunction) (GstBin * bin, QueryFold * fold);
3376 typedef void (*QueryDoneFunction) (GstBin * bin, QueryFold * fold);
3377
3378 /* for duration/position we collect all durations/positions and take
3379  * the MAX of all valid results */
3380 static void
3381 bin_query_min_max_init (GstBin * bin, QueryFold * fold)
3382 {
3383   fold->min = 0;
3384   fold->max = -1;
3385   fold->live = FALSE;
3386 }
3387
3388 static gboolean
3389 bin_query_duration_fold (GstElement * item, GValue * ret, QueryFold * fold)
3390 {
3391   if (gst_element_query (item, fold->query)) {
3392     gint64 duration;
3393
3394     g_value_set_boolean (ret, TRUE);
3395
3396     gst_query_parse_duration (fold->query, NULL, &duration);
3397
3398     GST_DEBUG_OBJECT (item, "got duration %" G_GINT64_FORMAT, duration);
3399
3400     if (duration > fold->max)
3401       fold->max = duration;
3402   }
3403
3404   gst_object_unref (item);
3405   return TRUE;
3406 }
3407
3408 static void
3409 bin_query_duration_done (GstBin * bin, QueryFold * fold)
3410 {
3411   GstFormat format;
3412
3413   gst_query_parse_duration (fold->query, &format, NULL);
3414   /* store max in query result */
3415   gst_query_set_duration (fold->query, format, fold->max);
3416
3417   GST_DEBUG_OBJECT (bin, "max duration %" G_GINT64_FORMAT, fold->max);
3418
3419 #ifdef DURATION_CACHING
3420   /* and cache now */
3421   GST_OBJECT_LOCK (bin);
3422   bin->messages = g_list_prepend (bin->messages,
3423       gst_message_new_duration (GST_OBJECT_CAST (bin), format, fold->max));
3424   GST_OBJECT_UNLOCK (bin);
3425 #endif
3426 }
3427
3428 static gboolean
3429 bin_query_position_fold (GstElement * item, GValue * ret, QueryFold * fold)
3430 {
3431   if (gst_element_query (item, fold->query)) {
3432     gint64 position;
3433
3434     g_value_set_boolean (ret, TRUE);
3435
3436     gst_query_parse_position (fold->query, NULL, &position);
3437
3438     GST_DEBUG_OBJECT (item, "got position %" G_GINT64_FORMAT, position);
3439
3440     if (position > fold->max)
3441       fold->max = position;
3442   }
3443
3444   gst_object_unref (item);
3445   return TRUE;
3446 }
3447
3448 static void
3449 bin_query_position_done (GstBin * bin, QueryFold * fold)
3450 {
3451   GstFormat format;
3452
3453   gst_query_parse_position (fold->query, &format, NULL);
3454   /* store max in query result */
3455   gst_query_set_position (fold->query, format, fold->max);
3456
3457   GST_DEBUG_OBJECT (bin, "max position %" G_GINT64_FORMAT, fold->max);
3458 }
3459
3460 static gboolean
3461 bin_query_latency_fold (GstElement * item, GValue * ret, QueryFold * fold)
3462 {
3463   if (gst_element_query (item, fold->query)) {
3464     GstClockTime min, max;
3465     gboolean live;
3466
3467     gst_query_parse_latency (fold->query, &live, &min, &max);
3468
3469     GST_DEBUG_OBJECT (item,
3470         "got latency min %" GST_TIME_FORMAT ", max %" GST_TIME_FORMAT
3471         ", live %d", GST_TIME_ARGS (min), GST_TIME_ARGS (max), live);
3472
3473     /* for the combined latency we collect the MAX of all min latencies and
3474      * the MIN of all max latencies */
3475     if (live) {
3476       if (min > fold->min)
3477         fold->min = min;
3478       if (fold->max == -1)
3479         fold->max = max;
3480       else if (max < fold->max)
3481         fold->max = max;
3482       if (fold->live == FALSE)
3483         fold->live = live;
3484     }
3485   } else {
3486     g_value_set_boolean (ret, FALSE);
3487     GST_DEBUG_OBJECT (item, "failed query");
3488   }
3489
3490   gst_object_unref (item);
3491   return TRUE;
3492 }
3493
3494 static void
3495 bin_query_latency_done (GstBin * bin, QueryFold * fold)
3496 {
3497   /* store max in query result */
3498   gst_query_set_latency (fold->query, fold->live, fold->min, fold->max);
3499
3500   GST_DEBUG_OBJECT (bin,
3501       "latency min %" GST_TIME_FORMAT ", max %" GST_TIME_FORMAT
3502       ", live %d", GST_TIME_ARGS (fold->min), GST_TIME_ARGS (fold->max),
3503       fold->live);
3504 }
3505
3506 /* generic fold, return first valid result */
3507 static gboolean
3508 bin_query_generic_fold (GstElement * item, GValue * ret, QueryFold * fold)
3509 {
3510   gboolean res;
3511
3512   if ((res = gst_element_query (item, fold->query))) {
3513     g_value_set_boolean (ret, TRUE);
3514     GST_DEBUG_OBJECT (item, "answered query %p", fold->query);
3515   }
3516
3517   gst_object_unref (item);
3518
3519   /* and stop as soon as we have a valid result */
3520   return !res;
3521 }
3522
3523 static gboolean
3524 gst_bin_query (GstElement * element, GstQuery * query)
3525 {
3526   GstBin *bin = GST_BIN_CAST (element);
3527   GstIterator *iter;
3528   gboolean res = FALSE;
3529   GstIteratorFoldFunction fold_func;
3530   QueryInitFunction fold_init = NULL;
3531   QueryDoneFunction fold_done = NULL;
3532   QueryFold fold_data;
3533   GValue ret = { 0 };
3534
3535   switch (GST_QUERY_TYPE (query)) {
3536     case GST_QUERY_DURATION:
3537     {
3538 #ifdef DURATION_CACHING
3539       GList *cached;
3540       GstFormat qformat;
3541
3542       gst_query_parse_duration (query, &qformat, NULL);
3543
3544       /* find cached duration query */
3545       GST_OBJECT_LOCK (bin);
3546       for (cached = bin->messages; cached; cached = g_list_next (cached)) {
3547         GstMessage *message = (GstMessage *) cached->data;
3548
3549         if (GST_MESSAGE_TYPE (message) == GST_MESSAGE_DURATION &&
3550             GST_MESSAGE_SRC (message) == GST_OBJECT_CAST (bin)) {
3551           GstFormat format;
3552           gint64 duration;
3553
3554           gst_message_parse_duration (message, &format, &duration);
3555
3556           /* if cached same format, copy duration in query result */
3557           if (format == qformat) {
3558             GST_DEBUG_OBJECT (bin, "return cached duration %" G_GINT64_FORMAT,
3559                 duration);
3560             GST_OBJECT_UNLOCK (bin);
3561
3562             gst_query_set_duration (query, qformat, duration);
3563             res = TRUE;
3564             goto exit;
3565           }
3566         }
3567       }
3568       GST_OBJECT_UNLOCK (bin);
3569 #endif
3570       /* no cached value found, iterate and collect durations */
3571       fold_func = (GstIteratorFoldFunction) bin_query_duration_fold;
3572       fold_init = bin_query_min_max_init;
3573       fold_done = bin_query_duration_done;
3574       break;
3575     }
3576     case GST_QUERY_POSITION:
3577     {
3578       fold_func = (GstIteratorFoldFunction) bin_query_position_fold;
3579       fold_init = bin_query_min_max_init;
3580       fold_done = bin_query_position_done;
3581       break;
3582     }
3583     case GST_QUERY_LATENCY:
3584     {
3585       fold_func = (GstIteratorFoldFunction) bin_query_latency_fold;
3586       fold_init = bin_query_min_max_init;
3587       fold_done = bin_query_latency_done;
3588       res = TRUE;
3589       break;
3590     }
3591     default:
3592       fold_func = (GstIteratorFoldFunction) bin_query_generic_fold;
3593       break;
3594   }
3595
3596   fold_data.query = query;
3597
3598   /* set the result of the query to FALSE initially */
3599   g_value_init (&ret, G_TYPE_BOOLEAN);
3600   g_value_set_boolean (&ret, res);
3601
3602   iter = gst_bin_iterate_sinks (bin);
3603   GST_DEBUG_OBJECT (bin, "Sending query %p (type %s) to sink children",
3604       query, GST_QUERY_TYPE_NAME (query));
3605
3606   if (fold_init)
3607     fold_init (bin, &fold_data);
3608
3609   while (TRUE) {
3610     GstIteratorResult ires;
3611
3612     ires = gst_iterator_fold (iter, fold_func, &ret, &fold_data);
3613
3614     switch (ires) {
3615       case GST_ITERATOR_RESYNC:
3616         gst_iterator_resync (iter);
3617         if (fold_init)
3618           fold_init (bin, &fold_data);
3619         g_value_set_boolean (&ret, res);
3620         break;
3621       case GST_ITERATOR_OK:
3622       case GST_ITERATOR_DONE:
3623         res = g_value_get_boolean (&ret);
3624         if (fold_done != NULL && res)
3625           fold_done (bin, &fold_data);
3626         goto done;
3627       default:
3628         res = FALSE;
3629         goto done;
3630     }
3631   }
3632 done:
3633   gst_iterator_free (iter);
3634
3635 #ifdef DURATION_CACHING
3636 exit:
3637 #endif
3638   GST_DEBUG_OBJECT (bin, "query %p result %d", query, res);
3639
3640   return res;
3641 }
3642
3643 static gint
3644 compare_name (GstElement * element, const gchar * name)
3645 {
3646   gint eq;
3647
3648   GST_OBJECT_LOCK (element);
3649   eq = strcmp (GST_ELEMENT_NAME (element), name);
3650   GST_OBJECT_UNLOCK (element);
3651
3652   if (eq != 0) {
3653     gst_object_unref (element);
3654   }
3655   return eq;
3656 }
3657
3658 /**
3659  * gst_bin_get_by_name:
3660  * @bin: a #GstBin
3661  * @name: the element name to search for
3662  *
3663  * Gets the element with the given name from a bin. This
3664  * function recurses into child bins.
3665  *
3666  * Returns NULL if no element with the given name is found in the bin.
3667  *
3668  * MT safe.  Caller owns returned reference.
3669  *
3670  * Returns: (transfer full): the #GstElement with the given name, or NULL
3671  */
3672 GstElement *
3673 gst_bin_get_by_name (GstBin * bin, const gchar * name)
3674 {
3675   GstIterator *children;
3676   gpointer result;
3677
3678   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
3679
3680   GST_CAT_INFO (GST_CAT_PARENTAGE, "[%s]: looking up child element %s",
3681       GST_ELEMENT_NAME (bin), name);
3682
3683   children = gst_bin_iterate_recurse (bin);
3684   result = gst_iterator_find_custom (children,
3685       (GCompareFunc) compare_name, (gpointer) name);
3686   gst_iterator_free (children);
3687
3688   return GST_ELEMENT_CAST (result);
3689 }
3690
3691 /**
3692  * gst_bin_get_by_name_recurse_up:
3693  * @bin: a #GstBin
3694  * @name: the element name to search for
3695  *
3696  * Gets the element with the given name from this bin. If the
3697  * element is not found, a recursion is performed on the parent bin.
3698  *
3699  * Returns NULL if:
3700  * - no element with the given name is found in the bin
3701  *
3702  * MT safe.  Caller owns returned reference.
3703  *
3704  * Returns: (transfer full): the #GstElement with the given name, or NULL
3705  */
3706 GstElement *
3707 gst_bin_get_by_name_recurse_up (GstBin * bin, const gchar * name)
3708 {
3709   GstElement *result;
3710
3711   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
3712   g_return_val_if_fail (name != NULL, NULL);
3713
3714   result = gst_bin_get_by_name (bin, name);
3715
3716   if (!result) {
3717     GstObject *parent;
3718
3719     parent = gst_object_get_parent (GST_OBJECT_CAST (bin));
3720     if (parent) {
3721       if (GST_IS_BIN (parent)) {
3722         result = gst_bin_get_by_name_recurse_up (GST_BIN_CAST (parent), name);
3723       }
3724       gst_object_unref (parent);
3725     }
3726   }
3727
3728   return result;
3729 }
3730
3731 static gint
3732 compare_interface (GstElement * element, gpointer interface)
3733 {
3734   GType interface_type = (GType) interface;
3735   gint ret;
3736
3737   if (G_TYPE_CHECK_INSTANCE_TYPE (element, interface_type)) {
3738     ret = 0;
3739   } else {
3740     /* we did not find the element, need to release the ref
3741      * added by the iterator */
3742     gst_object_unref (element);
3743     ret = 1;
3744   }
3745   return ret;
3746 }
3747
3748 /**
3749  * gst_bin_get_by_interface:
3750  * @bin: a #GstBin
3751  * @iface: the #GType of an interface
3752  *
3753  * Looks for an element inside the bin that implements the given
3754  * interface. If such an element is found, it returns the element.
3755  * You can cast this element to the given interface afterwards.  If you want
3756  * all elements that implement the interface, use
3757  * gst_bin_iterate_all_by_interface(). This function recurses into child bins.
3758  *
3759  * MT safe.  Caller owns returned reference.
3760  *
3761  * Returns: (transfer full): A #GstElement inside the bin implementing the interface
3762  */
3763 GstElement *
3764 gst_bin_get_by_interface (GstBin * bin, GType iface)
3765 {
3766   GstIterator *children;
3767   gpointer result;
3768
3769   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
3770   g_return_val_if_fail (G_TYPE_IS_INTERFACE (iface), NULL);
3771
3772   children = gst_bin_iterate_recurse (bin);
3773   result = gst_iterator_find_custom (children, (GCompareFunc) compare_interface,
3774       (gpointer) iface);
3775   gst_iterator_free (children);
3776
3777   return GST_ELEMENT_CAST (result);
3778 }
3779
3780 /**
3781  * gst_bin_iterate_all_by_interface:
3782  * @bin: a #GstBin
3783  * @iface: the #GType of an interface
3784  *
3785  * Looks for all elements inside the bin that implements the given
3786  * interface. You can safely cast all returned elements to the given interface.
3787  * The function recurses inside child bins. The iterator will yield a series
3788  * of #GstElement that should be unreffed after use.
3789  *
3790  * Each element yielded by the iterator will have its refcount increased, so
3791  * unref after use.
3792  *
3793  * MT safe.  Caller owns returned value.
3794  *
3795  * Returns: (transfer full): a #GstIterator of #GstElement for all elements
3796  *          in the bin implementing the given interface, or NULL
3797  */
3798 GstIterator *
3799 gst_bin_iterate_all_by_interface (GstBin * bin, GType iface)
3800 {
3801   GstIterator *children;
3802   GstIterator *result;
3803
3804   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
3805   g_return_val_if_fail (G_TYPE_IS_INTERFACE (iface), NULL);
3806
3807   children = gst_bin_iterate_recurse (bin);
3808   result = gst_iterator_filter (children, (GCompareFunc) compare_interface,
3809       (gpointer) iface);
3810
3811   return result;
3812 }