bin: implement context propagation when adding elements
[platform/upstream/gstreamer.git] / gst / gstbin.c
1 /* GStreamer
2  *
3  * Copyright (C) 1999,2000 Erik Walthinsen <omega@cse.ogi.edu>
4  *                    2004 Wim Taymans <wim.taymans@gmail.com>
5  *
6  * gstbin.c: GstBin container object and support code
7  *
8  * This library is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Library General Public
10  * License as published by the Free Software Foundation; either
11  * version 2 of the License, or (at your option) any later version.
12  *
13  * This library is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Library General Public License for more details.
17  *
18  * You should have received a copy of the GNU Library General Public
19  * License along with this library; if not, write to the
20  * Free Software Foundation, Inc., 51 Franklin St, Fifth Floor,
21  * Boston, MA 02110-1301, USA.
22  *
23  * MT safe.
24  */
25
26 /**
27  * SECTION:gstbin
28  * @short_description: Base class and element that can contain other elements
29  *
30  * #GstBin is an element that can contain other #GstElement, allowing them to be
31  * managed as a group.
32  * Pads from the child elements can be ghosted to the bin, see #GstGhostPad.
33  * This makes the bin look like any other elements and enables creation of
34  * higher-level abstraction elements.
35  *
36  * A new #GstBin is created with gst_bin_new(). Use a #GstPipeline instead if you
37  * want to create a toplevel bin because a normal bin doesn't have a bus or
38  * handle clock distribution of its own.
39  *
40  * After the bin has been created you will typically add elements to it with
41  * gst_bin_add(). You can remove elements with gst_bin_remove().
42  *
43  * An element can be retrieved from a bin with gst_bin_get_by_name(), using the
44  * elements name. gst_bin_get_by_name_recurse_up() is mainly used for internal
45  * purposes and will query the parent bins when the element is not found in the
46  * current bin.
47  *
48  * An iterator of elements in a bin can be retrieved with
49  * gst_bin_iterate_elements(). Various other iterators exist to retrieve the
50  * elements in a bin.
51  *
52  * gst_object_unref() is used to drop your reference to the bin.
53  *
54  * The #GstBin::element-added signal is fired whenever a new element is added to
55  * the bin. Likewise the #GstBin::element-removed signal is fired whenever an
56  * element is removed from the bin.
57  *
58  * <refsect2><title>Notes</title>
59  * <para>
60  * A #GstBin internally intercepts every #GstMessage posted by its children and
61  * implements the following default behaviour for each of them:
62  * <variablelist>
63  *   <varlistentry>
64  *     <term>GST_MESSAGE_EOS</term>
65  *     <listitem><para>This message is only posted by sinks in the PLAYING
66  *     state. If all sinks posted the EOS message, this bin will post and EOS
67  *     message upwards.</para></listitem>
68  *   </varlistentry>
69  *   <varlistentry>
70  *     <term>GST_MESSAGE_SEGMENT_START</term>
71  *     <listitem><para>just collected and never forwarded upwards.
72  *     The messages are used to decide when all elements have completed playback
73  *     of their segment.</para></listitem>
74  *   </varlistentry>
75  *   <varlistentry>
76  *     <term>GST_MESSAGE_SEGMENT_DONE</term>
77  *     <listitem><para> Is posted by #GstBin when all elements that posted
78  *     a SEGMENT_START have posted a SEGMENT_DONE.</para></listitem>
79  *   </varlistentry>
80  *   <varlistentry>
81  *     <term>GST_MESSAGE_DURATION_CHANGED</term>
82  *     <listitem><para> Is posted by an element that detected a change
83  *     in the stream duration. The default bin behaviour is to clear any
84  *     cached duration values so that the next duration query will perform
85  *     a full duration recalculation. The duration change is posted to the
86  *     application so that it can refetch the new duration with a duration
87  *     query. Note that these messages can be posted before the bin is
88  *     prerolled, in which case the duration query might fail.
89  *     </para></listitem>
90  *   </varlistentry>
91  *   <varlistentry>
92  *     <term>GST_MESSAGE_CLOCK_LOST</term>
93  *     <listitem><para> This message is posted by an element when it
94  *     can no longer provide a clock. The default bin behaviour is to
95  *     check if the lost clock was the one provided by the bin. If so and
96  *     the bin is currently in the PLAYING state, the message is forwarded to
97  *     the bin parent.
98  *     This message is also generated when a clock provider is removed from
99  *     the bin. If this message is received by the application, it should
100  *     PAUSE the pipeline and set it back to PLAYING to force a new clock
101  *     distribution.
102  *     </para></listitem>
103  *   </varlistentry>
104  *   <varlistentry>
105  *     <term>GST_MESSAGE_CLOCK_PROVIDE</term>
106  *     <listitem><para> This message is generated when an element
107  *     can provide a clock. This mostly happens when a new clock
108  *     provider is added to the bin. The default behaviour of the bin is to
109  *     mark the currently selected clock as dirty, which will perform a clock
110  *     recalculation the next time the bin is asked to provide a clock.
111  *     This message is never sent tot the application but is forwarded to
112  *     the parent of the bin.
113  *     </para></listitem>
114  *   </varlistentry>
115  *   <varlistentry>
116  *     <term>OTHERS</term>
117  *     <listitem><para> posted upwards.</para></listitem>
118  *   </varlistentry>
119  * </variablelist>
120  *
121  *
122  * A #GstBin implements the following default behaviour for answering to a
123  * #GstQuery:
124  * <variablelist>
125  *   <varlistentry>
126  *     <term>GST_QUERY_DURATION</term>
127  *     <listitem><para>If the query has been asked before with the same format
128  *     and the bin is a toplevel bin (ie. has no parent),
129  *     use the cached previous value. If no previous value was cached, the
130  *     query is sent to all sink elements in the bin and the MAXIMUM of all
131  *     values is returned. If the bin is a toplevel bin the value is cached.
132  *     If no sinks are available in the bin, the query fails.
133  *     </para></listitem>
134  *   </varlistentry>
135  *   <varlistentry>
136  *     <term>GST_QUERY_POSITION</term>
137  *     <listitem><para>The query is sent to all sink elements in the bin and the
138  *     MAXIMUM of all values is returned. If no sinks are available in the bin,
139  *     the query fails.
140  *     </para></listitem>
141  *   </varlistentry>
142  *   <varlistentry>
143  *     <term>OTHERS</term>
144  *     <listitem><para>the query is forwarded to all sink elements, the result
145  *     of the first sink that answers the query successfully is returned. If no
146  *     sink is in the bin, the query fails.</para></listitem>
147  *   </varlistentry>
148  * </variablelist>
149  *
150  * A #GstBin will by default forward any event sent to it to all sink elements.
151  * If all the sinks return %TRUE, the bin will also return %TRUE, else %FALSE is
152  * returned. If no sinks are in the bin, the event handler will return %TRUE.
153  *
154  * </para>
155  * </refsect2>
156  */
157
158 #include "gst_private.h"
159
160 #include "gstevent.h"
161 #include "gstbin.h"
162 #include "gstinfo.h"
163 #include "gsterror.h"
164
165 #include "gstutils.h"
166 #include "gstchildproxy.h"
167
168 GST_DEBUG_CATEGORY_STATIC (bin_debug);
169 #define GST_CAT_DEFAULT bin_debug
170
171 /* a bin is toplevel if it has no parent or when it is configured to behave like
172  * a toplevel bin */
173 #define BIN_IS_TOPLEVEL(bin) ((GST_OBJECT_PARENT (bin) == NULL) || bin->priv->asynchandling)
174
175 #define GST_BIN_GET_PRIVATE(obj)  \
176    (G_TYPE_INSTANCE_GET_PRIVATE ((obj), GST_TYPE_BIN, GstBinPrivate))
177
178 struct _GstBinPrivate
179 {
180   gboolean asynchandling;
181   /* if we get an ASYNC_DONE message from ourselves, this means that the
182    * subclass will simulate ASYNC behaviour without having ASYNC children. When
183    * such an ASYNC_DONE message is posted while we are doing a state change, we
184    * have to process the message after finishing the state change even when no
185    * child returned GST_STATE_CHANGE_ASYNC. */
186   gboolean pending_async_done;
187
188   guint32 structure_cookie;
189
190 #if 0
191   /* cached index */
192   GstIndex *index;
193 #endif
194
195   /* forward messages from our children */
196   gboolean message_forward;
197
198   gboolean posted_eos;
199   gboolean posted_playing;
200 };
201
202 typedef struct
203 {
204   GstBin *bin;
205   guint32 cookie;
206   GstState pending;
207 } BinContinueData;
208
209 static void gst_bin_dispose (GObject * object);
210
211 static void gst_bin_set_property (GObject * object, guint prop_id,
212     const GValue * value, GParamSpec * pspec);
213 static void gst_bin_get_property (GObject * object, guint prop_id,
214     GValue * value, GParamSpec * pspec);
215
216 static GstStateChangeReturn gst_bin_change_state_func (GstElement * element,
217     GstStateChange transition);
218 static gboolean gst_bin_post_message (GstElement * element, GstMessage * msg);
219 static GstStateChangeReturn gst_bin_get_state_func (GstElement * element,
220     GstState * state, GstState * pending, GstClockTime timeout);
221 static void bin_handle_async_done (GstBin * bin, GstStateChangeReturn ret,
222     gboolean flag_pending, GstClockTime running_time);
223 static void bin_handle_async_start (GstBin * bin);
224 static void bin_push_state_continue (BinContinueData * data);
225 static void bin_do_eos (GstBin * bin);
226
227 static gboolean gst_bin_add_func (GstBin * bin, GstElement * element);
228 static gboolean gst_bin_remove_func (GstBin * bin, GstElement * element);
229 static void gst_bin_update_context (GstBin * bin, GstContext * context);
230 static void gst_bin_update_context_unlocked (GstBin * bin,
231     GstContext * context);
232
233 #if 0
234 static void gst_bin_set_index_func (GstElement * element, GstIndex * index);
235 static GstIndex *gst_bin_get_index_func (GstElement * element);
236 #endif
237
238 static GstClock *gst_bin_provide_clock_func (GstElement * element);
239 static gboolean gst_bin_set_clock_func (GstElement * element, GstClock * clock);
240
241 static void gst_bin_handle_message_func (GstBin * bin, GstMessage * message);
242 static gboolean gst_bin_send_event (GstElement * element, GstEvent * event);
243 static GstBusSyncReply bin_bus_handler (GstBus * bus,
244     GstMessage * message, GstBin * bin);
245 static gboolean gst_bin_query (GstElement * element, GstQuery * query);
246 static void gst_bin_set_context (GstElement * element, GstContext * context);
247
248 static gboolean gst_bin_do_latency_func (GstBin * bin);
249
250 static void bin_remove_messages (GstBin * bin, GstObject * src,
251     GstMessageType types);
252 static void gst_bin_continue_func (BinContinueData * data);
253 static gint bin_element_is_sink (GstElement * child, GstBin * bin);
254 static gint bin_element_is_src (GstElement * child, GstBin * bin);
255
256 static GstIterator *gst_bin_sort_iterator_new (GstBin * bin);
257
258 /* Bin signals and properties */
259 enum
260 {
261   ELEMENT_ADDED,
262   ELEMENT_REMOVED,
263   DO_LATENCY,
264   LAST_SIGNAL
265 };
266
267 #define DEFAULT_ASYNC_HANDLING  FALSE
268 #define DEFAULT_MESSAGE_FORWARD FALSE
269
270 enum
271 {
272   PROP_0,
273   PROP_ASYNC_HANDLING,
274   PROP_MESSAGE_FORWARD,
275   PROP_LAST
276 };
277
278 static void gst_bin_child_proxy_init (gpointer g_iface, gpointer iface_data);
279
280 static guint gst_bin_signals[LAST_SIGNAL] = { 0 };
281
282 #define _do_init \
283 { \
284   static const GInterfaceInfo iface_info = { \
285     gst_bin_child_proxy_init, \
286     NULL, \
287     NULL}; \
288   \
289   g_type_add_interface_static (g_define_type_id, GST_TYPE_CHILD_PROXY, &iface_info); \
290   \
291   GST_DEBUG_CATEGORY_INIT (bin_debug, "bin", GST_DEBUG_BOLD, \
292       "debugging info for the 'bin' container element"); \
293   \
294 }
295
296 #define gst_bin_parent_class parent_class
297 G_DEFINE_TYPE_WITH_CODE (GstBin, gst_bin, GST_TYPE_ELEMENT, _do_init);
298
299 static GObject *
300 gst_bin_child_proxy_get_child_by_index (GstChildProxy * child_proxy,
301     guint index)
302 {
303   GstObject *res;
304   GstBin *bin;
305
306   bin = GST_BIN_CAST (child_proxy);
307
308   GST_OBJECT_LOCK (bin);
309   if ((res = g_list_nth_data (bin->children, index)))
310     gst_object_ref (res);
311   GST_OBJECT_UNLOCK (bin);
312
313   return (GObject *) res;
314 }
315
316 static guint
317 gst_bin_child_proxy_get_children_count (GstChildProxy * child_proxy)
318 {
319   guint num;
320   GstBin *bin;
321
322   bin = GST_BIN_CAST (child_proxy);
323
324   GST_OBJECT_LOCK (bin);
325   num = bin->numchildren;
326   GST_OBJECT_UNLOCK (bin);
327
328   return num;
329 }
330
331 static void
332 gst_bin_child_proxy_init (gpointer g_iface, gpointer iface_data)
333 {
334   GstChildProxyInterface *iface = g_iface;
335
336   iface->get_children_count = gst_bin_child_proxy_get_children_count;
337   iface->get_child_by_index = gst_bin_child_proxy_get_child_by_index;
338 }
339
340 static gboolean
341 _gst_boolean_accumulator (GSignalInvocationHint * ihint,
342     GValue * return_accu, const GValue * handler_return, gpointer dummy)
343 {
344   gboolean myboolean;
345
346   myboolean = g_value_get_boolean (handler_return);
347   if (!(ihint->run_type & G_SIGNAL_RUN_CLEANUP))
348     g_value_set_boolean (return_accu, myboolean);
349
350   GST_DEBUG ("invocation %d, %d", ihint->run_type, myboolean);
351
352   /* stop emission */
353   return FALSE;
354 }
355
356 static void
357 gst_bin_class_init (GstBinClass * klass)
358 {
359   GObjectClass *gobject_class;
360   GstElementClass *gstelement_class;
361   GError *err;
362
363   gobject_class = (GObjectClass *) klass;
364   gstelement_class = (GstElementClass *) klass;
365
366   g_type_class_add_private (klass, sizeof (GstBinPrivate));
367
368   gobject_class->set_property = gst_bin_set_property;
369   gobject_class->get_property = gst_bin_get_property;
370
371   /**
372    * GstBin:async-handling:
373    *
374    * If set to %TRUE, the bin will handle asynchronous state changes.
375    * This should be used only if the bin subclass is modifying the state
376    * of its children on its own.
377    */
378   g_object_class_install_property (gobject_class, PROP_ASYNC_HANDLING,
379       g_param_spec_boolean ("async-handling", "Async Handling",
380           "The bin will handle Asynchronous state changes",
381           DEFAULT_ASYNC_HANDLING, G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
382
383   /**
384    * GstBin::element-added:
385    * @bin: the #GstBin
386    * @element: the #GstElement that was added to the bin
387    *
388    * Will be emitted after the element was added to the bin.
389    */
390   gst_bin_signals[ELEMENT_ADDED] =
391       g_signal_new ("element-added", G_TYPE_FROM_CLASS (klass),
392       G_SIGNAL_RUN_FIRST, G_STRUCT_OFFSET (GstBinClass, element_added), NULL,
393       NULL, g_cclosure_marshal_generic, G_TYPE_NONE, 1, GST_TYPE_ELEMENT);
394   /**
395    * GstBin::element-removed:
396    * @bin: the #GstBin
397    * @element: the #GstElement that was removed from the bin
398    *
399    * Will be emitted after the element was removed from the bin.
400    */
401   gst_bin_signals[ELEMENT_REMOVED] =
402       g_signal_new ("element-removed", G_TYPE_FROM_CLASS (klass),
403       G_SIGNAL_RUN_FIRST, G_STRUCT_OFFSET (GstBinClass, element_removed), NULL,
404       NULL, g_cclosure_marshal_generic, G_TYPE_NONE, 1, GST_TYPE_ELEMENT);
405   /**
406    * GstBin::do-latency:
407    * @bin: the #GstBin
408    *
409    * Will be emitted when the bin needs to perform latency calculations. This
410    * signal is only emitted for toplevel bins or when async-handling is
411    * enabled.
412    *
413    * Only one signal handler is invoked. If no signals are connected, the
414    * default handler is invoked, which will query and distribute the lowest
415    * possible latency to all sinks.
416    *
417    * Connect to this signal if the default latency calculations are not
418    * sufficient, like when you need different latencies for different sinks in
419    * the same pipeline.
420    */
421   gst_bin_signals[DO_LATENCY] =
422       g_signal_new ("do-latency", G_TYPE_FROM_CLASS (klass),
423       G_SIGNAL_RUN_LAST, G_STRUCT_OFFSET (GstBinClass, do_latency),
424       _gst_boolean_accumulator, NULL, g_cclosure_marshal_generic,
425       G_TYPE_BOOLEAN, 0, G_TYPE_NONE);
426
427   /**
428    * GstBin:message-forward:
429    *
430    * Forward all children messages, even those that would normally be filtered by
431    * the bin. This can be interesting when one wants to be notified of the EOS
432    * state of individual elements, for example.
433    *
434    * The messages are converted to an ELEMENT message with the bin as the
435    * source. The structure of the message is named 'GstBinForwarded' and contains
436    * a field named 'message' of type GST_TYPE_MESSAGE that contains the original
437    * forwarded message.
438    */
439   g_object_class_install_property (gobject_class, PROP_MESSAGE_FORWARD,
440       g_param_spec_boolean ("message-forward", "Message Forward",
441           "Forwards all children messages",
442           DEFAULT_MESSAGE_FORWARD, G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
443
444   gobject_class->dispose = gst_bin_dispose;
445
446   gst_element_class_set_static_metadata (gstelement_class, "Generic bin",
447       "Generic/Bin",
448       "Simple container object",
449       "Erik Walthinsen <omega@cse.ogi.edu>,"
450       "Wim Taymans <wim.taymans@gmail.com>");
451
452   gstelement_class->change_state =
453       GST_DEBUG_FUNCPTR (gst_bin_change_state_func);
454   gstelement_class->post_message = GST_DEBUG_FUNCPTR (gst_bin_post_message);
455   gstelement_class->get_state = GST_DEBUG_FUNCPTR (gst_bin_get_state_func);
456 #if 0
457   gstelement_class->get_index = GST_DEBUG_FUNCPTR (gst_bin_get_index_func);
458   gstelement_class->set_index = GST_DEBUG_FUNCPTR (gst_bin_set_index_func);
459 #endif
460   gstelement_class->provide_clock =
461       GST_DEBUG_FUNCPTR (gst_bin_provide_clock_func);
462   gstelement_class->set_clock = GST_DEBUG_FUNCPTR (gst_bin_set_clock_func);
463
464   gstelement_class->send_event = GST_DEBUG_FUNCPTR (gst_bin_send_event);
465   gstelement_class->query = GST_DEBUG_FUNCPTR (gst_bin_query);
466   gstelement_class->set_context = GST_DEBUG_FUNCPTR (gst_bin_set_context);
467
468   klass->add_element = GST_DEBUG_FUNCPTR (gst_bin_add_func);
469   klass->remove_element = GST_DEBUG_FUNCPTR (gst_bin_remove_func);
470   klass->handle_message = GST_DEBUG_FUNCPTR (gst_bin_handle_message_func);
471
472   klass->do_latency = GST_DEBUG_FUNCPTR (gst_bin_do_latency_func);
473
474   GST_DEBUG ("creating bin thread pool");
475   err = NULL;
476   klass->pool =
477       g_thread_pool_new ((GFunc) gst_bin_continue_func, NULL, -1, FALSE, &err);
478   if (err != NULL) {
479     g_critical ("could not alloc threadpool %s", err->message);
480   }
481 }
482
483 static void
484 gst_bin_init (GstBin * bin)
485 {
486   GstBus *bus;
487
488   bin->numchildren = 0;
489   bin->children = NULL;
490   bin->children_cookie = 0;
491   bin->messages = NULL;
492   bin->provided_clock = NULL;
493   bin->clock_dirty = FALSE;
494
495   /* Set up a bus for listening to child elements */
496   bus = g_object_new (GST_TYPE_BUS, "enable-async", FALSE, NULL);
497   bin->child_bus = bus;
498   GST_DEBUG_OBJECT (bin, "using bus %" GST_PTR_FORMAT " to listen to children",
499       bus);
500   gst_bus_set_sync_handler (bus, (GstBusSyncHandler) bin_bus_handler, bin,
501       NULL);
502
503   bin->priv = GST_BIN_GET_PRIVATE (bin);
504   bin->priv->asynchandling = DEFAULT_ASYNC_HANDLING;
505   bin->priv->structure_cookie = 0;
506   bin->priv->message_forward = DEFAULT_MESSAGE_FORWARD;
507 }
508
509 static void
510 gst_bin_dispose (GObject * object)
511 {
512   GstBin *bin = GST_BIN_CAST (object);
513   GstBus **child_bus_p = &bin->child_bus;
514   GstClock **provided_clock_p = &bin->provided_clock;
515   GstElement **clock_provider_p = &bin->clock_provider;
516
517   GST_CAT_DEBUG_OBJECT (GST_CAT_REFCOUNTING, object, "dispose");
518
519   GST_OBJECT_LOCK (object);
520   gst_object_replace ((GstObject **) child_bus_p, NULL);
521   gst_object_replace ((GstObject **) provided_clock_p, NULL);
522   gst_object_replace ((GstObject **) clock_provider_p, NULL);
523   bin_remove_messages (bin, NULL, GST_MESSAGE_ANY);
524   GST_OBJECT_UNLOCK (object);
525
526   while (bin->children) {
527     gst_bin_remove (bin, GST_ELEMENT_CAST (bin->children->data));
528   }
529   if (G_UNLIKELY (bin->children != NULL)) {
530     g_critical ("could not remove elements from bin '%s'",
531         GST_STR_NULL (GST_OBJECT_NAME (object)));
532   }
533
534   G_OBJECT_CLASS (parent_class)->dispose (object);
535 }
536
537 /**
538  * gst_bin_new:
539  * @name: (allow-none): the name of the new bin
540  *
541  * Creates a new bin with the given name.
542  *
543  * Returns: (transfer floating): a new #GstBin
544  */
545 GstElement *
546 gst_bin_new (const gchar * name)
547 {
548   return gst_element_factory_make ("bin", name);
549 }
550
551 static void
552 gst_bin_set_property (GObject * object, guint prop_id,
553     const GValue * value, GParamSpec * pspec)
554 {
555   GstBin *gstbin;
556
557   gstbin = GST_BIN_CAST (object);
558
559   switch (prop_id) {
560     case PROP_ASYNC_HANDLING:
561       GST_OBJECT_LOCK (gstbin);
562       gstbin->priv->asynchandling = g_value_get_boolean (value);
563       GST_OBJECT_UNLOCK (gstbin);
564       break;
565     case PROP_MESSAGE_FORWARD:
566       GST_OBJECT_LOCK (gstbin);
567       gstbin->priv->message_forward = g_value_get_boolean (value);
568       GST_OBJECT_UNLOCK (gstbin);
569       break;
570     default:
571       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
572       break;
573   }
574 }
575
576 static void
577 gst_bin_get_property (GObject * object, guint prop_id,
578     GValue * value, GParamSpec * pspec)
579 {
580   GstBin *gstbin;
581
582   gstbin = GST_BIN_CAST (object);
583
584   switch (prop_id) {
585     case PROP_ASYNC_HANDLING:
586       GST_OBJECT_LOCK (gstbin);
587       g_value_set_boolean (value, gstbin->priv->asynchandling);
588       GST_OBJECT_UNLOCK (gstbin);
589       break;
590     case PROP_MESSAGE_FORWARD:
591       GST_OBJECT_LOCK (gstbin);
592       g_value_set_boolean (value, gstbin->priv->message_forward);
593       GST_OBJECT_UNLOCK (gstbin);
594       break;
595     default:
596       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
597       break;
598   }
599 }
600
601 #if 0
602 /* return the cached index */
603 static GstIndex *
604 gst_bin_get_index_func (GstElement * element)
605 {
606   GstBin *bin;
607   GstIndex *result;
608
609   bin = GST_BIN_CAST (element);
610
611   GST_OBJECT_LOCK (bin);
612   if ((result = bin->priv->index))
613     gst_object_ref (result);
614   GST_OBJECT_UNLOCK (bin);
615
616   return result;
617 }
618
619 /* set the index on all elements in this bin
620  *
621  * MT safe
622  */
623 static void
624 gst_bin_set_index_func (GstElement * element, GstIndex * index)
625 {
626   GstBin *bin;
627   gboolean done;
628   GstIterator *it;
629   GstIndex *old;
630   GValue data = { 0, };
631
632   bin = GST_BIN_CAST (element);
633
634   GST_OBJECT_LOCK (bin);
635   old = bin->priv->index;
636   if (G_UNLIKELY (old == index))
637     goto was_set;
638   if (index)
639     gst_object_ref (index);
640   bin->priv->index = index;
641   GST_OBJECT_UNLOCK (bin);
642
643   if (old)
644     gst_object_unref (old);
645
646   it = gst_bin_iterate_elements (bin);
647
648   /* set the index on all elements in the bin */
649   done = FALSE;
650   while (!done) {
651     switch (gst_iterator_next (it, &data)) {
652       case GST_ITERATOR_OK:
653       {
654         GstElement *child = g_value_get_object (&data);
655
656         GST_DEBUG_OBJECT (bin, "setting index on '%s'",
657             GST_ELEMENT_NAME (child));
658         gst_element_set_index (child, index);
659
660         g_value_reset (&data);
661         break;
662       }
663       case GST_ITERATOR_RESYNC:
664         GST_DEBUG_OBJECT (bin, "iterator doing resync");
665         gst_iterator_resync (it);
666         break;
667       default:
668       case GST_ITERATOR_DONE:
669         GST_DEBUG_OBJECT (bin, "iterator done");
670         done = TRUE;
671         break;
672     }
673   }
674   g_value_unset (&data);
675   gst_iterator_free (it);
676   return;
677
678 was_set:
679   {
680     GST_DEBUG_OBJECT (bin, "index was already set");
681     GST_OBJECT_UNLOCK (bin);
682     return;
683   }
684 }
685 #endif
686
687 /* set the clock on all elements in this bin
688  *
689  * MT safe
690  */
691 static gboolean
692 gst_bin_set_clock_func (GstElement * element, GstClock * clock)
693 {
694   GstBin *bin;
695   gboolean done;
696   GstIterator *it;
697   gboolean res = TRUE;
698   GValue data = { 0, };
699
700   bin = GST_BIN_CAST (element);
701
702   it = gst_bin_iterate_elements (bin);
703
704   done = FALSE;
705   while (!done) {
706     switch (gst_iterator_next (it, &data)) {
707       case GST_ITERATOR_OK:
708       {
709         GstElement *child = g_value_get_object (&data);
710
711         res &= gst_element_set_clock (child, clock);
712
713         g_value_reset (&data);
714         break;
715       }
716       case GST_ITERATOR_RESYNC:
717         GST_DEBUG_OBJECT (bin, "iterator doing resync");
718         gst_iterator_resync (it);
719         res = TRUE;
720         break;
721       default:
722       case GST_ITERATOR_DONE:
723         GST_DEBUG_OBJECT (bin, "iterator done");
724         done = TRUE;
725         break;
726     }
727   }
728   g_value_unset (&data);
729   gst_iterator_free (it);
730
731   if (res)
732     res = GST_ELEMENT_CLASS (parent_class)->set_clock (element, clock);
733
734   return res;
735 }
736
737 /* get the clock for this bin by asking all of the children in this bin
738  *
739  * The ref of the returned clock in increased so unref after usage.
740  *
741  * We loop the elements in state order and pick the last clock we can
742  * get. This makes sure we get a clock from the source.
743  *
744  * MT safe
745  */
746 static GstClock *
747 gst_bin_provide_clock_func (GstElement * element)
748 {
749   GstClock *result = NULL;
750   GstElement *provider = NULL;
751   GstBin *bin;
752   GstIterator *it;
753   gboolean done;
754   GValue val = { 0, };
755   GstClock **provided_clock_p;
756   GstElement **clock_provider_p;
757
758   bin = GST_BIN_CAST (element);
759
760   GST_OBJECT_LOCK (bin);
761   if (!bin->clock_dirty)
762     goto not_dirty;
763
764   GST_DEBUG_OBJECT (bin, "finding new clock");
765
766   it = gst_bin_sort_iterator_new (bin);
767   GST_OBJECT_UNLOCK (bin);
768
769   done = FALSE;
770   while (!done) {
771     switch (gst_iterator_next (it, &val)) {
772       case GST_ITERATOR_OK:
773       {
774         GstElement *child = g_value_get_object (&val);
775         GstClock *clock;
776
777         clock = gst_element_provide_clock (child);
778         if (clock) {
779           GST_DEBUG_OBJECT (bin, "found candidate clock %p by element %s",
780               clock, GST_ELEMENT_NAME (child));
781           if (result) {
782             gst_object_unref (result);
783             gst_object_unref (provider);
784           }
785           result = clock;
786           provider = gst_object_ref (child);
787         }
788
789         g_value_reset (&val);
790         break;
791       }
792       case GST_ITERATOR_RESYNC:
793         gst_iterator_resync (it);
794         break;
795       default:
796       case GST_ITERATOR_DONE:
797         done = TRUE;
798         break;
799     }
800   }
801   g_value_unset (&val);
802   gst_iterator_free (it);
803
804   GST_OBJECT_LOCK (bin);
805   if (!bin->clock_dirty) {
806     if (provider)
807       gst_object_unref (provider);
808     if (result)
809       gst_object_unref (result);
810     result = NULL;
811
812     goto not_dirty;
813   }
814
815   provided_clock_p = &bin->provided_clock;
816   clock_provider_p = &bin->clock_provider;
817   gst_object_replace ((GstObject **) provided_clock_p, (GstObject *) result);
818   gst_object_replace ((GstObject **) clock_provider_p, (GstObject *) provider);
819   bin->clock_dirty = FALSE;
820   GST_DEBUG_OBJECT (bin,
821       "provided new clock %" GST_PTR_FORMAT " by provider %" GST_PTR_FORMAT,
822       result, provider);
823   /* Provider is not being returned to caller, just the result */
824   if (provider)
825     gst_object_unref (provider);
826   GST_OBJECT_UNLOCK (bin);
827
828   return result;
829
830 not_dirty:
831   {
832     if ((result = bin->provided_clock))
833       gst_object_ref (result);
834     GST_DEBUG_OBJECT (bin, "returning old clock %p", result);
835     GST_OBJECT_UNLOCK (bin);
836
837     return result;
838   }
839 }
840
841 /*
842  * functions for manipulating cached messages
843  */
844 typedef struct
845 {
846   GstObject *src;
847   GstMessageType types;
848 } MessageFind;
849
850 /* check if a message is of given src and type */
851 static gint
852 message_check (GstMessage * message, MessageFind * target)
853 {
854   gboolean eq = TRUE;
855
856   if (target->src)
857     eq &= GST_MESSAGE_SRC (message) == target->src;
858   if (target->types)
859     eq &= (GST_MESSAGE_TYPE (message) & target->types) != 0;
860   GST_LOG ("looking at message %p: %d", message, eq);
861
862   return (eq ? 0 : 1);
863 }
864
865 static GList *
866 find_message (GstBin * bin, GstObject * src, GstMessageType types)
867 {
868   GList *result;
869   MessageFind find;
870
871   find.src = src;
872   find.types = types;
873
874   result = g_list_find_custom (bin->messages, &find,
875       (GCompareFunc) message_check);
876
877   if (result) {
878     GST_DEBUG_OBJECT (bin, "we found a message %p from %s matching types %08x",
879         result->data, GST_OBJECT_NAME (GST_MESSAGE_CAST (result->data)->src),
880         types);
881   } else {
882     GST_DEBUG_OBJECT (bin, "no message found matching types %08x", types);
883 #ifndef GST_DISABLE_GST_DEBUG
884     {
885       guint i;
886
887       for (i = 0; i < 32; i++)
888         if (types & (1U << i))
889           GST_DEBUG_OBJECT (bin, "  %s", gst_message_type_get_name (1U << i));
890     }
891 #endif
892   }
893
894   return result;
895 }
896
897 /* with LOCK, returns TRUE if message had a valid SRC, takes ownership of
898  * the message.
899  *
900  * A message that is cached and has the same SRC and type is replaced
901  * by the given message.
902  */
903 static gboolean
904 bin_replace_message (GstBin * bin, GstMessage * message, GstMessageType types)
905 {
906   GList *previous;
907   GstObject *src;
908   gboolean res = TRUE;
909
910   if ((src = GST_MESSAGE_SRC (message))) {
911     /* first find the previous message posted by this element */
912     if ((previous = find_message (bin, src, types))) {
913       GstMessage *previous_msg;
914
915       /* if we found a previous message, replace it */
916       previous_msg = previous->data;
917       previous->data = message;
918
919       GST_DEBUG_OBJECT (bin, "replace old message %s from %s with %s message",
920           GST_MESSAGE_TYPE_NAME (previous_msg), GST_ELEMENT_NAME (src),
921           GST_MESSAGE_TYPE_NAME (message));
922
923       gst_message_unref (previous_msg);
924     } else {
925       /* keep new message */
926       bin->messages = g_list_prepend (bin->messages, message);
927
928       GST_DEBUG_OBJECT (bin, "got new message %p, %s from %s",
929           message, GST_MESSAGE_TYPE_NAME (message), GST_ELEMENT_NAME (src));
930     }
931   } else {
932     GST_DEBUG_OBJECT (bin, "got message %s from (NULL), not processing",
933         GST_MESSAGE_TYPE_NAME (message));
934     res = FALSE;
935     gst_message_unref (message);
936   }
937   return res;
938 }
939
940 /* with LOCK. Remove all messages of given types */
941 static void
942 bin_remove_messages (GstBin * bin, GstObject * src, GstMessageType types)
943 {
944   MessageFind find;
945   GList *walk, *next;
946
947   find.src = src;
948   find.types = types;
949
950   for (walk = bin->messages; walk; walk = next) {
951     GstMessage *message = (GstMessage *) walk->data;
952
953     next = g_list_next (walk);
954
955     if (message_check (message, &find) == 0) {
956       GST_DEBUG_OBJECT (GST_MESSAGE_SRC (message),
957           "deleting message %p of types 0x%08x", message, types);
958       bin->messages = g_list_delete_link (bin->messages, walk);
959       gst_message_unref (message);
960     } else {
961       GST_DEBUG_OBJECT (GST_MESSAGE_SRC (message),
962           "not deleting message %p of type 0x%08x", message,
963           GST_MESSAGE_TYPE (message));
964     }
965   }
966 }
967
968
969 /* Check if the bin is EOS. We do this by scanning all sinks and
970  * checking if they posted an EOS message.
971  *
972  * call with bin LOCK */
973 static gboolean
974 is_eos (GstBin * bin, guint32 * seqnum)
975 {
976   gboolean result;
977   gint n_eos = 0;
978   GList *walk, *msgs;
979
980   result = TRUE;
981   for (walk = bin->children; walk; walk = g_list_next (walk)) {
982     GstElement *element;
983
984     element = GST_ELEMENT_CAST (walk->data);
985     if (bin_element_is_sink (element, bin) == 0) {
986       /* check if element posted EOS */
987       if ((msgs =
988               find_message (bin, GST_OBJECT_CAST (element), GST_MESSAGE_EOS))) {
989         GST_DEBUG ("sink '%s' posted EOS", GST_ELEMENT_NAME (element));
990         *seqnum = gst_message_get_seqnum (GST_MESSAGE_CAST (msgs->data));
991         n_eos++;
992       } else {
993         GST_DEBUG ("sink '%s' did not post EOS yet",
994             GST_ELEMENT_NAME (element));
995         result = FALSE;
996         break;
997       }
998     }
999   }
1000   /* FIXME: Some tests (e.g. elements/capsfilter) use
1001    * pipelines with a dangling sinkpad but no sink element.
1002    * These tests assume that no EOS message is ever
1003    * posted on the bus so let's keep that behaviour.
1004    * In valid pipelines this doesn't make a difference.
1005    */
1006   return result && n_eos > 0;
1007 }
1008
1009
1010 /* Check if the bin is STREAM_START. We do this by scanning all sinks and
1011  * checking if they posted an STREAM_START message.
1012  *
1013  * call with bin LOCK */
1014 static gboolean
1015 is_stream_start (GstBin * bin, guint32 * seqnum, gboolean * have_group_id,
1016     guint * group_id)
1017 {
1018   gboolean result;
1019   GList *walk, *msgs;
1020   guint tmp_group_id;
1021   gboolean first = TRUE, same_group_id = TRUE;
1022
1023   *have_group_id = TRUE;
1024   *group_id = 0;
1025   result = TRUE;
1026   for (walk = bin->children; walk; walk = g_list_next (walk)) {
1027     GstElement *element;
1028
1029     element = GST_ELEMENT_CAST (walk->data);
1030     if (bin_element_is_sink (element, bin) == 0) {
1031       /* check if element posted STREAM_START */
1032       if ((msgs =
1033               find_message (bin, GST_OBJECT_CAST (element),
1034                   GST_MESSAGE_STREAM_START))) {
1035         GST_DEBUG ("sink '%s' posted STREAM_START", GST_ELEMENT_NAME (element));
1036         *seqnum = gst_message_get_seqnum (GST_MESSAGE_CAST (msgs->data));
1037         if (gst_message_parse_group_id (GST_MESSAGE_CAST (msgs->data),
1038                 &tmp_group_id)) {
1039           if (first) {
1040             first = FALSE;
1041             *group_id = tmp_group_id;
1042           } else {
1043             if (tmp_group_id != *group_id)
1044               same_group_id = FALSE;
1045           }
1046         } else {
1047           *have_group_id = FALSE;
1048         }
1049       } else {
1050         GST_DEBUG ("sink '%s' did not post STREAM_START yet",
1051             GST_ELEMENT_NAME (element));
1052         result = FALSE;
1053         break;
1054       }
1055     }
1056   }
1057
1058   /* If all have a group_id we only consider this stream started
1059    * if all group ids were the same and all sinks posted a stream-start
1060    * message */
1061   if (*have_group_id)
1062     return same_group_id && result;
1063   /* otherwise consider this stream started after all sinks
1064    * have reported stream-start for backward compatibility.
1065    * FIXME 2.0: This should go away! */
1066   return result;
1067 }
1068
1069 static void
1070 unlink_pads (const GValue * item, gpointer user_data)
1071 {
1072   GstPad *pad;
1073   GstPad *peer;
1074
1075   pad = g_value_get_object (item);
1076
1077   if ((peer = gst_pad_get_peer (pad))) {
1078     if (gst_pad_get_direction (pad) == GST_PAD_SRC)
1079       gst_pad_unlink (pad, peer);
1080     else
1081       gst_pad_unlink (peer, pad);
1082     gst_object_unref (peer);
1083   }
1084 }
1085
1086 /* vmethod that adds an element to a bin
1087  *
1088  * MT safe
1089  */
1090 static gboolean
1091 gst_bin_add_func (GstBin * bin, GstElement * element)
1092 {
1093   gchar *elem_name;
1094   GstIterator *it;
1095   gboolean is_sink, is_source, provides_clock, requires_clock;
1096   GstMessage *clock_message = NULL, *async_message = NULL;
1097   GstStateChangeReturn ret;
1098   GList *l, *elem_contexts, *need_context_messages;
1099
1100   GST_DEBUG_OBJECT (bin, "element :%s", GST_ELEMENT_NAME (element));
1101
1102   /* we obviously can't add ourself to ourself */
1103   if (G_UNLIKELY (element == GST_ELEMENT_CAST (bin)))
1104     goto adding_itself;
1105
1106   /* get the element name to make sure it is unique in this bin. */
1107   GST_OBJECT_LOCK (element);
1108   elem_name = g_strdup (GST_ELEMENT_NAME (element));
1109   is_sink = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_FLAG_SINK);
1110   is_source = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_FLAG_SOURCE);
1111   provides_clock =
1112       GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_FLAG_PROVIDE_CLOCK);
1113   requires_clock =
1114       GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_FLAG_REQUIRE_CLOCK);
1115   GST_OBJECT_UNLOCK (element);
1116
1117   GST_OBJECT_LOCK (bin);
1118
1119   /* then check to see if the element's name is already taken in the bin,
1120    * we can safely take the lock here. This check is probably bogus because
1121    * you can safely change the element name after this check and before setting
1122    * the object parent. The window is very small though... */
1123   if (G_UNLIKELY (!gst_object_check_uniqueness (bin->children, elem_name)))
1124     goto duplicate_name;
1125
1126   /* set the element's parent and add the element to the bin's list of children */
1127   if (G_UNLIKELY (!gst_object_set_parent (GST_OBJECT_CAST (element),
1128               GST_OBJECT_CAST (bin))))
1129     goto had_parent;
1130
1131   /* if we add a sink we become a sink */
1132   if (is_sink) {
1133     GST_CAT_DEBUG_OBJECT (GST_CAT_PARENTAGE, bin, "element \"%s\" was sink",
1134         elem_name);
1135     GST_OBJECT_FLAG_SET (bin, GST_ELEMENT_FLAG_SINK);
1136   }
1137   if (is_source) {
1138     GST_CAT_DEBUG_OBJECT (GST_CAT_PARENTAGE, bin, "element \"%s\" was source",
1139         elem_name);
1140     GST_OBJECT_FLAG_SET (bin, GST_ELEMENT_FLAG_SOURCE);
1141   }
1142   if (provides_clock) {
1143     GST_DEBUG_OBJECT (bin, "element \"%s\" can provide a clock", elem_name);
1144     clock_message =
1145         gst_message_new_clock_provide (GST_OBJECT_CAST (element), NULL, TRUE);
1146     GST_OBJECT_FLAG_SET (bin, GST_ELEMENT_FLAG_PROVIDE_CLOCK);
1147   }
1148   if (requires_clock) {
1149     GST_DEBUG_OBJECT (bin, "element \"%s\" requires a clock", elem_name);
1150     GST_OBJECT_FLAG_SET (bin, GST_ELEMENT_FLAG_REQUIRE_CLOCK);
1151   }
1152
1153   bin->children = g_list_prepend (bin->children, element);
1154   bin->numchildren++;
1155   bin->children_cookie++;
1156   if (!GST_BIN_IS_NO_RESYNC (bin))
1157     bin->priv->structure_cookie++;
1158
1159   /* distribute the bus */
1160   gst_element_set_bus (element, bin->child_bus);
1161
1162   /* propagate the current base_time, start_time and clock */
1163   gst_element_set_base_time (element, GST_ELEMENT_CAST (bin)->base_time);
1164   gst_element_set_start_time (element, GST_ELEMENT_START_TIME (bin));
1165   /* it's possible that the element did not accept the clock but
1166    * that is not important right now. When the pipeline goes to PLAYING,
1167    * a new clock will be selected */
1168   gst_element_set_clock (element, GST_ELEMENT_CLOCK (bin));
1169
1170   /* get the element's list of contexts before propagating our own */
1171   elem_contexts = gst_element_get_contexts (element);
1172   for (l = GST_ELEMENT_CAST (bin)->contexts; l; l = l->next)
1173     gst_element_set_context (element, l->data);
1174
1175   need_context_messages = NULL;
1176   for (l = elem_contexts; l; l = l->next) {
1177     GstContext *replacement, *context = l->data;
1178     const gchar *context_type;
1179
1180     context_type = gst_context_get_context_type (context);
1181
1182     /* we already set this context above? */
1183     replacement =
1184         gst_element_get_context_unlocked (GST_ELEMENT (bin), context_type);
1185     if (replacement) {
1186       gst_context_unref (replacement);
1187     } else {
1188       GstMessage *msg;
1189       GstStructure *s;
1190
1191       /* ask our parent for the context */
1192       msg = gst_message_new_need_context (GST_OBJECT_CAST (bin), context_type);
1193       s = (GstStructure *) gst_message_get_structure (msg);
1194       gst_structure_set (s, "bin.old.context", GST_TYPE_CONTEXT, context, NULL);
1195
1196       need_context_messages = g_list_prepend (need_context_messages, msg);
1197     }
1198   }
1199
1200 #if 0
1201   /* set the cached index on the children */
1202   if (bin->priv->index)
1203     gst_element_set_index (element, bin->priv->index);
1204 #endif
1205
1206   ret = GST_STATE_RETURN (bin);
1207   /* no need to update the state if we are in error */
1208   if (ret == GST_STATE_CHANGE_FAILURE)
1209     goto no_state_recalc;
1210
1211   /* update the bin state, the new element could have been an ASYNC or
1212    * NO_PREROLL element */
1213   ret = GST_STATE_RETURN (element);
1214   GST_DEBUG_OBJECT (bin, "added %s element",
1215       gst_element_state_change_return_get_name (ret));
1216
1217   switch (ret) {
1218     case GST_STATE_CHANGE_ASYNC:
1219     {
1220       /* create message to track this aync element when it posts an async-done
1221        * message */
1222       async_message = gst_message_new_async_start (GST_OBJECT_CAST (element));
1223       break;
1224     }
1225     case GST_STATE_CHANGE_NO_PREROLL:
1226       /* ignore all async elements we might have and commit our state */
1227       bin_handle_async_done (bin, ret, FALSE, GST_CLOCK_TIME_NONE);
1228       break;
1229     case GST_STATE_CHANGE_FAILURE:
1230       break;
1231     default:
1232       break;
1233   }
1234
1235 no_state_recalc:
1236   GST_OBJECT_UNLOCK (bin);
1237
1238   for (l = need_context_messages; l; l = l->next) {
1239     GstMessage *msg = l->data;
1240     GstStructure *s;
1241     const gchar *context_type;
1242     GstContext *replacement, *context;
1243
1244     gst_message_parse_context_type (msg, &context_type);
1245
1246     GST_LOG_OBJECT (bin, "asking parent for context type: %s "
1247         "from %" GST_PTR_FORMAT, context_type, element);
1248
1249     s = (GstStructure *) gst_message_get_structure (msg);
1250     gst_structure_get (s, "bin.old.context", GST_TYPE_CONTEXT, &context, NULL);
1251     gst_structure_remove_field (s, "bin.old.context");
1252     gst_element_post_message (GST_ELEMENT_CAST (bin), msg);
1253
1254     /* lock to avoid losing a potential write */
1255     GST_OBJECT_LOCK (bin);
1256     replacement =
1257         gst_element_get_context_unlocked (GST_ELEMENT_CAST (bin), context_type);
1258
1259     if (replacement) {
1260       /* we got the context set from GstElement::set_context */
1261       gst_context_unref (replacement);
1262       GST_OBJECT_UNLOCK (bin);
1263     } else {
1264       /* Propagate the element's context upwards */
1265       GST_LOG_OBJECT (bin, "propagating existing context type: %s %p "
1266           "from %" GST_PTR_FORMAT, context_type, context, element);
1267
1268       gst_bin_update_context_unlocked (bin, context);
1269
1270       msg =
1271           gst_message_new_have_context (GST_OBJECT_CAST (bin),
1272           gst_context_ref (context));
1273       GST_OBJECT_UNLOCK (bin);
1274       gst_element_post_message (GST_ELEMENT_CAST (bin), msg);
1275     }
1276     gst_context_unref (context);
1277   }
1278   g_list_free_full (elem_contexts, (GDestroyNotify) gst_context_unref);
1279   g_list_free (need_context_messages);
1280
1281   /* post the messages on the bus of the element so that the bin can handle
1282    * them */
1283   if (clock_message)
1284     gst_element_post_message (element, clock_message);
1285
1286   if (async_message)
1287     gst_element_post_message (element, async_message);
1288
1289   /* unlink all linked pads */
1290   it = gst_element_iterate_pads (element);
1291   gst_iterator_foreach (it, (GstIteratorForeachFunction) unlink_pads, NULL);
1292   gst_iterator_free (it);
1293
1294   GST_CAT_DEBUG_OBJECT (GST_CAT_PARENTAGE, bin, "added element \"%s\"",
1295       elem_name);
1296
1297   g_signal_emit (bin, gst_bin_signals[ELEMENT_ADDED], 0, element);
1298   gst_child_proxy_child_added ((GstChildProxy *) bin, (GObject *) element,
1299       elem_name);
1300
1301   g_free (elem_name);
1302
1303   return TRUE;
1304
1305   /* ERROR handling here */
1306 adding_itself:
1307   {
1308     GST_OBJECT_LOCK (bin);
1309     g_warning ("Cannot add bin '%s' to itself", GST_ELEMENT_NAME (bin));
1310     GST_OBJECT_UNLOCK (bin);
1311     return FALSE;
1312   }
1313 duplicate_name:
1314   {
1315     g_warning ("Name '%s' is not unique in bin '%s', not adding",
1316         elem_name, GST_ELEMENT_NAME (bin));
1317     GST_OBJECT_UNLOCK (bin);
1318     g_free (elem_name);
1319     return FALSE;
1320   }
1321 had_parent:
1322   {
1323     g_warning ("Element '%s' already has parent", elem_name);
1324     GST_OBJECT_UNLOCK (bin);
1325     g_free (elem_name);
1326     return FALSE;
1327   }
1328 }
1329
1330 /**
1331  * gst_bin_add:
1332  * @bin: a #GstBin
1333  * @element: (transfer full): the #GstElement to add
1334  *
1335  * Adds the given element to the bin.  Sets the element's parent, and thus
1336  * takes ownership of the element. An element can only be added to one bin.
1337  *
1338  * If the element's pads are linked to other pads, the pads will be unlinked
1339  * before the element is added to the bin.
1340  *
1341  * <note>
1342  * When you add an element to an already-running pipeline, you will have to
1343  * take care to set the state of the newly-added element to the desired
1344  * state (usually PLAYING or PAUSED, same you set the pipeline to originally)
1345  * with gst_element_set_state(), or use gst_element_sync_state_with_parent().
1346  * The bin or pipeline will not take care of this for you.
1347  * </note>
1348  *
1349  * MT safe.
1350  *
1351  * Returns: %TRUE if the element could be added, %FALSE if
1352  * the bin does not want to accept the element.
1353  */
1354 gboolean
1355 gst_bin_add (GstBin * bin, GstElement * element)
1356 {
1357   GstBinClass *bclass;
1358   gboolean result;
1359
1360   g_return_val_if_fail (GST_IS_BIN (bin), FALSE);
1361   g_return_val_if_fail (GST_IS_ELEMENT (element), FALSE);
1362   g_return_val_if_fail (GST_ELEMENT_CAST (bin) != element, FALSE);
1363
1364   bclass = GST_BIN_GET_CLASS (bin);
1365
1366   if (G_UNLIKELY (bclass->add_element == NULL))
1367     goto no_function;
1368
1369   GST_CAT_DEBUG (GST_CAT_PARENTAGE, "adding element %s to bin %s",
1370       GST_STR_NULL (GST_ELEMENT_NAME (element)),
1371       GST_STR_NULL (GST_ELEMENT_NAME (bin)));
1372
1373   result = bclass->add_element (bin, element);
1374
1375   return result;
1376
1377   /* ERROR handling */
1378 no_function:
1379   {
1380     g_warning ("adding elements to bin '%s' is not supported",
1381         GST_ELEMENT_NAME (bin));
1382     return FALSE;
1383   }
1384 }
1385
1386 /* remove an element from the bin
1387  *
1388  * MT safe
1389  */
1390 static gboolean
1391 gst_bin_remove_func (GstBin * bin, GstElement * element)
1392 {
1393   gchar *elem_name;
1394   GstIterator *it;
1395   gboolean is_sink, is_source, provides_clock, requires_clock;
1396   gboolean othersink, othersource, otherprovider, otherrequirer, found;
1397   GstMessage *clock_message = NULL;
1398   GstClock **provided_clock_p;
1399   GstElement **clock_provider_p;
1400   GList *walk, *next;
1401   gboolean other_async, this_async, have_no_preroll;
1402   GstStateChangeReturn ret;
1403
1404   GST_DEBUG_OBJECT (bin, "element :%s", GST_ELEMENT_NAME (element));
1405
1406   /* we obviously can't remove ourself from ourself */
1407   if (G_UNLIKELY (element == GST_ELEMENT_CAST (bin)))
1408     goto removing_itself;
1409
1410   GST_OBJECT_LOCK (bin);
1411
1412   GST_OBJECT_LOCK (element);
1413   elem_name = g_strdup (GST_ELEMENT_NAME (element));
1414
1415   if (GST_OBJECT_PARENT (element) != GST_OBJECT_CAST (bin))
1416     goto not_in_bin;
1417
1418   /* remove the parent ref */
1419   GST_OBJECT_PARENT (element) = NULL;
1420
1421   /* grab element name so we can print it */
1422   is_sink = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_FLAG_SINK);
1423   is_source = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_FLAG_SOURCE);
1424   provides_clock =
1425       GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_FLAG_PROVIDE_CLOCK);
1426   requires_clock =
1427       GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_FLAG_REQUIRE_CLOCK);
1428   GST_OBJECT_UNLOCK (element);
1429
1430   found = FALSE;
1431   othersink = FALSE;
1432   othersource = FALSE;
1433   otherprovider = FALSE;
1434   otherrequirer = FALSE;
1435   have_no_preroll = FALSE;
1436   /* iterate the elements, we collect which ones are async and no_preroll. We
1437    * also remove the element when we find it. */
1438   for (walk = bin->children; walk; walk = next) {
1439     GstElement *child = GST_ELEMENT_CAST (walk->data);
1440
1441     next = g_list_next (walk);
1442
1443     if (child == element) {
1444       found = TRUE;
1445       /* remove the element */
1446       bin->children = g_list_delete_link (bin->children, walk);
1447     } else {
1448       gboolean child_sink, child_source, child_provider, child_requirer;
1449
1450       GST_OBJECT_LOCK (child);
1451       child_sink = GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_FLAG_SINK);
1452       child_source = GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_FLAG_SOURCE);
1453       child_provider =
1454           GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_FLAG_PROVIDE_CLOCK);
1455       child_requirer =
1456           GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_FLAG_REQUIRE_CLOCK);
1457       /* when we remove a sink, check if there are other sinks. */
1458       if (is_sink && !othersink && child_sink)
1459         othersink = TRUE;
1460       if (is_source && !othersource && child_source)
1461         othersource = TRUE;
1462       if (provides_clock && !otherprovider && child_provider)
1463         otherprovider = TRUE;
1464       if (requires_clock && !otherrequirer && child_requirer)
1465         otherrequirer = TRUE;
1466       /* check if we have NO_PREROLL children */
1467       if (GST_STATE_RETURN (child) == GST_STATE_CHANGE_NO_PREROLL)
1468         have_no_preroll = TRUE;
1469       GST_OBJECT_UNLOCK (child);
1470     }
1471   }
1472
1473   /* the element must have been in the bin's list of children */
1474   if (G_UNLIKELY (!found))
1475     goto not_in_bin;
1476
1477   /* we now removed the element from the list of elements, increment the cookie
1478    * so that others can detect a change in the children list. */
1479   bin->numchildren--;
1480   bin->children_cookie++;
1481   if (!GST_BIN_IS_NO_RESYNC (bin))
1482     bin->priv->structure_cookie++;
1483
1484   if (is_sink && !othersink) {
1485     /* we're not a sink anymore */
1486     GST_DEBUG_OBJECT (bin, "we removed the last sink");
1487     GST_OBJECT_FLAG_UNSET (bin, GST_ELEMENT_FLAG_SINK);
1488   }
1489   if (is_source && !othersource) {
1490     /* we're not a source anymore */
1491     GST_DEBUG_OBJECT (bin, "we removed the last source");
1492     GST_OBJECT_FLAG_UNSET (bin, GST_ELEMENT_FLAG_SOURCE);
1493   }
1494   if (provides_clock && !otherprovider) {
1495     /* we're not a clock provider anymore */
1496     GST_DEBUG_OBJECT (bin, "we removed the last clock provider");
1497     GST_OBJECT_FLAG_UNSET (bin, GST_ELEMENT_FLAG_PROVIDE_CLOCK);
1498   }
1499   if (requires_clock && !otherrequirer) {
1500     /* we're not a clock requirer anymore */
1501     GST_DEBUG_OBJECT (bin, "we removed the last clock requirer");
1502     GST_OBJECT_FLAG_UNSET (bin, GST_ELEMENT_FLAG_REQUIRE_CLOCK);
1503   }
1504
1505   /* if the clock provider for this element is removed, we lost
1506    * the clock as well, we need to inform the parent of this
1507    * so that it can select a new clock */
1508   if (bin->clock_provider == element) {
1509     GST_DEBUG_OBJECT (bin, "element \"%s\" provided the clock", elem_name);
1510     bin->clock_dirty = TRUE;
1511     clock_message =
1512         gst_message_new_clock_lost (GST_OBJECT_CAST (bin), bin->provided_clock);
1513     provided_clock_p = &bin->provided_clock;
1514     clock_provider_p = &bin->clock_provider;
1515     gst_object_replace ((GstObject **) provided_clock_p, NULL);
1516     gst_object_replace ((GstObject **) clock_provider_p, NULL);
1517   }
1518
1519   /* remove messages for the element, if there was a pending ASYNC_START
1520    * message we must see if removing the element caused the bin to lose its
1521    * async state. */
1522   this_async = FALSE;
1523   other_async = FALSE;
1524   for (walk = bin->messages; walk; walk = next) {
1525     GstMessage *message = (GstMessage *) walk->data;
1526     GstElement *src = GST_ELEMENT_CAST (GST_MESSAGE_SRC (message));
1527     gboolean remove;
1528
1529     next = g_list_next (walk);
1530     remove = FALSE;
1531
1532     switch (GST_MESSAGE_TYPE (message)) {
1533       case GST_MESSAGE_ASYNC_START:
1534         if (src == element)
1535           this_async = TRUE;
1536         else
1537           other_async = TRUE;
1538
1539         GST_DEBUG_OBJECT (src, "looking at message %p", message);
1540         break;
1541       case GST_MESSAGE_STRUCTURE_CHANGE:
1542       {
1543         GstElement *owner;
1544
1545         GST_DEBUG_OBJECT (src, "looking at structure change message %p",
1546             message);
1547         /* it's unlikely that this message is still in the list of messages
1548          * because this would mean that a link/unlink is busy in another thread
1549          * while we remove the element. We still have to remove the message
1550          * because we might not receive the done message anymore when the element
1551          * is removed from the bin. */
1552         gst_message_parse_structure_change (message, NULL, &owner, NULL);
1553         if (owner == element)
1554           remove = TRUE;
1555         break;
1556       }
1557       default:
1558         break;
1559     }
1560     if (src == element)
1561       remove = TRUE;
1562
1563     if (remove) {
1564       /* delete all message types */
1565       GST_DEBUG_OBJECT (src, "deleting message %p of element \"%s\"",
1566           message, elem_name);
1567       bin->messages = g_list_delete_link (bin->messages, walk);
1568       gst_message_unref (message);
1569     }
1570   }
1571
1572   /* get last return */
1573   ret = GST_STATE_RETURN (bin);
1574
1575   /* no need to update the state if we are in error */
1576   if (ret == GST_STATE_CHANGE_FAILURE)
1577     goto no_state_recalc;
1578
1579   if (!other_async && this_async) {
1580     /* all other elements were not async and we removed the async one,
1581      * handle the async-done case because we are not async anymore now. */
1582     GST_DEBUG_OBJECT (bin,
1583         "we removed the last async element, have no_preroll %d",
1584         have_no_preroll);
1585
1586     /* the current state return of the bin depends on if there are no_preroll
1587      * elements in the pipeline or not */
1588     if (have_no_preroll)
1589       ret = GST_STATE_CHANGE_NO_PREROLL;
1590     else
1591       ret = GST_STATE_CHANGE_SUCCESS;
1592
1593     bin_handle_async_done (bin, ret, FALSE, GST_CLOCK_TIME_NONE);
1594   } else {
1595     GST_DEBUG_OBJECT (bin,
1596         "recalc state preroll: %d, other async: %d, this async %d",
1597         have_no_preroll, other_async, this_async);
1598
1599     if (have_no_preroll) {
1600       ret = GST_STATE_CHANGE_NO_PREROLL;
1601     } else if (other_async) {
1602       /* there are other async elements and we were not doing an async state
1603        * change, change our pending state and go async */
1604       if (GST_STATE_PENDING (bin) == GST_STATE_VOID_PENDING) {
1605         GST_STATE_NEXT (bin) = GST_STATE (bin);
1606         GST_STATE_PENDING (bin) = GST_STATE (bin);
1607       }
1608       ret = GST_STATE_CHANGE_ASYNC;
1609     }
1610     GST_STATE_RETURN (bin) = ret;
1611   }
1612 no_state_recalc:
1613   /* clear bus */
1614   gst_element_set_bus (element, NULL);
1615   /* Clear the clock we provided to the element */
1616   gst_element_set_clock (element, NULL);
1617   GST_OBJECT_UNLOCK (bin);
1618
1619   if (clock_message)
1620     gst_element_post_message (GST_ELEMENT_CAST (bin), clock_message);
1621
1622   /* unlink all linked pads */
1623   it = gst_element_iterate_pads (element);
1624   gst_iterator_foreach (it, (GstIteratorForeachFunction) unlink_pads, NULL);
1625   gst_iterator_free (it);
1626
1627   GST_CAT_INFO_OBJECT (GST_CAT_PARENTAGE, bin, "removed child \"%s\"",
1628       elem_name);
1629
1630   g_signal_emit (bin, gst_bin_signals[ELEMENT_REMOVED], 0, element);
1631   gst_child_proxy_child_removed ((GstChildProxy *) bin, (GObject *) element,
1632       elem_name);
1633
1634   g_free (elem_name);
1635   /* element is really out of our control now */
1636   gst_object_unref (element);
1637
1638   return TRUE;
1639
1640   /* ERROR handling */
1641 removing_itself:
1642   {
1643     GST_OBJECT_LOCK (bin);
1644     g_warning ("Cannot remove bin '%s' from itself", GST_ELEMENT_NAME (bin));
1645     GST_OBJECT_UNLOCK (bin);
1646     return FALSE;
1647   }
1648 not_in_bin:
1649   {
1650     g_warning ("Element '%s' is not in bin '%s'", elem_name,
1651         GST_ELEMENT_NAME (bin));
1652     GST_OBJECT_UNLOCK (element);
1653     GST_OBJECT_UNLOCK (bin);
1654     g_free (elem_name);
1655     return FALSE;
1656   }
1657 }
1658
1659 /**
1660  * gst_bin_remove:
1661  * @bin: a #GstBin
1662  * @element: (transfer none): the #GstElement to remove
1663  *
1664  * Removes the element from the bin, unparenting it as well.
1665  * Unparenting the element means that the element will be dereferenced,
1666  * so if the bin holds the only reference to the element, the element
1667  * will be freed in the process of removing it from the bin.  If you
1668  * want the element to still exist after removing, you need to call
1669  * gst_object_ref() before removing it from the bin.
1670  *
1671  * If the element's pads are linked to other pads, the pads will be unlinked
1672  * before the element is removed from the bin.
1673  *
1674  * MT safe.
1675  *
1676  * Returns: %TRUE if the element could be removed, %FALSE if
1677  * the bin does not want to remove the element.
1678  */
1679 gboolean
1680 gst_bin_remove (GstBin * bin, GstElement * element)
1681 {
1682   GstBinClass *bclass;
1683   gboolean result;
1684
1685   g_return_val_if_fail (GST_IS_BIN (bin), FALSE);
1686   g_return_val_if_fail (GST_IS_ELEMENT (element), FALSE);
1687   g_return_val_if_fail (GST_ELEMENT_CAST (bin) != element, FALSE);
1688
1689   bclass = GST_BIN_GET_CLASS (bin);
1690
1691   if (G_UNLIKELY (bclass->remove_element == NULL))
1692     goto no_function;
1693
1694   GST_CAT_DEBUG (GST_CAT_PARENTAGE, "removing element %s from bin %s",
1695       GST_ELEMENT_NAME (element), GST_ELEMENT_NAME (bin));
1696
1697   result = bclass->remove_element (bin, element);
1698
1699   return result;
1700
1701   /* ERROR handling */
1702 no_function:
1703   {
1704     g_warning ("removing elements from bin '%s' is not supported",
1705         GST_ELEMENT_NAME (bin));
1706     return FALSE;
1707   }
1708 }
1709
1710 /**
1711  * gst_bin_iterate_elements:
1712  * @bin: a #GstBin
1713  *
1714  * Gets an iterator for the elements in this bin.
1715  *
1716  * MT safe.  Caller owns returned value.
1717  *
1718  * Returns: (transfer full) (nullable): a #GstIterator of #GstElement,
1719  * or %NULL
1720  */
1721 GstIterator *
1722 gst_bin_iterate_elements (GstBin * bin)
1723 {
1724   GstIterator *result;
1725
1726   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
1727
1728   GST_OBJECT_LOCK (bin);
1729   result = gst_iterator_new_list (GST_TYPE_ELEMENT,
1730       GST_OBJECT_GET_LOCK (bin),
1731       &bin->children_cookie, &bin->children, (GObject *) bin, NULL);
1732   GST_OBJECT_UNLOCK (bin);
1733
1734   return result;
1735 }
1736
1737 static GstIteratorItem
1738 iterate_child_recurse (GstIterator * it, const GValue * item)
1739 {
1740   GstElement *child = g_value_get_object (item);
1741
1742   if (GST_IS_BIN (child)) {
1743     GstIterator *other = gst_bin_iterate_recurse (GST_BIN_CAST (child));
1744
1745     gst_iterator_push (it, other);
1746   }
1747   return GST_ITERATOR_ITEM_PASS;
1748 }
1749
1750 /**
1751  * gst_bin_iterate_recurse:
1752  * @bin: a #GstBin
1753  *
1754  * Gets an iterator for the elements in this bin.
1755  * This iterator recurses into GstBin children.
1756  *
1757  * MT safe.  Caller owns returned value.
1758  *
1759  * Returns: (transfer full) (nullable): a #GstIterator of #GstElement,
1760  * or %NULL
1761  */
1762 GstIterator *
1763 gst_bin_iterate_recurse (GstBin * bin)
1764 {
1765   GstIterator *result;
1766
1767   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
1768
1769   GST_OBJECT_LOCK (bin);
1770   result = gst_iterator_new_list (GST_TYPE_ELEMENT,
1771       GST_OBJECT_GET_LOCK (bin),
1772       &bin->children_cookie,
1773       &bin->children,
1774       (GObject *) bin, (GstIteratorItemFunction) iterate_child_recurse);
1775   GST_OBJECT_UNLOCK (bin);
1776
1777   return result;
1778 }
1779
1780 /* returns 0 when TRUE because this is a GCompareFunc */
1781 /* MT safe */
1782 static gint
1783 bin_element_is_sink (GstElement * child, GstBin * bin)
1784 {
1785   gboolean is_sink;
1786
1787   /* we lock the child here for the remainder of the function to
1788    * get its name and flag safely. */
1789   GST_OBJECT_LOCK (child);
1790   is_sink = GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_FLAG_SINK);
1791
1792   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin,
1793       "child %s %s sink", GST_OBJECT_NAME (child), is_sink ? "is" : "is not");
1794
1795   GST_OBJECT_UNLOCK (child);
1796   return is_sink ? 0 : 1;
1797 }
1798
1799 static gint
1800 sink_iterator_filter (const GValue * vchild, GValue * vbin)
1801 {
1802   GstBin *bin = g_value_get_object (vbin);
1803   GstElement *child = g_value_get_object (vchild);
1804
1805   return (bin_element_is_sink (child, bin));
1806 }
1807
1808 /**
1809  * gst_bin_iterate_sinks:
1810  * @bin: a #GstBin
1811  *
1812  * Gets an iterator for all elements in the bin that have the
1813  * #GST_ELEMENT_FLAG_SINK flag set.
1814  *
1815  * MT safe.  Caller owns returned value.
1816  *
1817  * Returns: (transfer full) (nullable): a #GstIterator of #GstElement,
1818  * or %NULL
1819  */
1820 GstIterator *
1821 gst_bin_iterate_sinks (GstBin * bin)
1822 {
1823   GstIterator *children;
1824   GstIterator *result;
1825   GValue vbin = { 0, };
1826
1827   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
1828
1829   g_value_init (&vbin, GST_TYPE_BIN);
1830   g_value_set_object (&vbin, bin);
1831
1832   children = gst_bin_iterate_elements (bin);
1833   result = gst_iterator_filter (children,
1834       (GCompareFunc) sink_iterator_filter, &vbin);
1835
1836   g_value_unset (&vbin);
1837
1838   return result;
1839 }
1840
1841 /* returns 0 when TRUE because this is a GCompareFunc */
1842 /* MT safe */
1843 static gint
1844 bin_element_is_src (GstElement * child, GstBin * bin)
1845 {
1846   gboolean is_src;
1847
1848   /* we lock the child here for the remainder of the function to
1849    * get its name and other info safely. */
1850   GST_OBJECT_LOCK (child);
1851   is_src = GST_OBJECT_FLAG_IS_SET (child, GST_ELEMENT_FLAG_SOURCE);
1852
1853   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin,
1854       "child %s %s src", GST_OBJECT_NAME (child), is_src ? "is" : "is not");
1855
1856   GST_OBJECT_UNLOCK (child);
1857   return is_src ? 0 : 1;
1858 }
1859
1860 static gint
1861 src_iterator_filter (const GValue * vchild, GValue * vbin)
1862 {
1863   GstBin *bin = g_value_get_object (vbin);
1864   GstElement *child = g_value_get_object (vchild);
1865
1866   return (bin_element_is_src (child, bin));
1867 }
1868
1869 /**
1870  * gst_bin_iterate_sources:
1871  * @bin: a #GstBin
1872  *
1873  * Gets an iterator for all elements in the bin that have the
1874  * #GST_ELEMENT_FLAG_SOURCE flag set.
1875  *
1876  * MT safe.  Caller owns returned value.
1877  *
1878  * Returns: (transfer full) (nullable): a #GstIterator of #GstElement,
1879  * or %NULL
1880  */
1881 GstIterator *
1882 gst_bin_iterate_sources (GstBin * bin)
1883 {
1884   GstIterator *children;
1885   GstIterator *result;
1886   GValue vbin = { 0, };
1887
1888   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
1889
1890   g_value_init (&vbin, GST_TYPE_BIN);
1891   g_value_set_object (&vbin, bin);
1892
1893   children = gst_bin_iterate_elements (bin);
1894   result = gst_iterator_filter (children,
1895       (GCompareFunc) src_iterator_filter, &vbin);
1896
1897   g_value_unset (&vbin);
1898
1899   return result;
1900 }
1901
1902 /*
1903  * MT safe
1904  */
1905 static GstStateChangeReturn
1906 gst_bin_get_state_func (GstElement * element, GstState * state,
1907     GstState * pending, GstClockTime timeout)
1908 {
1909   GstStateChangeReturn ret;
1910
1911   GST_CAT_INFO_OBJECT (GST_CAT_STATES, element, "getting state");
1912
1913   ret =
1914       GST_ELEMENT_CLASS (parent_class)->get_state (element, state, pending,
1915       timeout);
1916
1917   return ret;
1918 }
1919
1920 /***********************************************
1921  * Topologically sorted iterator
1922  * see http://en.wikipedia.org/wiki/Topological_sorting
1923  *
1924  * For each element in the graph, an entry is kept in a HashTable
1925  * with its number of srcpad connections (degree).
1926  * We then change state of all elements without dependencies
1927  * (degree 0) and decrement the degree of all elements connected
1928  * on the sinkpads. When an element reaches degree 0, its state is
1929  * changed next.
1930  * When all elements are handled the algorithm stops.
1931  */
1932 typedef struct _GstBinSortIterator
1933 {
1934   GstIterator it;
1935   GQueue queue;                 /* elements queued for state change */
1936   GstBin *bin;                  /* bin we iterate */
1937   gint mode;                    /* adding or removing dependency */
1938   GstElement *best;             /* next element with least dependencies */
1939   gint best_deg;                /* best degree */
1940   GHashTable *hash;             /* hashtable with element dependencies */
1941   gboolean dirty;               /* we detected structure change */
1942 } GstBinSortIterator;
1943
1944 static void
1945 gst_bin_sort_iterator_copy (const GstBinSortIterator * it,
1946     GstBinSortIterator * copy)
1947 {
1948   GHashTableIter iter;
1949   gpointer key, value;
1950
1951   copy->queue = it->queue;
1952   g_queue_foreach (&copy->queue, (GFunc) gst_object_ref, NULL);
1953
1954   copy->bin = gst_object_ref (it->bin);
1955   if (it->best)
1956     copy->best = gst_object_ref (it->best);
1957
1958   copy->hash = g_hash_table_new (NULL, NULL);
1959   g_hash_table_iter_init (&iter, it->hash);
1960   while (g_hash_table_iter_next (&iter, &key, &value))
1961     g_hash_table_insert (copy->hash, key, value);
1962 }
1963
1964 /* we add and subtract 1 to make sure we don't confuse NULL and 0 */
1965 #define HASH_SET_DEGREE(bit, elem, deg) \
1966     g_hash_table_replace (bit->hash, elem, GINT_TO_POINTER(deg+1))
1967 #define HASH_GET_DEGREE(bit, elem) \
1968     (GPOINTER_TO_INT(g_hash_table_lookup (bit->hash, elem))-1)
1969
1970 /* add element to queue of next elements in the iterator.
1971  * We push at the tail to give higher priority elements a
1972  * chance first */
1973 static void
1974 add_to_queue (GstBinSortIterator * bit, GstElement * element)
1975 {
1976   GST_DEBUG_OBJECT (bit->bin, "adding '%s' to queue",
1977       GST_ELEMENT_NAME (element));
1978   gst_object_ref (element);
1979   g_queue_push_tail (&bit->queue, element);
1980   HASH_SET_DEGREE (bit, element, -1);
1981 }
1982
1983 static void
1984 remove_from_queue (GstBinSortIterator * bit, GstElement * element)
1985 {
1986   GList *find;
1987
1988   if ((find = g_queue_find (&bit->queue, element))) {
1989     GST_DEBUG_OBJECT (bit->bin, "removing '%s' from queue",
1990         GST_ELEMENT_NAME (element));
1991
1992     g_queue_delete_link (&bit->queue, find);
1993     gst_object_unref (element);
1994   } else {
1995     GST_DEBUG_OBJECT (bit->bin, "unable to remove '%s' from queue",
1996         GST_ELEMENT_NAME (element));
1997   }
1998 }
1999
2000 /* clear the queue, unref all objects as we took a ref when
2001  * we added them to the queue */
2002 static void
2003 clear_queue (GQueue * queue)
2004 {
2005   gpointer p;
2006
2007   while ((p = g_queue_pop_head (queue)))
2008     gst_object_unref (p);
2009 }
2010
2011 /* set all degrees to 0. Elements marked as a sink are
2012  * added to the queue immediately. Since we only look at the SINK flag of the
2013  * element, it is possible that we add non-sinks to the queue. These will be
2014  * removed from the queue again when we can prove that it provides data for some
2015  * other element. */
2016 static void
2017 reset_degree (GstElement * element, GstBinSortIterator * bit)
2018 {
2019   gboolean is_sink;
2020
2021   /* sinks are added right away */
2022   GST_OBJECT_LOCK (element);
2023   is_sink = GST_OBJECT_FLAG_IS_SET (element, GST_ELEMENT_FLAG_SINK);
2024   GST_OBJECT_UNLOCK (element);
2025
2026   if (is_sink) {
2027     add_to_queue (bit, element);
2028   } else {
2029     /* others are marked with 0 and handled when sinks are done */
2030     HASH_SET_DEGREE (bit, element, 0);
2031   }
2032 }
2033
2034 /* adjust the degree of all elements connected to the given
2035  * element. If a degree of an element drops to 0, it is
2036  * added to the queue of elements to schedule next.
2037  *
2038  * We have to make sure not to cross the bin boundary this element
2039  * belongs to.
2040  */
2041 static void
2042 update_degree (GstElement * element, GstBinSortIterator * bit)
2043 {
2044   gboolean linked = FALSE;
2045
2046   GST_OBJECT_LOCK (element);
2047   /* don't touch degree if element has no sinkpads */
2048   if (element->numsinkpads != 0) {
2049     /* loop over all sinkpads, decrement degree for all connected
2050      * elements in this bin */
2051     GList *pads;
2052
2053     for (pads = element->sinkpads; pads; pads = g_list_next (pads)) {
2054       GstPad *pad, *peer;
2055
2056       pad = GST_PAD_CAST (pads->data);
2057
2058       /* we're iterating over the sinkpads, check if it's busy in a link/unlink */
2059       if (G_UNLIKELY (find_message (bit->bin, GST_OBJECT_CAST (pad),
2060                   GST_MESSAGE_STRUCTURE_CHANGE))) {
2061         /* mark the iterator as dirty because we won't be updating the degree
2062          * of the peer parent now. This would result in the 'loop detected'
2063          * later on because the peer parent element could become the best next
2064          * element with a degree > 0. We will simply continue our state
2065          * changes and we'll eventually resync when the unlink completed and
2066          * the iterator cookie is updated. */
2067         bit->dirty = TRUE;
2068         continue;
2069       }
2070
2071       if ((peer = gst_pad_get_peer (pad))) {
2072         GstElement *peer_element;
2073
2074         if ((peer_element = gst_pad_get_parent_element (peer))) {
2075           GST_OBJECT_LOCK (peer_element);
2076           /* check that we don't go outside of this bin */
2077           if (GST_OBJECT_CAST (peer_element)->parent ==
2078               GST_OBJECT_CAST (bit->bin)) {
2079             gint old_deg, new_deg;
2080
2081             old_deg = HASH_GET_DEGREE (bit, peer_element);
2082
2083             /* check to see if we added an element as sink that was not really a
2084              * sink because it was connected to some other element. */
2085             if (old_deg == -1) {
2086               remove_from_queue (bit, peer_element);
2087               old_deg = 0;
2088             }
2089             new_deg = old_deg + bit->mode;
2090
2091             GST_DEBUG_OBJECT (bit->bin,
2092                 "change element %s, degree %d->%d, linked to %s",
2093                 GST_ELEMENT_NAME (peer_element), old_deg, new_deg,
2094                 GST_ELEMENT_NAME (element));
2095
2096             /* update degree, it is possible that an element was in 0 and
2097              * reaches -1 here. This would mean that the element had no sinkpads
2098              * but became linked while the state change was happening. We will
2099              * resync on this with the structure change message. */
2100             if (new_deg == 0) {
2101               /* degree hit 0, add to queue */
2102               add_to_queue (bit, peer_element);
2103             } else {
2104               HASH_SET_DEGREE (bit, peer_element, new_deg);
2105             }
2106             linked = TRUE;
2107           }
2108           GST_OBJECT_UNLOCK (peer_element);
2109           gst_object_unref (peer_element);
2110         }
2111         gst_object_unref (peer);
2112       }
2113     }
2114   }
2115   if (!linked) {
2116     GST_DEBUG_OBJECT (bit->bin, "element %s not linked on any sinkpads",
2117         GST_ELEMENT_NAME (element));
2118   }
2119   GST_OBJECT_UNLOCK (element);
2120 }
2121
2122 /* find the next best element not handled yet. This is the one
2123  * with the lowest non-negative degree */
2124 static void
2125 find_element (GstElement * element, GstBinSortIterator * bit)
2126 {
2127   gint degree;
2128
2129   /* element is already handled */
2130   if ((degree = HASH_GET_DEGREE (bit, element)) < 0)
2131     return;
2132
2133   /* first element or element with smaller degree */
2134   if (bit->best == NULL || bit->best_deg > degree) {
2135     bit->best = element;
2136     bit->best_deg = degree;
2137   }
2138 }
2139
2140 /* get next element in iterator. */
2141 static GstIteratorResult
2142 gst_bin_sort_iterator_next (GstBinSortIterator * bit, GValue * result)
2143 {
2144   GstElement *best;
2145   GstBin *bin = bit->bin;
2146
2147   /* empty queue, we have to find a next best element */
2148   if (g_queue_is_empty (&bit->queue)) {
2149     bit->best = NULL;
2150     bit->best_deg = G_MAXINT;
2151     g_list_foreach (bin->children, (GFunc) find_element, bit);
2152     if ((best = bit->best)) {
2153       /* when we detected an unlink, don't warn because our degrees might be
2154        * screwed up. We will resync later */
2155       if (bit->best_deg != 0 && !bit->dirty) {
2156         /* we don't fail on this one yet */
2157         GST_WARNING_OBJECT (bin, "loop dected in graph");
2158         g_warning ("loop detected in the graph of bin '%s'!!",
2159             GST_ELEMENT_NAME (bin));
2160       }
2161       /* best unhandled element, schedule as next element */
2162       GST_DEBUG_OBJECT (bin, "queue empty, next best: %s",
2163           GST_ELEMENT_NAME (best));
2164       HASH_SET_DEGREE (bit, best, -1);
2165       g_value_set_object (result, best);
2166     } else {
2167       GST_DEBUG_OBJECT (bin, "queue empty, elements exhausted");
2168       /* no more unhandled elements, we are done */
2169       return GST_ITERATOR_DONE;
2170     }
2171   } else {
2172     /* everything added to the queue got reffed */
2173     best = g_queue_pop_head (&bit->queue);
2174     g_value_set_object (result, best);
2175     gst_object_unref (best);
2176   }
2177
2178   GST_DEBUG_OBJECT (bin, "queue head gives %s", GST_ELEMENT_NAME (best));
2179   /* update degrees of linked elements */
2180   update_degree (best, bit);
2181
2182   return GST_ITERATOR_OK;
2183 }
2184
2185 /* clear queues, recalculate the degrees and restart. */
2186 static void
2187 gst_bin_sort_iterator_resync (GstBinSortIterator * bit)
2188 {
2189   GstBin *bin = bit->bin;
2190
2191   GST_DEBUG_OBJECT (bin, "resync");
2192   bit->dirty = FALSE;
2193   clear_queue (&bit->queue);
2194   /* reset degrees */
2195   g_list_foreach (bin->children, (GFunc) reset_degree, bit);
2196   /* calc degrees, incrementing */
2197   bit->mode = 1;
2198   g_list_foreach (bin->children, (GFunc) update_degree, bit);
2199   /* for the rest of the function we decrement the degrees */
2200   bit->mode = -1;
2201 }
2202
2203 /* clear queues, unref bin and free iterator. */
2204 static void
2205 gst_bin_sort_iterator_free (GstBinSortIterator * bit)
2206 {
2207   GstBin *bin = bit->bin;
2208
2209   GST_DEBUG_OBJECT (bin, "free");
2210   clear_queue (&bit->queue);
2211   g_hash_table_destroy (bit->hash);
2212   gst_object_unref (bin);
2213 }
2214
2215 /* should be called with the bin LOCK held */
2216 static GstIterator *
2217 gst_bin_sort_iterator_new (GstBin * bin)
2218 {
2219   GstBinSortIterator *result;
2220
2221   /* we don't need an ItemFunction because we ref the items in the _next
2222    * method already */
2223   result = (GstBinSortIterator *)
2224       gst_iterator_new (sizeof (GstBinSortIterator),
2225       GST_TYPE_ELEMENT,
2226       GST_OBJECT_GET_LOCK (bin),
2227       &bin->priv->structure_cookie,
2228       (GstIteratorCopyFunction) gst_bin_sort_iterator_copy,
2229       (GstIteratorNextFunction) gst_bin_sort_iterator_next,
2230       (GstIteratorItemFunction) NULL,
2231       (GstIteratorResyncFunction) gst_bin_sort_iterator_resync,
2232       (GstIteratorFreeFunction) gst_bin_sort_iterator_free);
2233   g_queue_init (&result->queue);
2234   result->hash = g_hash_table_new (NULL, NULL);
2235   gst_object_ref (bin);
2236   result->bin = bin;
2237   gst_bin_sort_iterator_resync (result);
2238
2239   return (GstIterator *) result;
2240 }
2241
2242 /**
2243  * gst_bin_iterate_sorted:
2244  * @bin: a #GstBin
2245  *
2246  * Gets an iterator for the elements in this bin in topologically
2247  * sorted order. This means that the elements are returned from
2248  * the most downstream elements (sinks) to the sources.
2249  *
2250  * This function is used internally to perform the state changes
2251  * of the bin elements and for clock selection.
2252  *
2253  * MT safe.  Caller owns returned value.
2254  *
2255  * Returns: (transfer full) (nullable): a #GstIterator of #GstElement,
2256  * or %NULL
2257  */
2258 GstIterator *
2259 gst_bin_iterate_sorted (GstBin * bin)
2260 {
2261   GstIterator *result;
2262
2263   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
2264
2265   GST_OBJECT_LOCK (bin);
2266   result = gst_bin_sort_iterator_new (bin);
2267   GST_OBJECT_UNLOCK (bin);
2268
2269   return result;
2270 }
2271
2272 static GstStateChangeReturn
2273 gst_bin_element_set_state (GstBin * bin, GstElement * element,
2274     GstClockTime base_time, GstClockTime start_time, GstState current,
2275     GstState next)
2276 {
2277   GstStateChangeReturn ret;
2278   GstState child_current, child_pending;
2279   gboolean locked;
2280   GList *found;
2281
2282   GST_STATE_LOCK (element);
2283
2284   GST_OBJECT_LOCK (element);
2285   /* set base_time and start time on child */
2286   GST_ELEMENT_START_TIME (element) = start_time;
2287   element->base_time = base_time;
2288   /* peel off the locked flag */
2289   locked = GST_ELEMENT_IS_LOCKED_STATE (element);
2290   /* Get the previous set_state result to preserve NO_PREROLL and ASYNC */
2291   ret = GST_STATE_RETURN (element);
2292   child_current = GST_STATE (element);
2293   child_pending = GST_STATE_PENDING (element);
2294   GST_OBJECT_UNLOCK (element);
2295
2296   /* skip locked elements */
2297   if (G_UNLIKELY (locked))
2298     goto locked;
2299
2300   /* if the element was no preroll, just start changing the state regardless
2301    * if it had async elements (in the case of a bin) because they won't preroll
2302    * anyway. */
2303   if (G_UNLIKELY (ret == GST_STATE_CHANGE_NO_PREROLL)) {
2304     GST_DEBUG_OBJECT (element, "element is NO_PREROLL, ignore async elements");
2305     goto no_preroll;
2306   }
2307
2308   GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2309       "current %s pending %s, desired next %s",
2310       gst_element_state_get_name (child_current),
2311       gst_element_state_get_name (child_pending),
2312       gst_element_state_get_name (next));
2313
2314   /* always recurse into bins so that we can set the base time */
2315   if (GST_IS_BIN (element))
2316     goto do_state;
2317
2318   /* Try not to change the state of elements that are already in the state we're
2319    * going to */
2320   if (child_current == next && child_pending == GST_STATE_VOID_PENDING) {
2321     /* child is already at the requested state, return previous return. Note that
2322      * if the child has a pending state to next, we will still call the
2323      * set_state function */
2324     goto unneeded;
2325   } else if (next > current) {
2326     /* upward state change */
2327     if (child_pending == GST_STATE_VOID_PENDING) {
2328       /* .. and the child is not busy doing anything */
2329       if (child_current > next) {
2330         /* .. and is already past the requested state, assume it got there
2331          * without error */
2332         ret = GST_STATE_CHANGE_SUCCESS;
2333         goto unneeded;
2334       }
2335     } else if (child_pending > child_current) {
2336       /* .. and the child is busy going upwards */
2337       if (child_current >= next) {
2338         /* .. and is already past the requested state, assume it got there
2339          * without error */
2340         ret = GST_STATE_CHANGE_SUCCESS;
2341         goto unneeded;
2342       }
2343     } else {
2344       /* .. and the child is busy going downwards */
2345       if (child_current > next) {
2346         /* .. and is already past the requested state, assume it got there
2347          * without error */
2348         ret = GST_STATE_CHANGE_SUCCESS;
2349         goto unneeded;
2350       }
2351     }
2352   } else if (next < current) {
2353     /* downward state change */
2354     if (child_pending == GST_STATE_VOID_PENDING) {
2355       /* .. and the child is not busy doing anything */
2356       if (child_current < next) {
2357         /* .. and is already past the requested state, assume it got there
2358          * without error */
2359         ret = GST_STATE_CHANGE_SUCCESS;
2360         goto unneeded;
2361       }
2362     } else if (child_pending < child_current) {
2363       /* .. and the child is busy going downwards */
2364       if (child_current <= next) {
2365         /* .. and is already past the requested state, assume it got there
2366          * without error */
2367         ret = GST_STATE_CHANGE_SUCCESS;
2368         goto unneeded;
2369       }
2370     } else {
2371       /* .. and the child is busy going upwards */
2372       if (child_current < next) {
2373         /* .. and is already past the requested state, assume it got there
2374          * without error */
2375         ret = GST_STATE_CHANGE_SUCCESS;
2376         goto unneeded;
2377       }
2378     }
2379   }
2380
2381 do_state:
2382   GST_OBJECT_LOCK (bin);
2383   /* the element was busy with an upwards async state change, we must wait for
2384    * an ASYNC_DONE message before we attemp to change the state. */
2385   if ((found =
2386           find_message (bin, GST_OBJECT_CAST (element),
2387               GST_MESSAGE_ASYNC_START))) {
2388 #ifndef GST_DISABLE_GST_DEBUG
2389     GstMessage *message = GST_MESSAGE_CAST (found->data);
2390
2391     GST_DEBUG_OBJECT (element, "element message %p, %s async busy",
2392         message, GST_ELEMENT_NAME (GST_MESSAGE_SRC (message)));
2393 #endif
2394     /* only wait for upward state changes */
2395     if (next > current) {
2396       /* We found an async element check if we can force its state to change or
2397        * if we have to wait for it to preroll. */
2398       goto was_busy;
2399     }
2400   }
2401   GST_OBJECT_UNLOCK (bin);
2402
2403 no_preroll:
2404   GST_DEBUG_OBJECT (bin,
2405       "setting element %s to %s, base_time %" GST_TIME_FORMAT,
2406       GST_ELEMENT_NAME (element), gst_element_state_get_name (next),
2407       GST_TIME_ARGS (base_time));
2408
2409   /* change state */
2410   ret = gst_element_set_state (element, next);
2411
2412   GST_STATE_UNLOCK (element);
2413
2414   return ret;
2415
2416 locked:
2417   {
2418     GST_DEBUG_OBJECT (element,
2419         "element is locked, return previous return %s",
2420         gst_element_state_change_return_get_name (ret));
2421     GST_STATE_UNLOCK (element);
2422     return ret;
2423   }
2424 unneeded:
2425   {
2426     GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2427         "skipping transition from %s to  %s",
2428         gst_element_state_get_name (child_current),
2429         gst_element_state_get_name (next));
2430     GST_STATE_UNLOCK (element);
2431     return ret;
2432   }
2433 was_busy:
2434   {
2435     GST_DEBUG_OBJECT (element, "element was busy, delaying state change");
2436     GST_OBJECT_UNLOCK (bin);
2437     GST_STATE_UNLOCK (element);
2438     return GST_STATE_CHANGE_ASYNC;
2439   }
2440 }
2441
2442 /* gst_iterator_fold functions for pads_activate
2443  * Stop the iterator if activating one pad failed, but only if that pad
2444  * has not been removed from the element. */
2445 static gboolean
2446 activate_pads (const GValue * vpad, GValue * ret, gboolean * active)
2447 {
2448   GstPad *pad = g_value_get_object (vpad);
2449   gboolean cont = TRUE;
2450
2451   if (!gst_pad_set_active (pad, *active)) {
2452     if (GST_PAD_PARENT (pad) != NULL) {
2453       cont = FALSE;
2454       g_value_set_boolean (ret, FALSE);
2455     }
2456   }
2457
2458   return cont;
2459 }
2460
2461 /* returns false on error or early cutout of the fold, true if all
2462  * pads in @iter were (de)activated successfully. */
2463 static gboolean
2464 iterator_activate_fold_with_resync (GstIterator * iter, gpointer user_data)
2465 {
2466   GstIteratorResult ires;
2467   GValue ret = { 0 };
2468
2469   /* no need to unset this later, it's just a boolean */
2470   g_value_init (&ret, G_TYPE_BOOLEAN);
2471   g_value_set_boolean (&ret, TRUE);
2472
2473   while (1) {
2474     ires = gst_iterator_fold (iter, (GstIteratorFoldFunction) activate_pads,
2475         &ret, user_data);
2476     switch (ires) {
2477       case GST_ITERATOR_RESYNC:
2478         /* need to reset the result again */
2479         g_value_set_boolean (&ret, TRUE);
2480         gst_iterator_resync (iter);
2481         break;
2482       case GST_ITERATOR_DONE:
2483         /* all pads iterated, return collected value */
2484         goto done;
2485       default:
2486         /* iterator returned _ERROR or premature end with _OK,
2487          * mark an error and exit */
2488         g_value_set_boolean (&ret, FALSE);
2489         goto done;
2490     }
2491   }
2492 done:
2493   /* return collected value */
2494   return g_value_get_boolean (&ret);
2495 }
2496
2497 /* is called with STATE_LOCK
2498  */
2499 static gboolean
2500 gst_bin_src_pads_activate (GstBin * bin, gboolean active)
2501 {
2502   GstIterator *iter;
2503   gboolean fold_ok;
2504
2505   GST_DEBUG_OBJECT (bin, "%s pads", active ? "activate" : "deactivate");
2506
2507   iter = gst_element_iterate_src_pads ((GstElement *) bin);
2508   fold_ok = iterator_activate_fold_with_resync (iter, &active);
2509   gst_iterator_free (iter);
2510   if (G_UNLIKELY (!fold_ok))
2511     goto failed;
2512
2513   GST_DEBUG_OBJECT (bin, "pad %sactivation successful", active ? "" : "de");
2514
2515   return TRUE;
2516
2517   /* ERRORS */
2518 failed:
2519   {
2520     GST_DEBUG_OBJECT (bin, "pad %sactivation failed", active ? "" : "de");
2521     return FALSE;
2522   }
2523 }
2524
2525 /**
2526  * gst_bin_recalculate_latency:
2527  * @bin: a #GstBin
2528  *
2529  * Query @bin for the current latency using and reconfigures this latency to all the
2530  * elements with a LATENCY event.
2531  *
2532  * This method is typically called on the pipeline when a #GST_MESSAGE_LATENCY
2533  * is posted on the bus.
2534  *
2535  * This function simply emits the 'do-latency' signal so any custom latency
2536  * calculations will be performed.
2537  *
2538  * Returns: %TRUE if the latency could be queried and reconfigured.
2539  */
2540 gboolean
2541 gst_bin_recalculate_latency (GstBin * bin)
2542 {
2543   gboolean res;
2544
2545   g_signal_emit (bin, gst_bin_signals[DO_LATENCY], 0, &res);
2546   GST_DEBUG_OBJECT (bin, "latency returned %d", res);
2547
2548   return res;
2549 }
2550
2551 static gboolean
2552 gst_bin_do_latency_func (GstBin * bin)
2553 {
2554   GstQuery *query;
2555   GstElement *element;
2556   GstClockTime min_latency, max_latency;
2557   gboolean res;
2558
2559   g_return_val_if_fail (GST_IS_BIN (bin), FALSE);
2560
2561   element = GST_ELEMENT_CAST (bin);
2562
2563   GST_DEBUG_OBJECT (element, "querying latency");
2564
2565   query = gst_query_new_latency ();
2566   if ((res = gst_element_query (element, query))) {
2567     gboolean live;
2568
2569     gst_query_parse_latency (query, &live, &min_latency, &max_latency);
2570
2571     GST_DEBUG_OBJECT (element,
2572         "got min latency %" GST_TIME_FORMAT ", max latency %"
2573         GST_TIME_FORMAT ", live %d", GST_TIME_ARGS (min_latency),
2574         GST_TIME_ARGS (max_latency), live);
2575
2576     if (max_latency < min_latency) {
2577       /* this is an impossible situation, some parts of the pipeline might not
2578        * work correctly. We post a warning for now. */
2579       GST_ELEMENT_WARNING (element, CORE, CLOCK, (NULL),
2580           ("Impossible to configure latency: max %" GST_TIME_FORMAT " < min %"
2581               GST_TIME_FORMAT ". Add queues or other buffering elements.",
2582               GST_TIME_ARGS (max_latency), GST_TIME_ARGS (min_latency)));
2583     }
2584
2585     /* configure latency on elements */
2586     res = gst_element_send_event (element, gst_event_new_latency (min_latency));
2587     if (res) {
2588       GST_INFO_OBJECT (element, "configured latency of %" GST_TIME_FORMAT,
2589           GST_TIME_ARGS (min_latency));
2590     } else {
2591       GST_WARNING_OBJECT (element,
2592           "did not really configure latency of %" GST_TIME_FORMAT,
2593           GST_TIME_ARGS (min_latency));
2594     }
2595   } else {
2596     /* this is not a real problem, we just don't configure any latency. */
2597     GST_WARNING_OBJECT (element, "failed to query latency");
2598   }
2599   gst_query_unref (query);
2600
2601   return res;
2602 }
2603
2604 static gboolean
2605 gst_bin_post_message (GstElement * element, GstMessage * msg)
2606 {
2607   GstElementClass *pklass = (GstElementClass *) parent_class;
2608   gboolean ret;
2609
2610   ret = pklass->post_message (element, gst_message_ref (msg));
2611
2612   if (GST_MESSAGE_TYPE (msg) == GST_MESSAGE_STATE_CHANGED &&
2613       GST_MESSAGE_SRC (msg) == GST_OBJECT_CAST (element)) {
2614     GstState newstate, pending;
2615
2616     gst_message_parse_state_changed (msg, NULL, &newstate, &pending);
2617     if (newstate == GST_STATE_PLAYING && pending == GST_STATE_VOID_PENDING) {
2618       GST_BIN_CAST (element)->priv->posted_playing = TRUE;
2619       bin_do_eos (GST_BIN_CAST (element));
2620     } else {
2621       GST_BIN_CAST (element)->priv->posted_playing = FALSE;
2622     }
2623   }
2624
2625   gst_message_unref (msg);
2626
2627   return ret;
2628 }
2629
2630 static void
2631 reset_state (const GValue * data, gpointer user_data)
2632 {
2633   GstElement *e = g_value_get_object (data);
2634   GstState state = GPOINTER_TO_INT (user_data);
2635
2636   if (gst_element_set_state (e, state) == GST_STATE_CHANGE_FAILURE)
2637     GST_WARNING_OBJECT (e, "Failed to switch back down to %s",
2638         gst_element_state_get_name (state));
2639 }
2640
2641 static GstStateChangeReturn
2642 gst_bin_change_state_func (GstElement * element, GstStateChange transition)
2643 {
2644   GstBin *bin;
2645   GstStateChangeReturn ret;
2646   GstState current, next;
2647   gboolean have_async;
2648   gboolean have_no_preroll;
2649   GstClockTime base_time, start_time;
2650   GstIterator *it;
2651   gboolean done;
2652   GValue data = { 0, };
2653
2654   /* we don't need to take the STATE_LOCK, it is already taken */
2655   current = (GstState) GST_STATE_TRANSITION_CURRENT (transition);
2656   next = (GstState) GST_STATE_TRANSITION_NEXT (transition);
2657
2658   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, element,
2659       "changing state of children from %s to %s",
2660       gst_element_state_get_name (current), gst_element_state_get_name (next));
2661
2662   bin = GST_BIN_CAST (element);
2663
2664   switch (next) {
2665     case GST_STATE_PLAYING:
2666     {
2667       gboolean toplevel;
2668
2669       GST_OBJECT_LOCK (bin);
2670       toplevel = BIN_IS_TOPLEVEL (bin);
2671       GST_OBJECT_UNLOCK (bin);
2672
2673       if (toplevel)
2674         gst_bin_recalculate_latency (bin);
2675       break;
2676     }
2677     case GST_STATE_PAUSED:
2678       /* Clear EOS list on next PAUSED */
2679       GST_OBJECT_LOCK (bin);
2680       GST_DEBUG_OBJECT (element, "clearing EOS elements");
2681       bin_remove_messages (bin, NULL, GST_MESSAGE_EOS);
2682       bin->priv->posted_eos = FALSE;
2683       if (current == GST_STATE_READY)
2684         bin_remove_messages (bin, NULL, GST_MESSAGE_STREAM_START);
2685       GST_OBJECT_UNLOCK (bin);
2686       if (current == GST_STATE_READY)
2687         if (!(gst_bin_src_pads_activate (bin, TRUE)))
2688           goto activate_failure;
2689       break;
2690     case GST_STATE_READY:
2691       /* Clear message list on next READY */
2692       GST_OBJECT_LOCK (bin);
2693       GST_DEBUG_OBJECT (element, "clearing all cached messages");
2694       bin_remove_messages (bin, NULL, GST_MESSAGE_ANY);
2695       GST_OBJECT_UNLOCK (bin);
2696       /* We might not have reached PAUSED yet due to async errors,
2697        * make sure to always deactivate the pads nonetheless */
2698       if (!(gst_bin_src_pads_activate (bin, FALSE)))
2699         goto activate_failure;
2700       break;
2701     case GST_STATE_NULL:
2702       if (current == GST_STATE_READY) {
2703         if (!(gst_bin_src_pads_activate (bin, FALSE)))
2704           goto activate_failure;
2705       }
2706       break;
2707     default:
2708       break;
2709   }
2710
2711   /* this flag is used to make the async state changes return immediately. We
2712    * don't want them to interfere with this state change */
2713   GST_OBJECT_LOCK (bin);
2714   bin->polling = TRUE;
2715   GST_OBJECT_UNLOCK (bin);
2716
2717   /* iterate in state change order */
2718   it = gst_bin_iterate_sorted (bin);
2719
2720   /* mark if we've seen an ASYNC element in the bin when we did a state change.
2721    * Note how we don't reset this value when a resync happens, the reason being
2722    * that the async element posted ASYNC_START and we want to post ASYNC_DONE
2723    * even after a resync when the async element is gone */
2724   have_async = FALSE;
2725
2726 restart:
2727   /* take base_time */
2728   base_time = gst_element_get_base_time (element);
2729   start_time = gst_element_get_start_time (element);
2730
2731   have_no_preroll = FALSE;
2732
2733   done = FALSE;
2734   while (!done) {
2735     switch (gst_iterator_next (it, &data)) {
2736       case GST_ITERATOR_OK:
2737       {
2738         GstElement *child;
2739
2740         child = g_value_get_object (&data);
2741
2742         /* set state and base_time now */
2743         ret = gst_bin_element_set_state (bin, child, base_time, start_time,
2744             current, next);
2745
2746         switch (ret) {
2747           case GST_STATE_CHANGE_SUCCESS:
2748             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2749                 "child '%s' changed state to %d(%s) successfully",
2750                 GST_ELEMENT_NAME (child), next,
2751                 gst_element_state_get_name (next));
2752             break;
2753           case GST_STATE_CHANGE_ASYNC:
2754           {
2755             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2756                 "child '%s' is changing state asynchronously to %s",
2757                 GST_ELEMENT_NAME (child), gst_element_state_get_name (next));
2758             have_async = TRUE;
2759             break;
2760           }
2761           case GST_STATE_CHANGE_FAILURE:{
2762             GstObject *parent;
2763
2764             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2765                 "child '%s' failed to go to state %d(%s)",
2766                 GST_ELEMENT_NAME (child),
2767                 next, gst_element_state_get_name (next));
2768
2769             /* Only fail if the child is still inside
2770              * this bin. It might've been removed already
2771              * because of the error by the bin subclass
2772              * to ignore the error.  */
2773             parent = gst_object_get_parent (GST_OBJECT_CAST (child));
2774             if (parent == GST_OBJECT_CAST (element)) {
2775               /* element is still in bin, really error now */
2776               gst_object_unref (parent);
2777               goto undo;
2778             }
2779             /* child removed from bin, let the resync code redo the state
2780              * change */
2781             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2782                 "child '%s' was removed from the bin",
2783                 GST_ELEMENT_NAME (child));
2784
2785             if (parent)
2786               gst_object_unref (parent);
2787
2788             break;
2789           }
2790           case GST_STATE_CHANGE_NO_PREROLL:
2791             GST_CAT_INFO_OBJECT (GST_CAT_STATES, element,
2792                 "child '%s' changed state to %d(%s) successfully without preroll",
2793                 GST_ELEMENT_NAME (child), next,
2794                 gst_element_state_get_name (next));
2795             have_no_preroll = TRUE;
2796             break;
2797           default:
2798             g_assert_not_reached ();
2799             break;
2800         }
2801         g_value_reset (&data);
2802         break;
2803       }
2804       case GST_ITERATOR_RESYNC:
2805         GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, element, "iterator doing resync");
2806         gst_iterator_resync (it);
2807         goto restart;
2808       default:
2809       case GST_ITERATOR_DONE:
2810         GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, element, "iterator done");
2811         done = TRUE;
2812         break;
2813     }
2814   }
2815
2816   ret = GST_ELEMENT_CLASS (parent_class)->change_state (element, transition);
2817   if (G_UNLIKELY (ret == GST_STATE_CHANGE_FAILURE))
2818     goto done;
2819
2820   if (have_no_preroll) {
2821     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin,
2822         "we have NO_PREROLL elements %s -> NO_PREROLL",
2823         gst_element_state_change_return_get_name (ret));
2824     ret = GST_STATE_CHANGE_NO_PREROLL;
2825   } else if (have_async) {
2826     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin,
2827         "we have ASYNC elements %s -> ASYNC",
2828         gst_element_state_change_return_get_name (ret));
2829     ret = GST_STATE_CHANGE_ASYNC;
2830   }
2831
2832 done:
2833   g_value_unset (&data);
2834   gst_iterator_free (it);
2835
2836   GST_OBJECT_LOCK (bin);
2837   bin->polling = FALSE;
2838   /* it's possible that we did not get ASYNC from the children while the bin is
2839    * simulating ASYNC behaviour by posting an ASYNC_DONE message on the bus with
2840    * itself as the source. In that case we still want to check if the state
2841    * change completed. */
2842   if (ret != GST_STATE_CHANGE_ASYNC && !bin->priv->pending_async_done) {
2843     /* no element returned ASYNC and there are no pending async_done messages,
2844      * we can just complete. */
2845     GST_DEBUG_OBJECT (bin, "no async elements");
2846     goto state_end;
2847   }
2848   /* when we get here an ASYNC element was found */
2849   if (GST_STATE_TARGET (bin) <= GST_STATE_READY) {
2850     /* we ignore ASYNC state changes when we go to READY or NULL */
2851     GST_DEBUG_OBJECT (bin, "target state %s <= READY",
2852         gst_element_state_get_name (GST_STATE_TARGET (bin)));
2853     goto state_end;
2854   }
2855
2856   GST_DEBUG_OBJECT (bin, "check async elements");
2857   /* check if all elements managed to commit their state already */
2858   if (!find_message (bin, NULL, GST_MESSAGE_ASYNC_START)) {
2859     /* nothing found, remove all old ASYNC_DONE messages. This can happen when
2860      * all the elements commited their state while we were doing the state
2861      * change. We will still return ASYNC for consistency but we commit the
2862      * state already so that a _get_state() will return immediately. */
2863     bin_remove_messages (bin, NULL, GST_MESSAGE_ASYNC_DONE);
2864
2865     GST_DEBUG_OBJECT (bin, "async elements commited");
2866     bin_handle_async_done (bin, GST_STATE_CHANGE_SUCCESS, FALSE,
2867         GST_CLOCK_TIME_NONE);
2868   }
2869
2870 state_end:
2871   bin->priv->pending_async_done = FALSE;
2872   GST_OBJECT_UNLOCK (bin);
2873
2874   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, element,
2875       "done changing bin's state from %s to %s, now in %s, ret %s",
2876       gst_element_state_get_name (current),
2877       gst_element_state_get_name (next),
2878       gst_element_state_get_name (GST_STATE (element)),
2879       gst_element_state_change_return_get_name (ret));
2880
2881   return ret;
2882
2883   /* ERRORS */
2884 activate_failure:
2885   {
2886     GST_CAT_WARNING_OBJECT (GST_CAT_STATES, element,
2887         "failure (de)activating src pads");
2888     return GST_STATE_CHANGE_FAILURE;
2889   }
2890
2891 undo:
2892   {
2893     if (current < next) {
2894       GstIterator *it = gst_bin_iterate_sorted (GST_BIN (element));
2895       GstIteratorResult ret;
2896
2897       GST_DEBUG_OBJECT (element,
2898           "Bin failed to change state, switching children back to %s",
2899           gst_element_state_get_name (current));
2900       do {
2901         ret =
2902             gst_iterator_foreach (it, &reset_state, GINT_TO_POINTER (current));
2903       } while (ret == GST_ITERATOR_RESYNC);
2904       gst_iterator_free (it);
2905     }
2906     goto done;
2907   }
2908 }
2909
2910 /*
2911  * This function is a utility event handler for seek events.
2912  * It will send the event to all sinks or sources and appropriate
2913  * ghost pads depending on the event-direction.
2914  *
2915  * Applications are free to override this behaviour and
2916  * implement their own seek handler, but this will work for
2917  * pretty much all cases in practice.
2918  */
2919 static gboolean
2920 gst_bin_send_event (GstElement * element, GstEvent * event)
2921 {
2922   GstBin *bin = GST_BIN_CAST (element);
2923   GstIterator *iter;
2924   gboolean res = TRUE;
2925   gboolean done = FALSE;
2926   GValue data = { 0, };
2927
2928   if (GST_EVENT_IS_DOWNSTREAM (event)) {
2929     iter = gst_bin_iterate_sources (bin);
2930     GST_DEBUG_OBJECT (bin, "Sending %s event to src children",
2931         GST_EVENT_TYPE_NAME (event));
2932   } else {
2933     iter = gst_bin_iterate_sinks (bin);
2934     GST_DEBUG_OBJECT (bin, "Sending %s event to sink children",
2935         GST_EVENT_TYPE_NAME (event));
2936   }
2937
2938   while (!done) {
2939     switch (gst_iterator_next (iter, &data)) {
2940       case GST_ITERATOR_OK:
2941       {
2942         GstElement *child = g_value_get_object (&data);
2943
2944         gst_event_ref (event);
2945         res &= gst_element_send_event (child, event);
2946
2947         GST_LOG_OBJECT (child, "After handling %s event: %d",
2948             GST_EVENT_TYPE_NAME (event), res);
2949
2950         g_value_reset (&data);
2951         break;
2952       }
2953       case GST_ITERATOR_RESYNC:
2954         gst_iterator_resync (iter);
2955         res = TRUE;
2956         break;
2957       case GST_ITERATOR_DONE:
2958         done = TRUE;
2959         break;
2960       case GST_ITERATOR_ERROR:
2961         g_assert_not_reached ();
2962         break;
2963     }
2964   }
2965   g_value_unset (&data);
2966   gst_iterator_free (iter);
2967
2968   if (GST_EVENT_IS_DOWNSTREAM (event)) {
2969     iter = gst_element_iterate_sink_pads (GST_ELEMENT (bin));
2970     GST_DEBUG_OBJECT (bin, "Sending %s event to sink pads",
2971         GST_EVENT_TYPE_NAME (event));
2972   } else {
2973     iter = gst_element_iterate_src_pads (GST_ELEMENT (bin));
2974     GST_DEBUG_OBJECT (bin, "Sending %s event to src pads",
2975         GST_EVENT_TYPE_NAME (event));
2976   }
2977
2978   done = FALSE;
2979   while (!done) {
2980     switch (gst_iterator_next (iter, &data)) {
2981       case GST_ITERATOR_OK:
2982       {
2983         GstPad *pad = g_value_get_object (&data);
2984
2985         gst_event_ref (event);
2986         res &= gst_pad_send_event (pad, event);
2987         GST_LOG_OBJECT (pad, "After handling %s event: %d",
2988             GST_EVENT_TYPE_NAME (event), res);
2989         break;
2990       }
2991       case GST_ITERATOR_RESYNC:
2992         gst_iterator_resync (iter);
2993         res = TRUE;
2994         break;
2995       case GST_ITERATOR_DONE:
2996         done = TRUE;
2997         break;
2998       case GST_ITERATOR_ERROR:
2999         g_assert_not_reached ();
3000         break;
3001     }
3002   }
3003
3004   g_value_unset (&data);
3005   gst_iterator_free (iter);
3006   gst_event_unref (event);
3007
3008   return res;
3009 }
3010
3011 /* this is the function called by the threadpool. When async elements commit
3012  * their state, this function will attempt to bring the bin to the next state.
3013  */
3014 static void
3015 gst_bin_continue_func (BinContinueData * data)
3016 {
3017   GstBin *bin;
3018   GstState current, next, pending;
3019   GstStateChange transition;
3020
3021   bin = data->bin;
3022   pending = data->pending;
3023
3024   GST_DEBUG_OBJECT (bin, "waiting for state lock");
3025   GST_STATE_LOCK (bin);
3026
3027   GST_DEBUG_OBJECT (bin, "doing state continue");
3028   GST_OBJECT_LOCK (bin);
3029
3030   /* if a new state change happened after this thread was scheduled, we return
3031    * immediately. */
3032   if (data->cookie != GST_ELEMENT_CAST (bin)->state_cookie)
3033     goto interrupted;
3034
3035   current = GST_STATE (bin);
3036   next = GST_STATE_GET_NEXT (current, pending);
3037   transition = (GstStateChange) GST_STATE_TRANSITION (current, next);
3038
3039   GST_STATE_NEXT (bin) = next;
3040   GST_STATE_PENDING (bin) = pending;
3041   /* mark busy */
3042   GST_STATE_RETURN (bin) = GST_STATE_CHANGE_ASYNC;
3043   GST_OBJECT_UNLOCK (bin);
3044
3045   GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
3046       "continue state change %s to %s, final %s",
3047       gst_element_state_get_name (current),
3048       gst_element_state_get_name (next), gst_element_state_get_name (pending));
3049
3050   gst_element_change_state (GST_ELEMENT_CAST (bin), transition);
3051
3052   GST_STATE_UNLOCK (bin);
3053   GST_DEBUG_OBJECT (bin, "state continue done");
3054
3055   gst_object_unref (bin);
3056   g_slice_free (BinContinueData, data);
3057   return;
3058
3059 interrupted:
3060   {
3061     GST_OBJECT_UNLOCK (bin);
3062     GST_STATE_UNLOCK (bin);
3063     GST_DEBUG_OBJECT (bin, "state continue aborted due to intervening change");
3064     gst_object_unref (bin);
3065     g_slice_free (BinContinueData, data);
3066     return;
3067   }
3068 }
3069
3070 static GstBusSyncReply
3071 bin_bus_handler (GstBus * bus, GstMessage * message, GstBin * bin)
3072 {
3073   GstBinClass *bclass;
3074
3075   bclass = GST_BIN_GET_CLASS (bin);
3076   if (bclass->handle_message)
3077     bclass->handle_message (bin, message);
3078   else
3079     gst_message_unref (message);
3080
3081   return GST_BUS_DROP;
3082 }
3083
3084 static void
3085 bin_push_state_continue (BinContinueData * data)
3086 {
3087   GstBinClass *klass;
3088   GstBin *bin;
3089
3090   /* ref was taken */
3091   bin = data->bin;
3092   klass = GST_BIN_GET_CLASS (bin);
3093
3094   GST_DEBUG_OBJECT (bin, "pushing continue on thread pool");
3095   g_thread_pool_push (klass->pool, data, NULL);
3096 }
3097
3098 /* an element started an async state change, if we were not busy with a state
3099  * change, we perform a lost state.
3100  * This function is called with the OBJECT lock.
3101  */
3102 static void
3103 bin_handle_async_start (GstBin * bin)
3104 {
3105   GstState old_state, new_state;
3106   gboolean toplevel;
3107   GstMessage *amessage = NULL;
3108
3109   if (GST_STATE_RETURN (bin) == GST_STATE_CHANGE_FAILURE)
3110     goto had_error;
3111
3112   /* get our toplevel state */
3113   toplevel = BIN_IS_TOPLEVEL (bin);
3114
3115   /* prepare an ASYNC_START message, we always post the start message even if we
3116    * are busy with a state change or when we are NO_PREROLL. */
3117   if (!toplevel)
3118     /* non toplevel bin, prepare async-start for the parent */
3119     amessage = gst_message_new_async_start (GST_OBJECT_CAST (bin));
3120
3121   if (bin->polling || GST_STATE_PENDING (bin) != GST_STATE_VOID_PENDING)
3122     goto was_busy;
3123
3124   /* async starts are ignored when we are NO_PREROLL */
3125   if (GST_STATE_RETURN (bin) == GST_STATE_CHANGE_NO_PREROLL)
3126     goto was_no_preroll;
3127
3128   old_state = GST_STATE (bin);
3129
3130   /* when we PLAYING we go back to PAUSED, when preroll happens, we go back to
3131    * PLAYING after optionally redistributing the base_time. */
3132   if (old_state > GST_STATE_PAUSED)
3133     new_state = GST_STATE_PAUSED;
3134   else
3135     new_state = old_state;
3136
3137   GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin,
3138       "lost state of %s, new %s", gst_element_state_get_name (old_state),
3139       gst_element_state_get_name (new_state));
3140
3141   GST_STATE (bin) = new_state;
3142   GST_STATE_NEXT (bin) = new_state;
3143   GST_STATE_PENDING (bin) = new_state;
3144   GST_STATE_RETURN (bin) = GST_STATE_CHANGE_ASYNC;
3145   GST_OBJECT_UNLOCK (bin);
3146
3147   /* post message */
3148   _priv_gst_element_state_changed (GST_ELEMENT_CAST (bin), new_state, new_state,
3149       new_state);
3150
3151 post_start:
3152   if (amessage) {
3153     /* post our ASYNC_START. */
3154     GST_DEBUG_OBJECT (bin, "posting ASYNC_START to parent");
3155     gst_element_post_message (GST_ELEMENT_CAST (bin), amessage);
3156   }
3157   GST_OBJECT_LOCK (bin);
3158
3159   return;
3160
3161 had_error:
3162   {
3163     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "we had an error");
3164     return;
3165   }
3166 was_busy:
3167   {
3168     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "state change busy");
3169     GST_OBJECT_UNLOCK (bin);
3170     goto post_start;
3171   }
3172 was_no_preroll:
3173   {
3174     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "ignoring, we are NO_PREROLL");
3175     GST_OBJECT_UNLOCK (bin);
3176     goto post_start;
3177   }
3178 }
3179
3180 /* this function is called when there are no more async elements in the bin. We
3181  * post a state changed message and an ASYNC_DONE message.
3182  * This function is called with the OBJECT lock.
3183  */
3184 static void
3185 bin_handle_async_done (GstBin * bin, GstStateChangeReturn ret,
3186     gboolean flag_pending, GstClockTime running_time)
3187 {
3188   GstState current, pending, target;
3189   GstStateChangeReturn old_ret;
3190   GstState old_state, old_next;
3191   gboolean toplevel, state_changed = FALSE;
3192   GstMessage *amessage = NULL;
3193   BinContinueData *cont = NULL;
3194
3195   if (GST_STATE_RETURN (bin) == GST_STATE_CHANGE_FAILURE)
3196     goto had_error;
3197
3198   pending = GST_STATE_PENDING (bin);
3199
3200   if (bin->polling)
3201     goto was_busy;
3202
3203   /* check if there is something to commit */
3204   if (pending == GST_STATE_VOID_PENDING)
3205     goto nothing_pending;
3206
3207   old_ret = GST_STATE_RETURN (bin);
3208   GST_STATE_RETURN (bin) = ret;
3209
3210   /* move to the next target state */
3211   target = GST_STATE_TARGET (bin);
3212   pending = GST_STATE_PENDING (bin) = target;
3213
3214   amessage = gst_message_new_async_done (GST_OBJECT_CAST (bin), running_time);
3215
3216   old_state = GST_STATE (bin);
3217   /* this is the state we should go to next */
3218   old_next = GST_STATE_NEXT (bin);
3219
3220   if (old_next != GST_STATE_PLAYING) {
3221     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
3222         "committing state from %s to %s, old pending %s",
3223         gst_element_state_get_name (old_state),
3224         gst_element_state_get_name (old_next),
3225         gst_element_state_get_name (pending));
3226
3227     /* update current state */
3228     current = GST_STATE (bin) = old_next;
3229   } else {
3230     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
3231         "setting state from %s to %s, pending %s",
3232         gst_element_state_get_name (old_state),
3233         gst_element_state_get_name (old_state),
3234         gst_element_state_get_name (pending));
3235     current = old_state;
3236   }
3237
3238   /* get our toplevel state */
3239   toplevel = BIN_IS_TOPLEVEL (bin);
3240
3241   /* see if we reached the final state. If we are not toplevel, we also have to
3242    * stop here, the parent will continue our state. */
3243   if ((pending == current) || !toplevel) {
3244     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
3245         "completed state change, pending VOID");
3246
3247     /* mark VOID pending */
3248     pending = GST_STATE_VOID_PENDING;
3249     GST_STATE_PENDING (bin) = pending;
3250     GST_STATE_NEXT (bin) = GST_STATE_VOID_PENDING;
3251   } else {
3252     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin,
3253         "continue state change, pending %s",
3254         gst_element_state_get_name (pending));
3255
3256     cont = g_slice_new (BinContinueData);
3257
3258     /* ref to the bin */
3259     cont->bin = gst_object_ref (bin);
3260     /* cookie to detect concurrent state change */
3261     cont->cookie = GST_ELEMENT_CAST (bin)->state_cookie;
3262     /* pending target state */
3263     cont->pending = pending;
3264     /* mark busy */
3265     GST_STATE_RETURN (bin) = GST_STATE_CHANGE_ASYNC;
3266     GST_STATE_NEXT (bin) = GST_STATE_GET_NEXT (old_state, pending);
3267   }
3268
3269   if (old_next != GST_STATE_PLAYING) {
3270     if (old_state != old_next || old_ret == GST_STATE_CHANGE_ASYNC) {
3271       state_changed = TRUE;
3272     }
3273   }
3274   GST_OBJECT_UNLOCK (bin);
3275
3276   if (state_changed) {
3277     _priv_gst_element_state_changed (GST_ELEMENT_CAST (bin), old_state,
3278         old_next, pending);
3279   }
3280   if (amessage) {
3281     /* post our combined ASYNC_DONE when all is ASYNC_DONE. */
3282     GST_DEBUG_OBJECT (bin, "posting ASYNC_DONE to parent");
3283     gst_element_post_message (GST_ELEMENT_CAST (bin), amessage);
3284   }
3285
3286   GST_OBJECT_LOCK (bin);
3287   if (cont) {
3288     /* toplevel, start continue state */
3289     GST_DEBUG_OBJECT (bin, "all async-done, starting state continue");
3290     bin_push_state_continue (cont);
3291   } else {
3292     GST_DEBUG_OBJECT (bin, "state change complete");
3293     GST_STATE_BROADCAST (bin);
3294   }
3295   return;
3296
3297 had_error:
3298   {
3299     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "we had an error");
3300     return;
3301   }
3302 was_busy:
3303   {
3304     GST_CAT_DEBUG_OBJECT (GST_CAT_STATES, bin, "state change busy");
3305     /* if we were busy with a state change and we are requested to flag a
3306      * pending async done, we do so here */
3307     if (flag_pending)
3308       bin->priv->pending_async_done = TRUE;
3309     return;
3310   }
3311 nothing_pending:
3312   {
3313     GST_CAT_INFO_OBJECT (GST_CAT_STATES, bin, "nothing pending");
3314     return;
3315   }
3316 }
3317
3318 static void
3319 bin_do_eos (GstBin * bin)
3320 {
3321   guint32 seqnum = 0;
3322   gboolean eos;
3323
3324   GST_OBJECT_LOCK (bin);
3325   /* If all sinks are EOS, we're in PLAYING and no state change is pending
3326    * we forward the EOS message to the parent bin or application
3327    */
3328   eos = GST_STATE (bin) == GST_STATE_PLAYING
3329       && GST_STATE_PENDING (bin) == GST_STATE_VOID_PENDING
3330       && bin->priv->posted_playing && is_eos (bin, &seqnum);
3331   GST_OBJECT_UNLOCK (bin);
3332
3333   if (eos
3334       && g_atomic_int_compare_and_exchange (&bin->priv->posted_eos, FALSE,
3335           TRUE)) {
3336     GstMessage *tmessage;
3337
3338     /* Clear out any further messages, and reset posted_eos so we can
3339        detect any new EOS that happens (eg, after a seek). Since all
3340        sinks have now posted an EOS, there will be no further EOS events
3341        seen unless there is a new logical EOS */
3342     GST_OBJECT_LOCK (bin);
3343     bin_remove_messages (bin, NULL, GST_MESSAGE_EOS);
3344     bin->priv->posted_eos = FALSE;
3345     GST_OBJECT_UNLOCK (bin);
3346
3347     tmessage = gst_message_new_eos (GST_OBJECT_CAST (bin));
3348     gst_message_set_seqnum (tmessage, seqnum);
3349     GST_DEBUG_OBJECT (bin,
3350         "all sinks posted EOS, posting seqnum #%" G_GUINT32_FORMAT, seqnum);
3351     gst_element_post_message (GST_ELEMENT_CAST (bin), tmessage);
3352   }
3353 }
3354
3355 static void
3356 bin_do_stream_start (GstBin * bin)
3357 {
3358   guint32 seqnum = 0;
3359   gboolean stream_start;
3360   gboolean have_group_id = FALSE;
3361   guint group_id = 0;
3362
3363   GST_OBJECT_LOCK (bin);
3364   /* If all sinks are STREAM_START we forward the STREAM_START message
3365    * to the parent bin or application
3366    */
3367   stream_start = is_stream_start (bin, &seqnum, &have_group_id, &group_id);
3368   GST_OBJECT_UNLOCK (bin);
3369
3370   if (stream_start) {
3371     GstMessage *tmessage;
3372
3373     GST_OBJECT_LOCK (bin);
3374     bin_remove_messages (bin, NULL, GST_MESSAGE_STREAM_START);
3375     GST_OBJECT_UNLOCK (bin);
3376
3377     tmessage = gst_message_new_stream_start (GST_OBJECT_CAST (bin));
3378     gst_message_set_seqnum (tmessage, seqnum);
3379     if (have_group_id)
3380       gst_message_set_group_id (tmessage, group_id);
3381
3382     GST_DEBUG_OBJECT (bin,
3383         "all sinks posted STREAM_START, posting seqnum #%" G_GUINT32_FORMAT,
3384         seqnum);
3385     gst_element_post_message (GST_ELEMENT_CAST (bin), tmessage);
3386   }
3387 }
3388
3389 /* must be called without the object lock as it posts messages */
3390 static void
3391 bin_do_message_forward (GstBin * bin, GstMessage * message)
3392 {
3393   if (bin->priv->message_forward) {
3394     GstMessage *forwarded;
3395
3396     GST_DEBUG_OBJECT (bin, "pass %s message upward",
3397         GST_MESSAGE_TYPE_NAME (message));
3398
3399     /* we need to convert these messages to element messages so that our parent
3400      * bin can easily ignore them and so that the application can easily
3401      * distinguish between the internally forwarded and the real messages. */
3402     forwarded = gst_message_new_element (GST_OBJECT_CAST (bin),
3403         gst_structure_new ("GstBinForwarded",
3404             "message", GST_TYPE_MESSAGE, message, NULL));
3405
3406     gst_element_post_message (GST_ELEMENT_CAST (bin), forwarded);
3407   }
3408 }
3409
3410 static void
3411 gst_bin_update_context (GstBin * bin, GstContext * context)
3412 {
3413   GST_OBJECT_LOCK (bin);
3414   gst_bin_update_context_unlocked (bin, context);
3415   GST_OBJECT_UNLOCK (bin);
3416 }
3417
3418 static void
3419 gst_bin_update_context_unlocked (GstBin * bin, GstContext * context)
3420 {
3421   const gchar *context_type;
3422   GList *l, **contexts;
3423
3424   contexts = &GST_ELEMENT_CAST (bin)->contexts;
3425   context_type = gst_context_get_context_type (context);
3426
3427   GST_DEBUG_OBJECT (bin, "set context %p %" GST_PTR_FORMAT, context,
3428       gst_context_get_structure (context));
3429   for (l = *contexts; l; l = l->next) {
3430     GstContext *tmp = l->data;
3431     const gchar *tmp_type = gst_context_get_context_type (tmp);
3432
3433     /* Always store newest context but never replace
3434      * a persistent one by a non-persistent one */
3435     if (strcmp (context_type, tmp_type) == 0 &&
3436         (gst_context_is_persistent (context) ||
3437             !gst_context_is_persistent (tmp))) {
3438       gst_context_replace ((GstContext **) & l->data, context);
3439       break;
3440     }
3441   }
3442   /* Not found? Add */
3443   if (l == NULL) {
3444     *contexts = g_list_prepend (*contexts, gst_context_ref (context));
3445   }
3446 }
3447
3448 /* handle child messages:
3449  *
3450  * This method is called synchronously when a child posts a message on
3451  * the internal bus.
3452  *
3453  * GST_MESSAGE_EOS: This message is only posted by sinks
3454  *     in the PLAYING state. If all sinks posted the EOS message, post
3455  *     one upwards.
3456  *
3457  * GST_MESSAGE_STATE_DIRTY: Deprecated
3458  *
3459  * GST_MESSAGE_SEGMENT_START: just collect, never forward upwards. If an
3460  *     element posts segment_start twice, only the last message is kept.
3461  *
3462  * GST_MESSAGE_SEGMENT_DONE: replace SEGMENT_START message from same poster
3463  *     with the segment_done message. If there are no more segment_start
3464  *     messages, post segment_done message upwards.
3465  *
3466  * GST_MESSAGE_DURATION_CHANGED: clear any cached durations.
3467  *     Whenever someone performs a duration query on the bin, we store the
3468  *     result so we can answer it quicker the next time. Any element that
3469  *     changes its duration marks our cached values invalid.
3470  *     This message is also posted upwards. This is currently disabled
3471  *     because too many elements don't post DURATION_CHANGED messages when
3472  *     the duration changes.
3473  *
3474  * GST_MESSAGE_CLOCK_LOST: This message is posted by an element when it
3475  *     can no longer provide a clock. The default bin behaviour is to
3476  *     check if the lost clock was the one provided by the bin. If so and
3477  *     we are currently in the PLAYING state, we forward the message to
3478  *     our parent.
3479  *     This message is also generated when we remove a clock provider from
3480  *     a bin. If this message is received by the application, it should
3481  *     PAUSE the pipeline and set it back to PLAYING to force a new clock
3482  *     and a new base_time distribution.
3483  *
3484  * GST_MESSAGE_CLOCK_PROVIDE: This message is generated when an element
3485  *     can provide a clock. This mostly happens when we add a new clock
3486  *     provider to the bin. The default behaviour of the bin is to mark the
3487  *     currently selected clock as dirty, which will perform a clock
3488  *     recalculation the next time we are asked to provide a clock.
3489  *     This message is never sent to the application but is forwarded to
3490  *     the parent.
3491  *
3492  * GST_MESSAGE_ASYNC_START: Create an internal ELEMENT message that stores
3493  *     the state of the element and the fact that the element will need a
3494  *     new base_time. This message is not forwarded to the application.
3495  *
3496  * GST_MESSAGE_ASYNC_DONE: Find the internal ELEMENT message we kept for the
3497  *     element when it posted ASYNC_START. If all elements are done, post a
3498  *     ASYNC_DONE message to the parent.
3499  *
3500  * OTHER: post upwards.
3501  */
3502 static void
3503 gst_bin_handle_message_func (GstBin * bin, GstMessage * message)
3504 {
3505   GstObject *src;
3506   GstMessageType type;
3507   GstMessage *tmessage;
3508   guint32 seqnum;
3509
3510   src = GST_MESSAGE_SRC (message);
3511   type = GST_MESSAGE_TYPE (message);
3512
3513   GST_DEBUG_OBJECT (bin, "[msg %p] handling child %s message of type %s",
3514       message, src ? GST_ELEMENT_NAME (src) : "(NULL)",
3515       GST_MESSAGE_TYPE_NAME (message));
3516
3517   switch (type) {
3518     case GST_MESSAGE_ERROR:
3519     {
3520       GST_OBJECT_LOCK (bin);
3521       /* flag error */
3522       GST_DEBUG_OBJECT (bin, "got ERROR message, unlocking state change");
3523       GST_STATE_RETURN (bin) = GST_STATE_CHANGE_FAILURE;
3524       GST_STATE_BROADCAST (bin);
3525       GST_OBJECT_UNLOCK (bin);
3526
3527       goto forward;
3528     }
3529     case GST_MESSAGE_EOS:
3530     {
3531
3532       /* collect all eos messages from the children */
3533       bin_do_message_forward (bin, message);
3534       GST_OBJECT_LOCK (bin);
3535       /* ref message for future use  */
3536       bin_replace_message (bin, message, GST_MESSAGE_EOS);
3537       GST_OBJECT_UNLOCK (bin);
3538
3539       bin_do_eos (bin);
3540       break;
3541     }
3542     case GST_MESSAGE_STREAM_START:
3543     {
3544
3545       /* collect all stream_start messages from the children */
3546       GST_OBJECT_LOCK (bin);
3547       /* ref message for future use  */
3548       bin_replace_message (bin, message, GST_MESSAGE_STREAM_START);
3549       GST_OBJECT_UNLOCK (bin);
3550
3551       bin_do_stream_start (bin);
3552       break;
3553     }
3554     case GST_MESSAGE_STATE_DIRTY:
3555     {
3556       GST_WARNING_OBJECT (bin, "received deprecated STATE_DIRTY message");
3557
3558       /* free message */
3559       gst_message_unref (message);
3560       break;
3561     }
3562     case GST_MESSAGE_SEGMENT_START:{
3563       gboolean post = FALSE;
3564       GstFormat format;
3565       gint64 position;
3566
3567       gst_message_parse_segment_start (message, &format, &position);
3568       seqnum = gst_message_get_seqnum (message);
3569
3570       bin_do_message_forward (bin, message);
3571
3572       GST_OBJECT_LOCK (bin);
3573       /* if this is the first segment-start, post to parent but not to the
3574        * application */
3575       if (!find_message (bin, NULL, GST_MESSAGE_SEGMENT_START) &&
3576           (GST_OBJECT_PARENT (bin) != NULL)) {
3577         post = TRUE;
3578       }
3579       /* replace any previous segment_start message from this source
3580        * with the new segment start message */
3581       bin_replace_message (bin, message, GST_MESSAGE_SEGMENT_START);
3582       GST_OBJECT_UNLOCK (bin);
3583       if (post) {
3584         tmessage = gst_message_new_segment_start (GST_OBJECT_CAST (bin),
3585             format, position);
3586         gst_message_set_seqnum (tmessage, seqnum);
3587
3588         /* post segment start with initial format and position. */
3589         GST_DEBUG_OBJECT (bin, "posting SEGMENT_START (%u) bus message: %p",
3590             seqnum, message);
3591         gst_element_post_message (GST_ELEMENT_CAST (bin), tmessage);
3592       }
3593       break;
3594     }
3595     case GST_MESSAGE_SEGMENT_DONE:
3596     {
3597       gboolean post = FALSE;
3598       GstFormat format;
3599       gint64 position;
3600
3601       gst_message_parse_segment_done (message, &format, &position);
3602       seqnum = gst_message_get_seqnum (message);
3603
3604       bin_do_message_forward (bin, message);
3605
3606       GST_OBJECT_LOCK (bin);
3607       bin_replace_message (bin, message, GST_MESSAGE_SEGMENT_START);
3608       /* if there are no more segment_start messages, everybody posted
3609        * a segment_done and we can post one on the bus. */
3610
3611       /* we don't care who still has a pending segment start */
3612       if (!find_message (bin, NULL, GST_MESSAGE_SEGMENT_START)) {
3613         /* nothing found */
3614         post = TRUE;
3615         /* remove all old segment_done messages */
3616         bin_remove_messages (bin, NULL, GST_MESSAGE_SEGMENT_DONE);
3617       }
3618       GST_OBJECT_UNLOCK (bin);
3619       if (post) {
3620         tmessage = gst_message_new_segment_done (GST_OBJECT_CAST (bin),
3621             format, position);
3622         gst_message_set_seqnum (tmessage, seqnum);
3623
3624         /* post segment done with latest format and position. */
3625         GST_DEBUG_OBJECT (bin, "posting SEGMENT_DONE (%u) bus message: %p",
3626             seqnum, message);
3627         gst_element_post_message (GST_ELEMENT_CAST (bin), tmessage);
3628       }
3629       break;
3630     }
3631     case GST_MESSAGE_DURATION_CHANGED:
3632     {
3633       /* FIXME: remove all cached durations, next time somebody asks
3634        * for duration, we will recalculate. */
3635 #if 0
3636       GST_OBJECT_LOCK (bin);
3637       bin_remove_messages (bin, NULL, GST_MESSAGE_DURATION_CHANGED);
3638       GST_OBJECT_UNLOCK (bin);
3639 #endif
3640       goto forward;
3641     }
3642     case GST_MESSAGE_CLOCK_LOST:
3643     {
3644       GstClock **provided_clock_p;
3645       GstElement **clock_provider_p;
3646       gboolean playing, toplevel, provided, forward;
3647       GstClock *clock;
3648
3649       gst_message_parse_clock_lost (message, &clock);
3650
3651       GST_OBJECT_LOCK (bin);
3652       bin->clock_dirty = TRUE;
3653       /* if we lost the clock that we provided, post to parent but
3654        * only if we are not a top-level bin or PLAYING.
3655        * The reason for this is that applications should be able
3656        * to PAUSE/PLAY if they receive this message without worrying
3657        * about the state of the pipeline. */
3658       provided = (clock == bin->provided_clock);
3659       playing = (GST_STATE (bin) == GST_STATE_PLAYING);
3660       toplevel = GST_OBJECT_PARENT (bin) == NULL;
3661       forward = provided && (playing || !toplevel);
3662       if (provided) {
3663         GST_DEBUG_OBJECT (bin,
3664             "Lost clock %" GST_PTR_FORMAT " provided by %" GST_PTR_FORMAT,
3665             bin->provided_clock, bin->clock_provider);
3666         provided_clock_p = &bin->provided_clock;
3667         clock_provider_p = &bin->clock_provider;
3668         gst_object_replace ((GstObject **) provided_clock_p, NULL);
3669         gst_object_replace ((GstObject **) clock_provider_p, NULL);
3670       }
3671       GST_DEBUG_OBJECT (bin, "provided %d, playing %d, forward %d",
3672           provided, playing, forward);
3673       GST_OBJECT_UNLOCK (bin);
3674
3675       if (forward)
3676         goto forward;
3677
3678       /* free message */
3679       gst_message_unref (message);
3680       break;
3681     }
3682     case GST_MESSAGE_CLOCK_PROVIDE:
3683     {
3684       gboolean forward;
3685
3686       GST_OBJECT_LOCK (bin);
3687       bin->clock_dirty = TRUE;
3688       /* a new clock is available, post to parent but not
3689        * to the application */
3690       forward = GST_OBJECT_PARENT (bin) != NULL;
3691       GST_OBJECT_UNLOCK (bin);
3692
3693       if (forward)
3694         goto forward;
3695
3696       /* free message */
3697       gst_message_unref (message);
3698       break;
3699     }
3700     case GST_MESSAGE_ASYNC_START:
3701     {
3702       GstState target;
3703
3704       GST_DEBUG_OBJECT (bin, "ASYNC_START message %p, %s", message,
3705           src ? GST_OBJECT_NAME (src) : "(NULL)");
3706
3707       bin_do_message_forward (bin, message);
3708
3709       GST_OBJECT_LOCK (bin);
3710       /* we ignore the message if we are going to <= READY */
3711       if ((target = GST_STATE_TARGET (bin)) <= GST_STATE_READY)
3712         goto ignore_start_message;
3713
3714       /* takes ownership of the message */
3715       bin_replace_message (bin, message, GST_MESSAGE_ASYNC_START);
3716
3717       bin_handle_async_start (bin);
3718       GST_OBJECT_UNLOCK (bin);
3719       break;
3720
3721     ignore_start_message:
3722       {
3723         GST_DEBUG_OBJECT (bin, "ignoring message, target %s",
3724             gst_element_state_get_name (target));
3725         GST_OBJECT_UNLOCK (bin);
3726         gst_message_unref (message);
3727         break;
3728       }
3729     }
3730     case GST_MESSAGE_ASYNC_DONE:
3731     {
3732       GstClockTime running_time;
3733       GstState target;
3734
3735       GST_DEBUG_OBJECT (bin, "ASYNC_DONE message %p, %s", message,
3736           src ? GST_OBJECT_NAME (src) : "(NULL)");
3737
3738       gst_message_parse_async_done (message, &running_time);
3739
3740       bin_do_message_forward (bin, message);
3741
3742       GST_OBJECT_LOCK (bin);
3743       /* ignore messages if we are shutting down */
3744       if ((target = GST_STATE_TARGET (bin)) <= GST_STATE_READY)
3745         goto ignore_done_message;
3746
3747       bin_replace_message (bin, message, GST_MESSAGE_ASYNC_START);
3748       /* if there are no more ASYNC_START messages, everybody posted
3749        * a ASYNC_DONE and we can post one on the bus. When checking, we
3750        * don't care who still has a pending ASYNC_START */
3751       if (!find_message (bin, NULL, GST_MESSAGE_ASYNC_START)) {
3752         /* nothing found, remove all old ASYNC_DONE messages */
3753         bin_remove_messages (bin, NULL, GST_MESSAGE_ASYNC_DONE);
3754
3755         GST_DEBUG_OBJECT (bin, "async elements commited");
3756         /* when we get an async done message when a state change was busy, we
3757          * need to set the pending_done flag so that at the end of the state
3758          * change we can see if we need to verify pending async elements, hence
3759          * the TRUE argument here. */
3760         bin_handle_async_done (bin, GST_STATE_CHANGE_SUCCESS, TRUE,
3761             running_time);
3762       } else {
3763         GST_DEBUG_OBJECT (bin, "there are more async elements pending");
3764       }
3765       GST_OBJECT_UNLOCK (bin);
3766       break;
3767
3768     ignore_done_message:
3769       {
3770         GST_DEBUG_OBJECT (bin, "ignoring message, target %s",
3771             gst_element_state_get_name (target));
3772         GST_OBJECT_UNLOCK (bin);
3773         gst_message_unref (message);
3774         break;
3775       }
3776     }
3777     case GST_MESSAGE_STRUCTURE_CHANGE:
3778     {
3779       gboolean busy;
3780
3781       gst_message_parse_structure_change (message, NULL, NULL, &busy);
3782
3783       GST_OBJECT_LOCK (bin);
3784       if (busy) {
3785         /* while the pad is busy, avoid following it when doing state changes.
3786          * Don't update the cookie yet, we will do that after the structure
3787          * change finished and we are ready to inspect the new updated
3788          * structure. */
3789         bin_replace_message (bin, message, GST_MESSAGE_STRUCTURE_CHANGE);
3790         message = NULL;
3791       } else {
3792         /* a pad link/unlink ended, signal the state change iterator that we
3793          * need to resync by updating the structure_cookie. */
3794         bin_remove_messages (bin, GST_MESSAGE_SRC (message),
3795             GST_MESSAGE_STRUCTURE_CHANGE);
3796         if (!GST_BIN_IS_NO_RESYNC (bin))
3797           bin->priv->structure_cookie++;
3798       }
3799       GST_OBJECT_UNLOCK (bin);
3800
3801       if (message)
3802         gst_message_unref (message);
3803
3804       break;
3805     }
3806     case GST_MESSAGE_NEED_CONTEXT:{
3807       const gchar *context_type;
3808       GList *l, *contexts;
3809
3810       gst_message_parse_context_type (message, &context_type);
3811       GST_OBJECT_LOCK (bin);
3812       contexts = GST_ELEMENT_CAST (bin)->contexts;
3813       GST_LOG_OBJECT (bin, "got need-context message type: %s", context_type);
3814       for (l = contexts; l; l = l->next) {
3815         GstContext *tmp = l->data;
3816         const gchar *tmp_type = gst_context_get_context_type (tmp);
3817
3818         if (strcmp (context_type, tmp_type) == 0) {
3819           gst_element_set_context (GST_ELEMENT (src), l->data);
3820           break;
3821         }
3822       }
3823       GST_OBJECT_UNLOCK (bin);
3824
3825       /* Forward if we couldn't answer the message */
3826       if (l == NULL) {
3827         goto forward;
3828       } else {
3829         gst_message_unref (message);
3830       }
3831
3832       break;
3833     }
3834     case GST_MESSAGE_HAVE_CONTEXT:{
3835       GstContext *context;
3836
3837       gst_message_parse_have_context (message, &context);
3838       gst_bin_update_context (bin, context);
3839       gst_context_unref (context);
3840
3841       goto forward;
3842       break;
3843     }
3844     default:
3845       goto forward;
3846   }
3847   return;
3848
3849 forward:
3850   {
3851     /* Send all other messages upward */
3852     GST_DEBUG_OBJECT (bin, "posting message upward");
3853     gst_element_post_message (GST_ELEMENT_CAST (bin), message);
3854     return;
3855   }
3856 }
3857
3858 /* generic struct passed to all query fold methods */
3859 typedef struct
3860 {
3861   GstQuery *query;
3862   gint64 min;
3863   gint64 max;
3864   gboolean live;
3865 } QueryFold;
3866
3867 typedef void (*QueryInitFunction) (GstBin * bin, QueryFold * fold);
3868 typedef void (*QueryDoneFunction) (GstBin * bin, QueryFold * fold);
3869
3870 /* for duration/position we collect all durations/positions and take
3871  * the MAX of all valid results */
3872 static void
3873 bin_query_min_max_init (GstBin * bin, QueryFold * fold)
3874 {
3875   fold->min = 0;
3876   fold->max = -1;
3877   fold->live = FALSE;
3878 }
3879
3880 static gboolean
3881 bin_query_duration_fold (const GValue * vitem, GValue * ret, QueryFold * fold)
3882 {
3883   gboolean res = FALSE;
3884   GstObject *item = g_value_get_object (vitem);
3885   if (GST_IS_PAD (item))
3886     res = gst_pad_query (GST_PAD (item), fold->query);
3887   else
3888     res = gst_element_query (GST_ELEMENT (item), fold->query);
3889
3890   if (res) {
3891     gint64 duration;
3892
3893     g_value_set_boolean (ret, TRUE);
3894
3895     gst_query_parse_duration (fold->query, NULL, &duration);
3896
3897     GST_DEBUG_OBJECT (item, "got duration %" G_GINT64_FORMAT, duration);
3898
3899     if (duration == -1) {
3900       /* duration query succeeded, but duration is unknown */
3901       fold->max = -1;
3902       return FALSE;
3903     }
3904
3905     if (duration > fold->max)
3906       fold->max = duration;
3907   }
3908
3909   return TRUE;
3910 }
3911
3912 static void
3913 bin_query_duration_done (GstBin * bin, QueryFold * fold)
3914 {
3915   GstFormat format;
3916
3917   gst_query_parse_duration (fold->query, &format, NULL);
3918   /* store max in query result */
3919   gst_query_set_duration (fold->query, format, fold->max);
3920
3921   GST_DEBUG_OBJECT (bin, "max duration %" G_GINT64_FORMAT, fold->max);
3922
3923   /* FIXME: re-implement duration caching */
3924 #if 0
3925   /* and cache now */
3926   GST_OBJECT_LOCK (bin);
3927   bin->messages = g_list_prepend (bin->messages,
3928       gst_message_new_duration (GST_OBJECT_CAST (bin), format, fold->max));
3929   GST_OBJECT_UNLOCK (bin);
3930 #endif
3931 }
3932
3933 static gboolean
3934 bin_query_position_fold (const GValue * vitem, GValue * ret, QueryFold * fold)
3935 {
3936   gboolean res = FALSE;
3937   GstObject *item = g_value_get_object (vitem);
3938   if (GST_IS_PAD (item))
3939     res = gst_pad_query (GST_PAD (item), fold->query);
3940   else
3941     res = gst_element_query (GST_ELEMENT (item), fold->query);
3942
3943   if (res) {
3944     gint64 position;
3945
3946     g_value_set_boolean (ret, TRUE);
3947
3948     gst_query_parse_position (fold->query, NULL, &position);
3949
3950     GST_DEBUG_OBJECT (item, "got position %" G_GINT64_FORMAT, position);
3951
3952     if (position > fold->max)
3953       fold->max = position;
3954   }
3955
3956   return TRUE;
3957 }
3958
3959 static void
3960 bin_query_position_done (GstBin * bin, QueryFold * fold)
3961 {
3962   GstFormat format;
3963
3964   gst_query_parse_position (fold->query, &format, NULL);
3965   /* store max in query result */
3966   gst_query_set_position (fold->query, format, fold->max);
3967
3968   GST_DEBUG_OBJECT (bin, "max position %" G_GINT64_FORMAT, fold->max);
3969 }
3970
3971 static gboolean
3972 bin_query_latency_fold (const GValue * vitem, GValue * ret, QueryFold * fold)
3973 {
3974   gboolean res = FALSE;
3975   GstObject *item = g_value_get_object (vitem);
3976   if (GST_IS_PAD (item))
3977     res = gst_pad_query (GST_PAD (item), fold->query);
3978   else
3979     res = gst_element_query (GST_ELEMENT (item), fold->query);
3980   if (res) {
3981     GstClockTime min, max;
3982     gboolean live;
3983
3984     gst_query_parse_latency (fold->query, &live, &min, &max);
3985
3986     GST_DEBUG_OBJECT (item,
3987         "got latency min %" GST_TIME_FORMAT ", max %" GST_TIME_FORMAT
3988         ", live %d", GST_TIME_ARGS (min), GST_TIME_ARGS (max), live);
3989
3990     /* for the combined latency we collect the MAX of all min latencies and
3991      * the MIN of all max latencies */
3992     if (live) {
3993       if (min > fold->min)
3994         fold->min = min;
3995       if (fold->max == -1)
3996         fold->max = max;
3997       else if (max < fold->max)
3998         fold->max = max;
3999       if (!fold->live)
4000         fold->live = live;
4001     }
4002   } else {
4003     g_value_set_boolean (ret, FALSE);
4004     GST_DEBUG_OBJECT (item, "failed query");
4005   }
4006
4007   return TRUE;
4008 }
4009
4010 static void
4011 bin_query_latency_done (GstBin * bin, QueryFold * fold)
4012 {
4013   /* store max in query result */
4014   gst_query_set_latency (fold->query, fold->live, fold->min, fold->max);
4015
4016   GST_DEBUG_OBJECT (bin,
4017       "latency min %" GST_TIME_FORMAT ", max %" GST_TIME_FORMAT
4018       ", live %d", GST_TIME_ARGS (fold->min), GST_TIME_ARGS (fold->max),
4019       fold->live);
4020 }
4021
4022 /* generic fold, return first valid result */
4023 static gboolean
4024 bin_query_generic_fold (const GValue * vitem, GValue * ret, QueryFold * fold)
4025 {
4026   gboolean res = FALSE;
4027   GstObject *item = g_value_get_object (vitem);
4028   if (GST_IS_PAD (item))
4029     res = gst_pad_query (GST_PAD (item), fold->query);
4030   else
4031     res = gst_element_query (GST_ELEMENT (item), fold->query);
4032   if (res) {
4033     g_value_set_boolean (ret, TRUE);
4034     GST_DEBUG_OBJECT (item, "answered query %p", fold->query);
4035   }
4036
4037   /* and stop as soon as we have a valid result */
4038   return !res;
4039 }
4040
4041 /* Perform a query iteration for the given bin. The query is stored in
4042  * QueryFold and iter should be either a GstPad iterator or a
4043  * GstElement iterator. */
4044 static gboolean
4045 bin_iterate_fold (GstBin * bin, GstIterator * iter, QueryInitFunction fold_init,
4046     QueryDoneFunction fold_done, GstIteratorFoldFunction fold_func,
4047     QueryFold * fold_data, gboolean default_return)
4048 {
4049   gboolean res = default_return;
4050   GValue ret = { 0 };
4051   /* set the result of the query to FALSE initially */
4052   g_value_init (&ret, G_TYPE_BOOLEAN);
4053   g_value_set_boolean (&ret, res);
4054
4055   while (TRUE) {
4056     GstIteratorResult ires;
4057
4058     ires = gst_iterator_fold (iter, fold_func, &ret, fold_data);
4059
4060     switch (ires) {
4061       case GST_ITERATOR_RESYNC:
4062         gst_iterator_resync (iter);
4063         if (fold_init)
4064           fold_init (bin, fold_data);
4065         g_value_set_boolean (&ret, res);
4066         break;
4067       case GST_ITERATOR_OK:
4068       case GST_ITERATOR_DONE:
4069         res = g_value_get_boolean (&ret);
4070         if (fold_done != NULL && res)
4071           fold_done (bin, fold_data);
4072         goto done;
4073       default:
4074         res = FALSE;
4075         goto done;
4076     }
4077   }
4078 done:
4079   return res;
4080 }
4081
4082 static gboolean
4083 gst_bin_query (GstElement * element, GstQuery * query)
4084 {
4085   GstBin *bin = GST_BIN_CAST (element);
4086   GstIterator *iter;
4087   gboolean default_return = FALSE;
4088   gboolean res = FALSE;
4089   gboolean src_pads_query_result = FALSE;
4090   GstIteratorFoldFunction fold_func;
4091   QueryInitFunction fold_init = NULL;
4092   QueryDoneFunction fold_done = NULL;
4093   QueryFold fold_data;
4094
4095   switch (GST_QUERY_TYPE (query)) {
4096     case GST_QUERY_DURATION:
4097     {
4098       /* FIXME: implement duration caching in GstBin again */
4099 #if 0
4100       GList *cached;
4101       GstFormat qformat;
4102
4103       gst_query_parse_duration (query, &qformat, NULL);
4104
4105       /* find cached duration query */
4106       GST_OBJECT_LOCK (bin);
4107       for (cached = bin->messages; cached; cached = g_list_next (cached)) {
4108         GstMessage *message = (GstMessage *) cached->data;
4109
4110         if (GST_MESSAGE_TYPE (message) == GST_MESSAGE_DURATION_CHANGED &&
4111             GST_MESSAGE_SRC (message) == GST_OBJECT_CAST (bin)) {
4112           GstFormat format;
4113           gint64 duration;
4114
4115           gst_message_parse_duration (message, &format, &duration);
4116
4117           /* if cached same format, copy duration in query result */
4118           if (format == qformat) {
4119             GST_DEBUG_OBJECT (bin, "return cached duration %" G_GINT64_FORMAT,
4120                 duration);
4121             GST_OBJECT_UNLOCK (bin);
4122
4123             gst_query_set_duration (query, qformat, duration);
4124             res = TRUE;
4125             goto exit;
4126           }
4127         }
4128       }
4129       GST_OBJECT_UNLOCK (bin);
4130 #else
4131       GST_FIXME ("implement duration caching in GstBin again");
4132 #endif
4133       /* no cached value found, iterate and collect durations */
4134       fold_func = (GstIteratorFoldFunction) bin_query_duration_fold;
4135       fold_init = bin_query_min_max_init;
4136       fold_done = bin_query_duration_done;
4137       break;
4138     }
4139     case GST_QUERY_POSITION:
4140     {
4141       fold_func = (GstIteratorFoldFunction) bin_query_position_fold;
4142       fold_init = bin_query_min_max_init;
4143       fold_done = bin_query_position_done;
4144       break;
4145     }
4146     case GST_QUERY_LATENCY:
4147     {
4148       fold_func = (GstIteratorFoldFunction) bin_query_latency_fold;
4149       fold_init = bin_query_min_max_init;
4150       fold_done = bin_query_latency_done;
4151       default_return = TRUE;
4152       break;
4153     }
4154     default:
4155       fold_func = (GstIteratorFoldFunction) bin_query_generic_fold;
4156       break;
4157   }
4158
4159   fold_data.query = query;
4160
4161   iter = gst_bin_iterate_sinks (bin);
4162   GST_DEBUG_OBJECT (bin, "Sending query %p (type %s) to sink children",
4163       query, GST_QUERY_TYPE_NAME (query));
4164
4165   if (fold_init)
4166     fold_init (bin, &fold_data);
4167
4168   res =
4169       bin_iterate_fold (bin, iter, fold_init, fold_done, fold_func, &fold_data,
4170       default_return);
4171   gst_iterator_free (iter);
4172
4173   if (!res) {
4174     /* Query the source pads of the element */
4175     iter = gst_element_iterate_src_pads (element);
4176     src_pads_query_result =
4177         bin_iterate_fold (bin, iter, fold_init, fold_done, fold_func,
4178         &fold_data, default_return);
4179     gst_iterator_free (iter);
4180
4181     if (src_pads_query_result)
4182       res = TRUE;
4183   }
4184
4185   GST_DEBUG_OBJECT (bin, "query %p result %d", query, res);
4186
4187   return res;
4188 }
4189
4190 static void
4191 set_context (const GValue * item, gpointer user_data)
4192 {
4193   GstElement *element = g_value_get_object (item);
4194
4195   gst_element_set_context (element, user_data);
4196 }
4197
4198 static void
4199 gst_bin_set_context (GstElement * element, GstContext * context)
4200 {
4201   GstBin *bin;
4202   GstIterator *children;
4203
4204   g_return_if_fail (GST_IS_BIN (element));
4205
4206   bin = GST_BIN (element);
4207
4208   GST_ELEMENT_CLASS (parent_class)->set_context (element, context);
4209
4210   children = gst_bin_iterate_elements (bin);
4211   while (gst_iterator_foreach (children, set_context,
4212           context) == GST_ITERATOR_RESYNC)
4213     gst_iterator_resync (children);
4214   gst_iterator_free (children);
4215 }
4216
4217 static gint
4218 compare_name (const GValue * velement, const gchar * name)
4219 {
4220   gint eq;
4221   GstElement *element = g_value_get_object (velement);
4222
4223   GST_OBJECT_LOCK (element);
4224   eq = strcmp (GST_ELEMENT_NAME (element), name);
4225   GST_OBJECT_UNLOCK (element);
4226
4227   return eq;
4228 }
4229
4230 /**
4231  * gst_bin_get_by_name:
4232  * @bin: a #GstBin
4233  * @name: the element name to search for
4234  *
4235  * Gets the element with the given name from a bin. This
4236  * function recurses into child bins.
4237  *
4238  * Returns %NULL if no element with the given name is found in the bin.
4239  *
4240  * MT safe.  Caller owns returned reference.
4241  *
4242  * Returns: (transfer full) (nullable): the #GstElement with the given
4243  * name, or %NULL
4244  */
4245 GstElement *
4246 gst_bin_get_by_name (GstBin * bin, const gchar * name)
4247 {
4248   GstIterator *children;
4249   GValue result = { 0, };
4250   GstElement *element;
4251   gboolean found;
4252
4253   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
4254
4255   GST_CAT_INFO (GST_CAT_PARENTAGE, "[%s]: looking up child element %s",
4256       GST_ELEMENT_NAME (bin), name);
4257
4258   children = gst_bin_iterate_recurse (bin);
4259   found = gst_iterator_find_custom (children,
4260       (GCompareFunc) compare_name, &result, (gpointer) name);
4261   gst_iterator_free (children);
4262
4263   if (found) {
4264     element = g_value_dup_object (&result);
4265     g_value_unset (&result);
4266   } else {
4267     element = NULL;
4268   }
4269
4270   return element;
4271 }
4272
4273 /**
4274  * gst_bin_get_by_name_recurse_up:
4275  * @bin: a #GstBin
4276  * @name: the element name to search for
4277  *
4278  * Gets the element with the given name from this bin. If the
4279  * element is not found, a recursion is performed on the parent bin.
4280  *
4281  * Returns %NULL if:
4282  * - no element with the given name is found in the bin
4283  *
4284  * MT safe.  Caller owns returned reference.
4285  *
4286  * Returns: (transfer full) (nullable): the #GstElement with the given
4287  * name, or %NULL
4288  */
4289 GstElement *
4290 gst_bin_get_by_name_recurse_up (GstBin * bin, const gchar * name)
4291 {
4292   GstElement *result;
4293
4294   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
4295   g_return_val_if_fail (name != NULL, NULL);
4296
4297   result = gst_bin_get_by_name (bin, name);
4298
4299   if (!result) {
4300     GstObject *parent;
4301
4302     parent = gst_object_get_parent (GST_OBJECT_CAST (bin));
4303     if (parent) {
4304       if (GST_IS_BIN (parent)) {
4305         result = gst_bin_get_by_name_recurse_up (GST_BIN_CAST (parent), name);
4306       }
4307       gst_object_unref (parent);
4308     }
4309   }
4310
4311   return result;
4312 }
4313
4314 static gint
4315 compare_interface (const GValue * velement, GValue * interface)
4316 {
4317   GstElement *element = g_value_get_object (velement);
4318   GType interface_type = (GType) g_value_get_pointer (interface);
4319   gint ret;
4320
4321   if (G_TYPE_CHECK_INSTANCE_TYPE (element, interface_type)) {
4322     ret = 0;
4323   } else {
4324     ret = 1;
4325   }
4326   return ret;
4327 }
4328
4329 /**
4330  * gst_bin_get_by_interface:
4331  * @bin: a #GstBin
4332  * @iface: the #GType of an interface
4333  *
4334  * Looks for an element inside the bin that implements the given
4335  * interface. If such an element is found, it returns the element.
4336  * You can cast this element to the given interface afterwards.  If you want
4337  * all elements that implement the interface, use
4338  * gst_bin_iterate_all_by_interface(). This function recurses into child bins.
4339  *
4340  * MT safe.  Caller owns returned reference.
4341  *
4342  * Returns: (transfer full): A #GstElement inside the bin implementing the interface
4343  */
4344 GstElement *
4345 gst_bin_get_by_interface (GstBin * bin, GType iface)
4346 {
4347   GstIterator *children;
4348   GValue result = { 0, };
4349   GstElement *element;
4350   gboolean found;
4351   GValue viface = { 0, };
4352
4353   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
4354   g_return_val_if_fail (G_TYPE_IS_INTERFACE (iface), NULL);
4355
4356   g_value_init (&viface, G_TYPE_POINTER);
4357   g_value_set_pointer (&viface, (gpointer) iface);
4358
4359   children = gst_bin_iterate_recurse (bin);
4360   found = gst_iterator_find_custom (children, (GCompareFunc) compare_interface,
4361       &result, &viface);
4362   gst_iterator_free (children);
4363
4364   if (found) {
4365     element = g_value_dup_object (&result);
4366     g_value_unset (&result);
4367   } else {
4368     element = NULL;
4369   }
4370   g_value_unset (&viface);
4371
4372   return element;
4373 }
4374
4375 /**
4376  * gst_bin_iterate_all_by_interface:
4377  * @bin: a #GstBin
4378  * @iface: the #GType of an interface
4379  *
4380  * Looks for all elements inside the bin that implements the given
4381  * interface. You can safely cast all returned elements to the given interface.
4382  * The function recurses inside child bins. The iterator will yield a series
4383  * of #GstElement that should be unreffed after use.
4384  *
4385  * MT safe.  Caller owns returned value.
4386  *
4387  * Returns: (transfer full) (nullable): a #GstIterator of #GstElement
4388  *     for all elements in the bin implementing the given interface,
4389  *     or %NULL
4390  */
4391 GstIterator *
4392 gst_bin_iterate_all_by_interface (GstBin * bin, GType iface)
4393 {
4394   GstIterator *children;
4395   GstIterator *result;
4396   GValue viface = { 0, };
4397
4398   g_return_val_if_fail (GST_IS_BIN (bin), NULL);
4399   g_return_val_if_fail (G_TYPE_IS_INTERFACE (iface), NULL);
4400
4401   g_value_init (&viface, G_TYPE_POINTER);
4402   g_value_set_pointer (&viface, (gpointer) iface);
4403
4404   children = gst_bin_iterate_recurse (bin);
4405   result = gst_iterator_filter (children, (GCompareFunc) compare_interface,
4406       &viface);
4407
4408   g_value_unset (&viface);
4409
4410   return result;
4411 }