plugins/elements/gsttypefindelement.c

   1 /* GStreamer
   2  * Copyright (C) 2003 Benjamin Otte <in7y118@public.uni-hamburg.de>
   3  *
   4  * gsttypefindelement.c: element that detects type of stream
   5  *
   6  * This library is free software; you can redistribute it and/or
   7  * modify it under the terms of the GNU Library General Public
   8  * License as published by the Free Software Foundation; either
   9  * version 2 of the License, or (at your option) any later version.
  10  *
  11  * This library is distributed in the hope that it will be useful,
  12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  14  * Library General Public License for more details.
  15  *
  16  * You should have received a copy of the GNU Library General Public
  17  * License along with this library; if not, write to the
  18  * Free Software Foundation, Inc., 51 Franklin St, Fifth Floor,
  19  * Boston, MA 02110-1301, USA.
  20  */
  21 /**
  22  * SECTION:element-typefind
  23  *
  24  * Determines the media-type of a stream. It applies typefind functions in the
  25  * order of their rank. Once the type has been detected it sets its src pad caps
  26  * to the found media type.
  27  *
  28  * Whenever a type is found the #GstTypeFindElement::have-type signal is
  29  * emitted, either from the streaming thread or the application thread
  30  * (the latter may happen when typefinding is done pull-based from the
  31  * state change function).
  32  *
  33  * Plugins can register custom typefinders by using #GstTypeFindFactory.
  34  */
  35
  36 /* FIXME: need a better solution for non-seekable streams */
  37
  38 /* way of operation:
  39  * 1) get a list of all typefind functions sorted best to worst
  40  * 2) if all elements have been called with all requested data goto 8
  41  * 3) call all functions once with all available data
  42  * 4) if a function returns a value >= PROP_MAXIMUM goto 8 (never implemented))
  43  * 5) all functions with a result > PROP_MINIMUM or functions that did not get
  44  *    all requested data (where peek returned NULL) stay in list
  45  * 6) seek to requested offset of best function that still has open data
  46  *    requests
  47  * 7) goto 2
  48  * 8) take best available result and use its caps
  49  *
  50  * The element has two scheduling modes:
  51  *
  52  * 1) chain based, it will collect buffers and run the typefind function on
  53  *    the buffer until something is found.
  54  * 2) getrange based, it will proxy the getrange function to the sinkpad. It
  55  *    is assumed that the peer element is happy with whatever format we
  56  *    eventually read.
  57  *
  58  * By default it tries to do pull based typefinding (this avoids joining
  59  * received buffers and holding them back in store.)
  60  *
  61  * When the element has no connected srcpad, and the sinkpad can operate in
  62  * getrange based mode, the element starts its own task to figure out the
  63  * type of the stream.
  64  *
  65  * Most of the actual implementation is in libs/gst/base/gsttypefindhelper.c.
  66  */
  67
  68 #ifdef HAVE_CONFIG_H
  69 #  include "config.h"
  70 #endif
  71
  72 #include "gst/gst_private.h"
  73
  74 #include "gsttypefindelement.h"
  75 #include "gst/gst-i18n-lib.h"
  76 #include "gst/base/gsttypefindhelper.h"
  77
  78 #include <gst/gsttypefind.h>
  79 #include <gst/gstutils.h>
  80 #include <gst/gsterror.h>
  81
  82 GST_DEBUG_CATEGORY_STATIC (gst_type_find_element_debug);
  83 #define GST_CAT_DEFAULT gst_type_find_element_debug
  84
  85 /* generic templates */
  86 static GstStaticPadTemplate type_find_element_sink_template =
  87 GST_STATIC_PAD_TEMPLATE ("sink",
  88     GST_PAD_SINK,
  89     GST_PAD_ALWAYS,
  90     GST_STATIC_CAPS_ANY);
  91
  92 static GstStaticPadTemplate type_find_element_src_template =
  93 GST_STATIC_PAD_TEMPLATE ("src",
  94     GST_PAD_SRC,
  95     GST_PAD_ALWAYS,
  96     GST_STATIC_CAPS_ANY);
  97
  98 /* Require at least 2kB of data before we attempt typefinding in chain-mode.
  99  * 128kB is massive overkill for the maximum, but doesn't do any harm */
 100 #define TYPE_FIND_MIN_SIZE   (2*1024)
 101 #define TYPE_FIND_MAX_SIZE (128*1024)
 102
 103 /* TypeFind signals and args */
 104 enum
 105 {
 106   HAVE_TYPE,
 107   LAST_SIGNAL
 108 };
 109 enum
 110 {
 111   PROP_0,
 112   PROP_CAPS,
 113   PROP_MINIMUM,
 114   PROP_FORCE_CAPS,
 115   PROP_LAST
 116 };
 117 enum
 118 {
 119   MODE_NORMAL,                  /* act as identity */
 120   MODE_TYPEFIND,                /* do typefinding  */
 121   MODE_ERROR                    /* had fatal error */
 122 };
 123
 124
 125 #define _do_init \
 126     GST_DEBUG_CATEGORY_INIT (gst_type_find_element_debug, "typefind",           \
 127         GST_DEBUG_BG_YELLOW | GST_DEBUG_FG_GREEN, "type finding element");
 128 #define gst_type_find_element_parent_class parent_class
 129 G_DEFINE_TYPE_WITH_CODE (GstTypeFindElement, gst_type_find_element,
 130     GST_TYPE_ELEMENT, _do_init);
 131
 132 static void gst_type_find_element_dispose (GObject * object);
 133 static void gst_type_find_element_set_property (GObject * object,
 134     guint prop_id, const GValue * value, GParamSpec * pspec);
 135 static void gst_type_find_element_get_property (GObject * object,
 136     guint prop_id, GValue * value, GParamSpec * pspec);
 137
 138 static gboolean gst_type_find_element_src_event (GstPad * pad,
 139     GstObject * parent, GstEvent * event);
 140 static gboolean gst_type_find_handle_src_query (GstPad * pad,
 141     GstObject * parent, GstQuery * query);
 142
 143 static gboolean gst_type_find_element_sink_event (GstPad * pad,
 144     GstObject * parent, GstEvent * event);
 145 static gboolean gst_type_find_element_setcaps (GstTypeFindElement * typefind,
 146     GstCaps * caps);
 147 static GstFlowReturn gst_type_find_element_chain (GstPad * sinkpad,
 148     GstObject * parent, GstBuffer * buffer);
 149 static GstFlowReturn gst_type_find_element_getrange (GstPad * srcpad,
 150     GstObject * parent, guint64 offset, guint length, GstBuffer ** buffer);
 151
 152 static GstStateChangeReturn
 153 gst_type_find_element_change_state (GstElement * element,
 154     GstStateChange transition);
 155 static gboolean gst_type_find_element_activate_sink (GstPad * pad,
 156     GstObject * parent);
 157 static gboolean gst_type_find_element_activate_sink_mode (GstPad * pad,
 158     GstObject * parent, GstPadMode mode, gboolean active);
 159 static gboolean gst_type_find_element_activate_src_mode (GstPad * pad,
 160     GstObject * parent, GstPadMode mode, gboolean active);
 161 static GstFlowReturn
 162 gst_type_find_element_chain_do_typefinding (GstTypeFindElement * typefind,
 163     gboolean check_avail, gboolean at_eos);
 164 static void gst_type_find_element_send_cached_events (GstTypeFindElement *
 165     typefind);
 166
 167 static void gst_type_find_element_loop (GstPad * pad);
 168
 169 static guint gst_type_find_element_signals[LAST_SIGNAL] = { 0 };
 170
 171 static void
 172 gst_type_find_element_have_type (GstTypeFindElement * typefind,
 173     guint probability, GstCaps * caps)
 174 {
 175   GstEvent *event;
 176
 177   g_assert (caps != NULL);
 178
 179   GST_INFO_OBJECT (typefind, "found caps %" GST_PTR_FORMAT ", probability=%u",
 180       caps, probability);
 181
 182   /* Do nothing if downstream is pulling from us */
 183   if (GST_PAD_MODE (typefind->src) == GST_PAD_MODE_PULL)
 184     return;
 185
 186   GST_OBJECT_LOCK (typefind);
 187
 188   /* Now actually send the CAPS event downstream.
 189    *
 190    * Try to directly send the CAPS event downstream that we created in
 191    * gst_type_find_element_emit_have_type() if it is still there, instead
 192    * of creating a new one. No need to create an equivalent one, replacing
 193    * it in the sticky event list and possibly causing renegotiation
 194    */
 195   event = gst_pad_get_sticky_event (typefind->src, GST_EVENT_CAPS, 0);
 196   if (event) {
 197     GstCaps *event_caps;
 198
 199     gst_event_parse_caps (event, &event_caps);
 200     if (caps != event_caps) {
 201       gst_event_unref (event);
 202       event = gst_event_new_caps (caps);
 203     }
 204   } else {
 205     event = gst_event_new_caps (caps);
 206   }
 207
 208   GST_OBJECT_UNLOCK (typefind);
 209
 210   gst_pad_push_event (typefind->src, event);
 211 }
 212
 213 static void
 214 gst_type_find_element_emit_have_type (GstTypeFindElement * typefind,
 215     guint probability, GstCaps * caps)
 216 {
 217   GstEvent *event;
 218
 219   /* Update caps field immediatly so that caps queries and properties can be
 220    * honored in all "have-type" signal handlers.
 221    */
 222   GST_OBJECT_LOCK (typefind);
 223   if (typefind->caps)
 224     gst_caps_unref (typefind->caps);
 225   typefind->caps = gst_caps_ref (caps);
 226   GST_OBJECT_UNLOCK (typefind);
 227
 228   /* Only store the caps event at this point. We give signal handlers
 229    * the chance to look at the caps before they are sent downstream.
 230    * They are only forwarded downstream later in the default signal
 231    * handler after all application signal handlers
 232    */
 233   event = gst_event_new_caps (caps);
 234   gst_pad_store_sticky_event (typefind->src, event);
 235   gst_event_unref (event);
 236
 237   g_signal_emit (typefind, gst_type_find_element_signals[HAVE_TYPE], 0,
 238       probability, caps);
 239 }
 240
 241 static void
 242 gst_type_find_element_class_init (GstTypeFindElementClass * typefind_class)
 243 {
 244   GObjectClass *gobject_class = G_OBJECT_CLASS (typefind_class);
 245   GstElementClass *gstelement_class = GST_ELEMENT_CLASS (typefind_class);
 246
 247   gobject_class->set_property = gst_type_find_element_set_property;
 248   gobject_class->get_property = gst_type_find_element_get_property;
 249   gobject_class->dispose = gst_type_find_element_dispose;
 250
 251   g_object_class_install_property (gobject_class, PROP_CAPS,
 252       g_param_spec_boxed ("caps", _("caps"),
 253           _("detected capabilities in stream"), GST_TYPE_CAPS,
 254           G_PARAM_READABLE | G_PARAM_STATIC_STRINGS));
 255   g_object_class_install_property (gobject_class, PROP_MINIMUM,
 256       g_param_spec_uint ("minimum", _("minimum"),
 257           "minimum probability required to accept caps", GST_TYPE_FIND_MINIMUM,
 258           GST_TYPE_FIND_MAXIMUM, GST_TYPE_FIND_MINIMUM,
 259           G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
 260   g_object_class_install_property (gobject_class, PROP_FORCE_CAPS,
 261       g_param_spec_boxed ("force-caps", _("force caps"),
 262           _("force caps without doing a typefind"), GST_TYPE_CAPS,
 263           G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
 264   /**
 265    * GstTypeFindElement::have-type:
 266    * @typefind: the typefind instance
 267    * @probability: the probability of the type found
 268    * @caps: the caps of the type found
 269    *
 270    * This signal gets emitted when the type and its probability has
 271    * been found.
 272    */
 273   gst_type_find_element_signals[HAVE_TYPE] = g_signal_new ("have-type",
 274       G_TYPE_FROM_CLASS (typefind_class), G_SIGNAL_RUN_LAST,
 275       G_STRUCT_OFFSET (GstTypeFindElementClass, have_type), NULL, NULL,
 276       g_cclosure_marshal_generic, G_TYPE_NONE, 2,
 277       G_TYPE_UINT, GST_TYPE_CAPS | G_SIGNAL_TYPE_STATIC_SCOPE);
 278
 279   typefind_class->have_type =
 280       GST_DEBUG_FUNCPTR (gst_type_find_element_have_type);
 281
 282   gst_element_class_set_static_metadata (gstelement_class,
 283       "TypeFind",
 284       "Generic",
 285       "Finds the media type of a stream",
 286       "Benjamin Otte <in7y118@public.uni-hamburg.de>");
 287   gst_element_class_add_static_pad_template (gstelement_class,
 288       &type_find_element_src_template);
 289   gst_element_class_add_static_pad_template (gstelement_class,
 290       &type_find_element_sink_template);
 291
 292   gstelement_class->change_state =
 293       GST_DEBUG_FUNCPTR (gst_type_find_element_change_state);
 294 }
 295
 296 static void
 297 gst_type_find_element_init (GstTypeFindElement * typefind)
 298 {
 299   /* sinkpad */
 300   typefind->sink =
 301       gst_pad_new_from_static_template (&type_find_element_sink_template,
 302       "sink");
 303
 304   gst_pad_set_activate_function (typefind->sink,
 305       GST_DEBUG_FUNCPTR (gst_type_find_element_activate_sink));
 306   gst_pad_set_activatemode_function (typefind->sink,
 307       GST_DEBUG_FUNCPTR (gst_type_find_element_activate_sink_mode));
 308   gst_pad_set_chain_function (typefind->sink,
 309       GST_DEBUG_FUNCPTR (gst_type_find_element_chain));
 310   gst_pad_set_event_function (typefind->sink,
 311       GST_DEBUG_FUNCPTR (gst_type_find_element_sink_event));
 312   GST_PAD_SET_PROXY_ALLOCATION (typefind->sink);
 313   gst_element_add_pad (GST_ELEMENT (typefind), typefind->sink);
 314
 315   /* srcpad */
 316   typefind->src =
 317       gst_pad_new_from_static_template (&type_find_element_src_template, "src");
 318
 319   gst_pad_set_activatemode_function (typefind->src,
 320       GST_DEBUG_FUNCPTR (gst_type_find_element_activate_src_mode));
 321   gst_pad_set_getrange_function (typefind->src,
 322       GST_DEBUG_FUNCPTR (gst_type_find_element_getrange));
 323   gst_pad_set_event_function (typefind->src,
 324       GST_DEBUG_FUNCPTR (gst_type_find_element_src_event));
 325   gst_pad_set_query_function (typefind->src,
 326       GST_DEBUG_FUNCPTR (gst_type_find_handle_src_query));
 327   gst_pad_use_fixed_caps (typefind->src);
 328   gst_element_add_pad (GST_ELEMENT (typefind), typefind->src);
 329
 330   typefind->mode = MODE_TYPEFIND;
 331   typefind->caps = NULL;
 332   typefind->min_probability = 1;
 333
 334   typefind->adapter = gst_adapter_new ();
 335 }
 336
 337 static void
 338 gst_type_find_element_dispose (GObject * object)
 339 {
 340   GstTypeFindElement *typefind = GST_TYPE_FIND_ELEMENT (object);
 341
 342   if (typefind->adapter) {
 343     g_object_unref (typefind->adapter);
 344     typefind->adapter = NULL;
 345   }
 346
 347   if (typefind->force_caps) {
 348     gst_caps_unref (typefind->force_caps);
 349     typefind->force_caps = NULL;
 350   }
 351
 352   G_OBJECT_CLASS (parent_class)->dispose (object);
 353 }
 354
 355 static void
 356 gst_type_find_element_set_property (GObject * object, guint prop_id,
 357     const GValue * value, GParamSpec * pspec)
 358 {
 359   GstTypeFindElement *typefind;
 360
 361   typefind = GST_TYPE_FIND_ELEMENT (object);
 362
 363   switch (prop_id) {
 364     case PROP_MINIMUM:
 365       typefind->min_probability = g_value_get_uint (value);
 366       break;
 367     case PROP_FORCE_CAPS:
 368       GST_OBJECT_LOCK (typefind);
 369       if (typefind->force_caps)
 370         gst_caps_unref (typefind->force_caps);
 371       typefind->force_caps = g_value_dup_boxed (value);
 372       GST_OBJECT_UNLOCK (typefind);
 373       break;
 374     default:
 375       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
 376       break;
 377   }
 378 }
 379
 380 static void
 381 gst_type_find_element_get_property (GObject * object, guint prop_id,
 382     GValue * value, GParamSpec * pspec)
 383 {
 384   GstTypeFindElement *typefind;
 385
 386   typefind = GST_TYPE_FIND_ELEMENT (object);
 387
 388   switch (prop_id) {
 389     case PROP_CAPS:
 390       GST_OBJECT_LOCK (typefind);
 391       g_value_set_boxed (value, typefind->caps);
 392       GST_OBJECT_UNLOCK (typefind);
 393       break;
 394     case PROP_MINIMUM:
 395       g_value_set_uint (value, typefind->min_probability);
 396       break;
 397     case PROP_FORCE_CAPS:
 398       GST_OBJECT_LOCK (typefind);
 399       g_value_set_boxed (value, typefind->force_caps);
 400       GST_OBJECT_UNLOCK (typefind);
 401       break;
 402     default:
 403       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
 404       break;
 405   }
 406 }
 407
 408 static gboolean
 409 gst_type_find_handle_src_query (GstPad * pad, GstObject * parent,
 410     GstQuery * query)
 411 {
 412   GstTypeFindElement *typefind;
 413   gboolean res = FALSE;
 414
 415   typefind = GST_TYPE_FIND_ELEMENT (parent);
 416   GST_DEBUG_OBJECT (typefind, "Handling src query %s",
 417       GST_QUERY_TYPE_NAME (query));
 418
 419   switch (GST_QUERY_TYPE (query)) {
 420     case GST_QUERY_SCHEDULING:
 421       /* FIXME, filter out the scheduling modes that we understand */
 422       res = gst_pad_peer_query (typefind->sink, query);
 423       break;
 424     case GST_QUERY_CAPS:
 425     {
 426       GST_DEBUG_OBJECT (typefind,
 427           "Got caps query, our caps are %" GST_PTR_FORMAT, typefind->caps);
 428
 429       /* We can hijack caps query if we typefind already */
 430       if (typefind->caps) {
 431         gst_query_set_caps_result (query, typefind->caps);
 432         res = TRUE;
 433       } else {
 434         res = gst_pad_peer_query (typefind->sink, query);
 435       }
 436       break;
 437     }
 438     case GST_QUERY_POSITION:
 439     {
 440       gint64 peer_pos;
 441       GstFormat format;
 442
 443       if (!(res = gst_pad_peer_query (typefind->sink, query)))
 444         goto out;
 445
 446       gst_query_parse_position (query, &format, &peer_pos);
 447
 448       GST_OBJECT_LOCK (typefind);
 449       /* FIXME: this code assumes that there's no discont in the queue */
 450       switch (format) {
 451         case GST_FORMAT_BYTES:
 452           peer_pos -= gst_adapter_available (typefind->adapter);
 453           if (peer_pos < 0)     /* Clamp result to 0 */
 454             peer_pos = 0;
 455           break;
 456         default:
 457           /* FIXME */
 458           break;
 459       }
 460       GST_OBJECT_UNLOCK (typefind);
 461       gst_query_set_position (query, format, peer_pos);
 462       break;
 463     }
 464     default:
 465       res = gst_pad_query_default (pad, parent, query);
 466       break;
 467   }
 468 out:
 469   return res;
 470 }
 471
 472 static gboolean
 473 gst_type_find_element_seek (GstTypeFindElement * typefind, GstEvent * event)
 474 {
 475   GstSeekFlags flags;
 476   GstSeekType start_type, stop_type;
 477   GstFormat format;
 478   gboolean flush;
 479   gdouble rate;
 480   gint64 start, stop;
 481   GstSegment seeksegment = { 0, };
 482
 483   gst_event_parse_seek (event, &rate, &format, &flags, &start_type, &start,
 484       &stop_type, &stop);
 485
 486   /* we can only seek on bytes */
 487   if (format != GST_FORMAT_BYTES) {
 488     GST_DEBUG_OBJECT (typefind, "Can only seek on BYTES");
 489     return FALSE;
 490   }
 491
 492   /* copy segment, we need this because we still need the old
 493    * segment when we close the current segment. */
 494   memcpy (&seeksegment, &typefind->segment, sizeof (GstSegment));
 495
 496   GST_DEBUG_OBJECT (typefind, "configuring seek");
 497   gst_segment_do_seek (&seeksegment, rate, format, flags,
 498       start_type, start, stop_type, stop, NULL);
 499
 500   flush = ! !(flags & GST_SEEK_FLAG_FLUSH);
 501
 502   GST_DEBUG_OBJECT (typefind, "New segment %" GST_SEGMENT_FORMAT, &seeksegment);
 503
 504   if (flush) {
 505     GST_DEBUG_OBJECT (typefind, "Starting flush");
 506     gst_pad_push_event (typefind->sink, gst_event_new_flush_start ());
 507     gst_pad_push_event (typefind->src, gst_event_new_flush_start ());
 508   } else {
 509     GST_DEBUG_OBJECT (typefind, "Non-flushing seek, pausing task");
 510     gst_pad_pause_task (typefind->sink);
 511   }
 512
 513   /* now grab the stream lock so that streaming cannot continue, for
 514    * non flushing seeks when the element is in PAUSED this could block
 515    * forever. */
 516   GST_DEBUG_OBJECT (typefind, "Waiting for streaming to stop");
 517   GST_PAD_STREAM_LOCK (typefind->sink);
 518
 519   if (flush) {
 520     GST_DEBUG_OBJECT (typefind, "Stopping flush");
 521     gst_pad_push_event (typefind->sink, gst_event_new_flush_stop (TRUE));
 522     gst_pad_push_event (typefind->src, gst_event_new_flush_stop (TRUE));
 523   }
 524
 525   /* now update the real segment info */
 526   GST_DEBUG_OBJECT (typefind, "Committing new seek segment");
 527   memcpy (&typefind->segment, &seeksegment, sizeof (GstSegment));
 528   typefind->offset = typefind->segment.start;
 529
 530   /* notify start of new segment */
 531   if (typefind->segment.flags & GST_SEGMENT_FLAG_SEGMENT) {
 532     GstMessage *msg;
 533
 534     msg = gst_message_new_segment_start (GST_OBJECT (typefind),
 535         GST_FORMAT_BYTES, typefind->segment.start);
 536     gst_element_post_message (GST_ELEMENT (typefind), msg);
 537   }
 538
 539   typefind->need_segment = TRUE;
 540
 541   /* restart our task since it might have been stopped when we did the
 542    * flush. */
 543   gst_pad_start_task (typefind->sink,
 544       (GstTaskFunction) gst_type_find_element_loop, typefind->sink, NULL);
 545
 546   /* streaming can continue now */
 547   GST_PAD_STREAM_UNLOCK (typefind->sink);
 548
 549   return TRUE;
 550 }
 551
 552 static gboolean
 553 gst_type_find_element_src_event (GstPad * pad, GstObject * parent,
 554     GstEvent * event)
 555 {
 556   GstTypeFindElement *typefind = GST_TYPE_FIND_ELEMENT (parent);
 557   gboolean result;
 558
 559   if (typefind->mode != MODE_NORMAL) {
 560     /* need to do more? */
 561     gst_event_unref (event);
 562     return FALSE;
 563   }
 564
 565   /* Only handle seeks here if driving the pipeline */
 566   if (typefind->segment.format != GST_FORMAT_UNDEFINED &&
 567       GST_EVENT_TYPE (event) == GST_EVENT_SEEK) {
 568     result = gst_type_find_element_seek (typefind, event);
 569     gst_event_unref (event);
 570     return result;
 571   } else {
 572     return gst_pad_push_event (typefind->sink, event);
 573   }
 574 }
 575
 576 static void
 577 start_typefinding (GstTypeFindElement * typefind)
 578 {
 579   GST_DEBUG_OBJECT (typefind, "starting typefinding");
 580
 581   GST_OBJECT_LOCK (typefind);
 582   if (typefind->caps)
 583     gst_caps_replace (&typefind->caps, NULL);
 584   typefind->initial_offset = GST_BUFFER_OFFSET_NONE;
 585   GST_OBJECT_UNLOCK (typefind);
 586
 587   typefind->mode = MODE_TYPEFIND;
 588 }
 589
 590 static void
 591 stop_typefinding (GstTypeFindElement * typefind)
 592 {
 593   GstState state;
 594   gboolean push_cached_buffers;
 595   gsize avail;
 596   GstBuffer *buffer;
 597   GstClockTime pts, dts;
 598
 599   gst_element_get_state (GST_ELEMENT (typefind), &state, NULL, 0);
 600
 601   push_cached_buffers = (state >= GST_STATE_PAUSED && typefind->caps);
 602
 603   GST_DEBUG_OBJECT (typefind, "stopping typefinding%s",
 604       push_cached_buffers ? " and pushing cached events and buffers" : "");
 605
 606   typefind->mode = MODE_NORMAL;
 607   if (push_cached_buffers)
 608     gst_type_find_element_send_cached_events (typefind);
 609
 610   GST_OBJECT_LOCK (typefind);
 611   avail = gst_adapter_available (typefind->adapter);
 612   if (avail == 0)
 613     goto no_data;
 614
 615   pts = gst_adapter_prev_pts (typefind->adapter, NULL);
 616   dts = gst_adapter_prev_dts (typefind->adapter, NULL);
 617   buffer = gst_adapter_take_buffer (typefind->adapter, avail);
 618   GST_BUFFER_PTS (buffer) = pts;
 619   GST_BUFFER_DTS (buffer) = dts;
 620   GST_BUFFER_OFFSET (buffer) = typefind->initial_offset;
 621   GST_OBJECT_UNLOCK (typefind);
 622
 623   if (!push_cached_buffers) {
 624     gst_buffer_unref (buffer);
 625   } else {
 626     GstPad *peer = gst_pad_get_peer (typefind->src);
 627
 628     /* make sure the user gets a meaningful error message in this case,
 629      * which is not a core bug or bug of any kind (as the default error
 630      * message emitted by gstpad.c otherwise would make you think) */
 631     if (peer && GST_PAD_CHAINFUNC (peer) == NULL) {
 632       GST_DEBUG_OBJECT (typefind, "upstream only supports push mode, while "
 633           "downstream element only works in pull mode, erroring out");
 634       GST_ELEMENT_ERROR (typefind, STREAM, FAILED,
 635           ("%s cannot work in push mode. The operation is not supported "
 636               "with this source element or protocol.",
 637               G_OBJECT_TYPE_NAME (GST_PAD_PARENT (peer))),
 638           ("Downstream pad %s:%s has no chainfunction, and the upstream "
 639               "element does not support pull mode", GST_DEBUG_PAD_NAME (peer)));
 640       typefind->mode = MODE_ERROR;      /* make the chain function error out */
 641       gst_buffer_unref (buffer);
 642     } else {
 643       gst_pad_push (typefind->src, buffer);
 644     }
 645     if (peer)
 646       gst_object_unref (peer);
 647   }
 648   return;
 649
 650   /* ERRORS */
 651 no_data:
 652   {
 653     GST_DEBUG_OBJECT (typefind, "we have no data to typefind");
 654     GST_OBJECT_UNLOCK (typefind);
 655     return;
 656   }
 657 }
 658
 659 static gboolean
 660 gst_type_find_element_sink_event (GstPad * pad, GstObject * parent,
 661     GstEvent * event)
 662 {
 663   gboolean res = FALSE;
 664   GstTypeFindElement *typefind = GST_TYPE_FIND_ELEMENT (parent);
 665
 666   GST_DEBUG_OBJECT (typefind, "got %s event in mode %d",
 667       GST_EVENT_TYPE_NAME (event), typefind->mode);
 668
 669   switch (typefind->mode) {
 670     case MODE_TYPEFIND:
 671       switch (GST_EVENT_TYPE (event)) {
 672         case GST_EVENT_CAPS:
 673         {
 674           GstCaps *caps;
 675
 676           /* Parse and push out our caps and data */
 677           gst_event_parse_caps (event, &caps);
 678           res = gst_type_find_element_setcaps (typefind, caps);
 679
 680           gst_event_unref (event);
 681           break;
 682         }
 683         case GST_EVENT_GAP:
 684         {
 685           GST_FIXME_OBJECT (typefind,
 686               "GAP events during typefinding not handled properly");
 687
 688           /* FIXME: These would need to be inserted in the stream at
 689            * the right position between buffers, but we combine all
 690            * buffers with a GstAdapter. Drop the GAP event for now,
 691            * which will only cause an implicit GAP between buffers.
 692            */
 693           gst_event_unref (event);
 694           res = TRUE;
 695           break;
 696         }
 697         case GST_EVENT_EOS:
 698         {
 699           GST_INFO_OBJECT (typefind, "Got EOS and no type found yet");
 700           gst_type_find_element_chain_do_typefinding (typefind, FALSE, TRUE);
 701
 702           res = gst_pad_push_event (typefind->src, event);
 703           break;
 704         }
 705         case GST_EVENT_FLUSH_STOP:{
 706           GList *l;
 707
 708           GST_OBJECT_LOCK (typefind);
 709
 710           for (l = typefind->cached_events; l; l = l->next) {
 711             if (GST_EVENT_IS_STICKY (l->data) &&
 712                 GST_EVENT_TYPE (l->data) != GST_EVENT_SEGMENT &&
 713                 GST_EVENT_TYPE (l->data) != GST_EVENT_EOS) {
 714               gst_pad_store_sticky_event (typefind->src, l->data);
 715             }
 716             gst_event_unref (l->data);
 717           }
 718
 719           g_list_free (typefind->cached_events);
 720           typefind->cached_events = NULL;
 721           gst_adapter_clear (typefind->adapter);
 722           GST_OBJECT_UNLOCK (typefind);
 723           /* fall through */
 724         }
 725         case GST_EVENT_FLUSH_START:
 726           res = gst_pad_push_event (typefind->src, event);
 727           break;
 728         default:
 729           /* Forward events that would happen before the caps event
 730            * directly instead of storing them. There's no reason not
 731            * to send them directly and we should only store events
 732            * for later sending that would need to come after the caps
 733            * event */
 734           if (GST_EVENT_TYPE (event) < GST_EVENT_CAPS) {
 735             res = gst_pad_push_event (typefind->src, event);
 736           } else {
 737             GST_DEBUG_OBJECT (typefind, "Saving %s event to send later",
 738                 GST_EVENT_TYPE_NAME (event));
 739             GST_OBJECT_LOCK (typefind);
 740             typefind->cached_events =
 741                 g_list_append (typefind->cached_events, event);
 742             GST_OBJECT_UNLOCK (typefind);
 743             res = TRUE;
 744           }
 745           break;
 746       }
 747       break;
 748     case MODE_NORMAL:
 749       res = gst_pad_push_event (typefind->src, event);
 750       break;
 751     case MODE_ERROR:
 752       break;
 753     default:
 754       g_assert_not_reached ();
 755   }
 756   return res;
 757 }
 758
 759 static void
 760 gst_type_find_element_send_cached_events (GstTypeFindElement * typefind)
 761 {
 762   GList *l, *cached_events;
 763
 764   GST_OBJECT_LOCK (typefind);
 765   cached_events = typefind->cached_events;
 766   typefind->cached_events = NULL;
 767   GST_OBJECT_UNLOCK (typefind);
 768
 769   for (l = cached_events; l != NULL; l = l->next) {
 770     GstEvent *event = GST_EVENT (l->data);
 771
 772     GST_DEBUG_OBJECT (typefind, "sending cached %s event",
 773         GST_EVENT_TYPE_NAME (event));
 774     gst_pad_push_event (typefind->src, event);
 775   }
 776   g_list_free (cached_events);
 777 }
 778
 779 static gboolean
 780 gst_type_find_element_setcaps (GstTypeFindElement * typefind, GstCaps * caps)
 781 {
 782   /* don't operate on ANY caps */
 783   if (gst_caps_is_any (caps))
 784     return TRUE;
 785
 786   gst_type_find_element_emit_have_type (typefind, GST_TYPE_FIND_MAXIMUM, caps);
 787
 788   /* Shortcircuit typefinding if we get caps */
 789   GST_DEBUG_OBJECT (typefind, "Skipping typefinding, using caps from "
 790       "upstream: %" GST_PTR_FORMAT, caps);
 791
 792   stop_typefinding (typefind);
 793
 794   return TRUE;
 795 }
 796
 797 static gchar *
 798 gst_type_find_get_extension (GstTypeFindElement * typefind, GstPad * pad)
 799 {
 800   GstQuery *query;
 801   gchar *uri, *result;
 802   size_t len;
 803   gint find;
 804
 805   query = gst_query_new_uri ();
 806
 807   /* try getting the caps with an uri query and from the extension */
 808   if (!gst_pad_peer_query (pad, query))
 809     goto peer_query_failed;
 810
 811   gst_query_parse_uri (query, &uri);
 812   if (uri == NULL)
 813     goto no_uri;
 814
 815   GST_DEBUG_OBJECT (typefind, "finding extension of %s", uri);
 816
 817   /* find the extension on the uri, this is everything after a '.' */
 818   len = strlen (uri);
 819   find = len - 1;
 820
 821   while (find >= 0) {
 822     if (uri[find] == '.')
 823       break;
 824     find--;
 825   }
 826   if (find < 0)
 827     goto no_extension;
 828
 829   result = g_strdup (&uri[find + 1]);
 830
 831   GST_DEBUG_OBJECT (typefind, "found extension %s", result);
 832   gst_query_unref (query);
 833   g_free (uri);
 834
 835   return result;
 836
 837   /* ERRORS */
 838 peer_query_failed:
 839   {
 840     GST_WARNING_OBJECT (typefind, "failed to query peer uri");
 841     gst_query_unref (query);
 842     return NULL;
 843   }
 844 no_uri:
 845   {
 846     GST_WARNING_OBJECT (typefind, "could not parse the peer uri");
 847     gst_query_unref (query);
 848     return NULL;
 849   }
 850 no_extension:
 851   {
 852     GST_WARNING_OBJECT (typefind, "could not find uri extension in %s", uri);
 853     gst_query_unref (query);
 854     g_free (uri);
 855     return NULL;
 856   }
 857 }
 858
 859 static GstCaps *
 860 gst_type_find_guess_by_extension (GstTypeFindElement * typefind, GstPad * pad,
 861     GstTypeFindProbability * probability)
 862 {
 863   gchar *ext;
 864   GstCaps *caps;
 865
 866   ext = gst_type_find_get_extension (typefind, pad);
 867   if (!ext)
 868     return NULL;
 869
 870   caps = gst_type_find_helper_for_extension (GST_OBJECT_CAST (typefind), ext);
 871   if (caps)
 872     *probability = GST_TYPE_FIND_MAXIMUM;
 873
 874   g_free (ext);
 875
 876   return caps;
 877 }
 878
 879 static GstFlowReturn
 880 gst_type_find_element_chain (GstPad * pad, GstObject * parent,
 881     GstBuffer * buffer)
 882 {
 883   GstTypeFindElement *typefind;
 884   GstFlowReturn res = GST_FLOW_OK;
 885
 886   typefind = GST_TYPE_FIND_ELEMENT (parent);
 887
 888   GST_LOG_OBJECT (typefind, "handling buffer in mode %d", typefind->mode);
 889
 890   switch (typefind->mode) {
 891     case MODE_ERROR:
 892       /* we should already have called GST_ELEMENT_ERROR */
 893       return GST_FLOW_ERROR;
 894     case MODE_NORMAL:
 895       /* don't take object lock as typefind->caps should not change anymore */
 896       return gst_pad_push (typefind->src, buffer);
 897     case MODE_TYPEFIND:
 898     {
 899       GST_OBJECT_LOCK (typefind);
 900       if (typefind->initial_offset == GST_BUFFER_OFFSET_NONE)
 901         typefind->initial_offset = GST_BUFFER_OFFSET (buffer);
 902       gst_adapter_push (typefind->adapter, buffer);
 903       GST_OBJECT_UNLOCK (typefind);
 904
 905       res = gst_type_find_element_chain_do_typefinding (typefind, TRUE, FALSE);
 906
 907       if (typefind->mode == MODE_ERROR)
 908         res = GST_FLOW_ERROR;
 909
 910       break;
 911     }
 912     default:
 913       g_assert_not_reached ();
 914       return GST_FLOW_ERROR;
 915   }
 916
 917   return res;
 918 }
 919
 920 static GstFlowReturn
 921 gst_type_find_element_chain_do_typefinding (GstTypeFindElement * typefind,
 922     gboolean check_avail, gboolean at_eos)
 923 {
 924   GstTypeFindProbability probability;
 925   GstCaps *caps = NULL;
 926   gsize avail;
 927   const guint8 *data;
 928   gboolean have_min, have_max;
 929
 930   GST_OBJECT_LOCK (typefind);
 931   if (typefind->force_caps) {
 932     caps = gst_caps_ref (typefind->force_caps);
 933     probability = GST_TYPE_FIND_MAXIMUM;
 934   }
 935
 936   if (!caps) {
 937     avail = gst_adapter_available (typefind->adapter);
 938
 939     if (check_avail) {
 940       have_min = avail >= TYPE_FIND_MIN_SIZE;
 941       have_max = avail >= TYPE_FIND_MAX_SIZE;
 942     } else {
 943       have_min = avail > 0;
 944       have_max = TRUE;
 945     }
 946
 947     if (!have_min)
 948       goto not_enough_data;
 949
 950     /* map all available data */
 951     data = gst_adapter_map (typefind->adapter, avail);
 952     caps = gst_type_find_helper_for_data (GST_OBJECT (typefind),
 953         data, avail, &probability);
 954     gst_adapter_unmap (typefind->adapter);
 955
 956     if (caps == NULL && have_max)
 957       goto no_type_found;
 958     else if (caps == NULL)
 959       goto wait_for_data;
 960
 961     /* found a type */
 962     if (probability < typefind->min_probability)
 963       goto low_probability;
 964   }
 965
 966   GST_OBJECT_UNLOCK (typefind);
 967
 968   /* probability is good enough too, so let's make it known ... emiting this
 969    * signal calls our object handler which sets the caps. */
 970   gst_type_find_element_emit_have_type (typefind, probability, caps);
 971
 972   /* .. and send out the accumulated data */
 973   stop_typefinding (typefind);
 974   gst_caps_unref (caps);
 975
 976   return GST_FLOW_OK;
 977
 978 not_enough_data:
 979   {
 980     GST_OBJECT_UNLOCK (typefind);
 981
 982     if (at_eos) {
 983       GST_ELEMENT_ERROR (typefind, STREAM, TYPE_NOT_FOUND,
 984           (_("Stream doesn't contain enough data.")),
 985           ("Can't typefind stream"));
 986       return GST_FLOW_ERROR;
 987     } else {
 988       GST_DEBUG_OBJECT (typefind, "not enough data for typefinding yet "
 989           "(%" G_GSIZE_FORMAT " bytes)", avail);
 990       return GST_FLOW_OK;
 991     }
 992   }
 993 no_type_found:
 994   {
 995     GST_OBJECT_UNLOCK (typefind);
 996     GST_ELEMENT_ERROR (typefind, STREAM, TYPE_NOT_FOUND, (NULL), (NULL));
 997     stop_typefinding (typefind);
 998     return GST_FLOW_ERROR;
 999   }
1000 wait_for_data:
1001   {
1002     GST_OBJECT_UNLOCK (typefind);
1003
1004     if (at_eos) {
1005       GST_ELEMENT_ERROR (typefind, STREAM, TYPE_NOT_FOUND,
1006           (_("Stream doesn't contain enough data.")),
1007           ("Can't typefind stream"));
1008       return GST_FLOW_ERROR;
1009     } else {
1010       GST_DEBUG_OBJECT (typefind,
1011           "no caps found with %" G_GSIZE_FORMAT " bytes of data, "
1012           "waiting for more data", avail);
1013       return GST_FLOW_OK;
1014     }
1015   }
1016 low_probability:
1017   {
1018     GST_DEBUG_OBJECT (typefind, "found caps %" GST_PTR_FORMAT ", but "
1019         "probability is %u which is lower than the required minimum of %u",
1020         caps, probability, typefind->min_probability);
1021
1022     gst_caps_unref (caps);
1023
1024     if (have_max)
1025       goto no_type_found;
1026
1027     GST_OBJECT_UNLOCK (typefind);
1028     GST_DEBUG_OBJECT (typefind, "waiting for more data to try again");
1029     return GST_FLOW_OK;
1030   }
1031 }
1032
1033 static GstFlowReturn
1034 gst_type_find_element_getrange (GstPad * srcpad, GstObject * parent,
1035     guint64 offset, guint length, GstBuffer ** buffer)
1036 {
1037   GstTypeFindElement *typefind;
1038   GstFlowReturn ret;
1039
1040   typefind = GST_TYPE_FIND_ELEMENT (parent);
1041
1042   ret = gst_pad_pull_range (typefind->sink, offset, length, buffer);
1043
1044   return ret;
1045 }
1046
1047 static gboolean
1048 gst_type_find_element_activate_src_mode (GstPad * pad, GstObject * parent,
1049     GstPadMode mode, gboolean active)
1050 {
1051   gboolean res;
1052   GstTypeFindElement *typefind;
1053
1054   typefind = GST_TYPE_FIND_ELEMENT (parent);
1055
1056   switch (mode) {
1057     case GST_PAD_MODE_PULL:
1058       /* make sure our task stops pushing, we can't call _stop here because this
1059        * activation might happen from the streaming thread. */
1060       gst_pad_pause_task (typefind->sink);
1061       res = gst_pad_activate_mode (typefind->sink, mode, active);
1062       break;
1063     default:
1064       res = TRUE;
1065       break;
1066   }
1067   return res;
1068 }
1069
1070 static void
1071 gst_type_find_element_loop (GstPad * pad)
1072 {
1073   GstTypeFindElement *typefind;
1074   GstFlowReturn ret = GST_FLOW_OK;
1075
1076   typefind = GST_TYPE_FIND_ELEMENT (GST_PAD_PARENT (pad));
1077
1078   if (typefind->need_stream_start) {
1079     gchar *stream_id;
1080     GstEvent *event;
1081
1082     stream_id = gst_pad_create_stream_id (typefind->src,
1083         GST_ELEMENT_CAST (typefind), NULL);
1084
1085     GST_DEBUG_OBJECT (typefind, "Pushing STREAM_START");
1086     event = gst_event_new_stream_start (stream_id);
1087     gst_event_set_group_id (event, gst_util_group_id_next ());
1088     gst_pad_push_event (typefind->src, event);
1089
1090     typefind->need_stream_start = FALSE;
1091     g_free (stream_id);
1092   }
1093
1094   if (typefind->mode == MODE_TYPEFIND) {
1095     GstPad *peer = NULL;
1096     GstCaps *found_caps = NULL;
1097     GstTypeFindProbability probability = GST_TYPE_FIND_NONE;
1098
1099     GST_DEBUG_OBJECT (typefind, "find type in pull mode");
1100
1101     GST_OBJECT_LOCK (typefind);
1102     if (typefind->force_caps) {
1103       found_caps = gst_caps_ref (typefind->force_caps);
1104       probability = GST_TYPE_FIND_MAXIMUM;
1105     }
1106     GST_OBJECT_UNLOCK (typefind);
1107
1108     if (!found_caps) {
1109       peer = gst_pad_get_peer (pad);
1110       if (peer) {
1111         gint64 size;
1112         gchar *ext;
1113
1114         if (!gst_pad_query_duration (peer, GST_FORMAT_BYTES, &size)) {
1115           GST_WARNING_OBJECT (typefind, "Could not query upstream length!");
1116           gst_object_unref (peer);
1117
1118           ret = GST_FLOW_ERROR;
1119           goto pause;
1120         }
1121
1122         /* the size if 0, we cannot continue */
1123         if (size == 0) {
1124           /* keep message in sync with message in sink event handler */
1125           GST_ELEMENT_ERROR (typefind, STREAM, TYPE_NOT_FOUND,
1126               (_("Stream contains no data.")), ("Can't typefind empty stream"));
1127           gst_object_unref (peer);
1128           ret = GST_FLOW_ERROR;
1129           goto pause;
1130         }
1131         ext = gst_type_find_get_extension (typefind, pad);
1132
1133         found_caps =
1134             gst_type_find_helper_get_range (GST_OBJECT_CAST (peer),
1135             GST_OBJECT_PARENT (peer),
1136             (GstTypeFindHelperGetRangeFunction) (GST_PAD_GETRANGEFUNC (peer)),
1137             (guint64) size, ext, &probability);
1138         g_free (ext);
1139
1140         GST_DEBUG ("Found caps %" GST_PTR_FORMAT, found_caps);
1141
1142         gst_object_unref (peer);
1143       }
1144     }
1145
1146     if (!found_caps || probability < typefind->min_probability) {
1147       GST_DEBUG ("Trying to guess using extension");
1148       gst_caps_replace (&found_caps, NULL);
1149       found_caps =
1150           gst_type_find_guess_by_extension (typefind, pad, &probability);
1151     }
1152
1153     if (!found_caps || probability < typefind->min_probability) {
1154       GST_ELEMENT_ERROR (typefind, STREAM, TYPE_NOT_FOUND, (NULL), (NULL));
1155       gst_caps_replace (&found_caps, NULL);
1156       ret = GST_FLOW_ERROR;
1157       goto pause;
1158     }
1159
1160     GST_DEBUG ("Emiting found caps %" GST_PTR_FORMAT, found_caps);
1161     gst_type_find_element_emit_have_type (typefind, probability, found_caps);
1162     typefind->mode = MODE_NORMAL;
1163     gst_caps_unref (found_caps);
1164   } else if (typefind->mode == MODE_NORMAL) {
1165     GstBuffer *outbuf = NULL;
1166
1167     if (typefind->need_segment) {
1168       typefind->need_segment = FALSE;
1169       gst_pad_push_event (typefind->src,
1170           gst_event_new_segment (&typefind->segment));
1171     }
1172
1173     /* Pull 4k blocks and send downstream */
1174     ret = gst_pad_pull_range (typefind->sink, typefind->offset, 4096, &outbuf);
1175     if (ret != GST_FLOW_OK)
1176       goto pause;
1177
1178     typefind->offset += gst_buffer_get_size (outbuf);
1179
1180     ret = gst_pad_push (typefind->src, outbuf);
1181     if (ret != GST_FLOW_OK)
1182       goto pause;
1183   } else {
1184     /* Error out */
1185     ret = GST_FLOW_ERROR;
1186     goto pause;
1187   }
1188
1189   return;
1190
1191 pause:
1192   {
1193     const gchar *reason = gst_flow_get_name (ret);
1194     gboolean push_eos = FALSE;
1195
1196     GST_LOG_OBJECT (typefind, "pausing task, reason %s", reason);
1197     gst_pad_pause_task (typefind->sink);
1198
1199     if (ret == GST_FLOW_EOS) {
1200       /* perform EOS logic */
1201
1202       if (typefind->segment.flags & GST_SEGMENT_FLAG_SEGMENT) {
1203         gint64 stop;
1204
1205         /* for segment playback we need to post when (in stream time)
1206          * we stopped, this is either stop (when set) or the duration. */
1207         if ((stop = typefind->segment.stop) == -1)
1208           stop = typefind->offset;
1209
1210         GST_LOG_OBJECT (typefind, "Sending segment done, at end of segment");
1211         gst_element_post_message (GST_ELEMENT (typefind),
1212             gst_message_new_segment_done (GST_OBJECT (typefind),
1213                 GST_FORMAT_BYTES, stop));
1214         gst_pad_push_event (typefind->src,
1215             gst_event_new_segment_done (GST_FORMAT_BYTES, stop));
1216       } else {
1217         push_eos = TRUE;
1218       }
1219     } else if (ret == GST_FLOW_NOT_LINKED || ret < GST_FLOW_EOS) {
1220       /* for fatal errors we post an error message */
1221       GST_ELEMENT_FLOW_ERROR (typefind, ret);
1222       push_eos = TRUE;
1223     }
1224     if (push_eos) {
1225       /* send EOS, and prevent hanging if no streams yet */
1226       GST_LOG_OBJECT (typefind, "Sending EOS, at end of stream");
1227       gst_pad_push_event (typefind->src, gst_event_new_eos ());
1228     }
1229     return;
1230   }
1231 }
1232
1233 static gboolean
1234 gst_type_find_element_activate_sink_mode (GstPad * pad, GstObject * parent,
1235     GstPadMode mode, gboolean active)
1236 {
1237   gboolean res;
1238   GstTypeFindElement *typefind;
1239
1240   typefind = GST_TYPE_FIND_ELEMENT (parent);
1241
1242   switch (mode) {
1243     case GST_PAD_MODE_PULL:
1244       if (active) {
1245         gst_segment_init (&typefind->segment, GST_FORMAT_BYTES);
1246         typefind->need_segment = TRUE;
1247         typefind->need_stream_start = TRUE;
1248         typefind->offset = 0;
1249         res = TRUE;
1250       } else {
1251         res = gst_pad_stop_task (pad);
1252         gst_segment_init (&typefind->segment, GST_FORMAT_UNDEFINED);
1253       }
1254       break;
1255     case GST_PAD_MODE_PUSH:
1256       if (active) {
1257         gst_segment_init (&typefind->segment, GST_FORMAT_UNDEFINED);
1258         start_typefinding (typefind);
1259       } else {
1260         stop_typefinding (typefind);
1261         gst_segment_init (&typefind->segment, GST_FORMAT_UNDEFINED);
1262       }
1263       res = TRUE;
1264       break;
1265     default:
1266       res = FALSE;
1267       break;
1268   }
1269   return res;
1270 }
1271
1272 static gboolean
1273 gst_type_find_element_activate_sink (GstPad * pad, GstObject * parent)
1274 {
1275   GstQuery *query;
1276   gboolean pull_mode;
1277   GstSchedulingFlags sched_flags;
1278
1279   query = gst_query_new_scheduling ();
1280
1281   if (!gst_pad_peer_query (pad, query)) {
1282     gst_query_unref (query);
1283     goto typefind_push;
1284   }
1285
1286   gst_query_parse_scheduling (query, &sched_flags, NULL, NULL, NULL);
1287
1288   pull_mode = gst_query_has_scheduling_mode (query, GST_PAD_MODE_PULL)
1289       && ((sched_flags & GST_SCHEDULING_FLAG_SEEKABLE) != 0);
1290
1291   gst_query_unref (query);
1292
1293   if (!pull_mode)
1294     goto typefind_push;
1295
1296   if (!gst_pad_activate_mode (pad, GST_PAD_MODE_PULL, TRUE))
1297     goto typefind_push;
1298
1299   /* only start our task if we ourselves decide to start in pull mode */
1300   return gst_pad_start_task (pad, (GstTaskFunction) gst_type_find_element_loop,
1301       pad, NULL);
1302
1303 typefind_push:
1304   {
1305     return gst_pad_activate_mode (pad, GST_PAD_MODE_PUSH, TRUE);
1306   }
1307 }
1308
1309 static GstStateChangeReturn
1310 gst_type_find_element_change_state (GstElement * element,
1311     GstStateChange transition)
1312 {
1313   GstStateChangeReturn ret;
1314   GstTypeFindElement *typefind;
1315
1316   typefind = GST_TYPE_FIND_ELEMENT (element);
1317
1318
1319   ret = GST_ELEMENT_CLASS (parent_class)->change_state (element, transition);
1320
1321   switch (transition) {
1322     case GST_STATE_CHANGE_PAUSED_TO_READY:
1323     case GST_STATE_CHANGE_READY_TO_NULL:
1324       GST_OBJECT_LOCK (typefind);
1325       gst_caps_replace (&typefind->caps, NULL);
1326
1327       g_list_foreach (typefind->cached_events,
1328           (GFunc) gst_mini_object_unref, NULL);
1329       g_list_free (typefind->cached_events);
1330       typefind->cached_events = NULL;
1331       typefind->mode = MODE_TYPEFIND;
1332       GST_OBJECT_UNLOCK (typefind);
1333       break;
1334     default:
1335       break;
1336   }
1337
1338   return ret;
1339 }