gst/avi/gstavidemux.c

   1 /* GStreamer
   2  * Copyright (C) <1999> Erik Walthinsen <omega@temple-baptist.com>
   3  * Copyright (C) <2006> Nokia Corporation (contact <stefan.kost@nokia.com>)
   4  *
   5  * This library is free software; you can redistribute it and/or
   6  * modify it under the terms of the GNU Library General Public
   7  * License as published by the Free Software Foundation; either
   8  * version 2 of the License, or (at your option) any later version.
   9  *
  10  * This library is distributed in the hope that it will be useful,
  11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * Library General Public License for more details.
  14  *
  15  * You should have received a copy of the GNU Library General Public
  16  * License along with this library; if not, write to the
  17  * Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18  * Boston, MA 02111-1307, USA.
  19  */
  20 /* Element-Checklist-Version: 5 */
  21
  22 /**
  23  * SECTION:element-avidemux
  24  *
  25  * Demuxes an .avi file into raw or compressed audio and/or video streams.
  26  *
  27  * This element supports both push and pull-based scheduling, depending on the
  28  * capabilities of the upstream elements.
  29  *
  30  * <refsect2>
  31  * <title>Example launch line</title>
  32  * |[
  33  * gst-launch filesrc location=test.avi ! avidemux name=demux  demux.audio_00 ! decodebin ! audioconvert ! audioresample ! autoaudiosink   demux.video_00 ! queue ! decodebin ! ffmpegcolorspace ! videoscale ! autovideosink
  34  * ]| Play (parse and decode) an .avi file and try to output it to
  35  * an automatically detected soundcard and videosink. If the AVI file contains
  36  * compressed audio or video data, this will only work if you have the
  37  * right decoder elements/plugins installed.
  38  * </refsect2>
  39  *
  40  * Last reviewed on 2006-12-29 (0.10.6)
  41  */
  42
  43 #ifdef HAVE_CONFIG_H
  44 #include "config.h"
  45 #endif
  46
  47 #include <string.h>
  48 #include <stdio.h>
  49
  50 #include "gst/riff/riff-media.h"
  51 #include "gstavidemux.h"
  52 #include "avi-ids.h"
  53 #include <gst/gst-i18n-plugin.h>
  54 #include <gst/base/gstadapter.h>
  55
  56
  57 #define DIV_ROUND_UP(s,v) (((s) + ((v)-1)) / (v))
  58
  59 GST_DEBUG_CATEGORY_STATIC (avidemux_debug);
  60 #define GST_CAT_DEFAULT avidemux_debug
  61
  62 static GstStaticPadTemplate sink_templ = GST_STATIC_PAD_TEMPLATE ("sink",
  63     GST_PAD_SINK,
  64     GST_PAD_ALWAYS,
  65     GST_STATIC_CAPS ("video/x-msvideo")
  66     );
  67
  68 static void gst_avi_demux_base_init (GstAviDemuxClass * klass);
  69 static void gst_avi_demux_class_init (GstAviDemuxClass * klass);
  70 static void gst_avi_demux_init (GstAviDemux * avi);
  71 static void gst_avi_demux_finalize (GObject * object);
  72
  73 static void gst_avi_demux_reset (GstAviDemux * avi);
  74
  75 #if 0
  76 static const GstEventMask *gst_avi_demux_get_event_mask (GstPad * pad);
  77 #endif
  78 static gboolean gst_avi_demux_handle_src_event (GstPad * pad, GstEvent * event);
  79 static gboolean gst_avi_demux_handle_sink_event (GstPad * pad,
  80     GstEvent * event);
  81 static gboolean gst_avi_demux_push_event (GstAviDemux * avi, GstEvent * event);
  82
  83 #if 0
  84 static const GstFormat *gst_avi_demux_get_src_formats (GstPad * pad);
  85 #endif
  86 static const GstQueryType *gst_avi_demux_get_src_query_types (GstPad * pad);
  87 static gboolean gst_avi_demux_handle_src_query (GstPad * pad, GstQuery * query);
  88 static gboolean gst_avi_demux_src_convert (GstPad * pad, GstFormat src_format,
  89     gint64 src_value, GstFormat * dest_format, gint64 * dest_value);
  90
  91 static gboolean gst_avi_demux_do_seek (GstAviDemux * avi, GstSegment * segment);
  92 static gboolean gst_avi_demux_handle_seek (GstAviDemux * avi, GstPad * pad,
  93     GstEvent * event);
  94 static gboolean gst_avi_demux_handle_seek_push (GstAviDemux * avi, GstPad * pad,
  95     GstEvent * event);
  96 static void gst_avi_demux_loop (GstPad * pad);
  97 static gboolean gst_avi_demux_sink_activate (GstPad * sinkpad);
  98 static gboolean gst_avi_demux_sink_activate_pull (GstPad * sinkpad,
  99     gboolean active);
 100 static gboolean gst_avi_demux_activate_push (GstPad * pad, gboolean active);
 101 static GstFlowReturn gst_avi_demux_chain (GstPad * pad, GstBuffer * buf);
 102
 103 static void gst_avi_demux_set_index (GstElement * element, GstIndex * index);
 104 static GstIndex *gst_avi_demux_get_index (GstElement * element);
 105 static GstStateChangeReturn gst_avi_demux_change_state (GstElement * element,
 106     GstStateChange transition);
 107
 108 static void gst_avi_demux_parse_idit (GstAviDemux * avi, GstBuffer * buf);
 109
 110 static GstElementClass *parent_class = NULL;
 111
 112 /* GObject methods */
 113
 114 GType
 115 gst_avi_demux_get_type (void)
 116 {
 117   static GType avi_demux_type = 0;
 118
 119   if (!avi_demux_type) {
 120     static const GTypeInfo avi_demux_info = {
 121       sizeof (GstAviDemuxClass),
 122       (GBaseInitFunc) gst_avi_demux_base_init,
 123       NULL,
 124       (GClassInitFunc) gst_avi_demux_class_init,
 125       NULL,
 126       NULL,
 127       sizeof (GstAviDemux),
 128       0,
 129       (GInstanceInitFunc) gst_avi_demux_init,
 130     };
 131
 132     avi_demux_type =
 133         g_type_register_static (GST_TYPE_ELEMENT,
 134         "GstAviDemux", &avi_demux_info, 0);
 135   }
 136
 137   return avi_demux_type;
 138 }
 139
 140 static void
 141 gst_avi_demux_base_init (GstAviDemuxClass * klass)
 142 {
 143   static const GstElementDetails gst_avi_demux_details =
 144       GST_ELEMENT_DETAILS ("Avi demuxer",
 145       "Codec/Demuxer",
 146       "Demultiplex an avi file into audio and video",
 147       "Erik Walthinsen <omega@cse.ogi.edu>\n"
 148       "Wim Taymans <wim.taymans@chello.be>\n"
 149       "Thijs Vermeir <thijsvermeir@gmail.com>");
 150   GstElementClass *element_class = GST_ELEMENT_CLASS (klass);
 151   GstPadTemplate *videosrctempl, *audiosrctempl, *subsrctempl;
 152   GstCaps *audcaps, *vidcaps, *subcaps;
 153
 154   audcaps = gst_riff_create_audio_template_caps ();
 155   gst_caps_append (audcaps, gst_caps_new_simple ("audio/x-avi-unknown", NULL));
 156   audiosrctempl = gst_pad_template_new ("audio_%02d",
 157       GST_PAD_SRC, GST_PAD_SOMETIMES, audcaps);
 158
 159   vidcaps = gst_riff_create_video_template_caps ();
 160   gst_caps_append (vidcaps, gst_riff_create_iavs_template_caps ());
 161   gst_caps_append (vidcaps, gst_caps_new_simple ("video/x-avi-unknown", NULL));
 162   videosrctempl = gst_pad_template_new ("video_%02d",
 163       GST_PAD_SRC, GST_PAD_SOMETIMES, vidcaps);
 164
 165   subcaps = gst_caps_new_simple ("application/x-subtitle-avi", NULL);
 166   subsrctempl = gst_pad_template_new ("subtitle_%02d",
 167       GST_PAD_SRC, GST_PAD_SOMETIMES, subcaps);
 168   gst_element_class_add_pad_template (element_class, audiosrctempl);
 169   gst_element_class_add_pad_template (element_class, videosrctempl);
 170   gst_element_class_add_pad_template (element_class, subsrctempl);
 171   gst_element_class_add_pad_template (element_class,
 172       gst_static_pad_template_get (&sink_templ));
 173   gst_element_class_set_details (element_class, &gst_avi_demux_details);
 174 }
 175
 176 static void
 177 gst_avi_demux_class_init (GstAviDemuxClass * klass)
 178 {
 179   GstElementClass *gstelement_class = GST_ELEMENT_CLASS (klass);
 180   GObjectClass *gobject_class = (GObjectClass *) klass;
 181
 182   GST_DEBUG_CATEGORY_INIT (avidemux_debug, "avidemux",
 183       0, "Demuxer for AVI streams");
 184
 185   parent_class = g_type_class_peek_parent (klass);
 186
 187   gobject_class->finalize = gst_avi_demux_finalize;
 188   gstelement_class->change_state =
 189       GST_DEBUG_FUNCPTR (gst_avi_demux_change_state);
 190
 191   gstelement_class->set_index = GST_DEBUG_FUNCPTR (gst_avi_demux_set_index);
 192   gstelement_class->get_index = GST_DEBUG_FUNCPTR (gst_avi_demux_get_index);
 193 }
 194
 195 static void
 196 gst_avi_demux_init (GstAviDemux * avi)
 197 {
 198   avi->sinkpad = gst_pad_new_from_static_template (&sink_templ, "sink");
 199   gst_pad_set_activate_function (avi->sinkpad,
 200       GST_DEBUG_FUNCPTR (gst_avi_demux_sink_activate));
 201   gst_pad_set_activatepull_function (avi->sinkpad,
 202       GST_DEBUG_FUNCPTR (gst_avi_demux_sink_activate_pull));
 203   gst_pad_set_activatepush_function (avi->sinkpad,
 204       GST_DEBUG_FUNCPTR (gst_avi_demux_activate_push));
 205   gst_pad_set_chain_function (avi->sinkpad,
 206       GST_DEBUG_FUNCPTR (gst_avi_demux_chain));
 207   gst_pad_set_event_function (avi->sinkpad,
 208       GST_DEBUG_FUNCPTR (gst_avi_demux_handle_sink_event));
 209   gst_element_add_pad (GST_ELEMENT_CAST (avi), avi->sinkpad);
 210
 211   avi->adapter = gst_adapter_new ();
 212
 213   gst_avi_demux_reset (avi);
 214 }
 215
 216 static void
 217 gst_avi_demux_finalize (GObject * object)
 218 {
 219   GstAviDemux *avi = GST_AVI_DEMUX (object);
 220
 221   GST_DEBUG ("AVI: finalize");
 222
 223   g_object_unref (avi->adapter);
 224
 225   G_OBJECT_CLASS (parent_class)->finalize (object);
 226 }
 227
 228 static void
 229 gst_avi_demux_reset_stream (GstAviDemux * avi, GstAviStream * stream)
 230 {
 231   g_free (stream->strh);
 232   g_free (stream->strf.data);
 233   g_free (stream->name);
 234   g_free (stream->index);
 235   g_free (stream->indexes);
 236   if (stream->initdata)
 237     gst_buffer_unref (stream->initdata);
 238   if (stream->extradata)
 239     gst_buffer_unref (stream->extradata);
 240   if (stream->pad) {
 241     if (stream->exposed) {
 242       gst_pad_set_active (stream->pad, FALSE);
 243       gst_element_remove_pad (GST_ELEMENT_CAST (avi), stream->pad);
 244     } else
 245       gst_object_unref (stream->pad);
 246   }
 247   if (stream->taglist) {
 248     gst_tag_list_free (stream->taglist);
 249     stream->taglist = NULL;
 250   }
 251   memset (stream, 0, sizeof (GstAviStream));
 252 }
 253
 254 static void
 255 gst_avi_demux_reset (GstAviDemux * avi)
 256 {
 257   gint i;
 258
 259   GST_DEBUG ("AVI: reset");
 260
 261   for (i = 0; i < avi->num_streams; i++)
 262     gst_avi_demux_reset_stream (avi, &avi->stream[i]);
 263
 264   avi->header_state = GST_AVI_DEMUX_HEADER_TAG_LIST;
 265   avi->num_streams = 0;
 266   avi->num_v_streams = 0;
 267   avi->num_a_streams = 0;
 268   avi->num_t_streams = 0;
 269   avi->main_stream = -1;
 270
 271   avi->state = GST_AVI_DEMUX_START;
 272   avi->offset = 0;
 273
 274   avi->index_offset = 0;
 275   g_free (avi->avih);
 276   avi->avih = NULL;
 277
 278   if (avi->element_index)
 279     gst_object_unref (avi->element_index);
 280   avi->element_index = NULL;
 281
 282   if (avi->seg_event) {
 283     gst_event_unref (avi->seg_event);
 284     avi->seg_event = NULL;
 285   }
 286
 287   if (avi->globaltags)
 288     gst_tag_list_free (avi->globaltags);
 289   avi->globaltags = NULL;
 290
 291   avi->got_tags = TRUE;         /* we always want to push global tags */
 292   avi->have_eos = FALSE;
 293   avi->seekable = TRUE;
 294
 295   gst_adapter_clear (avi->adapter);
 296
 297   gst_segment_init (&avi->segment, GST_FORMAT_TIME);
 298 }
 299
 300
 301 /* GstElement methods */
 302
 303 #if 0
 304 static const GstFormat *
 305 gst_avi_demux_get_src_formats (GstPad * pad)
 306 {
 307   GstAviStream *stream = gst_pad_get_element_private (pad);
 308
 309   static const GstFormat src_a_formats[] = {
 310     GST_FORMAT_TIME,
 311     GST_FORMAT_BYTES,
 312     GST_FORMAT_DEFAULT,
 313     0
 314   };
 315   static const GstFormat src_v_formats[] = {
 316     GST_FORMAT_TIME,
 317     GST_FORMAT_DEFAULT,
 318     0
 319   };
 320
 321   return (stream->strh->type == GST_RIFF_FCC_auds ?
 322       src_a_formats : src_v_formats);
 323 }
 324 #endif
 325
 326 /* assumes stream->strf.auds->av_bps != 0 */
 327 static inline GstClockTime
 328 avi_stream_convert_bytes_to_time_unchecked (GstAviStream * stream,
 329     guint64 bytes)
 330 {
 331   return gst_util_uint64_scale_int (bytes, GST_SECOND,
 332       stream->strf.auds->av_bps);
 333 }
 334
 335 static inline guint64
 336 avi_stream_convert_time_to_bytes_unchecked (GstAviStream * stream,
 337     GstClockTime time)
 338 {
 339   return gst_util_uint64_scale_int (time, stream->strf.auds->av_bps,
 340       GST_SECOND);
 341 }
 342
 343 /* assumes stream->strh->rate != 0 */
 344 static inline GstClockTime
 345 avi_stream_convert_frames_to_time_unchecked (GstAviStream * stream,
 346     guint64 frames)
 347 {
 348   return gst_util_uint64_scale (frames, stream->strh->scale * GST_SECOND,
 349       stream->strh->rate);
 350 }
 351
 352 static inline guint64
 353 avi_stream_convert_time_to_frames_unchecked (GstAviStream * stream,
 354     GstClockTime time)
 355 {
 356   return gst_util_uint64_scale (time, stream->strh->rate,
 357       stream->strh->scale * GST_SECOND);
 358 }
 359
 360 static gboolean
 361 gst_avi_demux_src_convert (GstPad * pad,
 362     GstFormat src_format,
 363     gint64 src_value, GstFormat * dest_format, gint64 * dest_value)
 364 {
 365   GstAviStream *stream = gst_pad_get_element_private (pad);
 366   gboolean res = TRUE;
 367
 368   GST_LOG_OBJECT (pad,
 369       "Received  src_format:%s, src_value:%" G_GUINT64_FORMAT
 370       ", dest_format:%s", gst_format_get_name (src_format), src_value,
 371       gst_format_get_name (*dest_format));
 372
 373   if (G_UNLIKELY (src_format == *dest_format)) {
 374     *dest_value = src_value;
 375     goto done;
 376   }
 377   if (G_UNLIKELY (!stream->strh || !stream->strf.data)) {
 378     res = FALSE;
 379     goto done;
 380   }
 381   if (G_UNLIKELY (stream->strh->type == GST_RIFF_FCC_vids &&
 382           (src_format == GST_FORMAT_BYTES
 383               || *dest_format == GST_FORMAT_BYTES))) {
 384     res = FALSE;
 385     goto done;
 386   }
 387
 388   switch (src_format) {
 389     case GST_FORMAT_TIME:
 390       switch (*dest_format) {
 391         case GST_FORMAT_BYTES:
 392           *dest_value = gst_util_uint64_scale_int (src_value,
 393               stream->strf.auds->av_bps, GST_SECOND);
 394           break;
 395         case GST_FORMAT_DEFAULT:
 396           *dest_value =
 397               gst_util_uint64_scale_round (src_value, stream->strh->rate,
 398               stream->strh->scale * GST_SECOND);
 399           break;
 400         default:
 401           res = FALSE;
 402           break;
 403       }
 404       break;
 405     case GST_FORMAT_BYTES:
 406       switch (*dest_format) {
 407         case GST_FORMAT_TIME:
 408           if (stream->strf.auds->av_bps != 0) {
 409             *dest_value = avi_stream_convert_bytes_to_time_unchecked (stream,
 410                 src_value);
 411           } else
 412             res = FALSE;
 413           break;
 414         default:
 415           res = FALSE;
 416           break;
 417       }
 418       break;
 419     case GST_FORMAT_DEFAULT:
 420       switch (*dest_format) {
 421         case GST_FORMAT_TIME:
 422           *dest_value =
 423               avi_stream_convert_frames_to_time_unchecked (stream, src_value);
 424           break;
 425         default:
 426           res = FALSE;
 427           break;
 428       }
 429       break;
 430     default:
 431       res = FALSE;
 432   }
 433
 434 done:
 435   GST_LOG_OBJECT (pad,
 436       "Returning res:%d dest_format:%s dest_value:%" G_GUINT64_FORMAT, res,
 437       gst_format_get_name (*dest_format), *dest_value);
 438   return res;
 439 }
 440
 441 static const GstQueryType *
 442 gst_avi_demux_get_src_query_types (GstPad * pad)
 443 {
 444   static const GstQueryType src_types[] = {
 445     GST_QUERY_POSITION,
 446     GST_QUERY_DURATION,
 447     GST_QUERY_SEEKING,
 448     GST_QUERY_CONVERT,
 449     0
 450   };
 451
 452   return src_types;
 453 }
 454
 455 static gboolean
 456 gst_avi_demux_handle_src_query (GstPad * pad, GstQuery * query)
 457 {
 458   gboolean res = TRUE;
 459   GstAviDemux *avi = GST_AVI_DEMUX (gst_pad_get_parent (pad));
 460
 461   GstAviStream *stream = gst_pad_get_element_private (pad);
 462
 463   if (!stream->strh || !stream->strf.data)
 464     return gst_pad_query_default (pad, query);
 465
 466   switch (GST_QUERY_TYPE (query)) {
 467     case GST_QUERY_POSITION:{
 468       gint64 pos = 0;
 469
 470       GST_DEBUG ("pos query for stream %u: frames %u, bytes %u",
 471           stream->num, stream->current_entry, stream->current_total);
 472
 473       /* FIXME, this looks clumsy */
 474       if (stream->strh->type == GST_RIFF_FCC_auds) {
 475         if (stream->is_vbr) {
 476           /* VBR */
 477           pos = gst_util_uint64_scale ((gint64) stream->current_entry *
 478               stream->strh->scale, GST_SECOND, (guint64) stream->strh->rate);
 479           GST_DEBUG_OBJECT (avi, "VBR convert frame %u, time %"
 480               GST_TIME_FORMAT, stream->current_entry, GST_TIME_ARGS (pos));
 481         } else if (stream->strf.auds->av_bps != 0) {
 482           /* CBR */
 483           pos = gst_util_uint64_scale (stream->current_total, GST_SECOND,
 484               (guint64) stream->strf.auds->av_bps);
 485           GST_DEBUG_OBJECT (avi,
 486               "CBR convert bytes %u, time %" GST_TIME_FORMAT,
 487               stream->current_total, GST_TIME_ARGS (pos));
 488         } else if (stream->idx_n != 0 && stream->total_bytes != 0) {
 489           /* calculate timestamps based on percentage of length */
 490           guint64 xlen = avi->avih->us_frame *
 491               avi->avih->tot_frames * GST_USECOND;
 492
 493           if (stream->is_vbr) {
 494             pos = gst_util_uint64_scale (xlen, stream->current_entry,
 495                 stream->idx_n);
 496             GST_DEBUG_OBJECT (avi, "VBR perc convert frame %u, time %"
 497                 GST_TIME_FORMAT, stream->current_entry, GST_TIME_ARGS (pos));
 498           } else {
 499             pos = gst_util_uint64_scale (xlen, stream->current_total,
 500                 stream->total_bytes);
 501             GST_DEBUG_OBJECT (avi,
 502                 "CBR perc convert bytes %u, time %" GST_TIME_FORMAT,
 503                 stream->current_total, GST_TIME_ARGS (pos));
 504           }
 505         } else {
 506           /* we don't know */
 507           res = FALSE;
 508         }
 509       } else {
 510         if (stream->strh->rate != 0) {
 511           pos = gst_util_uint64_scale ((guint64) stream->current_entry *
 512               stream->strh->scale, GST_SECOND, (guint64) stream->strh->rate);
 513         } else {
 514           pos = stream->current_entry * avi->avih->us_frame * GST_USECOND;
 515         }
 516       }
 517       if (res) {
 518         GST_DEBUG ("pos query : %" GST_TIME_FORMAT, GST_TIME_ARGS (pos));
 519         gst_query_set_position (query, GST_FORMAT_TIME, pos);
 520       } else
 521         GST_WARNING ("pos query failed");
 522       break;
 523     }
 524     case GST_QUERY_DURATION:
 525     {
 526       GstFormat fmt;
 527       GstClockTime duration;
 528
 529       /* only act on audio or video streams */
 530       if (stream->strh->type != GST_RIFF_FCC_auds &&
 531           stream->strh->type != GST_RIFF_FCC_vids) {
 532         res = FALSE;
 533         break;
 534       }
 535
 536       /* take stream duration, fall back to avih duration */
 537       if ((duration = stream->duration) == -1)
 538         duration = avi->duration;
 539
 540       gst_query_parse_duration (query, &fmt, NULL);
 541
 542       switch (fmt) {
 543         case GST_FORMAT_TIME:
 544           gst_query_set_duration (query, fmt, duration);
 545           break;
 546         case GST_FORMAT_DEFAULT:
 547         {
 548           gint64 dur;
 549           GST_DEBUG_OBJECT (query, "total frames is %" G_GUINT32_FORMAT,
 550               stream->idx_n);
 551
 552           if (stream->idx_n >= 0)
 553             gst_query_set_duration (query, fmt, stream->idx_n);
 554           else if (gst_pad_query_convert (pad, GST_FORMAT_TIME,
 555                   duration, &fmt, &dur))
 556             gst_query_set_duration (query, fmt, dur);
 557           break;
 558         }
 559         default:
 560           res = FALSE;
 561           break;
 562       }
 563       break;
 564     }
 565     case GST_QUERY_SEEKING:{
 566       GstFormat fmt;
 567
 568       gst_query_parse_seeking (query, &fmt, NULL, NULL, NULL);
 569       if (fmt == GST_FORMAT_TIME) {
 570         gboolean seekable = TRUE;
 571
 572         if (avi->streaming) {
 573           seekable = avi->seekable;
 574         }
 575
 576         gst_query_set_seeking (query, GST_FORMAT_TIME, seekable,
 577             0, stream->duration);
 578         res = TRUE;
 579       }
 580       break;
 581     }
 582     case GST_QUERY_CONVERT:{
 583       GstFormat src_fmt, dest_fmt;
 584       gint64 src_val, dest_val;
 585
 586       gst_query_parse_convert (query, &src_fmt, &src_val, &dest_fmt, &dest_val);
 587       if ((res = gst_avi_demux_src_convert (pad, src_fmt, src_val, &dest_fmt,
 588                   &dest_val)))
 589         gst_query_set_convert (query, src_fmt, src_val, dest_fmt, dest_val);
 590       else
 591         res = gst_pad_query_default (pad, query);
 592       break;
 593     }
 594     default:
 595       res = gst_pad_query_default (pad, query);
 596       break;
 597   }
 598
 599   gst_object_unref (avi);
 600   return res;
 601 }
 602
 603 #if 0
 604 static const GstEventMask *
 605 gst_avi_demux_get_event_mask (GstPad * pad)
 606 {
 607   static const GstEventMask masks[] = {
 608     {GST_EVENT_SEEK, GST_SEEK_METHOD_SET | GST_SEEK_FLAG_KEY_UNIT},
 609     {0,}
 610   };
 611
 612   return masks;
 613 }
 614 #endif
 615
 616 static guint64
 617 gst_avi_demux_seek_streams (GstAviDemux * avi, guint64 offset, gboolean before)
 618 {
 619   GstAviStream *stream;
 620   GstIndexEntry *entry;
 621   gint i;
 622   gint64 val, min = offset;
 623
 624   for (i = 0; i < avi->num_streams; i++) {
 625     stream = &avi->stream[i];
 626
 627     entry = gst_index_get_assoc_entry (avi->element_index, stream->index_id,
 628         before ? GST_INDEX_LOOKUP_BEFORE : GST_INDEX_LOOKUP_AFTER,
 629         GST_ASSOCIATION_FLAG_NONE, GST_FORMAT_BYTES, offset);
 630
 631     if (before) {
 632       if (entry) {
 633         GST_DEBUG_OBJECT (avi, "stream %d, previous entry at %"
 634             G_GUINT64_FORMAT, i, val);
 635         gst_index_entry_assoc_map (entry, GST_FORMAT_BYTES, &val);
 636         if (val < min)
 637           min = val;
 638       }
 639       continue;
 640     }
 641
 642     if (!entry) {
 643       GST_DEBUG_OBJECT (avi, "no position for stream %d, assuming at start", i);
 644       stream->current_entry = 0;
 645       stream->current_total = 0;
 646       continue;
 647     }
 648
 649     gst_index_entry_assoc_map (entry, GST_FORMAT_BYTES, &val);
 650     GST_DEBUG_OBJECT (avi, "stream %d, next entry at %" G_GUINT64_FORMAT,
 651         i, val);
 652
 653     gst_index_entry_assoc_map (entry, GST_FORMAT_TIME, &val);
 654     stream->current_total = val;
 655     gst_index_entry_assoc_map (entry, GST_FORMAT_DEFAULT, &val);
 656     stream->current_entry = val;
 657   }
 658
 659   return min;
 660 }
 661
 662 #define GST_AVI_SEEK_PUSH_DISPLACE     (4 * GST_SECOND)
 663
 664 static gboolean
 665 gst_avi_demux_handle_sink_event (GstPad * pad, GstEvent * event)
 666 {
 667   gboolean res = TRUE;
 668   GstAviDemux *avi = GST_AVI_DEMUX (gst_pad_get_parent (pad));
 669
 670   GST_DEBUG_OBJECT (avi,
 671       "have event type %s: %p on sink pad", GST_EVENT_TYPE_NAME (event), event);
 672
 673   switch (GST_EVENT_TYPE (event)) {
 674     case GST_EVENT_NEWSEGMENT:
 675     {
 676       GstFormat format;
 677       gdouble rate, arate;
 678       gint64 start, stop, time, offset = 0;
 679       gboolean update;
 680       GstSegment segment;
 681       GstIndexEntry *entry;
 682
 683       /* some debug output */
 684       gst_segment_init (&segment, GST_FORMAT_UNDEFINED);
 685       gst_event_parse_new_segment_full (event, &update, &rate, &arate, &format,
 686           &start, &stop, &time);
 687       gst_segment_set_newsegment_full (&segment, update, rate, arate, format,
 688           start, stop, time);
 689       GST_DEBUG_OBJECT (avi,
 690           "received format %d newsegment %" GST_SEGMENT_FORMAT, format,
 691           &segment);
 692
 693       /* chain will send initial newsegment after pads have been added */
 694       if (avi->state != GST_AVI_DEMUX_MOVI) {
 695         GST_DEBUG_OBJECT (avi, "still starting, eating event");
 696         goto exit;
 697       }
 698
 699       /* we only expect a BYTE segment, e.g. following a seek */
 700       if (format != GST_FORMAT_BYTES) {
 701         GST_DEBUG_OBJECT (avi, "unsupported segment format, ignoring");
 702         goto exit;
 703       }
 704
 705       if (!avi->element_index) {
 706         GST_WARNING_OBJECT (avi, "no index data, forcing EOS");
 707         goto eos;
 708       }
 709
 710       /* Let's check if we have an index entry for this position */
 711       entry = gst_index_get_assoc_entry (avi->element_index, avi->index_id,
 712           GST_INDEX_LOOKUP_AFTER, GST_ASSOCIATION_FLAG_NONE,
 713           GST_FORMAT_BYTES, start);
 714
 715       /* we can not go where we have not yet been before ... */
 716       if (!entry) {
 717         GST_WARNING_OBJECT (avi, "insufficient index data, forcing EOS");
 718         goto eos;
 719       }
 720
 721       offset = start;
 722       gst_index_entry_assoc_map (entry, GST_FORMAT_TIME, &time);
 723       gst_index_entry_assoc_map (entry, GST_FORMAT_BYTES, &start);
 724       stop = GST_CLOCK_TIME_NONE;
 725
 726       /* compensate for slack */
 727       if (time)
 728         time += GST_AVI_SEEK_PUSH_DISPLACE;
 729
 730       /* set up segment and send downstream */
 731       gst_segment_set_newsegment_full (&avi->segment, update, rate, arate,
 732           GST_FORMAT_TIME, time, stop, time);
 733       GST_DEBUG_OBJECT (avi, "Pushing newseg update %d, rate %g, "
 734           "applied rate %g, format %d, start %" G_GINT64_FORMAT ", "
 735           "stop %" G_GINT64_FORMAT, update, rate, arate, GST_FORMAT_TIME,
 736           time, stop);
 737       gst_avi_demux_push_event (avi,
 738           gst_event_new_new_segment_full (update, rate, arate, GST_FORMAT_TIME,
 739               time, stop, time));
 740
 741       GST_DEBUG_OBJECT (avi, "next chunk expected at %" G_GINT64_FORMAT, start);
 742
 743       /* adjust state for streaming thread accordingly */
 744       avi->offset = offset;
 745       gst_avi_demux_seek_streams (avi, offset, FALSE);
 746
 747       /* set up streaming thread */
 748       avi->offset = offset;
 749       avi->todrop = start - offset;
 750
 751     exit:
 752       /* in any case, clear leftover in current segment, if any */
 753       gst_adapter_clear (avi->adapter);
 754       gst_event_unref (event);
 755       res = TRUE;
 756       break;
 757     eos:
 758       /* set up for EOS */
 759       avi->have_eos = TRUE;
 760       goto exit;
 761     }
 762     case GST_EVENT_EOS:
 763     {
 764       if (avi->state != GST_AVI_DEMUX_MOVI) {
 765         gst_event_unref (event);
 766         GST_ELEMENT_ERROR (avi, STREAM, DEMUX,
 767             (NULL), ("got eos and didn't receive a complete header object"));
 768       } else if (!gst_avi_demux_push_event (avi, event)) {
 769         GST_ELEMENT_ERROR (avi, STREAM, DEMUX,
 770             (NULL), ("got eos but no streams (yet)"));
 771       }
 772       break;
 773     }
 774     case GST_EVENT_FLUSH_STOP:
 775     {
 776       gint i;
 777
 778       gst_adapter_clear (avi->adapter);
 779       avi->have_eos = FALSE;
 780       for (i = 0; i < avi->num_streams; i++) {
 781         avi->stream[i].last_flow = GST_FLOW_OK;
 782         avi->stream[i].discont = TRUE;
 783       }
 784       /* fall through to default case so that the event gets passed downstream */
 785     }
 786     default:
 787       res = gst_pad_event_default (pad, event);
 788       break;
 789   }
 790
 791   gst_object_unref (avi);
 792
 793   return res;
 794 }
 795
 796 static gboolean
 797 gst_avi_demux_handle_src_event (GstPad * pad, GstEvent * event)
 798 {
 799   gboolean res = TRUE;
 800   GstAviDemux *avi = GST_AVI_DEMUX (gst_pad_get_parent (pad));
 801
 802   GST_DEBUG_OBJECT (avi,
 803       "have event type %s: %p on src pad", GST_EVENT_TYPE_NAME (event), event);
 804
 805   switch (GST_EVENT_TYPE (event)) {
 806     case GST_EVENT_SEEK:
 807       /* handle seeking only in pull mode */
 808       if (!avi->streaming) {
 809         res = gst_avi_demux_handle_seek (avi, pad, event);
 810       } else {
 811         res = gst_avi_demux_handle_seek_push (avi, pad, event);
 812       }
 813       gst_event_unref (event);
 814       break;
 815     case GST_EVENT_QOS:
 816     case GST_EVENT_NAVIGATION:
 817       res = FALSE;
 818       gst_event_unref (event);
 819       break;
 820     default:
 821       res = gst_pad_event_default (pad, event);
 822       break;
 823   }
 824
 825   gst_object_unref (avi);
 826
 827   return res;
 828 }
 829
 830 /* streaming helper (push) */
 831
 832 /*
 833  * gst_avi_demux_peek_chunk_info:
 834  * @avi: Avi object
 835  * @tag: holder for tag
 836  * @size: holder for tag size
 837  *
 838  * Peek next chunk info (tag and size)
 839  *
 840  * Returns: TRUE when one chunk info has been got
 841  */
 842 static gboolean
 843 gst_avi_demux_peek_chunk_info (GstAviDemux * avi, guint32 * tag, guint32 * size)
 844 {
 845   const guint8 *data = NULL;
 846
 847   if (gst_adapter_available (avi->adapter) < 8)
 848     return FALSE;
 849
 850   data = gst_adapter_peek (avi->adapter, 8);
 851   *tag = GST_READ_UINT32_LE (data);
 852   *size = GST_READ_UINT32_LE (data + 4);
 853
 854   return TRUE;
 855 }
 856
 857 /*
 858  * gst_avi_demux_peek_chunk:
 859  * @avi: Avi object
 860  * @tag: holder for tag
 861  * @size: holder for tag size
 862  *
 863  * Peek enough data for one full chunk
 864  *
 865  * Returns: %TRUE when one chunk has been got
 866  */
 867 static gboolean
 868 gst_avi_demux_peek_chunk (GstAviDemux * avi, guint32 * tag, guint32 * size)
 869 {
 870   guint32 peek_size = 0;
 871   gint available;
 872
 873   if (!gst_avi_demux_peek_chunk_info (avi, tag, size))
 874     goto peek_failed;
 875
 876   /* size 0 -> empty data buffer would surprise most callers,
 877    * large size -> do not bother trying to squeeze that into adapter,
 878    * so we throw poor man's exception, which can be caught if caller really
 879    * wants to handle 0 size chunk */
 880   if (!(*size) || (*size) >= (1 << 30))
 881     goto strange_size;
 882
 883   peek_size = (*size + 1) & ~1;
 884   available = gst_adapter_available (avi->adapter);
 885
 886   GST_DEBUG_OBJECT (avi,
 887       "Need to peek chunk of %d bytes to read chunk %" GST_FOURCC_FORMAT
 888       ", %d bytes available", *size, GST_FOURCC_ARGS (*tag), available);
 889
 890   if (available < (8 + peek_size))
 891     goto need_more;
 892
 893   return TRUE;
 894
 895   /* ERRORS */
 896 peek_failed:
 897   {
 898     GST_INFO_OBJECT (avi, "Failed to peek");
 899     return FALSE;
 900   }
 901 strange_size:
 902   {
 903     GST_INFO_OBJECT (avi,
 904         "Invalid/unexpected chunk size %d for tag %" GST_FOURCC_FORMAT, *size,
 905         GST_FOURCC_ARGS (*tag));
 906     /* chain should give up */
 907     avi->abort_buffering = TRUE;
 908     return FALSE;
 909   }
 910 need_more:
 911   {
 912     GST_INFO_OBJECT (avi, "need more %d < %" G_GUINT32_FORMAT,
 913         available, 8 + peek_size);
 914     return FALSE;
 915   }
 916 }
 917
 918 /* AVI init */
 919
 920 /*
 921  * gst_avi_demux_parse_file_header:
 922  * @element: caller element (used for errors/debug).
 923  * @buf: input data to be used for parsing.
 924  *
 925  * "Open" a RIFF/AVI file. The buffer should be at least 12
 926  * bytes long. Takes ownership of @buf.
 927  *
 928  * Returns: TRUE if the file is a RIFF/AVI file, FALSE otherwise.
 929  *          Throws an error, caller should error out (fatal).
 930  */
 931 static gboolean
 932 gst_avi_demux_parse_file_header (GstElement * element, GstBuffer * buf)
 933 {
 934   guint32 doctype;
 935   GstClockTime stamp;
 936
 937   stamp = gst_util_get_timestamp ();
 938
 939   /* riff_parse posts an error */
 940   if (!gst_riff_parse_file_header (element, buf, &doctype))
 941     return FALSE;
 942
 943   if (doctype != GST_RIFF_RIFF_AVI)
 944     goto not_avi;
 945
 946   stamp = gst_util_get_timestamp () - stamp;
 947   GST_DEBUG_OBJECT (element, "header parsing took %" GST_TIME_FORMAT,
 948       GST_TIME_ARGS (stamp));
 949
 950   return TRUE;
 951
 952   /* ERRORS */
 953 not_avi:
 954   {
 955     GST_ELEMENT_ERROR (element, STREAM, WRONG_TYPE, (NULL),
 956         ("File is not an AVI file: %" GST_FOURCC_FORMAT,
 957             GST_FOURCC_ARGS (doctype)));
 958     return FALSE;
 959   }
 960 }
 961
 962 /*
 963  * Read AVI file tag when streaming
 964  */
 965 static GstFlowReturn
 966 gst_avi_demux_stream_init_push (GstAviDemux * avi)
 967 {
 968   if (gst_adapter_available (avi->adapter) >= 12) {
 969     GstBuffer *tmp;
 970
 971     tmp = gst_adapter_take_buffer (avi->adapter, 12);
 972
 973     GST_DEBUG ("Parsing avi header");
 974     if (!gst_avi_demux_parse_file_header (GST_ELEMENT_CAST (avi), tmp)) {
 975       return GST_FLOW_ERROR;
 976     }
 977     GST_DEBUG ("header ok");
 978     avi->offset += 12;
 979
 980     avi->state = GST_AVI_DEMUX_HEADER;
 981   }
 982   return GST_FLOW_OK;
 983 }
 984
 985 /*
 986  * Read AVI file tag
 987  */
 988 static GstFlowReturn
 989 gst_avi_demux_stream_init_pull (GstAviDemux * avi)
 990 {
 991   GstFlowReturn res;
 992   GstBuffer *buf = NULL;
 993
 994   res = gst_pad_pull_range (avi->sinkpad, avi->offset, 12, &buf);
 995   if (res != GST_FLOW_OK)
 996     return res;
 997   else if (!gst_avi_demux_parse_file_header (GST_ELEMENT_CAST (avi), buf))
 998     goto wrong_header;
 999
1000   avi->offset += 12;
1001
1002   return GST_FLOW_OK;
1003
1004   /* ERRORS */
1005 wrong_header:
1006   {
1007     GST_DEBUG_OBJECT (avi, "error parsing file header");
1008     return GST_FLOW_ERROR;
1009   }
1010 }
1011
1012 /* AVI header handling */
1013
1014 /*
1015  * gst_avi_demux_parse_avih:
1016  * @avi: caller element (used for errors/debug).
1017  * @buf: input data to be used for parsing.
1018  * @avih: pointer to structure (filled in by function) containing
1019  *        stream information (such as flags, number of streams, etc.).
1020  *
1021  * Read 'avih' header. Discards buffer after use.
1022  *
1023  * Returns: TRUE on success, FALSE otherwise. Throws an error if
1024  *          the header is invalid. The caller should error out
1025  *          (fatal).
1026  */
1027 static gboolean
1028 gst_avi_demux_parse_avih (GstAviDemux * avi,
1029     GstBuffer * buf, gst_riff_avih ** _avih)
1030 {
1031   gst_riff_avih *avih;
1032
1033   if (buf == NULL)
1034     goto no_buffer;
1035
1036   if (GST_BUFFER_SIZE (buf) < sizeof (gst_riff_avih))
1037     goto avih_too_small;
1038
1039   avih = g_memdup (GST_BUFFER_DATA (buf), GST_BUFFER_SIZE (buf));
1040
1041 #if (G_BYTE_ORDER == G_BIG_ENDIAN)
1042   avih->us_frame = GUINT32_FROM_LE (avih->us_frame);
1043   avih->max_bps = GUINT32_FROM_LE (avih->max_bps);
1044   avih->pad_gran = GUINT32_FROM_LE (avih->pad_gran);
1045   avih->flags = GUINT32_FROM_LE (avih->flags);
1046   avih->tot_frames = GUINT32_FROM_LE (avih->tot_frames);
1047   avih->init_frames = GUINT32_FROM_LE (avih->init_frames);
1048   avih->streams = GUINT32_FROM_LE (avih->streams);
1049   avih->bufsize = GUINT32_FROM_LE (avih->bufsize);
1050   avih->width = GUINT32_FROM_LE (avih->width);
1051   avih->height = GUINT32_FROM_LE (avih->height);
1052   avih->scale = GUINT32_FROM_LE (avih->scale);
1053   avih->rate = GUINT32_FROM_LE (avih->rate);
1054   avih->start = GUINT32_FROM_LE (avih->start);
1055   avih->length = GUINT32_FROM_LE (avih->length);
1056 #endif
1057
1058   /* debug stuff */
1059   GST_INFO_OBJECT (avi, "avih tag found:");
1060   GST_INFO_OBJECT (avi, " us_frame    %u", avih->us_frame);
1061   GST_INFO_OBJECT (avi, " max_bps     %u", avih->max_bps);
1062   GST_INFO_OBJECT (avi, " pad_gran    %u", avih->pad_gran);
1063   GST_INFO_OBJECT (avi, " flags       0x%08x", avih->flags);
1064   GST_INFO_OBJECT (avi, " tot_frames  %u", avih->tot_frames);
1065   GST_INFO_OBJECT (avi, " init_frames %u", avih->init_frames);
1066   GST_INFO_OBJECT (avi, " streams     %u", avih->streams);
1067   GST_INFO_OBJECT (avi, " bufsize     %u", avih->bufsize);
1068   GST_INFO_OBJECT (avi, " width       %u", avih->width);
1069   GST_INFO_OBJECT (avi, " height      %u", avih->height);
1070   GST_INFO_OBJECT (avi, " scale       %u", avih->scale);
1071   GST_INFO_OBJECT (avi, " rate        %u", avih->rate);
1072   GST_INFO_OBJECT (avi, " start       %u", avih->start);
1073   GST_INFO_OBJECT (avi, " length      %u", avih->length);
1074
1075   *_avih = avih;
1076   gst_buffer_unref (buf);
1077
1078   if (avih->us_frame != 0 && avih->tot_frames != 0)
1079     avi->duration =
1080         (guint64) avih->us_frame * (guint64) avih->tot_frames * 1000;
1081   else
1082     avi->duration = GST_CLOCK_TIME_NONE;
1083
1084   GST_INFO_OBJECT (avi, " header duration  %" GST_TIME_FORMAT,
1085       GST_TIME_ARGS (avi->duration));
1086
1087   return TRUE;
1088
1089   /* ERRORS */
1090 no_buffer:
1091   {
1092     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL), ("No buffer"));
1093     return FALSE;
1094   }
1095 avih_too_small:
1096   {
1097     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
1098         ("Too small avih (%d available, %d needed)",
1099             GST_BUFFER_SIZE (buf), (int) sizeof (gst_riff_avih)));
1100     gst_buffer_unref (buf);
1101     return FALSE;
1102   }
1103 }
1104
1105 /*
1106  * gst_avi_demux_parse_superindex:
1107  * @avi: caller element (used for debugging/errors).
1108  * @buf: input data to use for parsing.
1109  * @locations: locations in the file (byte-offsets) that contain
1110  *             the actual indexes (see get_avi_demux_parse_subindex()).
1111  *             The array ends with GST_BUFFER_OFFSET_NONE.
1112  *
1113  * Reads superindex (openDML-2 spec stuff) from the provided data.
1114  *
1115  * Returns: TRUE on success, FALSE otherwise. Indexes should be skipped
1116  *          on error, but they are not fatal.
1117  */
1118 static gboolean
1119 gst_avi_demux_parse_superindex (GstAviDemux * avi,
1120     GstBuffer * buf, guint64 ** _indexes)
1121 {
1122   guint8 *data;
1123   guint16 bpe = 16;
1124   guint32 num, i;
1125   guint64 *indexes;
1126   guint size;
1127
1128   *_indexes = NULL;
1129
1130   size = buf ? GST_BUFFER_SIZE (buf) : 0;
1131   if (size < 24)
1132     goto too_small;
1133
1134   data = GST_BUFFER_DATA (buf);
1135
1136   /* check type of index. The opendml2 specs state that
1137    * there should be 4 dwords per array entry. Type can be
1138    * either frame or field (and we don't care). */
1139   if (GST_READ_UINT16_LE (data) != 4 ||
1140       (data[2] & 0xfe) != 0x0 || data[3] != 0x0) {
1141     GST_WARNING_OBJECT (avi,
1142         "Superindex for stream has unexpected "
1143         "size_entry %d (bytes) or flags 0x%02x/0x%02x",
1144         GST_READ_UINT16_LE (data), data[2], data[3]);
1145     bpe = GST_READ_UINT16_LE (data) * 4;
1146   }
1147   num = GST_READ_UINT32_LE (&data[4]);
1148
1149   GST_DEBUG_OBJECT (avi, "got %d indexes", num);
1150
1151   indexes = g_new (guint64, num + 1);
1152   for (i = 0; i < num; i++) {
1153     if (size < 24 + bpe * (i + 1))
1154       break;
1155     indexes[i] = GST_READ_UINT64_LE (&data[24 + bpe * i]);
1156     GST_DEBUG_OBJECT (avi, "index %d at %" G_GUINT64_FORMAT, i, indexes[i]);
1157   }
1158   indexes[i] = GST_BUFFER_OFFSET_NONE;
1159   *_indexes = indexes;
1160
1161   gst_buffer_unref (buf);
1162
1163   return TRUE;
1164
1165   /* ERRORS */
1166 too_small:
1167   {
1168     GST_ERROR_OBJECT (avi,
1169         "Not enough data to parse superindex (%d available, 24 needed)", size);
1170     if (buf)
1171       gst_buffer_unref (buf);
1172     return FALSE;
1173   }
1174 }
1175
1176 /* add an entry to the index of a stream. @num should be an estimate of the
1177  * total amount of index entries for all streams and is used to dynamically
1178  * allocate memory for the index entries. */
1179 static inline gboolean
1180 gst_avi_demux_add_index (GstAviDemux * avi, GstAviStream * stream,
1181     guint num, GstAviIndexEntry * entry)
1182 {
1183   /* ensure index memory */
1184   if (G_UNLIKELY (stream->idx_n >= stream->idx_max)) {
1185     guint idx_max = stream->idx_max;
1186     GstAviIndexEntry *new_idx;
1187
1188     /* we need to make some more room */
1189     if (idx_max == 0) {
1190       /* initial size guess, assume each stream has an equal amount of entries,
1191        * overshoot with at least 8K */
1192       idx_max = (num / avi->num_streams) + (8192 / sizeof (GstAviIndexEntry));
1193     } else {
1194       idx_max += 8192 / sizeof (GstAviIndexEntry);
1195       GST_DEBUG_OBJECT (avi, "expanded index from %u to %u",
1196           stream->idx_max, idx_max);
1197     }
1198     new_idx = g_try_renew (GstAviIndexEntry, stream->index, idx_max);
1199     /* out of memory, if this fails stream->index is untouched. */
1200     if (G_UNLIKELY (!new_idx))
1201       return FALSE;
1202     /* use new index */
1203     stream->index = new_idx;
1204     stream->idx_max = idx_max;
1205   }
1206
1207   /* update entry total and stream stats. The entry total can be converted to
1208    * the timestamp of the entry easily. */
1209   if (stream->strh->type == GST_RIFF_FCC_auds) {
1210     gint blockalign;
1211
1212     if (stream->is_vbr) {
1213       entry->total = stream->total_blocks;
1214     } else {
1215       entry->total = stream->total_bytes;
1216     }
1217     blockalign = stream->strf.auds->blockalign;
1218     if (blockalign > 0)
1219       stream->total_blocks += DIV_ROUND_UP (entry->size, blockalign);
1220     else
1221       stream->total_blocks++;
1222   } else {
1223     if (stream->is_vbr) {
1224       entry->total = stream->idx_n;
1225     } else {
1226       entry->total = stream->total_bytes;
1227     }
1228   }
1229   stream->total_bytes += entry->size;
1230   if (ENTRY_IS_KEYFRAME (entry))
1231     stream->n_keyframes++;
1232
1233   /* and add */
1234   GST_LOG_OBJECT (avi,
1235       "Adding stream %u, index entry %d, kf %d, size %u "
1236       ", offset %" G_GUINT64_FORMAT ", total %" G_GUINT64_FORMAT, stream->num,
1237       stream->idx_n, ENTRY_IS_KEYFRAME (entry), entry->size, entry->offset,
1238       entry->total);
1239   stream->index[stream->idx_n++] = *entry;
1240
1241   return TRUE;
1242 }
1243
1244 /* given @entry_n in @stream, calculate info such as timestamps and
1245  * offsets for the entry. */
1246 static void
1247 gst_avi_demux_get_buffer_info (GstAviDemux * avi, GstAviStream * stream,
1248     guint entry_n, GstClockTime * timestamp, GstClockTime * ts_end,
1249     guint64 * offset, guint64 * offset_end)
1250 {
1251   GstAviIndexEntry *entry;
1252
1253   entry = &stream->index[entry_n];
1254
1255   if (stream->is_vbr) {
1256     /* VBR stream next timestamp */
1257     if (stream->strh->type == GST_RIFF_FCC_auds) {
1258       if (timestamp)
1259         *timestamp =
1260             avi_stream_convert_frames_to_time_unchecked (stream, entry->total);
1261       if (ts_end)
1262         *ts_end = avi_stream_convert_frames_to_time_unchecked (stream,
1263             entry->total + 1);
1264     } else {
1265       if (timestamp)
1266         *timestamp =
1267             avi_stream_convert_frames_to_time_unchecked (stream, entry_n);
1268       if (ts_end)
1269         *ts_end = avi_stream_convert_frames_to_time_unchecked (stream,
1270             entry_n + 1);
1271     }
1272   } else if (stream->strh->type == GST_RIFF_FCC_auds) {
1273     /* constant rate stream */
1274     if (timestamp)
1275       *timestamp =
1276           avi_stream_convert_bytes_to_time_unchecked (stream, entry->total);
1277     if (ts_end)
1278       *ts_end = avi_stream_convert_bytes_to_time_unchecked (stream,
1279           entry->total + entry->size);
1280   }
1281   if (stream->strh->type == GST_RIFF_FCC_vids) {
1282     /* video offsets are the frame number */
1283     if (offset)
1284       *offset = entry_n;
1285     if (offset_end)
1286       *offset_end = entry_n + 1;
1287   } else {
1288     /* no offsets for audio */
1289     if (offset)
1290       *offset = -1;
1291     if (offset_end)
1292       *offset_end = -1;
1293   }
1294 }
1295
1296 /* collect and debug stats about the indexes for all streams.
1297  * This method is also responsible for filling in the stream duration
1298  * as measured by the amount of index entries.
1299  *
1300  * Returns TRUE if the index is not empty, else FALSE */
1301 static gboolean
1302 gst_avi_demux_do_index_stats (GstAviDemux * avi)
1303 {
1304   guint total_idx = 0;
1305   guint i;
1306 #ifndef GST_DISABLE_GST_DEBUG
1307   guint total_max = 0;
1308 #endif
1309
1310   /* get stream stats now */
1311   for (i = 0; i < avi->num_streams; i++) {
1312     GstAviStream *stream;
1313
1314     if (G_UNLIKELY (!(stream = &avi->stream[i])))
1315       continue;
1316     if (G_UNLIKELY (!stream->strh))
1317       continue;
1318     if (G_UNLIKELY (!stream->index || stream->idx_n == 0))
1319       continue;
1320
1321     /* we interested in the end_ts of the last entry, which is the total
1322      * duration of this stream */
1323     gst_avi_demux_get_buffer_info (avi, stream, stream->idx_n - 1,
1324         NULL, &stream->idx_duration, NULL, NULL);
1325
1326     total_idx += stream->idx_n;
1327 #ifndef GST_DISABLE_GST_DEBUG
1328     total_max += stream->idx_max;
1329 #endif
1330     GST_INFO_OBJECT (avi, "Stream %d, dur %" GST_TIME_FORMAT ", %6u entries, "
1331         "%5u keyframes, entry size = %2u, total size = %10u, allocated %10u",
1332         i, GST_TIME_ARGS (stream->idx_duration), stream->idx_n,
1333         stream->n_keyframes, (guint) sizeof (GstAviIndexEntry),
1334         (guint) (stream->idx_n * sizeof (GstAviIndexEntry)),
1335         (guint) (stream->idx_max * sizeof (GstAviIndexEntry)));
1336   }
1337   total_idx *= sizeof (GstAviIndexEntry);
1338 #ifndef GST_DISABLE_GST_DEBUG
1339   total_max *= sizeof (GstAviIndexEntry);
1340 #endif
1341   GST_INFO_OBJECT (avi, "%u bytes for index vs %u ideally, %u wasted",
1342       total_max, total_idx, total_max - total_idx);
1343
1344   if (total_idx == 0) {
1345     GST_WARNING_OBJECT (avi, "Index is empty !");
1346     return FALSE;
1347   }
1348   return TRUE;
1349 }
1350
1351 /*
1352  * gst_avi_demux_parse_subindex:
1353  * @avi: Avi object
1354  * @buf: input data to use for parsing.
1355  * @stream: stream context.
1356  * @entries_list: a list (returned by the function) containing all the
1357  *           indexes parsed in this specific subindex. The first
1358  *           entry is also a pointer to allocated memory that needs
1359  *           to be free´ed. May be NULL if no supported indexes were
1360  *           found.
1361  *
1362  * Reads superindex (openDML-2 spec stuff) from the provided data.
1363  * The buffer should contain a GST_RIFF_TAG_ix?? chunk.
1364  *
1365  * Returns: TRUE on success, FALSE otherwise. Errors are fatal, we
1366  *          throw an error, caller should bail out asap.
1367  */
1368 static gboolean
1369 gst_avi_demux_parse_subindex (GstAviDemux * avi, GstAviStream * stream,
1370     GstBuffer * buf)
1371 {
1372   guint8 *data;
1373   guint16 bpe;
1374   guint32 num, i;
1375   guint64 baseoff;
1376   guint size;
1377
1378   if (!buf)
1379     return TRUE;
1380
1381   size = GST_BUFFER_SIZE (buf);
1382
1383   /* check size */
1384   if (size < 24)
1385     goto too_small;
1386
1387   data = GST_BUFFER_DATA (buf);
1388
1389   /* We don't support index-data yet */
1390   if (data[3] & 0x80)
1391     goto not_implemented;
1392
1393   /* check type of index. The opendml2 specs state that
1394    * there should be 4 dwords per array entry. Type can be
1395    * either frame or field (and we don't care). */
1396   bpe = (data[2] & 0x01) ? 12 : 8;
1397   if (GST_READ_UINT16_LE (data) != bpe / 4 ||
1398       (data[2] & 0xfe) != 0x0 || data[3] != 0x1) {
1399     GST_WARNING_OBJECT (avi,
1400         "Superindex for stream %d has unexpected "
1401         "size_entry %d (bytes) or flags 0x%02x/0x%02x",
1402         stream->num, GST_READ_UINT16_LE (data), data[2], data[3]);
1403     bpe = GST_READ_UINT16_LE (data) * 4;
1404   }
1405   num = GST_READ_UINT32_LE (&data[4]);
1406   baseoff = GST_READ_UINT64_LE (&data[12]);
1407
1408   /* If there's nothing, just return ! */
1409   if (num == 0)
1410     goto empty_index;
1411
1412   GST_INFO_OBJECT (avi, "Parsing subindex, nr_entries = %6d", num);
1413
1414   for (i = 0; i < num; i++) {
1415     GstAviIndexEntry entry;
1416
1417     if (size < 24 + bpe * (i + 1))
1418       break;
1419
1420     /* fill in offset and size. offset contains the keyframe flag in the
1421      * upper bit*/
1422     entry.offset = baseoff + GST_READ_UINT32_LE (&data[24 + bpe * i]);
1423     entry.size = GST_READ_UINT32_LE (&data[24 + bpe * i + 4]);
1424     /* handle flags */
1425     if (stream->strh->type == GST_RIFF_FCC_auds) {
1426       /* all audio frames are keyframes */
1427       ENTRY_SET_KEYFRAME (&entry);
1428     } else {
1429       /* else read flags */
1430       entry.flags = (entry.size & 0x80000000) ? 0 : GST_AVI_KEYFRAME;
1431     }
1432     entry.size &= ~0x80000000;
1433
1434     /* and add */
1435     if (G_UNLIKELY (!gst_avi_demux_add_index (avi, stream, num, &entry)))
1436       goto out_of_mem;
1437   }
1438   gst_buffer_unref (buf);
1439
1440   return TRUE;
1441
1442   /* ERRORS */
1443 too_small:
1444   {
1445     GST_ERROR_OBJECT (avi,
1446         "Not enough data to parse subindex (%d available, 24 needed)", size);
1447     gst_buffer_unref (buf);
1448     return TRUE;                /* continue */
1449   }
1450 not_implemented:
1451   {
1452     GST_ELEMENT_ERROR (avi, STREAM, NOT_IMPLEMENTED, (NULL),
1453         ("Subindex-is-data is not implemented"));
1454     gst_buffer_unref (buf);
1455     return FALSE;
1456   }
1457 empty_index:
1458   {
1459     GST_DEBUG_OBJECT (avi, "the index is empty");
1460     gst_buffer_unref (buf);
1461     return TRUE;
1462   }
1463 out_of_mem:
1464   {
1465     GST_ELEMENT_ERROR (avi, RESOURCE, NO_SPACE_LEFT, (NULL),
1466         ("Cannot allocate memory for %u*%u=%u bytes",
1467             (guint) sizeof (GstAviIndexEntry), num,
1468             (guint) sizeof (GstAviIndexEntry) * num));
1469     gst_buffer_unref (buf);
1470     return FALSE;
1471   }
1472 }
1473
1474 #if 0
1475 /*
1476  * Read AVI index when streaming
1477  */
1478 static void
1479 gst_avi_demux_read_subindexes_push (GstAviDemux * avi)
1480 {
1481   guint32 tag = 0, size;
1482   GstBuffer *buf = NULL;
1483   gint i, n;
1484
1485   GST_DEBUG_OBJECT (avi, "read subindexes for %d streams", avi->num_streams);
1486
1487   for (n = 0; n < avi->num_streams; n++) {
1488     GstAviStream *stream = &avi->stream[n];
1489
1490     for (i = 0; stream->indexes[i] != GST_BUFFER_OFFSET_NONE; i++) {
1491       if (!gst_avi_demux_peek_chunk (avi, &tag, &size))
1492         continue;
1493       else if ((tag != GST_MAKE_FOURCC ('i', 'x', '0' + stream->num / 10,
1494                   '0' + stream->num % 10)) &&
1495           (tag != GST_MAKE_FOURCC ('0' + stream->num / 10,
1496                   '0' + stream->num % 10, 'i', 'x'))) {
1497         GST_WARNING_OBJECT (avi, "Not an ix## chunk (%" GST_FOURCC_FORMAT ")",
1498             GST_FOURCC_ARGS (tag));
1499         continue;
1500       }
1501
1502       avi->offset += 8 + GST_ROUND_UP_2 (size);
1503
1504       buf = gst_buffer_new ();
1505       GST_BUFFER_DATA (buf) = gst_adapter_take (avi->adapter, size);
1506       GST_BUFFER_SIZE (buf) = size;
1507
1508       if (!gst_avi_demux_parse_subindex (avi, stream, buf))
1509         continue;
1510     }
1511
1512     g_free (stream->indexes);
1513     stream->indexes = NULL;
1514   }
1515   /* get stream stats now */
1516   avi->have_index = gst_avi_demux_do_index_stats (avi);
1517 }
1518 #endif
1519
1520 /*
1521  * Read AVI index
1522  */
1523 static void
1524 gst_avi_demux_read_subindexes_pull (GstAviDemux * avi)
1525 {
1526   guint32 tag;
1527   GstBuffer *buf;
1528   gint i, n;
1529
1530   GST_DEBUG_OBJECT (avi, "read subindexes for %d streams", avi->num_streams);
1531
1532   for (n = 0; n < avi->num_streams; n++) {
1533     GstAviStream *stream = &avi->stream[n];
1534
1535     for (i = 0; stream->indexes[i] != GST_BUFFER_OFFSET_NONE; i++) {
1536       if (gst_riff_read_chunk (GST_ELEMENT_CAST (avi), avi->sinkpad,
1537               &stream->indexes[i], &tag, &buf) != GST_FLOW_OK)
1538         continue;
1539       else if ((tag != GST_MAKE_FOURCC ('i', 'x', '0' + stream->num / 10,
1540                   '0' + stream->num % 10)) &&
1541           (tag != GST_MAKE_FOURCC ('0' + stream->num / 10,
1542                   '0' + stream->num % 10, 'i', 'x'))) {
1543         /* Some ODML files (created by god knows what muxer) have a ##ix format
1544          * instead of the 'official' ix##. They are still valid though. */
1545         GST_WARNING_OBJECT (avi, "Not an ix## chunk (%" GST_FOURCC_FORMAT ")",
1546             GST_FOURCC_ARGS (tag));
1547         gst_buffer_unref (buf);
1548         continue;
1549       }
1550
1551       if (!gst_avi_demux_parse_subindex (avi, stream, buf))
1552         continue;
1553     }
1554
1555     g_free (stream->indexes);
1556     stream->indexes = NULL;
1557   }
1558   /* get stream stats now */
1559   avi->have_index = gst_avi_demux_do_index_stats (avi);
1560 }
1561
1562 /*
1563  * gst_avi_demux_riff_parse_vprp:
1564  * @element: caller element (used for debugging/error).
1565  * @buf: input data to be used for parsing, stripped from header.
1566  * @vprp: a pointer (returned by this function) to a filled-in vprp
1567  *        structure. Caller should free it.
1568  *
1569  * Parses a video stream´s vprp. This function takes ownership of @buf.
1570  *
1571  * Returns: TRUE if parsing succeeded, otherwise FALSE. The stream
1572  *          should be skipped on error, but it is not fatal.
1573  */
1574 static gboolean
1575 gst_avi_demux_riff_parse_vprp (GstElement * element,
1576     GstBuffer * buf, gst_riff_vprp ** _vprp)
1577 {
1578   gst_riff_vprp *vprp;
1579   gint k;
1580
1581   g_return_val_if_fail (buf != NULL, FALSE);
1582   g_return_val_if_fail (_vprp != NULL, FALSE);
1583
1584   if (GST_BUFFER_SIZE (buf) < G_STRUCT_OFFSET (gst_riff_vprp, field_info))
1585     goto too_small;
1586
1587   vprp = g_memdup (GST_BUFFER_DATA (buf), GST_BUFFER_SIZE (buf));
1588
1589 #if (G_BYTE_ORDER == G_BIG_ENDIAN)
1590   vprp->format_token = GUINT32_FROM_LE (vprp->format_token);
1591   vprp->standard = GUINT32_FROM_LE (vprp->standard);
1592   vprp->vert_rate = GUINT32_FROM_LE (vprp->vert_rate);
1593   vprp->hor_t_total = GUINT32_FROM_LE (vprp->hor_t_total);
1594   vprp->vert_lines = GUINT32_FROM_LE (vprp->vert_lines);
1595   vprp->aspect = GUINT32_FROM_LE (vprp->aspect);
1596   vprp->width = GUINT32_FROM_LE (vprp->width);
1597   vprp->height = GUINT32_FROM_LE (vprp->height);
1598   vprp->fields = GUINT32_FROM_LE (vprp->fields);
1599 #endif
1600
1601   /* size checking */
1602   /* calculate fields based on size */
1603   k = (GST_BUFFER_SIZE (buf) - G_STRUCT_OFFSET (gst_riff_vprp, field_info)) /
1604       vprp->fields;
1605   if (vprp->fields > k) {
1606     GST_WARNING_OBJECT (element,
1607         "vprp header indicated %d fields, only %d available", vprp->fields, k);
1608     vprp->fields = k;
1609   }
1610   if (vprp->fields > GST_RIFF_VPRP_VIDEO_FIELDS) {
1611     GST_WARNING_OBJECT (element,
1612         "vprp header indicated %d fields, at most %d supported", vprp->fields,
1613         GST_RIFF_VPRP_VIDEO_FIELDS);
1614     vprp->fields = GST_RIFF_VPRP_VIDEO_FIELDS;
1615   }
1616 #if (G_BYTE_ORDER == G_BIG_ENDIAN)
1617   for (k = 0; k < vprp->fields; k++) {
1618     gst_riff_vprp_video_field_desc *fd;
1619
1620     fd = &vprp->field_info[k];
1621     fd->compressed_bm_height = GUINT32_FROM_LE (fd->compressed_bm_height);
1622     fd->compressed_bm_width = GUINT32_FROM_LE (fd->compressed_bm_width);
1623     fd->valid_bm_height = GUINT32_FROM_LE (fd->valid_bm_height);
1624     fd->valid_bm_width = GUINT16_FROM_LE (fd->valid_bm_width);
1625     fd->valid_bm_x_offset = GUINT16_FROM_LE (fd->valid_bm_x_offset);
1626     fd->valid_bm_y_offset = GUINT32_FROM_LE (fd->valid_bm_y_offset);
1627     fd->video_x_t_offset = GUINT32_FROM_LE (fd->video_x_t_offset);
1628     fd->video_y_start = GUINT32_FROM_LE (fd->video_y_start);
1629   }
1630 #endif
1631
1632   /* debug */
1633   GST_INFO_OBJECT (element, "vprp tag found in context vids:");
1634   GST_INFO_OBJECT (element, " format_token  %d", vprp->format_token);
1635   GST_INFO_OBJECT (element, " standard      %d", vprp->standard);
1636   GST_INFO_OBJECT (element, " vert_rate     %d", vprp->vert_rate);
1637   GST_INFO_OBJECT (element, " hor_t_total   %d", vprp->hor_t_total);
1638   GST_INFO_OBJECT (element, " vert_lines    %d", vprp->vert_lines);
1639   GST_INFO_OBJECT (element, " aspect        %d:%d", vprp->aspect >> 16,
1640       vprp->aspect & 0xffff);
1641   GST_INFO_OBJECT (element, " width         %d", vprp->width);
1642   GST_INFO_OBJECT (element, " height        %d", vprp->height);
1643   GST_INFO_OBJECT (element, " fields        %d", vprp->fields);
1644   for (k = 0; k < vprp->fields; k++) {
1645     gst_riff_vprp_video_field_desc *fd;
1646
1647     fd = &(vprp->field_info[k]);
1648     GST_INFO_OBJECT (element, " field %u description:", k);
1649     GST_INFO_OBJECT (element, "  compressed_bm_height  %d",
1650         fd->compressed_bm_height);
1651     GST_INFO_OBJECT (element, "  compressed_bm_width  %d",
1652         fd->compressed_bm_width);
1653     GST_INFO_OBJECT (element, "  valid_bm_height       %d",
1654         fd->valid_bm_height);
1655     GST_INFO_OBJECT (element, "  valid_bm_width        %d", fd->valid_bm_width);
1656     GST_INFO_OBJECT (element, "  valid_bm_x_offset     %d",
1657         fd->valid_bm_x_offset);
1658     GST_INFO_OBJECT (element, "  valid_bm_y_offset     %d",
1659         fd->valid_bm_y_offset);
1660     GST_INFO_OBJECT (element, "  video_x_t_offset      %d",
1661         fd->video_x_t_offset);
1662     GST_INFO_OBJECT (element, "  video_y_start         %d", fd->video_y_start);
1663   }
1664
1665   gst_buffer_unref (buf);
1666
1667   *_vprp = vprp;
1668
1669   return TRUE;
1670
1671   /* ERRORS */
1672 too_small:
1673   {
1674     GST_ERROR_OBJECT (element,
1675         "Too small vprp (%d available, at least %d needed)",
1676         GST_BUFFER_SIZE (buf),
1677         (int) G_STRUCT_OFFSET (gst_riff_vprp, field_info));
1678     gst_buffer_unref (buf);
1679     return FALSE;
1680   }
1681 }
1682
1683 static void
1684 gst_avi_demux_expose_streams (GstAviDemux * avi, gboolean force)
1685 {
1686   guint i;
1687
1688   GST_DEBUG_OBJECT (avi, "force : %d", force);
1689
1690   for (i = 0; i < avi->num_streams; i++) {
1691     GstAviStream *stream = &avi->stream[i];
1692
1693     if (force || stream->idx_n != 0) {
1694       GST_LOG_OBJECT (avi, "Added pad %s with caps %" GST_PTR_FORMAT,
1695           GST_PAD_NAME (stream->pad), GST_PAD_CAPS (stream->pad));
1696       gst_element_add_pad ((GstElement *) avi, stream->pad);
1697       stream->exposed = TRUE;
1698       if (avi->main_stream == -1)
1699         avi->main_stream = i;
1700     } else {
1701       GST_WARNING_OBJECT (avi, "Stream #%d doesn't have any entry, removing it",
1702           i);
1703       gst_avi_demux_reset_stream (avi, stream);
1704     }
1705   }
1706 }
1707
1708 /*
1709  * gst_avi_demux_parse_stream:
1710  * @avi: calling element (used for debugging/errors).
1711  * @buf: input buffer used to parse the stream.
1712  *
1713  * Parses all subchunks in a strl chunk (which defines a single
1714  * stream). Discards the buffer after use. This function will
1715  * increment the stream counter internally.
1716  *
1717  * Returns: whether the stream was identified successfully.
1718  *          Errors are not fatal. It does indicate the stream
1719  *          was skipped.
1720  */
1721 static gboolean
1722 gst_avi_demux_parse_stream (GstAviDemux * avi, GstBuffer * buf)
1723 {
1724   GstAviStream *stream;
1725   GstElementClass *klass;
1726   GstPadTemplate *templ;
1727   GstBuffer *sub = NULL;
1728   guint offset = 4;
1729   guint32 tag = 0;
1730   gchar *codec_name = NULL, *padname = NULL;
1731   const gchar *tag_name;
1732   GstCaps *caps = NULL;
1733   GstPad *pad;
1734   GstElement *element;
1735   gboolean got_strh = FALSE, got_strf = FALSE, got_vprp = FALSE;
1736   gst_riff_vprp *vprp = NULL;
1737
1738   element = GST_ELEMENT_CAST (avi);
1739
1740   GST_DEBUG_OBJECT (avi, "Parsing stream");
1741
1742   if (avi->num_streams >= GST_AVI_DEMUX_MAX_STREAMS) {
1743     GST_WARNING_OBJECT (avi,
1744         "maximum no of streams (%d) exceeded, ignoring stream",
1745         GST_AVI_DEMUX_MAX_STREAMS);
1746     gst_buffer_unref (buf);
1747     /* not a fatal error, let's say */
1748     return TRUE;
1749   }
1750
1751   stream = &avi->stream[avi->num_streams];
1752
1753   /* initial settings */
1754   stream->idx_duration = GST_CLOCK_TIME_NONE;
1755   stream->hdr_duration = GST_CLOCK_TIME_NONE;
1756   stream->duration = GST_CLOCK_TIME_NONE;
1757
1758   while (gst_riff_parse_chunk (element, buf, &offset, &tag, &sub)) {
1759     /* sub can be NULL if the chunk is empty */
1760     if (sub == NULL) {
1761       GST_DEBUG_OBJECT (avi, "ignoring empty chunk %" GST_FOURCC_FORMAT,
1762           GST_FOURCC_ARGS (tag));
1763       continue;
1764     }
1765     switch (tag) {
1766       case GST_RIFF_TAG_strh:
1767       {
1768         gst_riff_strh *strh;
1769
1770         if (got_strh) {
1771           GST_WARNING_OBJECT (avi, "Ignoring additional strh chunk");
1772           break;
1773         }
1774         if (!gst_riff_parse_strh (element, sub, &stream->strh)) {
1775           /* ownership given away */
1776           sub = NULL;
1777           GST_WARNING_OBJECT (avi, "Failed to parse strh chunk");
1778           goto fail;
1779         }
1780         sub = NULL;
1781         strh = stream->strh;
1782         /* sanity check; stream header frame rate matches global header
1783          * frame duration */
1784         if (stream->strh->type == GST_RIFF_FCC_vids) {
1785           GstClockTime s_dur;
1786           GstClockTime h_dur = avi->avih->us_frame * GST_USECOND;
1787
1788           s_dur = gst_util_uint64_scale (GST_SECOND, strh->scale, strh->rate);
1789           GST_DEBUG_OBJECT (avi, "verifying stream framerate %d/%d, "
1790               "frame duration = %d ms", strh->rate, strh->scale,
1791               (gint) (s_dur / GST_MSECOND));
1792           if (h_dur > (10 * GST_MSECOND) && (s_dur > 10 * h_dur)) {
1793             strh->rate = GST_SECOND / GST_USECOND;
1794             strh->scale = h_dur / GST_USECOND;
1795             GST_DEBUG_OBJECT (avi, "correcting stream framerate to %d/%d",
1796                 strh->rate, strh->scale);
1797           }
1798         }
1799         /* determine duration as indicated by header */
1800         stream->hdr_duration = gst_util_uint64_scale ((guint64) strh->length *
1801             strh->scale, GST_SECOND, (guint64) strh->rate);
1802         GST_INFO ("Stream duration according to header: %" GST_TIME_FORMAT,
1803             GST_TIME_ARGS (stream->hdr_duration));
1804         if (stream->hdr_duration == 0)
1805           stream->hdr_duration = GST_CLOCK_TIME_NONE;
1806
1807         got_strh = TRUE;
1808         break;
1809       }
1810       case GST_RIFF_TAG_strf:
1811       {
1812         gboolean res = FALSE;
1813
1814         if (got_strf) {
1815           GST_WARNING_OBJECT (avi, "Ignoring additional strf chunk");
1816           break;
1817         }
1818         if (!got_strh) {
1819           GST_ERROR_OBJECT (avi, "Found strf chunk before strh chunk");
1820           goto fail;
1821         }
1822         switch (stream->strh->type) {
1823           case GST_RIFF_FCC_vids:
1824             stream->is_vbr = TRUE;
1825             res = gst_riff_parse_strf_vids (element, sub,
1826                 &stream->strf.vids, &stream->extradata);
1827             sub = NULL;
1828             GST_DEBUG_OBJECT (element, "marking video as VBR, res %d", res);
1829             break;
1830           case GST_RIFF_FCC_auds:
1831             stream->is_vbr = (stream->strh->samplesize == 0)
1832                 && stream->strh->scale > 1;
1833             res =
1834                 gst_riff_parse_strf_auds (element, sub, &stream->strf.auds,
1835                 &stream->extradata);
1836             sub = NULL;
1837             GST_DEBUG_OBJECT (element, "marking audio as VBR:%d, res %d",
1838                 stream->is_vbr, res);
1839             break;
1840           case GST_RIFF_FCC_iavs:
1841             stream->is_vbr = TRUE;
1842             res = gst_riff_parse_strf_iavs (element, sub,
1843                 &stream->strf.iavs, &stream->extradata);
1844             sub = NULL;
1845             GST_DEBUG_OBJECT (element, "marking iavs as VBR, res %d", res);
1846             break;
1847           case GST_RIFF_FCC_txts:
1848             /* nothing to parse here */
1849             stream->is_vbr = (stream->strh->samplesize == 0)
1850                 && (stream->strh->scale > 1);
1851             res = TRUE;
1852             break;
1853           default:
1854             GST_ERROR_OBJECT (avi,
1855                 "Don´t know how to handle stream type %" GST_FOURCC_FORMAT,
1856                 GST_FOURCC_ARGS (stream->strh->type));
1857             break;
1858         }
1859         if (sub) {
1860           gst_buffer_unref (sub);
1861           sub = NULL;
1862         }
1863         if (!res)
1864           goto fail;
1865         got_strf = TRUE;
1866         break;
1867       }
1868       case GST_RIFF_TAG_vprp:
1869       {
1870         if (got_vprp) {
1871           GST_WARNING_OBJECT (avi, "Ignoring additional vprp chunk");
1872           break;
1873         }
1874         if (!got_strh) {
1875           GST_ERROR_OBJECT (avi, "Found vprp chunk before strh chunk");
1876           goto fail;
1877         }
1878         if (!got_strf) {
1879           GST_ERROR_OBJECT (avi, "Found vprp chunk before strf chunk");
1880           goto fail;
1881         }
1882
1883         if (!gst_avi_demux_riff_parse_vprp (element, sub, &vprp)) {
1884           GST_WARNING_OBJECT (avi, "Failed to parse vprp chunk");
1885           /* not considered fatal */
1886           g_free (vprp);
1887           vprp = NULL;
1888         } else
1889           got_vprp = TRUE;
1890         sub = NULL;
1891         break;
1892       }
1893       case GST_RIFF_TAG_strd:
1894         if (stream->initdata)
1895           gst_buffer_unref (stream->initdata);
1896         stream->initdata = sub;
1897         sub = NULL;
1898         break;
1899       case GST_RIFF_TAG_strn:
1900         g_free (stream->name);
1901         if (sub != NULL) {
1902           stream->name =
1903               g_strndup ((gchar *) GST_BUFFER_DATA (sub),
1904               (gsize) GST_BUFFER_SIZE (sub));
1905           gst_buffer_unref (sub);
1906           sub = NULL;
1907         } else {
1908           stream->name = g_strdup ("");
1909         }
1910         GST_DEBUG_OBJECT (avi, "stream name: %s", stream->name);
1911         break;
1912       default:
1913         if (tag == GST_MAKE_FOURCC ('i', 'n', 'd', 'x') ||
1914             tag == GST_MAKE_FOURCC ('i', 'x', '0' + avi->num_streams / 10,
1915                 '0' + avi->num_streams % 10)) {
1916           g_free (stream->indexes);
1917           gst_avi_demux_parse_superindex (avi, sub, &stream->indexes);
1918           stream->superindex = TRUE;
1919           sub = NULL;
1920           break;
1921         }
1922         GST_WARNING_OBJECT (avi,
1923             "Unknown stream header tag %" GST_FOURCC_FORMAT ", ignoring",
1924             GST_FOURCC_ARGS (tag));
1925         /* fall-through */
1926       case GST_RIFF_TAG_JUNK:
1927         break;
1928     }
1929     if (sub != NULL) {
1930       gst_buffer_unref (sub);
1931       sub = NULL;
1932     }
1933   }
1934
1935   if (!got_strh) {
1936     GST_WARNING_OBJECT (avi, "Failed to find strh chunk");
1937     goto fail;
1938   }
1939
1940   if (!got_strf) {
1941     GST_WARNING_OBJECT (avi, "Failed to find strf chunk");
1942     goto fail;
1943   }
1944
1945   /* get class to figure out the template */
1946   klass = GST_ELEMENT_GET_CLASS (avi);
1947
1948   /* we now have all info, let´s set up a pad and a caps and be done */
1949   /* create stream name + pad */
1950   switch (stream->strh->type) {
1951     case GST_RIFF_FCC_vids:{
1952       guint32 fourcc;
1953
1954       fourcc = (stream->strf.vids->compression) ?
1955           stream->strf.vids->compression : stream->strh->fcc_handler;
1956       padname = g_strdup_printf ("video_%02d", avi->num_v_streams);
1957       templ = gst_element_class_get_pad_template (klass, "video_%02d");
1958       caps = gst_riff_create_video_caps (fourcc, stream->strh,
1959           stream->strf.vids, stream->extradata, stream->initdata, &codec_name);
1960       if (!caps) {
1961         caps = gst_caps_new_simple ("video/x-avi-unknown", "fourcc",
1962             GST_TYPE_FOURCC, fourcc, NULL);
1963       } else if (got_vprp && vprp) {
1964         guint32 aspect_n, aspect_d;
1965         gint n, d;
1966
1967         aspect_n = vprp->aspect >> 16;
1968         aspect_d = vprp->aspect & 0xffff;
1969         /* calculate the pixel aspect ratio using w/h and aspect ratio */
1970         n = aspect_n * stream->strf.vids->height;
1971         d = aspect_d * stream->strf.vids->width;
1972         if (n && d)
1973           gst_caps_set_simple (caps, "pixel-aspect-ratio", GST_TYPE_FRACTION,
1974               n, d, NULL);
1975         /* very local, not needed elsewhere */
1976         g_free (vprp);
1977         vprp = NULL;
1978       }
1979       tag_name = GST_TAG_VIDEO_CODEC;
1980       avi->num_v_streams++;
1981       break;
1982     }
1983     case GST_RIFF_FCC_auds:{
1984       padname = g_strdup_printf ("audio_%02d", avi->num_a_streams);
1985       templ = gst_element_class_get_pad_template (klass, "audio_%02d");
1986       caps = gst_riff_create_audio_caps (stream->strf.auds->format,
1987           stream->strh, stream->strf.auds, stream->extradata,
1988           stream->initdata, &codec_name);
1989       if (!caps) {
1990         caps = gst_caps_new_simple ("audio/x-avi-unknown", "codec_id",
1991             G_TYPE_INT, stream->strf.auds->format, NULL);
1992       }
1993       tag_name = GST_TAG_AUDIO_CODEC;
1994       avi->num_a_streams++;
1995       break;
1996     }
1997     case GST_RIFF_FCC_iavs:{
1998       guint32 fourcc = stream->strh->fcc_handler;
1999
2000       padname = g_strdup_printf ("video_%02d", avi->num_v_streams);
2001       templ = gst_element_class_get_pad_template (klass, "video_%02d");
2002       caps = gst_riff_create_iavs_caps (fourcc, stream->strh,
2003           stream->strf.iavs, stream->extradata, stream->initdata, &codec_name);
2004       if (!caps) {
2005         caps = gst_caps_new_simple ("video/x-avi-unknown", "fourcc",
2006             GST_TYPE_FOURCC, fourcc, NULL);
2007       }
2008       tag_name = GST_TAG_VIDEO_CODEC;
2009       avi->num_v_streams++;
2010       break;
2011     }
2012     case GST_RIFF_FCC_txts:{
2013       padname = g_strdup_printf ("subtitle_%02d", avi->num_t_streams);
2014       templ = gst_element_class_get_pad_template (klass, "subtitle_%02d");
2015       caps = gst_caps_new_simple ("application/x-subtitle-avi", NULL);
2016       tag_name = NULL;
2017       avi->num_t_streams++;
2018       break;
2019     }
2020     default:
2021       g_assert_not_reached ();
2022   }
2023
2024   /* no caps means no stream */
2025   if (!caps) {
2026     GST_ERROR_OBJECT (element, "Did not find caps for stream %s", padname);
2027     goto fail;
2028   }
2029
2030   GST_DEBUG_OBJECT (element, "codec-name=%s",
2031       (codec_name ? codec_name : "NULL"));
2032   GST_DEBUG_OBJECT (element, "caps=%" GST_PTR_FORMAT, caps);
2033
2034   /* set proper settings and add it */
2035   if (stream->pad)
2036     gst_object_unref (stream->pad);
2037   pad = stream->pad = gst_pad_new_from_template (templ, padname);
2038   g_free (padname);
2039
2040   gst_pad_use_fixed_caps (pad);
2041 #if 0
2042   gst_pad_set_formats_function (pad,
2043       GST_DEBUG_FUNCPTR (gst_avi_demux_get_src_formats));
2044   gst_pad_set_event_mask_function (pad,
2045       GST_DEBUG_FUNCPTR (gst_avi_demux_get_event_mask));
2046 #endif
2047   gst_pad_set_event_function (pad,
2048       GST_DEBUG_FUNCPTR (gst_avi_demux_handle_src_event));
2049   gst_pad_set_query_type_function (pad,
2050       GST_DEBUG_FUNCPTR (gst_avi_demux_get_src_query_types));
2051   gst_pad_set_query_function (pad,
2052       GST_DEBUG_FUNCPTR (gst_avi_demux_handle_src_query));
2053 #if 0
2054   gst_pad_set_convert_function (pad,
2055       GST_DEBUG_FUNCPTR (gst_avi_demux_src_convert));
2056 #endif
2057
2058   if (avi->element_index)
2059     gst_index_get_writer_id (avi->element_index, GST_OBJECT_CAST (stream->pad),
2060         &stream->index_id);
2061
2062   stream->num = avi->num_streams;
2063
2064   stream->start_entry = 0;
2065   stream->step_entry = 0;
2066   stream->stop_entry = 0;
2067
2068   stream->current_entry = -1;
2069   stream->current_total = 0;
2070
2071   stream->last_flow = GST_FLOW_OK;
2072   stream->discont = TRUE;
2073
2074   stream->total_bytes = 0;
2075   stream->total_blocks = 0;
2076   stream->n_keyframes = 0;
2077
2078   stream->idx_n = 0;
2079   stream->idx_max = 0;
2080
2081   gst_pad_set_element_private (pad, stream);
2082   avi->num_streams++;
2083
2084   gst_pad_set_caps (pad, caps);
2085   gst_pad_set_active (pad, TRUE);
2086   gst_caps_unref (caps);
2087
2088   /* make tags */
2089   if (codec_name) {
2090     if (!stream->taglist)
2091       stream->taglist = gst_tag_list_new ();
2092
2093     avi->got_tags = TRUE;
2094
2095     gst_tag_list_add (stream->taglist, GST_TAG_MERGE_APPEND, tag_name,
2096         codec_name, NULL);
2097     g_free (codec_name);
2098   }
2099
2100   gst_buffer_unref (buf);
2101
2102   return TRUE;
2103
2104   /* ERRORS */
2105 fail:
2106   {
2107     /* unref any mem that may be in use */
2108     if (buf)
2109       gst_buffer_unref (buf);
2110     if (sub)
2111       gst_buffer_unref (sub);
2112     g_free (vprp);
2113     g_free (codec_name);
2114     gst_avi_demux_reset_stream (avi, stream);
2115     avi->num_streams++;
2116     return FALSE;
2117   }
2118 }
2119
2120 /*
2121  * gst_avi_demux_parse_odml:
2122  * @avi: calling element (used for debug/error).
2123  * @buf: input buffer to be used for parsing.
2124  *
2125  * Read an openDML-2.0 extension header. Fills in the frame number
2126  * in the avi demuxer object when reading succeeds.
2127  */
2128 static void
2129 gst_avi_demux_parse_odml (GstAviDemux * avi, GstBuffer * buf)
2130 {
2131   guint32 tag = 0;
2132   guint offset = 4;
2133   GstBuffer *sub = NULL;
2134
2135   while (gst_riff_parse_chunk (GST_ELEMENT_CAST (avi), buf, &offset, &tag,
2136           &sub)) {
2137     switch (tag) {
2138       case GST_RIFF_TAG_dmlh:{
2139         gst_riff_dmlh dmlh, *_dmlh;
2140         guint size;
2141
2142         /* sub == NULL is possible and means an empty buffer */
2143         size = sub ? GST_BUFFER_SIZE (sub) : 0;
2144
2145         /* check size */
2146         if (size < sizeof (gst_riff_dmlh)) {
2147           GST_ERROR_OBJECT (avi,
2148               "DMLH entry is too small (%d bytes, %d needed)",
2149               size, (int) sizeof (gst_riff_dmlh));
2150           goto next;
2151         }
2152         _dmlh = (gst_riff_dmlh *) GST_BUFFER_DATA (sub);
2153         dmlh.totalframes = GST_READ_UINT32_LE (&_dmlh->totalframes);
2154
2155         GST_INFO_OBJECT (avi, "dmlh tag found: totalframes: %u",
2156             dmlh.totalframes);
2157
2158         avi->avih->tot_frames = dmlh.totalframes;
2159         goto next;
2160       }
2161
2162       default:
2163         GST_WARNING_OBJECT (avi,
2164             "Unknown tag %" GST_FOURCC_FORMAT " in ODML header",
2165             GST_FOURCC_ARGS (tag));
2166         /* fall-through */
2167       case GST_RIFF_TAG_JUNK:
2168       next:
2169         /* skip and move to next chunk */
2170         if (sub) {
2171           gst_buffer_unref (sub);
2172           sub = NULL;
2173         }
2174         break;
2175     }
2176   }
2177   if (buf)
2178     gst_buffer_unref (buf);
2179 }
2180
2181 /* Index helper */
2182 static guint
2183 gst_avi_demux_index_last (GstAviDemux * avi, GstAviStream * stream)
2184 {
2185   return stream->idx_n - 1;
2186 }
2187
2188 /* find a previous entry in the index with the given flags */
2189 static guint
2190 gst_avi_demux_index_prev (GstAviDemux * avi, GstAviStream * stream,
2191     guint last, gboolean keyframe)
2192 {
2193   GstAviIndexEntry *entry;
2194   guint i;
2195
2196   for (i = last; i > 0; i--) {
2197     entry = &stream->index[i - 1];
2198     if (!keyframe || ENTRY_IS_KEYFRAME (entry)) {
2199       return i - 1;
2200     }
2201   }
2202   return 0;
2203 }
2204
2205 static guint
2206 gst_avi_demux_index_next (GstAviDemux * avi, GstAviStream * stream,
2207     guint last, gboolean keyframe)
2208 {
2209   GstAviIndexEntry *entry;
2210   gint i;
2211
2212   for (i = last + 1; i < stream->idx_n; i++) {
2213     entry = &stream->index[i];
2214     if (!keyframe || ENTRY_IS_KEYFRAME (entry)) {
2215       return i;
2216     }
2217   }
2218   return stream->idx_n - 1;
2219 }
2220
2221 static guint
2222 gst_avi_demux_index_entry_search (GstAviIndexEntry * entry, guint64 * total)
2223 {
2224   if (entry->total < *total)
2225     return -1;
2226   else if (entry->total > *total)
2227     return 1;
2228   return 0;
2229 }
2230
2231 /*
2232  * gst_avi_demux_index_for_time:
2233  * @avi: Avi object
2234  * @stream: the stream
2235  * @time: a time position
2236  *
2237  * Finds the index entry which time is less or equal than the requested time.
2238  * Try to avoid binary search when we can convert the time to an index
2239  * position directly (for example for video frames with a fixed duration).
2240  *
2241  * Returns: the found position in the index.
2242  */
2243 static guint
2244 gst_avi_demux_index_for_time (GstAviDemux * avi,
2245     GstAviStream * stream, guint64 time)
2246 {
2247   guint index = -1;
2248   guint64 total;
2249
2250   GST_LOG_OBJECT (avi, "search time:%" GST_TIME_FORMAT, GST_TIME_ARGS (time));
2251
2252   /* easy (and common) cases */
2253   if (time == 0 || stream->idx_n == 0)
2254     return 0;
2255   if (time >= stream->idx_duration)
2256     return stream->idx_n - 1;
2257
2258   /* figure out where we need to go. For that we convert the time to an
2259    * index entry or we convert it to a total and then do a binary search. */
2260   if (stream->is_vbr) {
2261     /* VBR stream next timestamp */
2262     if (stream->strh->type == GST_RIFF_FCC_auds) {
2263       total = avi_stream_convert_time_to_frames_unchecked (stream, time);
2264     } else {
2265       index = avi_stream_convert_time_to_frames_unchecked (stream, time);
2266     }
2267   } else {
2268     /* constant rate stream */
2269     total = avi_stream_convert_time_to_bytes_unchecked (stream, time);
2270   }
2271
2272   if (index == -1) {
2273     GstAviIndexEntry *entry;
2274
2275     /* no index, find index with binary search on total */
2276     GST_LOG_OBJECT (avi, "binary search for entry with total %"
2277         G_GUINT64_FORMAT, total);
2278
2279     entry = gst_util_array_binary_search (stream->index,
2280         stream->idx_n, sizeof (GstAviIndexEntry),
2281         (GCompareDataFunc) gst_avi_demux_index_entry_search,
2282         GST_SEARCH_MODE_BEFORE, &total, NULL);
2283
2284     if (entry == NULL) {
2285       GST_LOG_OBJECT (avi, "not found, assume index 0");
2286       index = 0;
2287     } else {
2288       index = entry - stream->index;
2289       GST_LOG_OBJECT (avi, "found at %u", index);
2290     }
2291   } else {
2292     GST_LOG_OBJECT (avi, "converted time to index %u", index);
2293   }
2294
2295   return index;
2296 }
2297
2298 static inline GstAviStream *
2299 gst_avi_demux_stream_for_id (GstAviDemux * avi, guint32 id)
2300 {
2301   guint stream_nr;
2302   GstAviStream *stream;
2303
2304   /* get the stream for this entry */
2305   stream_nr = CHUNKID_TO_STREAMNR (id);
2306   if (G_UNLIKELY (stream_nr >= avi->num_streams)) {
2307     GST_WARNING_OBJECT (avi, "invalid stream nr %d", stream_nr);
2308     return NULL;
2309   }
2310   stream = &avi->stream[stream_nr];
2311   if (G_UNLIKELY (!stream->strh)) {
2312     GST_WARNING_OBJECT (avi, "Unhandled stream %d, skipping", stream_nr);
2313     return NULL;
2314   }
2315   return stream;
2316 }
2317
2318 /*
2319  * gst_avi_demux_parse_index:
2320  * @avi: calling element (used for debugging/errors).
2321  * @buf: buffer containing the full index.
2322  *
2323  * Read index entries from the provided buffer.
2324  * The buffer should contain a GST_RIFF_TAG_idx1 chunk.
2325  */
2326 static gboolean
2327 gst_avi_demux_parse_index (GstAviDemux * avi, GstBuffer * buf)
2328 {
2329   guint64 pos_before;
2330   guint8 *data;
2331   guint size;
2332   guint i, num, n;
2333   gst_riff_index_entry *index;
2334   GstClockTime stamp;
2335   GstAviStream *stream;
2336   GstAviIndexEntry entry;
2337   guint32 id;
2338
2339   if (!buf)
2340     return FALSE;
2341
2342   data = GST_BUFFER_DATA (buf);
2343   size = GST_BUFFER_SIZE (buf);
2344
2345   stamp = gst_util_get_timestamp ();
2346
2347   /* see how many items in the index */
2348   num = size / sizeof (gst_riff_index_entry);
2349   if (num == 0)
2350     goto empty_list;
2351
2352   GST_INFO_OBJECT (avi, "Parsing index, nr_entries = %6d", num);
2353
2354   index = (gst_riff_index_entry *) data;
2355   pos_before = avi->offset;
2356
2357   /* figure out if the index is 0 based or relative to the MOVI start */
2358   entry.offset = GST_READ_UINT32_LE (&index[0].offset);
2359   if (entry.offset < avi->offset) {
2360     avi->index_offset = avi->offset + 8;
2361     GST_DEBUG ("index_offset = %" G_GUINT64_FORMAT, avi->index_offset);
2362   } else {
2363     avi->index_offset = 0;
2364     GST_DEBUG ("index is 0 based");
2365   }
2366
2367   for (i = 0, n = 0; i < num; i++) {
2368     id = GST_READ_UINT32_LE (&index[i].id);
2369     entry.offset = GST_READ_UINT32_LE (&index[i].offset);
2370
2371     /* some sanity checks */
2372     if (G_UNLIKELY (id == GST_RIFF_rec || id == 0 ||
2373             (entry.offset == 0 && n > 0)))
2374       continue;
2375
2376     /* get the stream for this entry */
2377     stream = gst_avi_demux_stream_for_id (avi, id);
2378     if (G_UNLIKELY (!stream))
2379       continue;
2380
2381     /* handle offset and size */
2382     entry.offset += avi->index_offset + 8;
2383     entry.size = GST_READ_UINT32_LE (&index[i].size);
2384
2385     /* handle flags */
2386     if (stream->strh->type == GST_RIFF_FCC_auds) {
2387       /* all audio frames are keyframes */
2388       ENTRY_SET_KEYFRAME (&entry);
2389     } else {
2390       guint32 flags;
2391       /* else read flags */
2392       flags = GST_READ_UINT32_LE (&index[i].flags);
2393       if (flags & GST_RIFF_IF_KEYFRAME) {
2394         ENTRY_SET_KEYFRAME (&entry);
2395       } else {
2396         ENTRY_UNSET_KEYFRAME (&entry);
2397       }
2398     }
2399
2400     /* and add */
2401     if (G_UNLIKELY (!gst_avi_demux_add_index (avi, stream, num, &entry)))
2402       goto out_of_mem;
2403
2404     n++;
2405   }
2406   gst_buffer_unref (buf);
2407
2408   /* get stream stats now */
2409   avi->have_index = gst_avi_demux_do_index_stats (avi);
2410
2411   stamp = gst_util_get_timestamp () - stamp;
2412   GST_DEBUG_OBJECT (avi, "index parsing took %" GST_TIME_FORMAT,
2413       GST_TIME_ARGS (stamp));
2414
2415   return TRUE;
2416
2417   /* ERRORS */
2418 empty_list:
2419   {
2420     GST_DEBUG_OBJECT (avi, "empty index");
2421     gst_buffer_unref (buf);
2422     return FALSE;
2423   }
2424 out_of_mem:
2425   {
2426     GST_ELEMENT_ERROR (avi, RESOURCE, NO_SPACE_LEFT, (NULL),
2427         ("Cannot allocate memory for %u*%u=%u bytes",
2428             (guint) sizeof (GstAviIndexEntry), num,
2429             (guint) sizeof (GstAviIndexEntry) * num));
2430     gst_buffer_unref (buf);
2431     return FALSE;
2432   }
2433 }
2434
2435 /*
2436  * gst_avi_demux_stream_index:
2437  * @avi: avi demuxer object.
2438  *
2439  * Seeks to index and reads it.
2440  */
2441 static void
2442 gst_avi_demux_stream_index (GstAviDemux * avi)
2443 {
2444   GstFlowReturn res;
2445   guint64 offset = avi->offset;
2446   GstBuffer *buf;
2447   guint32 tag;
2448   guint32 size;
2449
2450   GST_DEBUG ("demux stream index at offset %" G_GUINT64_FORMAT, offset);
2451
2452   /* get chunk information */
2453   res = gst_pad_pull_range (avi->sinkpad, offset, 8, &buf);
2454   if (res != GST_FLOW_OK)
2455     goto pull_failed;
2456   else if (GST_BUFFER_SIZE (buf) < 8)
2457     goto too_small;
2458
2459   /* check tag first before blindy trying to read 'size' bytes */
2460   tag = GST_READ_UINT32_LE (GST_BUFFER_DATA (buf));
2461   size = GST_READ_UINT32_LE (GST_BUFFER_DATA (buf) + 4);
2462   if (tag == GST_RIFF_TAG_LIST) {
2463     /* this is the movi tag */
2464     GST_DEBUG_OBJECT (avi, "skip LIST chunk, size %" G_GUINT32_FORMAT,
2465         (8 + GST_ROUND_UP_2 (size)));
2466     offset += 8 + GST_ROUND_UP_2 (size);
2467     gst_buffer_unref (buf);
2468     res = gst_pad_pull_range (avi->sinkpad, offset, 8, &buf);
2469     if (res != GST_FLOW_OK)
2470       goto pull_failed;
2471     else if (GST_BUFFER_SIZE (buf) < 8)
2472       goto too_small;
2473     tag = GST_READ_UINT32_LE (GST_BUFFER_DATA (buf));
2474     size = GST_READ_UINT32_LE (GST_BUFFER_DATA (buf) + 4);
2475   }
2476
2477   if (tag != GST_RIFF_TAG_idx1)
2478     goto no_index;
2479   if (!size)
2480     goto zero_index;
2481
2482   gst_buffer_unref (buf);
2483
2484   GST_DEBUG ("index found at offset %" G_GUINT64_FORMAT, offset);
2485
2486   /* read chunk, advance offset */
2487   if (gst_riff_read_chunk (GST_ELEMENT_CAST (avi),
2488           avi->sinkpad, &offset, &tag, &buf) != GST_FLOW_OK)
2489     return;
2490
2491   GST_DEBUG ("will parse index chunk size %u for tag %"
2492       GST_FOURCC_FORMAT, GST_BUFFER_SIZE (buf), GST_FOURCC_ARGS (tag));
2493
2494   gst_avi_demux_parse_index (avi, buf);
2495
2496 #ifndef GST_DISABLE_GST_DEBUG
2497   /* debug our indexes */
2498   {
2499     gint i;
2500     GstAviStream *stream;
2501
2502     for (i = 0; i < avi->num_streams; i++) {
2503       stream = &avi->stream[i];
2504       GST_DEBUG_OBJECT (avi, "stream %u: %u frames, %" G_GINT64_FORMAT " bytes",
2505           i, stream->idx_n, stream->total_bytes);
2506     }
2507   }
2508 #endif
2509   return;
2510
2511   /* ERRORS */
2512 pull_failed:
2513   {
2514     GST_DEBUG_OBJECT (avi,
2515         "pull range failed: pos=%" G_GUINT64_FORMAT " size=8", offset);
2516     return;
2517   }
2518 too_small:
2519   {
2520     GST_DEBUG_OBJECT (avi, "Buffer is too small");
2521     gst_buffer_unref (buf);
2522     return;
2523   }
2524 no_index:
2525   {
2526     GST_WARNING_OBJECT (avi,
2527         "No index data (idx1) after movi chunk, but %" GST_FOURCC_FORMAT,
2528         GST_FOURCC_ARGS (tag));
2529     gst_buffer_unref (buf);
2530     return;
2531   }
2532 zero_index:
2533   {
2534     GST_WARNING_OBJECT (avi, "Empty index data (idx1) after movi chunk");
2535     gst_buffer_unref (buf);
2536     return;
2537   }
2538 }
2539
2540 /*
2541  * gst_avi_demux_peek_tag:
2542  *
2543  * Returns the tag and size of the next chunk
2544  */
2545 static GstFlowReturn
2546 gst_avi_demux_peek_tag (GstAviDemux * avi, guint64 offset, guint32 * tag,
2547     guint * size)
2548 {
2549   GstFlowReturn res = GST_FLOW_OK;
2550   GstBuffer *buf = NULL;
2551   guint bufsize;
2552   guint8 *bufdata;
2553
2554   res = gst_pad_pull_range (avi->sinkpad, offset, 8, &buf);
2555   if (res != GST_FLOW_OK)
2556     goto pull_failed;
2557
2558   bufsize = GST_BUFFER_SIZE (buf);
2559   if (bufsize != 8)
2560     goto wrong_size;
2561
2562   bufdata = GST_BUFFER_DATA (buf);
2563
2564   *tag = GST_READ_UINT32_LE (bufdata);
2565   *size = GST_READ_UINT32_LE (bufdata + 4);
2566
2567   GST_LOG_OBJECT (avi, "Tag[%" GST_FOURCC_FORMAT "] (size:%d) %"
2568       G_GINT64_FORMAT " -- %" G_GINT64_FORMAT, GST_FOURCC_ARGS (*tag),
2569       *size, offset + 8, offset + 8 + (gint64) * size);
2570
2571 done:
2572   gst_buffer_unref (buf);
2573
2574   return res;
2575
2576   /* ERRORS */
2577 pull_failed:
2578   {
2579     GST_DEBUG_OBJECT (avi, "pull_ranged returned %s", gst_flow_get_name (res));
2580     return res;
2581   }
2582 wrong_size:
2583   {
2584     GST_DEBUG_OBJECT (avi, "got %d bytes which is <> 8 bytes", bufsize);
2585     res = GST_FLOW_ERROR;
2586     goto done;
2587   }
2588 }
2589
2590 /*
2591  * gst_avi_demux_next_data_buffer:
2592  *
2593  * Returns the offset and size of the next buffer
2594  * Position is the position of the buffer (after tag and size)
2595  */
2596 static GstFlowReturn
2597 gst_avi_demux_next_data_buffer (GstAviDemux * avi, guint64 * offset,
2598     guint32 * tag, guint * size)
2599 {
2600   guint64 off = *offset;
2601   guint _size = 0;
2602   GstFlowReturn res;
2603
2604   do {
2605     res = gst_avi_demux_peek_tag (avi, off, tag, &_size);
2606     if (res != GST_FLOW_OK)
2607       break;
2608     if (*tag == GST_RIFF_TAG_LIST || *tag == GST_RIFF_TAG_RIFF)
2609       off += 8 + 4;             /* skip tag + size + subtag */
2610     else {
2611       *offset = off + 8;
2612       *size = _size;
2613       break;
2614     }
2615   } while (TRUE);
2616
2617   return res;
2618 }
2619
2620 /*
2621  * gst_avi_demux_stream_scan:
2622  * @avi: calling element (used for debugging/errors).
2623  *
2624  * Scan the file for all chunks to "create" a new index.
2625  * pull-range based
2626  */
2627 static gboolean
2628 gst_avi_demux_stream_scan (GstAviDemux * avi)
2629 {
2630   GstFlowReturn res;
2631   GstAviStream *stream;
2632   GstFormat format;
2633   guint64 pos = 0;
2634   guint64 length;
2635   gint64 tmplength;
2636   guint32 tag = 0;
2637   guint num;
2638
2639   /* FIXME:
2640    * - implement non-seekable source support.
2641    */
2642   GST_DEBUG_OBJECT (avi, "Creating index");
2643
2644   /* get the size of the file */
2645   format = GST_FORMAT_BYTES;
2646   if (!gst_pad_query_peer_duration (avi->sinkpad, &format, &tmplength))
2647     return FALSE;
2648   length = tmplength;
2649
2650   /* guess the total amount of entries we expect */
2651   num = 16000;
2652
2653   while (TRUE) {
2654     GstAviIndexEntry entry;
2655     guint size = 0;
2656
2657     /* start reading data buffers to find the id and offset */
2658     res = gst_avi_demux_next_data_buffer (avi, &pos, &tag, &size);
2659     if (G_UNLIKELY (res != GST_FLOW_OK))
2660       break;
2661
2662     /* get stream */
2663     stream = gst_avi_demux_stream_for_id (avi, tag);
2664     if (G_UNLIKELY (!stream))
2665       goto next;
2666
2667     /* we can't figure out the keyframes, assume they all are */
2668     entry.flags = GST_AVI_KEYFRAME;
2669     entry.offset = pos;
2670     entry.size = size;
2671
2672     /* and add to the index of this stream */
2673     if (G_UNLIKELY (!gst_avi_demux_add_index (avi, stream, num, &entry)))
2674       goto out_of_mem;
2675
2676   next:
2677     /* update position */
2678     pos += GST_ROUND_UP_2 (size);
2679     if (G_UNLIKELY (pos > length)) {
2680       GST_WARNING_OBJECT (avi,
2681           "Stopping index lookup since we are further than EOF");
2682       break;
2683     }
2684   }
2685
2686   /* collect stats */
2687   avi->have_index = gst_avi_demux_do_index_stats (avi);
2688
2689
2690   return TRUE;
2691
2692   /* ERRORS */
2693 out_of_mem:
2694   {
2695     GST_ELEMENT_ERROR (avi, RESOURCE, NO_SPACE_LEFT, (NULL),
2696         ("Cannot allocate memory for %u*%u=%u bytes",
2697             (guint) sizeof (GstAviIndexEntry), num,
2698             (guint) sizeof (GstAviIndexEntry) * num));
2699     return FALSE;
2700   }
2701 }
2702
2703 static void
2704 gst_avi_demux_calculate_durations_from_index (GstAviDemux * avi)
2705 {
2706   guint i;
2707   GstClockTime total;
2708   GstAviStream *stream;
2709
2710   total = GST_CLOCK_TIME_NONE;
2711
2712   /* all streams start at a timestamp 0 */
2713   for (i = 0; i < avi->num_streams; i++) {
2714     GstClockTime duration, hduration;
2715     gst_riff_strh *strh;
2716
2717     stream = &avi->stream[i];
2718     if (G_UNLIKELY (!stream || !stream->idx_n || !(strh = stream->strh)))
2719       continue;
2720
2721     /* get header duration for the stream */
2722     hduration = stream->hdr_duration;
2723     /* index duration calculated during parsing */
2724     duration = stream->idx_duration;
2725
2726     /* now pick a good duration */
2727     if (GST_CLOCK_TIME_IS_VALID (duration)) {
2728       /* index gave valid duration, use that */
2729       GST_INFO ("Stream %p duration according to index: %" GST_TIME_FORMAT,
2730           stream, GST_TIME_ARGS (duration));
2731     } else {
2732       /* fall back to header info to calculate a duration */
2733       duration = hduration;
2734     }
2735     GST_INFO ("Setting duration of stream #%d to %" GST_TIME_FORMAT,
2736         i, GST_TIME_ARGS (duration));
2737     /* set duration for the stream */
2738     stream->duration = duration;
2739
2740     /* find total duration */
2741     if (total == GST_CLOCK_TIME_NONE ||
2742         (GST_CLOCK_TIME_IS_VALID (duration) && duration > total))
2743       total = duration;
2744   }
2745
2746   if (GST_CLOCK_TIME_IS_VALID (total) && (total > 0)) {
2747     /* now update the duration for those streams where we had none */
2748     for (i = 0; i < avi->num_streams; i++) {
2749       stream = &avi->stream[i];
2750
2751       if (!GST_CLOCK_TIME_IS_VALID (stream->duration)
2752           || stream->duration == 0) {
2753         stream->duration = total;
2754
2755         GST_INFO ("Stream %p duration according to total: %" GST_TIME_FORMAT,
2756             stream, GST_TIME_ARGS (total));
2757       }
2758     }
2759   }
2760
2761   /* and set the total duration in the segment. */
2762   GST_INFO ("Setting total duration to: %" GST_TIME_FORMAT,
2763       GST_TIME_ARGS (total));
2764
2765   gst_segment_set_duration (&avi->segment, GST_FORMAT_TIME, total);
2766 }
2767
2768 /* returns FALSE if there are no pads to deliver event to,
2769  * otherwise TRUE (whatever the outcome of event sending),
2770  * takes ownership of the event. */
2771 static gboolean
2772 gst_avi_demux_push_event (GstAviDemux * avi, GstEvent * event)
2773 {
2774   gboolean result = FALSE;
2775   gint i;
2776
2777   GST_DEBUG_OBJECT (avi, "sending %s event to %d streams",
2778       GST_EVENT_TYPE_NAME (event), avi->num_streams);
2779
2780   for (i = 0; i < avi->num_streams; i++) {
2781     GstAviStream *stream = &avi->stream[i];
2782
2783     if (stream->pad) {
2784       result = TRUE;
2785       gst_pad_push_event (stream->pad, gst_event_ref (event));
2786     }
2787   }
2788   gst_event_unref (event);
2789   return result;
2790 }
2791
2792 static void
2793 gst_avi_demux_check_seekability (GstAviDemux * avi)
2794 {
2795   GstQuery *query;
2796   gboolean seekable = FALSE;
2797   gint64 start = -1, stop = -1;
2798
2799   query = gst_query_new_seeking (GST_FORMAT_BYTES);
2800   if (!gst_pad_peer_query (avi->sinkpad, query)) {
2801     GST_DEBUG_OBJECT (avi, "seeking query failed");
2802     goto done;
2803   }
2804
2805   gst_query_parse_seeking (query, NULL, &seekable, &start, &stop);
2806
2807   /* try harder to query upstream size if we didn't get it the first time */
2808   if (seekable && stop == -1) {
2809     GstFormat fmt = GST_FORMAT_BYTES;
2810
2811     GST_DEBUG_OBJECT (avi, "doing duration query to fix up unset stop");
2812     gst_pad_query_peer_duration (avi->sinkpad, &fmt, &stop);
2813   }
2814
2815   /* if upstream doesn't know the size, it's likely that it's not seekable in
2816    * practice even if it technically may be seekable */
2817   if (seekable && (start != 0 || stop <= start)) {
2818     GST_DEBUG_OBJECT (avi, "seekable but unknown start/stop -> disable");
2819     seekable = FALSE;
2820   }
2821
2822   if (!avi->element_index) {
2823     GST_DEBUG_OBJECT (avi, "no index");
2824     seekable = FALSE;
2825   }
2826
2827 done:
2828   GST_INFO_OBJECT (avi, "seekable: %d (%" G_GUINT64_FORMAT " - %"
2829       G_GUINT64_FORMAT ")", seekable, start, stop);
2830   avi->seekable = seekable;
2831
2832   gst_query_unref (query);
2833 }
2834
2835 /*
2836  * Read AVI headers when streaming
2837  */
2838 static GstFlowReturn
2839 gst_avi_demux_stream_header_push (GstAviDemux * avi)
2840 {
2841   GstFlowReturn ret = GST_FLOW_OK;
2842   guint32 tag = 0;
2843   guint32 ltag = 0;
2844   guint32 size = 0;
2845   const guint8 *data;
2846   GstBuffer *buf = NULL, *sub = NULL;
2847   guint offset = 4;
2848   gint64 stop;
2849   gint i;
2850   GstTagList *tags = NULL;
2851
2852   GST_DEBUG ("Reading and parsing avi headers: %d", avi->header_state);
2853
2854   switch (avi->header_state) {
2855     case GST_AVI_DEMUX_HEADER_TAG_LIST:
2856       if (gst_avi_demux_peek_chunk (avi, &tag, &size)) {
2857         avi->offset += 8 + GST_ROUND_UP_2 (size);
2858         if (tag != GST_RIFF_TAG_LIST)
2859           goto header_no_list;
2860
2861         gst_adapter_flush (avi->adapter, 8);
2862         /* Find the 'hdrl' LIST tag */
2863         GST_DEBUG ("Reading %d bytes", size);
2864         buf = gst_adapter_take_buffer (avi->adapter, size);
2865
2866         if (GST_READ_UINT32_LE (GST_BUFFER_DATA (buf)) != GST_RIFF_LIST_hdrl)
2867           goto header_no_hdrl;
2868
2869         /* mind padding */
2870         if (size & 1)
2871           gst_adapter_flush (avi->adapter, 1);
2872
2873         GST_DEBUG ("'hdrl' LIST tag found. Parsing next chunk");
2874
2875         /* the hdrl starts with a 'avih' header */
2876         if (!gst_riff_parse_chunk (GST_ELEMENT_CAST (avi), buf, &offset, &tag,
2877                 &sub))
2878           goto header_no_avih;
2879
2880         if (tag != GST_RIFF_TAG_avih)
2881           goto header_no_avih;
2882
2883         if (!gst_avi_demux_parse_avih (avi, sub, &avi->avih))
2884           goto header_wrong_avih;
2885
2886         GST_DEBUG_OBJECT (avi, "AVI header ok, reading elemnts from header");
2887
2888         /* now, read the elements from the header until the end */
2889         while (gst_riff_parse_chunk (GST_ELEMENT_CAST (avi), buf, &offset, &tag,
2890                 &sub)) {
2891           /* sub can be NULL on empty tags */
2892           if (!sub)
2893             continue;
2894
2895           switch (tag) {
2896             case GST_RIFF_TAG_LIST:
2897               if (GST_BUFFER_SIZE (sub) < 4)
2898                 goto next;
2899
2900               switch (GST_READ_UINT32_LE (GST_BUFFER_DATA (sub))) {
2901                 case GST_RIFF_LIST_strl:
2902                   if (!(gst_avi_demux_parse_stream (avi, sub))) {
2903                     sub = NULL;
2904                     GST_ELEMENT_WARNING (avi, STREAM, DEMUX, (NULL),
2905                         ("failed to parse stream, ignoring"));
2906                     goto next;
2907                   }
2908                   sub = NULL;
2909                   goto next;
2910                 case GST_RIFF_LIST_odml:
2911                   gst_avi_demux_parse_odml (avi, sub);
2912                   sub = NULL;
2913                   break;
2914                 default:
2915                   GST_WARNING_OBJECT (avi,
2916                       "Unknown list %" GST_FOURCC_FORMAT " in AVI header",
2917                       GST_FOURCC_ARGS (GST_READ_UINT32_LE (GST_BUFFER_DATA
2918                               (sub))));
2919                   /* fall-through */
2920                 case GST_RIFF_TAG_JUNK:
2921                   goto next;
2922               }
2923               break;
2924             case GST_RIFF_IDIT:
2925               gst_avi_demux_parse_idit (avi, sub);
2926               goto next;
2927             default:
2928               GST_WARNING_OBJECT (avi,
2929                   "Unknown off %d tag %" GST_FOURCC_FORMAT " in AVI header",
2930                   offset, GST_FOURCC_ARGS (tag));
2931               /* fall-through */
2932             case GST_RIFF_TAG_JUNK:
2933             next:
2934               /* move to next chunk */
2935               if (sub)
2936                 gst_buffer_unref (sub);
2937               sub = NULL;
2938               break;
2939           }
2940         }
2941         gst_buffer_unref (buf);
2942         GST_DEBUG ("elements parsed");
2943
2944         /* check parsed streams */
2945         if (avi->num_streams == 0) {
2946           goto no_streams;
2947         } else if (avi->num_streams != avi->avih->streams) {
2948           GST_WARNING_OBJECT (avi,
2949               "Stream header mentioned %d streams, but %d available",
2950               avi->avih->streams, avi->num_streams);
2951         }
2952         GST_DEBUG ("Get junk and info next");
2953         avi->header_state = GST_AVI_DEMUX_HEADER_INFO;
2954       } else {
2955         /* Need more data */
2956         return ret;
2957       }
2958       /* fall-though */
2959     case GST_AVI_DEMUX_HEADER_INFO:
2960       GST_DEBUG_OBJECT (avi, "skipping junk between header and data ...");
2961       while (TRUE) {
2962         if (gst_adapter_available (avi->adapter) < 12)
2963           return GST_FLOW_OK;
2964
2965         data = gst_adapter_peek (avi->adapter, 12);
2966         tag = GST_READ_UINT32_LE (data);
2967         size = GST_READ_UINT32_LE (data + 4);
2968         ltag = GST_READ_UINT32_LE (data + 8);
2969
2970         if (tag == GST_RIFF_TAG_LIST) {
2971           switch (ltag) {
2972             case GST_RIFF_LIST_movi:
2973               gst_adapter_flush (avi->adapter, 12);
2974               avi->offset += 12;
2975               goto skipping_done;
2976             case GST_RIFF_LIST_INFO:
2977               GST_DEBUG ("Found INFO chunk");
2978               if (gst_avi_demux_peek_chunk (avi, &tag, &size)) {
2979                 GST_DEBUG ("got size %d", size);
2980                 avi->offset += 12;
2981                 gst_adapter_flush (avi->adapter, 12);
2982                 if (size > 4) {
2983                   buf = gst_adapter_take_buffer (avi->adapter, size - 4);
2984                   /* mind padding */
2985                   if (size & 1)
2986                     gst_adapter_flush (avi->adapter, 1);
2987                   gst_riff_parse_info (GST_ELEMENT_CAST (avi), buf, &tags);
2988                   if (tags) {
2989                     if (avi->globaltags) {
2990                       gst_tag_list_insert (avi->globaltags, tags,
2991                           GST_TAG_MERGE_REPLACE);
2992                     } else {
2993                       avi->globaltags = tags;
2994                     }
2995                   }
2996                   tags = NULL;
2997                   gst_buffer_unref (buf);
2998
2999                   avi->offset += GST_ROUND_UP_2 (size) - 4;
3000                 } else {
3001                   GST_DEBUG ("skipping INFO LIST prefix");
3002                 }
3003               } else {
3004                 /* Need more data */
3005                 return GST_FLOW_OK;
3006               }
3007               break;
3008             default:
3009               if (gst_avi_demux_peek_chunk (avi, &tag, &size)) {
3010                 avi->offset += 8 + GST_ROUND_UP_2 (size);
3011                 gst_adapter_flush (avi->adapter, 8 + GST_ROUND_UP_2 (size));
3012                 // ??? goto iterate; ???
3013               } else {
3014                 /* Need more data */
3015                 return GST_FLOW_OK;
3016               }
3017               break;
3018           }
3019         } else {
3020           if (gst_avi_demux_peek_chunk (avi, &tag, &size)) {
3021             avi->offset += 8 + GST_ROUND_UP_2 (size);
3022             gst_adapter_flush (avi->adapter, 8 + GST_ROUND_UP_2 (size));
3023             //goto iterate;
3024           } else {
3025             /* Need more data */
3026             return GST_FLOW_OK;
3027           }
3028         }
3029       }
3030       break;
3031     default:
3032       GST_WARNING ("unhandled header state: %d", avi->header_state);
3033       break;
3034   }
3035 skipping_done:
3036
3037   GST_DEBUG_OBJECT (avi, "skipping done ... (streams=%u, stream[0].indexes=%p)",
3038       avi->num_streams, avi->stream[0].indexes);
3039
3040   GST_DEBUG ("Found movi chunk. Starting to stream data");
3041   avi->state = GST_AVI_DEMUX_MOVI;
3042
3043   /* no indexes in push mode, but it still sets some variables */
3044   gst_avi_demux_calculate_durations_from_index (avi);
3045
3046   gst_avi_demux_expose_streams (avi, TRUE);
3047
3048   /* prepare all streams for index 0 */
3049   for (i = 0; i < avi->num_streams; i++)
3050     avi->stream[i].current_entry = 0;
3051
3052   /* create initial NEWSEGMENT event */
3053   if ((stop = avi->segment.stop) == GST_CLOCK_TIME_NONE)
3054     stop = avi->segment.duration;
3055
3056   GST_DEBUG_OBJECT (avi, "segment stop %" G_GINT64_FORMAT, stop);
3057
3058   if (avi->seg_event)
3059     gst_event_unref (avi->seg_event);
3060   avi->seg_event = gst_event_new_new_segment_full
3061       (FALSE, avi->segment.rate, avi->segment.applied_rate, GST_FORMAT_TIME,
3062       avi->segment.start, stop, avi->segment.time);
3063
3064   gst_avi_demux_check_seekability (avi);
3065
3066   /* at this point we know all the streams and we can signal the no more
3067    * pads signal */
3068   GST_DEBUG_OBJECT (avi, "signaling no more pads");
3069   gst_element_no_more_pads (GST_ELEMENT_CAST (avi));
3070
3071   return GST_FLOW_OK;
3072
3073   /* ERRORS */
3074 no_streams:
3075   {
3076     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL), ("No streams found"));
3077     return GST_FLOW_ERROR;
3078   }
3079 header_no_list:
3080   {
3081     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
3082         ("Invalid AVI header (no LIST at start): %"
3083             GST_FOURCC_FORMAT, GST_FOURCC_ARGS (tag)));
3084     return GST_FLOW_ERROR;
3085   }
3086 header_no_hdrl:
3087   {
3088     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
3089         ("Invalid AVI header (no hdrl at start): %"
3090             GST_FOURCC_FORMAT, GST_FOURCC_ARGS (tag)));
3091     gst_buffer_unref (buf);
3092     return GST_FLOW_ERROR;
3093   }
3094 header_no_avih:
3095   {
3096     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
3097         ("Invalid AVI header (no avih at start): %"
3098             GST_FOURCC_FORMAT, GST_FOURCC_ARGS (tag)));
3099     if (sub)
3100       gst_buffer_unref (sub);
3101
3102     gst_buffer_unref (buf);
3103     return GST_FLOW_ERROR;
3104   }
3105 header_wrong_avih:
3106   {
3107     gst_buffer_unref (buf);
3108     return GST_FLOW_ERROR;
3109   }
3110 }
3111
3112 static void
3113 gst_avi_demux_add_date_tag (GstAviDemux * avi, gint y, gint m, gint d)
3114 {
3115   GDate *date;
3116   date = g_date_new_dmy (d, m, y);
3117   if (!g_date_valid (date)) {
3118     /* bogus date */
3119     GST_WARNING_OBJECT (avi, "Refusing to add invalid date %d-%d-%d", y, m, d);
3120     g_date_free (date);
3121     return;
3122   }
3123
3124   if (avi->globaltags == NULL)
3125     avi->globaltags = gst_tag_list_new ();
3126
3127   gst_tag_list_add (avi->globaltags, GST_TAG_MERGE_REPLACE, GST_TAG_DATE, date,
3128       NULL);
3129   g_date_free (date);
3130 }
3131
3132 static void
3133 gst_avi_demux_parse_idit_nums_only (GstAviDemux * avi, gchar * data)
3134 {
3135   gint y, m, d;
3136   gint ret;
3137
3138   ret = sscanf (data, "%d:%d:%d", &y, &m, &d);
3139   if (ret != 3) {
3140     GST_WARNING_OBJECT (avi, "Failed to parse IDIT tag");
3141     return;
3142   }
3143   gst_avi_demux_add_date_tag (avi, y, m, d);
3144 }
3145
3146 static gint
3147 get_month_num (gchar * data, guint size)
3148 {
3149   if (g_ascii_strncasecmp (data, "jan", 3) == 0) {
3150     return 1;
3151   } else if (g_ascii_strncasecmp (data, "feb", 3) == 0) {
3152     return 2;
3153   } else if (g_ascii_strncasecmp (data, "mar", 3) == 0) {
3154     return 3;
3155   } else if (g_ascii_strncasecmp (data, "apr", 3) == 0) {
3156     return 4;
3157   } else if (g_ascii_strncasecmp (data, "may", 3) == 0) {
3158     return 5;
3159   } else if (g_ascii_strncasecmp (data, "jun", 3) == 0) {
3160     return 6;
3161   } else if (g_ascii_strncasecmp (data, "jul", 3) == 0) {
3162     return 7;
3163   } else if (g_ascii_strncasecmp (data, "aug", 3) == 0) {
3164     return 8;
3165   } else if (g_ascii_strncasecmp (data, "sep", 3) == 0) {
3166     return 9;
3167   } else if (g_ascii_strncasecmp (data, "oct", 3) == 0) {
3168     return 10;
3169   } else if (g_ascii_strncasecmp (data, "nov", 3) == 0) {
3170     return 11;
3171   } else if (g_ascii_strncasecmp (data, "dec", 3) == 0) {
3172     return 12;
3173   }
3174
3175   return 0;
3176 }
3177
3178 static void
3179 gst_avi_demux_parse_idit_text (GstAviDemux * avi, gchar * data)
3180 {
3181   gint year, month, day;
3182   gint hour, min, sec;
3183   gint ret;
3184   gchar weekday[4];
3185   gchar monthstr[4];
3186
3187   ret = sscanf (data, "%3s %3s %d %d:%d:%d %d", weekday, monthstr, &day, &hour,
3188       &min, &sec, &year);
3189   if (ret != 7) {
3190     GST_WARNING_OBJECT (avi, "Failed to parse IDIT tag");
3191     return;
3192   }
3193   month = get_month_num (monthstr, strlen (monthstr));
3194   gst_avi_demux_add_date_tag (avi, year, month, day);
3195 }
3196
3197 static void
3198 gst_avi_demux_parse_idit (GstAviDemux * avi, GstBuffer * buf)
3199 {
3200   gchar *data = (gchar *) GST_BUFFER_DATA (buf);
3201   guint size = GST_BUFFER_SIZE (buf);
3202   gchar *safedata = NULL;
3203
3204   /*
3205    * According to:
3206    * http://www.eden-foundation.org/products/code/film_date_stamp/index.html
3207    *
3208    * This tag could be in one of the below formats
3209    * 2005:08:17 11:42:43
3210    * THU OCT 26 16:46:04 2006
3211    * Mon Mar  3 09:44:56 2008
3212    *
3213    * FIXME: Our date tag doesn't include hours
3214    */
3215
3216   /* skip eventual initial whitespace */
3217   while (size > 0 && g_ascii_isspace (data[0])) {
3218     data++;
3219     size--;
3220   }
3221
3222   if (size == 0) {
3223     goto non_parsable;
3224   }
3225
3226   /* make a safe copy to add a \0 to the end of the string */
3227   safedata = g_strndup (data, size);
3228
3229   /* test if the first char is a alpha or a number */
3230   if (g_ascii_isdigit (data[0])) {
3231     gst_avi_demux_parse_idit_nums_only (avi, safedata);
3232     g_free (safedata);
3233     return;
3234   } else if (g_ascii_isalpha (data[0])) {
3235     gst_avi_demux_parse_idit_text (avi, safedata);
3236     g_free (safedata);
3237     return;
3238   }
3239
3240   g_free (safedata);
3241
3242 non_parsable:
3243   GST_WARNING_OBJECT (avi, "IDIT tag has no parsable info");
3244 }
3245
3246 /*
3247  * Read full AVI headers.
3248  */
3249 static GstFlowReturn
3250 gst_avi_demux_stream_header_pull (GstAviDemux * avi)
3251 {
3252   GstFlowReturn res;
3253   GstBuffer *buf, *sub = NULL;
3254   guint32 tag;
3255   guint offset = 4;
3256   gint64 stop;
3257   GstElement *element = GST_ELEMENT_CAST (avi);
3258   GstClockTime stamp;
3259   GstTagList *tags = NULL;
3260
3261   stamp = gst_util_get_timestamp ();
3262
3263   /* the header consists of a 'hdrl' LIST tag */
3264   res = gst_riff_read_chunk (element, avi->sinkpad, &avi->offset, &tag, &buf);
3265   if (res != GST_FLOW_OK)
3266     goto pull_range_failed;
3267   else if (tag != GST_RIFF_TAG_LIST)
3268     goto no_list;
3269   else if (GST_BUFFER_SIZE (buf) < 4)
3270     goto no_header;
3271
3272   GST_DEBUG_OBJECT (avi, "parsing headers");
3273
3274   /* Find the 'hdrl' LIST tag */
3275   while (GST_READ_UINT32_LE (GST_BUFFER_DATA (buf)) != GST_RIFF_LIST_hdrl) {
3276     GST_LOG_OBJECT (avi, "buffer contains %" GST_FOURCC_FORMAT,
3277         GST_FOURCC_ARGS (GST_READ_UINT32_LE (GST_BUFFER_DATA (buf))));
3278
3279     /* Eat up */
3280     gst_buffer_unref (buf);
3281
3282     /* read new chunk */
3283     res = gst_riff_read_chunk (element, avi->sinkpad, &avi->offset, &tag, &buf);
3284     if (res != GST_FLOW_OK)
3285       goto pull_range_failed;
3286     else if (tag != GST_RIFF_TAG_LIST)
3287       goto no_list;
3288     else if (GST_BUFFER_SIZE (buf) < 4)
3289       goto no_header;
3290   }
3291
3292   GST_DEBUG_OBJECT (avi, "hdrl LIST tag found");
3293
3294   /* the hdrl starts with a 'avih' header */
3295   if (!gst_riff_parse_chunk (element, buf, &offset, &tag, &sub))
3296     goto no_avih;
3297   else if (tag != GST_RIFF_TAG_avih)
3298     goto no_avih;
3299   else if (!gst_avi_demux_parse_avih (avi, sub, &avi->avih))
3300     goto invalid_avih;
3301
3302   GST_DEBUG_OBJECT (avi, "AVI header ok, reading elements from header");
3303
3304   /* now, read the elements from the header until the end */
3305   while (gst_riff_parse_chunk (element, buf, &offset, &tag, &sub)) {
3306     /* sub can be NULL on empty tags */
3307     if (!sub)
3308       continue;
3309
3310     switch (tag) {
3311       case GST_RIFF_TAG_LIST:
3312       {
3313         guint8 *data;
3314         guint32 fourcc;
3315
3316         if (GST_BUFFER_SIZE (sub) < 4)
3317           goto next;
3318
3319         data = GST_BUFFER_DATA (sub);
3320         fourcc = GST_READ_UINT32_LE (data);
3321
3322         switch (fourcc) {
3323           case GST_RIFF_LIST_strl:
3324             if (!(gst_avi_demux_parse_stream (avi, sub))) {
3325               GST_ELEMENT_WARNING (avi, STREAM, DEMUX, (NULL),
3326                   ("failed to parse stream, ignoring"));
3327               sub = NULL;
3328             }
3329             sub = NULL;
3330             goto next;
3331           case GST_RIFF_LIST_odml:
3332             gst_avi_demux_parse_odml (avi, sub);
3333             sub = NULL;
3334             break;
3335           case GST_RIFF_LIST_INFO:
3336             GST_BUFFER_DATA (sub) = data + 4;
3337             GST_BUFFER_SIZE (sub) -= 4;
3338             gst_riff_parse_info (element, sub, &tags);
3339             if (tags) {
3340               if (avi->globaltags) {
3341                 gst_tag_list_insert (avi->globaltags, tags,
3342                     GST_TAG_MERGE_REPLACE);
3343               } else {
3344                 avi->globaltags = tags;
3345               }
3346             }
3347             tags = NULL;
3348             break;
3349           default:
3350             GST_WARNING_OBJECT (avi,
3351                 "Unknown list %" GST_FOURCC_FORMAT " in AVI header",
3352                 GST_FOURCC_ARGS (fourcc));
3353             GST_MEMDUMP_OBJECT (avi, "Unknown list", GST_BUFFER_DATA (sub),
3354                 GST_BUFFER_SIZE (sub));
3355             /* fall-through */
3356           case GST_RIFF_TAG_JUNK:
3357             goto next;
3358         }
3359         break;
3360       }
3361       case GST_RIFF_IDIT:
3362         gst_avi_demux_parse_idit (avi, sub);
3363         goto next;
3364       default:
3365         GST_WARNING_OBJECT (avi,
3366             "Unknown tag %" GST_FOURCC_FORMAT " in AVI header at off %d",
3367             GST_FOURCC_ARGS (tag), offset);
3368         GST_MEMDUMP_OBJECT (avi, "Unknown tag", GST_BUFFER_DATA (sub),
3369             GST_BUFFER_SIZE (sub));
3370         /* fall-through */
3371       case GST_RIFF_TAG_JUNK:
3372       next:
3373         if (sub)
3374           gst_buffer_unref (sub);
3375         sub = NULL;
3376         break;
3377     }
3378   }
3379   gst_buffer_unref (buf);
3380   GST_DEBUG ("elements parsed");
3381
3382   /* check parsed streams */
3383   if (avi->num_streams == 0)
3384     goto no_streams;
3385   else if (avi->num_streams != avi->avih->streams) {
3386     GST_WARNING_OBJECT (avi,
3387         "Stream header mentioned %d streams, but %d available",
3388         avi->avih->streams, avi->num_streams);
3389   }
3390
3391   GST_DEBUG_OBJECT (avi, "skipping junk between header and data, offset=%"
3392       G_GUINT64_FORMAT, avi->offset);
3393
3394   /* Now, find the data (i.e. skip all junk between header and data) */
3395   do {
3396     guint size;
3397     guint8 *data;
3398     guint32 tag, ltag;
3399
3400     res = gst_pad_pull_range (avi->sinkpad, avi->offset, 12, &buf);
3401     if (res != GST_FLOW_OK) {
3402       GST_DEBUG_OBJECT (avi, "pull_range failure while looking for tags");
3403       goto pull_range_failed;
3404     } else if (GST_BUFFER_SIZE (buf) < 12) {
3405       GST_DEBUG_OBJECT (avi, "got %d bytes which is less than 12 bytes",
3406           GST_BUFFER_SIZE (buf));
3407       gst_buffer_unref (buf);
3408       return GST_FLOW_ERROR;
3409     }
3410
3411     data = GST_BUFFER_DATA (buf);
3412
3413     tag = GST_READ_UINT32_LE (data);
3414     size = GST_READ_UINT32_LE (data + 4);
3415     ltag = GST_READ_UINT32_LE (data + 8);
3416
3417     GST_DEBUG ("tag %" GST_FOURCC_FORMAT ", size %u",
3418         GST_FOURCC_ARGS (tag), size);
3419     GST_MEMDUMP ("Tag content", data, GST_BUFFER_SIZE (buf));
3420     gst_buffer_unref (buf);
3421
3422     switch (tag) {
3423       case GST_RIFF_TAG_LIST:{
3424         switch (ltag) {
3425           case GST_RIFF_LIST_movi:
3426             GST_DEBUG_OBJECT (avi,
3427                 "Reached the 'movi' tag, we're done with skipping");
3428             goto skipping_done;
3429           case GST_RIFF_LIST_INFO:
3430             res =
3431                 gst_riff_read_chunk (element, avi->sinkpad, &avi->offset, &tag,
3432                 &buf);
3433             if (res != GST_FLOW_OK) {
3434               GST_DEBUG_OBJECT (avi, "couldn't read INFO chunk");
3435               goto pull_range_failed;
3436             }
3437             GST_DEBUG ("got size %u", GST_BUFFER_SIZE (buf));
3438             if (size < 4) {
3439               GST_DEBUG ("skipping INFO LIST prefix");
3440               avi->offset += (4 - GST_ROUND_UP_2 (size));
3441               gst_buffer_unref (buf);
3442               continue;
3443             }
3444
3445             sub = gst_buffer_create_sub (buf, 4, GST_BUFFER_SIZE (buf) - 4);
3446             gst_riff_parse_info (element, sub, &tags);
3447             if (tags) {
3448               if (avi->globaltags) {
3449                 gst_tag_list_insert (avi->globaltags, tags,
3450                     GST_TAG_MERGE_REPLACE);
3451               } else {
3452                 avi->globaltags = tags;
3453               }
3454             }
3455             tags = NULL;
3456             if (sub) {
3457               gst_buffer_unref (sub);
3458               sub = NULL;
3459             }
3460             gst_buffer_unref (buf);
3461             /* gst_riff_read_chunk() has already advanced avi->offset */
3462             break;
3463           default:
3464             GST_WARNING_OBJECT (avi,
3465                 "Skipping unknown list tag %" GST_FOURCC_FORMAT,
3466                 GST_FOURCC_ARGS (ltag));
3467             avi->offset += 8 + GST_ROUND_UP_2 (size);
3468             break;
3469         }
3470       }
3471         break;
3472       default:
3473         GST_WARNING_OBJECT (avi, "Skipping unknown tag %" GST_FOURCC_FORMAT,
3474             GST_FOURCC_ARGS (tag));
3475         /* Fall-through */
3476       case GST_MAKE_FOURCC ('J', 'U', 'N', 'Q'):
3477       case GST_MAKE_FOURCC ('J', 'U', 'N', 'K'):
3478         /* Only get buffer for debugging if the memdump is needed  */
3479         if (gst_debug_category_get_threshold (GST_CAT_DEFAULT) >= 9) {
3480           res = gst_pad_pull_range (avi->sinkpad, avi->offset, size, &buf);
3481           if (res != GST_FLOW_OK) {
3482             GST_DEBUG_OBJECT (avi, "couldn't read INFO chunk");
3483             goto pull_range_failed;
3484           }
3485           GST_MEMDUMP ("Junk", GST_BUFFER_DATA (buf), GST_BUFFER_SIZE (buf));
3486           gst_buffer_unref (buf);
3487         }
3488         avi->offset += 8 + GST_ROUND_UP_2 (size);
3489         break;
3490     }
3491   } while (1);
3492 skipping_done:
3493
3494   GST_DEBUG_OBJECT (avi, "skipping done ... (streams=%u, stream[0].indexes=%p)",
3495       avi->num_streams, avi->stream[0].indexes);
3496
3497   /* create or read stream index (for seeking) */
3498   if (avi->stream[0].indexes != NULL) {
3499     /* we read a super index already (gst_avi_demux_parse_superindex() ) */
3500     gst_avi_demux_read_subindexes_pull (avi);
3501   }
3502   if (!avi->have_index) {
3503     if (avi->avih->flags & GST_RIFF_AVIH_HASINDEX)
3504       gst_avi_demux_stream_index (avi);
3505
3506     /* still no index, scan */
3507     if (!avi->have_index) {
3508       gst_avi_demux_stream_scan (avi);
3509
3510       /* still no index.. this is a fatal error for now.
3511        * FIXME, we should switch to plain push mode without seeking
3512        * instead of failing. */
3513       if (!avi->have_index)
3514         goto no_index;
3515     }
3516   }
3517   /* use the indexes now to construct nice durations */
3518   gst_avi_demux_calculate_durations_from_index (avi);
3519
3520   gst_avi_demux_expose_streams (avi, FALSE);
3521
3522   /* create initial NEWSEGMENT event */
3523   if ((stop = avi->segment.stop) == GST_CLOCK_TIME_NONE)
3524     stop = avi->segment.duration;
3525
3526   GST_DEBUG_OBJECT (avi, "segment stop %" G_GINT64_FORMAT, stop);
3527
3528   /* do initial seek to the default segment values */
3529   gst_avi_demux_do_seek (avi, &avi->segment);
3530
3531   /* prepare initial segment */
3532   if (avi->seg_event)
3533     gst_event_unref (avi->seg_event);
3534   avi->seg_event = gst_event_new_new_segment_full
3535       (FALSE, avi->segment.rate, avi->segment.applied_rate, GST_FORMAT_TIME,
3536       avi->segment.start, stop, avi->segment.time);
3537
3538   stamp = gst_util_get_timestamp () - stamp;
3539   GST_DEBUG_OBJECT (avi, "pulling header took %" GST_TIME_FORMAT,
3540       GST_TIME_ARGS (stamp));
3541
3542   /* at this point we know all the streams and we can signal the no more
3543    * pads signal */
3544   GST_DEBUG_OBJECT (avi, "signaling no more pads");
3545   gst_element_no_more_pads (GST_ELEMENT_CAST (avi));
3546
3547   return GST_FLOW_OK;
3548
3549   /* ERRORS */
3550 no_list:
3551   {
3552     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
3553         ("Invalid AVI header (no LIST at start): %"
3554             GST_FOURCC_FORMAT, GST_FOURCC_ARGS (tag)));
3555     gst_buffer_unref (buf);
3556     return GST_FLOW_ERROR;
3557   }
3558 no_header:
3559   {
3560     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
3561         ("Invalid AVI header (no hdrl at start): %"
3562             GST_FOURCC_FORMAT, GST_FOURCC_ARGS (tag)));
3563     gst_buffer_unref (buf);
3564     return GST_FLOW_ERROR;
3565   }
3566 no_avih:
3567   {
3568     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
3569         ("Invalid AVI header (no avih at start): %"
3570             GST_FOURCC_FORMAT, GST_FOURCC_ARGS (tag)));
3571     if (sub)
3572       gst_buffer_unref (sub);
3573     gst_buffer_unref (buf);
3574     return GST_FLOW_ERROR;
3575   }
3576 invalid_avih:
3577   {
3578     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
3579         ("Invalid AVI header (cannot parse avih at start)"));
3580     gst_buffer_unref (buf);
3581     return GST_FLOW_ERROR;
3582   }
3583 no_streams:
3584   {
3585     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL), ("No streams found"));
3586     return GST_FLOW_ERROR;
3587   }
3588 no_index:
3589   {
3590     GST_WARNING ("file without or too big index");
3591     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
3592         ("Could not get/create index"));
3593     return GST_FLOW_ERROR;
3594   }
3595 pull_range_failed:
3596   {
3597     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL),
3598         ("pull_range flow reading header: %s", gst_flow_get_name (res)));
3599     return GST_FLOW_ERROR;
3600   }
3601 }
3602
3603 /* move a stream to @index */
3604 static void
3605 gst_avi_demux_move_stream (GstAviDemux * avi, GstAviStream * stream,
3606     GstSegment * segment, guint index)
3607 {
3608   GST_DEBUG_OBJECT (avi, "Move stream %d to %u", stream->num, index);
3609
3610   if (segment->rate < 0.0) {
3611     guint next_key;
3612     /* Because we don't know the frame order we need to push from the prev keyframe
3613      * to the next keyframe. If there is a smart decoder downstream he will notice
3614      * that there are too many encoded frames send and return UNEXPECTED when there
3615      * are enough decoded frames to fill the segment. */
3616     next_key = gst_avi_demux_index_next (avi, stream, index, TRUE);
3617
3618     /* FIXME, we go back to 0, we should look at segment.start. We will however
3619      * stop earlier when the see the timestamp < segment.start */
3620     stream->start_entry = 0;
3621     stream->step_entry = index;
3622     stream->current_entry = index;
3623     stream->stop_entry = next_key;
3624
3625     GST_DEBUG_OBJECT (avi, "reverse seek: start %u, step %u, stop %u",
3626         stream->start_entry, stream->step_entry, stream->stop_entry);
3627   } else {
3628     stream->start_entry = index;
3629     stream->step_entry = index;
3630     stream->stop_entry = gst_avi_demux_index_last (avi, stream);
3631   }
3632   if (stream->current_entry != index) {
3633     GST_DEBUG_OBJECT (avi, "Move DISCONT from %u to %u",
3634         stream->current_entry, index);
3635     stream->current_entry = index;
3636     stream->discont = TRUE;
3637   }
3638
3639   /* update the buffer info */
3640   gst_avi_demux_get_buffer_info (avi, stream, index,
3641       &stream->current_timestamp, &stream->current_ts_end,
3642       &stream->current_offset, &stream->current_offset_end);
3643
3644   GST_DEBUG_OBJECT (avi, "Moved to %u, ts %" GST_TIME_FORMAT
3645       ", ts_end %" GST_TIME_FORMAT ", off %" G_GUINT64_FORMAT
3646       ", off_end %" G_GUINT64_FORMAT, index,
3647       GST_TIME_ARGS (stream->current_timestamp),
3648       GST_TIME_ARGS (stream->current_ts_end), stream->current_offset,
3649       stream->current_offset_end);
3650 }
3651
3652 /*
3653  * Do the actual seeking.
3654  */
3655 static gboolean
3656 gst_avi_demux_do_seek (GstAviDemux * avi, GstSegment * segment)
3657 {
3658   GstClockTime seek_time;
3659   gboolean keyframe;
3660   guint i, index;
3661   GstAviStream *stream;
3662
3663   seek_time = segment->last_stop;
3664   keyframe = !!(segment->flags & GST_SEEK_FLAG_KEY_UNIT);
3665
3666   GST_DEBUG_OBJECT (avi, "seek to: %" GST_TIME_FORMAT
3667       " keyframe seeking:%d", GST_TIME_ARGS (seek_time), keyframe);
3668
3669   /* FIXME, this code assumes the main stream with keyframes is stream 0,
3670    * which is mostly correct... */
3671   stream = &avi->stream[avi->main_stream];
3672
3673   /* get the entry index for the requested position */
3674   index = gst_avi_demux_index_for_time (avi, stream, seek_time);
3675   GST_DEBUG_OBJECT (avi, "Got entry %u", index);
3676
3677   /* check if we are already on a keyframe */
3678   if (!ENTRY_IS_KEYFRAME (&stream->index[index])) {
3679     GST_DEBUG_OBJECT (avi, "not keyframe, searching back");
3680     /* now go to the previous keyframe, this is where we should start
3681      * decoding from. */
3682     index = gst_avi_demux_index_prev (avi, stream, index, TRUE);
3683     GST_DEBUG_OBJECT (avi, "previous keyframe at %u", index);
3684   }
3685
3686   /* move the main stream to this position */
3687   gst_avi_demux_move_stream (avi, stream, segment, index);
3688
3689   if (keyframe) {
3690     /* when seeking to a keyframe, we update the result seek time
3691      * to the time of the keyframe. */
3692     seek_time = stream->current_timestamp;
3693     GST_DEBUG_OBJECT (avi, "keyframe adjusted to %" GST_TIME_FORMAT,
3694         GST_TIME_ARGS (seek_time));
3695   }
3696
3697   /* the seek time is also the last_stop and stream time when going
3698    * forwards */
3699   segment->last_stop = seek_time;
3700   if (segment->rate > 0.0)
3701     segment->time = seek_time;
3702
3703   /* now set DISCONT and align the other streams */
3704   for (i = 0; i < avi->num_streams; i++) {
3705     GstAviStream *ostream;
3706
3707     ostream = &avi->stream[i];
3708     if ((ostream == stream) || (ostream->index == NULL))
3709       continue;
3710
3711     /* get the entry index for the requested position */
3712     index = gst_avi_demux_index_for_time (avi, ostream, seek_time);
3713
3714     /* move to previous keyframe */
3715     if (!ENTRY_IS_KEYFRAME (&ostream->index[index]))
3716       index = gst_avi_demux_index_prev (avi, ostream, index, TRUE);
3717
3718     gst_avi_demux_move_stream (avi, ostream, segment, index);
3719   }
3720   GST_DEBUG_OBJECT (avi, "done seek to: %" GST_TIME_FORMAT,
3721       GST_TIME_ARGS (seek_time));
3722
3723   return TRUE;
3724 }
3725
3726 /*
3727  * Handle seek event.
3728  */
3729 static gboolean
3730 gst_avi_demux_handle_seek (GstAviDemux * avi, GstPad * pad, GstEvent * event)
3731 {
3732   gdouble rate;
3733   GstFormat format;
3734   GstSeekFlags flags;
3735   GstSeekType cur_type = GST_SEEK_TYPE_NONE, stop_type;
3736   gint64 cur, stop;
3737   gboolean flush;
3738   gboolean update;
3739   GstSegment seeksegment = { 0, };
3740   gint i;
3741
3742   if (event) {
3743     GST_DEBUG_OBJECT (avi, "doing seek with event");
3744
3745     gst_event_parse_seek (event, &rate, &format, &flags,
3746         &cur_type, &cur, &stop_type, &stop);
3747
3748     /* we have to have a format as the segment format. Try to convert
3749      * if not. */
3750     if (format != GST_FORMAT_TIME) {
3751       GstFormat fmt = GST_FORMAT_TIME;
3752       gboolean res = TRUE;
3753
3754       if (cur_type != GST_SEEK_TYPE_NONE)
3755         res = gst_pad_query_convert (pad, format, cur, &fmt, &cur);
3756       if (res && stop_type != GST_SEEK_TYPE_NONE)
3757         res = gst_pad_query_convert (pad, format, stop, &fmt, &stop);
3758       if (!res)
3759         goto no_format;
3760
3761       format = fmt;
3762     }
3763     GST_DEBUG_OBJECT (avi,
3764         "seek requested: rate %g cur %" GST_TIME_FORMAT " stop %"
3765         GST_TIME_FORMAT, rate, GST_TIME_ARGS (cur), GST_TIME_ARGS (stop));
3766     /* FIXME: can we do anything with rate!=1.0 */
3767   } else {
3768     GST_DEBUG_OBJECT (avi, "doing seek without event");
3769     flags = 0;
3770     rate = 1.0;
3771   }
3772
3773   /* save flush flag */
3774   flush = flags & GST_SEEK_FLAG_FLUSH;
3775
3776   if (flush) {
3777     GstEvent *fevent = gst_event_new_flush_start ();
3778
3779     /* for a flushing seek, we send a flush_start on all pads. This will
3780      * eventually stop streaming with a WRONG_STATE. We can thus eventually
3781      * take the STREAM_LOCK. */
3782     GST_DEBUG_OBJECT (avi, "sending flush start");
3783     gst_avi_demux_push_event (avi, gst_event_ref (fevent));
3784     gst_pad_push_event (avi->sinkpad, fevent);
3785   } else {
3786     /* a non-flushing seek, we PAUSE the task so that we can take the
3787      * STREAM_LOCK */
3788     GST_DEBUG_OBJECT (avi, "non flushing seek, pausing task");
3789     gst_pad_pause_task (avi->sinkpad);
3790   }
3791
3792   /* wait for streaming to stop */
3793   GST_DEBUG_OBJECT (avi, "wait for streaming to stop");
3794   GST_PAD_STREAM_LOCK (avi->sinkpad);
3795
3796   /* copy segment, we need this because we still need the old
3797    * segment when we close the current segment. */
3798   memcpy (&seeksegment, &avi->segment, sizeof (GstSegment));
3799
3800   if (event) {
3801     GST_DEBUG_OBJECT (avi, "configuring seek");
3802     gst_segment_set_seek (&seeksegment, rate, format, flags,
3803         cur_type, cur, stop_type, stop, &update);
3804   }
3805   /* do the seek, seeksegment.last_stop contains the new position, this
3806    * actually never fails. */
3807   gst_avi_demux_do_seek (avi, &seeksegment);
3808
3809   if (flush) {
3810     GstEvent *fevent = gst_event_new_flush_stop ();
3811
3812     GST_DEBUG_OBJECT (avi, "sending flush stop");
3813     gst_avi_demux_push_event (avi, gst_event_ref (fevent));
3814     gst_pad_push_event (avi->sinkpad, fevent);
3815
3816     /* reset the last flow and mark discont, FLUSH is always DISCONT */
3817     for (i = 0; i < avi->num_streams; i++) {
3818       GST_DEBUG_OBJECT (avi, "marking DISCONT");
3819       avi->stream[i].last_flow = GST_FLOW_OK;
3820       avi->stream[i].discont = TRUE;
3821     }
3822   } else if (avi->segment_running) {
3823     GstEvent *seg;
3824
3825     /* we are running the current segment and doing a non-flushing seek,
3826      * close the segment first based on the last_stop. */
3827     GST_DEBUG_OBJECT (avi, "closing running segment %" G_GINT64_FORMAT
3828         " to %" G_GINT64_FORMAT, avi->segment.start, avi->segment.last_stop);
3829     seg = gst_event_new_new_segment_full (TRUE,
3830         avi->segment.rate, avi->segment.applied_rate, avi->segment.format,
3831         avi->segment.start, avi->segment.last_stop, avi->segment.time);
3832     gst_avi_demux_push_event (avi, seg);
3833   }
3834
3835   /* now update the real segment info */
3836   memcpy (&avi->segment, &seeksegment, sizeof (GstSegment));
3837
3838   /* post the SEGMENT_START message when we do segmented playback */
3839   if (avi->segment.flags & GST_SEEK_FLAG_SEGMENT) {
3840     gst_element_post_message (GST_ELEMENT_CAST (avi),
3841         gst_message_new_segment_start (GST_OBJECT_CAST (avi),
3842             avi->segment.format, avi->segment.last_stop));
3843   }
3844
3845   /* prepare for streaming again */
3846   if ((stop = avi->segment.stop) == GST_CLOCK_TIME_NONE)
3847     stop = avi->segment.duration;
3848
3849   /* queue the segment event for the streaming thread. */
3850   if (avi->seg_event)
3851     gst_event_unref (avi->seg_event);
3852   if (avi->segment.rate > 0.0) {
3853     /* forwards goes from last_stop to stop */
3854     avi->seg_event = gst_event_new_new_segment_full (FALSE,
3855         avi->segment.rate, avi->segment.applied_rate, avi->segment.format,
3856         avi->segment.last_stop, stop, avi->segment.time);
3857   } else {
3858     /* reverse goes from start to last_stop */
3859     avi->seg_event = gst_event_new_new_segment_full (FALSE,
3860         avi->segment.rate, avi->segment.applied_rate, avi->segment.format,
3861         avi->segment.start, avi->segment.last_stop, avi->segment.time);
3862   }
3863
3864   if (!avi->streaming) {
3865     avi->segment_running = TRUE;
3866     gst_pad_start_task (avi->sinkpad, (GstTaskFunction) gst_avi_demux_loop,
3867         avi->sinkpad);
3868   }
3869   GST_PAD_STREAM_UNLOCK (avi->sinkpad);
3870
3871   return TRUE;
3872
3873   /* ERRORS */
3874 no_format:
3875   {
3876     GST_DEBUG_OBJECT (avi, "unsupported format given, seek aborted.");
3877     return FALSE;
3878   }
3879 }
3880
3881 static gboolean
3882 gst_avi_demux_handle_seek_push (GstAviDemux * avi, GstPad * pad,
3883     GstEvent * event)
3884 {
3885   gdouble rate;
3886   GstFormat format;
3887   GstSeekFlags flags;
3888   GstSeekType cur_type, stop_type;
3889   gint64 cur, stop;
3890   gboolean res;
3891   gint64 byte_cur;
3892   gint64 time = 0;
3893   GstIndexEntry *entry;
3894
3895   GST_DEBUG_OBJECT (avi, "doing push-based seek");
3896
3897   gst_event_parse_seek (event, &rate, &format, &flags,
3898       &cur_type, &cur, &stop_type, &stop);
3899
3900   if (stop_type != GST_SEEK_TYPE_NONE)
3901     goto unsupported_seek;
3902   stop = -1;
3903
3904   /* only forward streaming and seeking is possible */
3905   if (rate <= 0)
3906     goto unsupported_seek;
3907
3908   /* only TIME */
3909   if (format != GST_FORMAT_TIME)
3910     goto unsupported_format;
3911
3912   /* not really advisable otherwise */
3913   if ((flags & GST_SEEK_FLAG_FLUSH) == 0)
3914     goto unsupported_seek;
3915
3916   /* should have index, let's check anyway */
3917   if (!avi->element_index)
3918     goto abort_seek;
3919
3920   /* find reasonable corresponding BYTE position
3921    * note that we have no keyframe info in push mode whatsoever,
3922    * so we can not cater for related stuff in any way */
3923
3924   /* some slack aiming for a keyframe */
3925   if (cur < GST_AVI_SEEK_PUSH_DISPLACE)
3926     cur = 0;
3927   else
3928     cur -= GST_AVI_SEEK_PUSH_DISPLACE;
3929
3930   entry = gst_index_get_assoc_entry (avi->element_index, avi->index_id,
3931       GST_INDEX_LOOKUP_BEFORE, GST_ASSOCIATION_FLAG_NONE, GST_FORMAT_TIME, cur);
3932
3933   if (!entry)
3934     goto abort_seek;
3935
3936   gst_index_entry_assoc_map (entry, GST_FORMAT_BYTES, &byte_cur);
3937   gst_index_entry_assoc_map (entry, GST_FORMAT_TIME, &time);
3938
3939   GST_DEBUG_OBJECT (avi, "found index entry for %" GST_TIME_FORMAT
3940       " at %" GST_TIME_FORMAT ", located at offset %" G_GINT64_FORMAT,
3941       GST_TIME_ARGS (cur), GST_TIME_ARGS (time), byte_cur);
3942
3943   /* adjust offset to be in each stream's region */
3944   byte_cur = gst_avi_demux_seek_streams (avi, byte_cur, TRUE);
3945
3946   /* let's not try push seeking if target and entry are too far apart */
3947   if (cur - time > 30 * GST_SECOND)
3948     goto abort_seek;
3949
3950   GST_DEBUG_OBJECT (avi, "Pushing BYTE seek rate %g, "
3951       "start %" G_GINT64_FORMAT ", stop %" G_GINT64_FORMAT, rate, byte_cur,
3952       stop);
3953   /* BYTE seek event */
3954   event = gst_event_new_seek (rate, GST_FORMAT_BYTES, flags, cur_type, byte_cur,
3955       stop_type, stop);
3956   res = gst_pad_push_event (avi->sinkpad, event);
3957
3958   return res;
3959
3960   /* ERRORS */
3961 abort_seek:
3962   {
3963     GST_DEBUG_OBJECT (avi, "could not determine byte position to seek to, "
3964         "seek aborted.");
3965     return FALSE;
3966   }
3967 unsupported_seek:
3968   {
3969     GST_DEBUG_OBJECT (avi, "unsupported seek, seek aborted.");
3970     return FALSE;
3971   }
3972 unsupported_format:
3973   {
3974     GST_DEBUG_OBJECT (avi, "unsupported format given, seek aborted.");
3975     return FALSE;
3976   }
3977 }
3978
3979 /*
3980  * Helper for gst_avi_demux_invert()
3981  */
3982 static inline void
3983 swap_line (guint8 * d1, guint8 * d2, guint8 * tmp, gint bytes)
3984 {
3985   memcpy (tmp, d1, bytes);
3986   memcpy (d1, d2, bytes);
3987   memcpy (d2, tmp, bytes);
3988 }
3989
3990
3991 #define gst_avi_demux_is_uncompressed(fourcc)           \
3992   (fourcc == GST_RIFF_DIB ||                            \
3993    fourcc == GST_RIFF_rgb ||                            \
3994    fourcc == GST_RIFF_RGB || fourcc == GST_RIFF_RAW)
3995
3996 /*
3997  * Invert DIB buffers... Takes existing buffer and
3998  * returns either the buffer or a new one (with old
3999  * one dereferenced).
4000  * FIXME: can't we preallocate tmp? and remember stride, bpp?
4001  */
4002 static GstBuffer *
4003 gst_avi_demux_invert (GstAviStream * stream, GstBuffer * buf)
4004 {
4005   GstStructure *s;
4006   gint y, w, h;
4007   gint bpp, stride;
4008   guint8 *tmp = NULL;
4009
4010   if (stream->strh->type != GST_RIFF_FCC_vids)
4011     return buf;
4012
4013   if (!gst_avi_demux_is_uncompressed (stream->strh->fcc_handler)) {
4014     return buf;                 /* Ignore non DIB buffers */
4015   }
4016
4017   s = gst_caps_get_structure (GST_PAD_CAPS (stream->pad), 0);
4018   if (!gst_structure_get_int (s, "bpp", &bpp)) {
4019     GST_WARNING ("Failed to retrieve depth from caps");
4020     return buf;
4021   }
4022
4023   if (stream->strf.vids == NULL) {
4024     GST_WARNING ("Failed to retrieve vids for stream");
4025     return buf;
4026   }
4027
4028   h = stream->strf.vids->height;
4029   w = stream->strf.vids->width;
4030   stride = w * (bpp / 8);
4031
4032   buf = gst_buffer_make_writable (buf);
4033   if (GST_BUFFER_SIZE (buf) < (stride * h)) {
4034     GST_WARNING ("Buffer is smaller than reported Width x Height x Depth");
4035     return buf;
4036   }
4037
4038   tmp = g_malloc (stride);
4039
4040   for (y = 0; y < h / 2; y++) {
4041     swap_line (GST_BUFFER_DATA (buf) + stride * y,
4042         GST_BUFFER_DATA (buf) + stride * (h - 1 - y), tmp, stride);
4043   }
4044
4045   g_free (tmp);
4046
4047   return buf;
4048 }
4049
4050 static void
4051 gst_avi_demux_add_assoc (GstAviDemux * avi, GstAviStream * stream,
4052     GstClockTime timestamp, guint64 offset, gboolean keyframe)
4053 {
4054   /* do not add indefinitely for open-ended streaming */
4055   if (G_UNLIKELY (avi->element_index && avi->seekable)) {
4056     GST_LOG_OBJECT (avi, "adding association %" GST_TIME_FORMAT "-> %"
4057         G_GUINT64_FORMAT, GST_TIME_ARGS (timestamp), offset);
4058     gst_index_add_association (avi->element_index, avi->index_id,
4059         keyframe ? GST_ASSOCIATION_FLAG_KEY_UNIT : GST_ASSOCIATION_FLAG_NONE,
4060         GST_FORMAT_TIME, timestamp, GST_FORMAT_BYTES, offset, NULL);
4061     /* well, current_total determines TIME and entry DEFAULT (frame #) ... */
4062     gst_index_add_association (avi->element_index, stream->index_id,
4063         GST_ASSOCIATION_FLAG_NONE,
4064         GST_FORMAT_TIME, stream->current_total, GST_FORMAT_BYTES, offset,
4065         GST_FORMAT_DEFAULT, stream->current_entry, NULL);
4066   }
4067 }
4068
4069 /*
4070  * Returns the aggregated GstFlowReturn.
4071  */
4072 static GstFlowReturn
4073 gst_avi_demux_combine_flows (GstAviDemux * avi, GstAviStream * stream,
4074     GstFlowReturn ret)
4075 {
4076   guint i;
4077   gboolean unexpected = FALSE, not_linked = TRUE;
4078
4079   /* store the value */
4080   stream->last_flow = ret;
4081
4082   /* any other error that is not-linked or eos can be returned right away */
4083   if (G_LIKELY (ret != GST_FLOW_UNEXPECTED && ret != GST_FLOW_NOT_LINKED))
4084     goto done;
4085
4086   /* only return NOT_LINKED if all other pads returned NOT_LINKED */
4087   for (i = 0; i < avi->num_streams; i++) {
4088     GstAviStream *ostream = &avi->stream[i];
4089
4090     ret = ostream->last_flow;
4091     /* no unexpected or unlinked, return */
4092     if (G_LIKELY (ret != GST_FLOW_UNEXPECTED && ret != GST_FLOW_NOT_LINKED))
4093       goto done;
4094
4095     /* we check to see if we have at least 1 unexpected or all unlinked */
4096     unexpected |= (ret == GST_FLOW_UNEXPECTED);
4097     not_linked &= (ret == GST_FLOW_NOT_LINKED);
4098   }
4099   /* when we get here, we all have unlinked or unexpected */
4100   if (not_linked)
4101     ret = GST_FLOW_NOT_LINKED;
4102   else if (unexpected)
4103     ret = GST_FLOW_UNEXPECTED;
4104 done:
4105   GST_LOG_OBJECT (avi, "combined %s to return %s",
4106       gst_flow_get_name (stream->last_flow), gst_flow_get_name (ret));
4107   return ret;
4108 }
4109
4110 /* move @stream to the next position in its index */
4111 static GstFlowReturn
4112 gst_avi_demux_advance (GstAviDemux * avi, GstAviStream * stream,
4113     GstFlowReturn ret)
4114 {
4115   guint old_entry, new_entry;
4116
4117   old_entry = stream->current_entry;
4118   /* move forwards */
4119   new_entry = old_entry + 1;
4120
4121   /* see if we reached the end */
4122   if (new_entry > stream->stop_entry) {
4123     if (avi->segment.rate < 0.0) {
4124       if (stream->step_entry == stream->start_entry) {
4125         /* we stepped all the way to the start, eos */
4126         GST_DEBUG_OBJECT (avi, "reverse reached start %u", stream->start_entry);
4127         goto eos;
4128       }
4129       /* backwards, stop becomes step, find a new step */
4130       stream->stop_entry = stream->step_entry;
4131       stream->step_entry = gst_avi_demux_index_prev (avi, stream,
4132           stream->stop_entry, TRUE);
4133
4134       GST_DEBUG_OBJECT (avi,
4135           "reverse playback jump: start %u, step %u, stop %u",
4136           stream->start_entry, stream->step_entry, stream->stop_entry);
4137
4138       /* and start from the previous keyframe now */
4139       new_entry = stream->step_entry;
4140     } else {
4141       /* EOS */
4142       GST_DEBUG_OBJECT (avi, "forward reached stop %u", stream->stop_entry);
4143       goto eos;
4144     }
4145   }
4146
4147   if (new_entry != old_entry) {
4148     stream->current_entry = new_entry;
4149     stream->current_total = stream->index[new_entry].total;
4150
4151     if (new_entry == old_entry + 1) {
4152       GST_DEBUG_OBJECT (avi, "moved forwards from %u to %u",
4153           old_entry, new_entry);
4154       /* we simply moved one step forwards, reuse current info */
4155       stream->current_timestamp = stream->current_ts_end;
4156       stream->current_offset = stream->current_offset_end;
4157       gst_avi_demux_get_buffer_info (avi, stream, new_entry,
4158           NULL, &stream->current_ts_end, NULL, &stream->current_offset_end);
4159     } else {
4160       /* we moved DISCONT, full update */
4161       gst_avi_demux_get_buffer_info (avi, stream, new_entry,
4162           &stream->current_timestamp, &stream->current_ts_end,
4163           &stream->current_offset, &stream->current_offset_end);
4164       /* and MARK discont for this stream */
4165       stream->last_flow = GST_FLOW_OK;
4166       stream->discont = TRUE;
4167       GST_DEBUG_OBJECT (avi, "Moved from %u to %u, ts %" GST_TIME_FORMAT
4168           ", ts_end %" GST_TIME_FORMAT ", off %" G_GUINT64_FORMAT
4169           ", off_end %" G_GUINT64_FORMAT, old_entry, new_entry,
4170           GST_TIME_ARGS (stream->current_timestamp),
4171           GST_TIME_ARGS (stream->current_ts_end), stream->current_offset,
4172           stream->current_offset_end);
4173     }
4174   }
4175   return ret;
4176
4177   /* ERROR */
4178 eos:
4179   {
4180     GST_DEBUG_OBJECT (avi, "we are EOS");
4181     /* setting current_timestamp to -1 marks EOS */
4182     stream->current_timestamp = -1;
4183     return GST_FLOW_UNEXPECTED;
4184   }
4185 }
4186
4187 /* find the stream with the lowest current position when going forwards or with
4188  * the highest position when going backwards, this is the stream
4189  * we should push from next */
4190 static gint
4191 gst_avi_demux_find_next (GstAviDemux * avi, gfloat rate)
4192 {
4193   guint64 min_time, max_time;
4194   guint stream_num, i;
4195
4196   max_time = 0;
4197   min_time = G_MAXUINT64;
4198   stream_num = -1;
4199
4200   for (i = 0; i < avi->num_streams; i++) {
4201     guint64 position;
4202     GstAviStream *stream;
4203
4204     stream = &avi->stream[i];
4205     position = stream->current_timestamp;
4206
4207     /* position of -1 is EOS */
4208     if (position != -1) {
4209       if (rate > 0.0 && position < min_time) {
4210         min_time = position;
4211         stream_num = i;
4212       } else if (rate < 0.0 && position >= max_time) {
4213         max_time = position;
4214         stream_num = i;
4215       }
4216     }
4217   }
4218   return stream_num;
4219 }
4220
4221 static GstFlowReturn
4222 gst_avi_demux_loop_data (GstAviDemux * avi)
4223 {
4224   GstFlowReturn ret = GST_FLOW_OK;
4225   guint stream_num;
4226   GstAviStream *stream;
4227   gboolean processed = FALSE;
4228   GstBuffer *buf;
4229   guint64 offset, size;
4230   GstClockTime timestamp, duration;
4231   guint64 out_offset, out_offset_end;
4232   gboolean keyframe;
4233   GstAviIndexEntry *entry;
4234
4235   do {
4236     stream_num = gst_avi_demux_find_next (avi, avi->segment.rate);
4237
4238     /* all are EOS */
4239     if (G_UNLIKELY (stream_num == -1)) {
4240       GST_DEBUG_OBJECT (avi, "all streams are EOS");
4241       goto eos;
4242     }
4243
4244     /* we have the stream now */
4245     stream = &avi->stream[stream_num];
4246
4247     /* skip streams without pads */
4248     if (!stream->pad) {
4249       GST_DEBUG_OBJECT (avi, "skipping entry from stream %d without pad",
4250           stream_num);
4251       goto next;
4252     }
4253
4254     /* get the timing info for the entry */
4255     timestamp = stream->current_timestamp;
4256     duration = stream->current_ts_end - timestamp;
4257     out_offset = stream->current_offset;
4258     out_offset_end = stream->current_offset_end;
4259
4260     /* get the entry data info */
4261     entry = &stream->index[stream->current_entry];
4262     offset = entry->offset;
4263     size = entry->size;
4264     keyframe = ENTRY_IS_KEYFRAME (entry);
4265
4266     /* skip empty entries */
4267     if (size == 0) {
4268       GST_DEBUG_OBJECT (avi, "Skipping entry %u (%" G_GUINT64_FORMAT ", %p)",
4269           stream->current_entry, size, stream->pad);
4270       goto next;
4271     }
4272
4273     if (avi->segment.rate > 0.0) {
4274       /* only check this for fowards playback for now */
4275       if (keyframe && GST_CLOCK_TIME_IS_VALID (avi->segment.stop)
4276           && (timestamp > avi->segment.stop)) {
4277         goto eos_stop;
4278       }
4279     }
4280
4281     GST_LOG ("reading buffer (size=%" G_GUINT64_FORMAT "), stream %d, pos %"
4282         G_GUINT64_FORMAT " (0x%" G_GINT64_MODIFIER "x), kf %d", size,
4283         stream_num, offset, offset, keyframe);
4284
4285     /* FIXME, check large chunks and cut them up */
4286
4287     /* pull in the data */
4288     ret = gst_pad_pull_range (avi->sinkpad, offset, size, &buf);
4289     if (ret != GST_FLOW_OK)
4290       goto pull_failed;
4291
4292     /* check for short buffers, this is EOS as well */
4293     if (GST_BUFFER_SIZE (buf) < size)
4294       goto short_buffer;
4295
4296     /* invert the picture if needed */
4297     buf = gst_avi_demux_invert (stream, buf);
4298
4299     /* mark non-keyframes */
4300     if (keyframe)
4301       GST_BUFFER_FLAG_UNSET (buf, GST_BUFFER_FLAG_DELTA_UNIT);
4302     else
4303       GST_BUFFER_FLAG_SET (buf, GST_BUFFER_FLAG_DELTA_UNIT);
4304
4305     GST_BUFFER_TIMESTAMP (buf) = timestamp;
4306     GST_BUFFER_DURATION (buf) = duration;
4307     GST_BUFFER_OFFSET (buf) = out_offset;
4308     GST_BUFFER_OFFSET_END (buf) = out_offset_end;
4309
4310     /* mark discont when pending */
4311     if (stream->discont) {
4312       GST_DEBUG_OBJECT (avi, "setting DISCONT flag");
4313       GST_BUFFER_FLAG_SET (buf, GST_BUFFER_FLAG_DISCONT);
4314       stream->discont = FALSE;
4315     }
4316
4317     gst_avi_demux_add_assoc (avi, stream, timestamp, offset, keyframe);
4318
4319     gst_buffer_set_caps (buf, GST_PAD_CAPS (stream->pad));
4320
4321     /* update current position in the segment */
4322     gst_segment_set_last_stop (&avi->segment, GST_FORMAT_TIME, timestamp);
4323
4324     GST_DEBUG_OBJECT (avi, "Pushing buffer of size %u, ts %"
4325         GST_TIME_FORMAT ", dur %" GST_TIME_FORMAT ", off %" G_GUINT64_FORMAT
4326         ", off_end %" G_GUINT64_FORMAT,
4327         GST_BUFFER_SIZE (buf), GST_TIME_ARGS (timestamp),
4328         GST_TIME_ARGS (duration), out_offset, out_offset_end);
4329
4330     ret = gst_pad_push (stream->pad, buf);
4331
4332     /* mark as processed, we increment the frame and byte counters then
4333      * leave the while loop and return the GstFlowReturn */
4334     processed = TRUE;
4335
4336     if (avi->segment.rate < 0) {
4337       if (timestamp > avi->segment.stop && ret == GST_FLOW_UNEXPECTED) {
4338         /* In reverse playback we can get a GST_FLOW_UNEXPECTED when
4339          * we are at the end of the segment, so we just need to jump
4340          * back to the previous section. */
4341         GST_DEBUG_OBJECT (avi, "downstream has reached end of segment");
4342         ret = GST_FLOW_OK;
4343       }
4344     }
4345   next:
4346     /* move to next item */
4347     ret = gst_avi_demux_advance (avi, stream, ret);
4348
4349     /* combine flows */
4350     ret = gst_avi_demux_combine_flows (avi, stream, ret);
4351   } while (!processed);
4352
4353 beach:
4354   return ret;
4355
4356   /* special cases */
4357 eos:
4358   {
4359     GST_DEBUG_OBJECT (avi, "No samples left for any streams - EOS");
4360     ret = GST_FLOW_UNEXPECTED;
4361     goto beach;
4362   }
4363 eos_stop:
4364   {
4365     GST_LOG_OBJECT (avi, "Found keyframe after segment,"
4366         " setting EOS (%" GST_TIME_FORMAT " > %" GST_TIME_FORMAT ")",
4367         GST_TIME_ARGS (timestamp), GST_TIME_ARGS (avi->segment.stop));
4368     ret = GST_FLOW_UNEXPECTED;
4369     goto beach;
4370   }
4371 pull_failed:
4372   {
4373     GST_DEBUG_OBJECT (avi, "pull range failed: pos=%" G_GUINT64_FORMAT
4374         " size=%" G_GUINT64_FORMAT, offset, size);
4375     goto beach;
4376   }
4377 short_buffer:
4378   {
4379     GST_WARNING_OBJECT (avi, "Short read at offset %" G_GUINT64_FORMAT
4380         ", only got %d/%" G_GUINT64_FORMAT " bytes (truncated file?)", offset,
4381         GST_BUFFER_SIZE (buf), size);
4382     gst_buffer_unref (buf);
4383     ret = GST_FLOW_UNEXPECTED;
4384     goto beach;
4385   }
4386 }
4387
4388 /*
4389  * Read data. If we have an index it delegates to
4390  * gst_avi_demux_process_next_entry().
4391  */
4392 static GstFlowReturn
4393 gst_avi_demux_stream_data (GstAviDemux * avi)
4394 {
4395   guint32 tag = 0;
4396   guint32 size = 0;
4397   gint stream_nr = 0;
4398   GstFlowReturn res = GST_FLOW_OK;
4399   GstFormat format = GST_FORMAT_TIME;
4400
4401   if (G_UNLIKELY (avi->have_eos)) {
4402     /* Clean adapter, we're done */
4403     gst_adapter_clear (avi->adapter);
4404     return GST_FLOW_UNEXPECTED;
4405   }
4406
4407   if (G_UNLIKELY (avi->todrop)) {
4408     guint drop;
4409
4410     if ((drop = gst_adapter_available (avi->adapter))) {
4411       if (drop > avi->todrop)
4412         drop = avi->todrop;
4413       GST_DEBUG_OBJECT (avi, "Dropping %d bytes", drop);
4414       gst_adapter_flush (avi->adapter, drop);
4415       avi->todrop -= drop;
4416       avi->offset += drop;
4417     }
4418   }
4419
4420   /* Iterate until need more data, so adapter won't grow too much */
4421   while (1) {
4422     if (G_UNLIKELY (!gst_avi_demux_peek_chunk_info (avi, &tag, &size))) {
4423       return GST_FLOW_OK;
4424     }
4425
4426     GST_DEBUG ("Trying chunk (%" GST_FOURCC_FORMAT "), size %d",
4427         GST_FOURCC_ARGS (tag), size);
4428
4429     if (G_LIKELY ((tag & 0xff) >= '0' && (tag & 0xff) <= '9' &&
4430             ((tag >> 8) & 0xff) >= '0' && ((tag >> 8) & 0xff) <= '9')) {
4431       GST_LOG ("Chunk ok");
4432     } else if ((tag & 0xffff) == (('x' << 8) | 'i')) {
4433       GST_DEBUG ("Found sub-index tag");
4434       if (gst_avi_demux_peek_chunk (avi, &tag, &size) || size == 0) {
4435         /* accept 0 size buffer here */
4436         avi->abort_buffering = FALSE;
4437         GST_DEBUG ("  skipping %d bytes for now", size);
4438         gst_adapter_flush (avi->adapter, 8 + GST_ROUND_UP_2 (size));
4439       }
4440       return GST_FLOW_OK;
4441     } else if (tag == GST_RIFF_TAG_RIFF) {
4442       /* RIFF tags can appear in ODML files, just jump over them */
4443       if (gst_adapter_available (avi->adapter) >= 12) {
4444         GST_DEBUG ("Found RIFF tag, skipping RIFF header");
4445         gst_adapter_flush (avi->adapter, 12);
4446         continue;
4447       }
4448       return GST_FLOW_OK;
4449     } else if (tag == GST_RIFF_TAG_idx1) {
4450       GST_DEBUG ("Found index tag");
4451       if (gst_avi_demux_peek_chunk (avi, &tag, &size) || size == 0) {
4452         /* accept 0 size buffer here */
4453         avi->abort_buffering = FALSE;
4454         GST_DEBUG ("  skipping %d bytes for now", size);
4455         gst_adapter_flush (avi->adapter, 8 + GST_ROUND_UP_2 (size));
4456       }
4457       return GST_FLOW_OK;
4458     } else if (tag == GST_RIFF_TAG_LIST) {
4459       /* movi chunks might be grouped in rec list */
4460       if (gst_adapter_available (avi->adapter) >= 12) {
4461         GST_DEBUG ("Found LIST tag, skipping LIST header");
4462         gst_adapter_flush (avi->adapter, 12);
4463         continue;
4464       }
4465       return GST_FLOW_OK;
4466     } else if (tag == GST_RIFF_TAG_JUNK) {
4467       /* rec list might contain JUNK chunks */
4468       GST_DEBUG ("Found JUNK tag");
4469       if (gst_avi_demux_peek_chunk (avi, &tag, &size) || size == 0) {
4470         /* accept 0 size buffer here */
4471         avi->abort_buffering = FALSE;
4472         GST_DEBUG ("  skipping %d bytes for now", size);
4473         gst_adapter_flush (avi->adapter, 8 + GST_ROUND_UP_2 (size));
4474       }
4475       return GST_FLOW_OK;
4476     } else {
4477       GST_DEBUG ("No more stream chunks, send EOS");
4478       avi->have_eos = TRUE;
4479       return GST_FLOW_UNEXPECTED;
4480     }
4481
4482     if (G_UNLIKELY (!gst_avi_demux_peek_chunk (avi, &tag, &size))) {
4483       /* supposedly one hopes to catch a nicer chunk later on ... */
4484       /* FIXME ?? give up here rather than possibly ending up going
4485        * through the whole file */
4486       if (avi->abort_buffering) {
4487         avi->abort_buffering = FALSE;
4488         gst_adapter_flush (avi->adapter, 8);
4489       }
4490       return GST_FLOW_OK;
4491     }
4492     GST_DEBUG ("chunk ID %" GST_FOURCC_FORMAT ", size %u",
4493         GST_FOURCC_ARGS (tag), size);
4494
4495     stream_nr = CHUNKID_TO_STREAMNR (tag);
4496
4497     if (G_UNLIKELY (stream_nr < 0 || stream_nr >= avi->num_streams)) {
4498       /* recoverable */
4499       GST_WARNING ("Invalid stream ID %d (%" GST_FOURCC_FORMAT ")",
4500           stream_nr, GST_FOURCC_ARGS (tag));
4501       avi->offset += 8 + GST_ROUND_UP_2 (size);
4502       gst_adapter_flush (avi->adapter, 8 + GST_ROUND_UP_2 (size));
4503     } else {
4504       GstAviStream *stream;
4505       GstClockTime next_ts = 0;
4506       GstBuffer *buf;
4507       guint64 offset;
4508
4509       gst_adapter_flush (avi->adapter, 8);
4510
4511       /* get buffer */
4512       buf = gst_adapter_take_buffer (avi->adapter, GST_ROUND_UP_2 (size));
4513       /* patch the size */
4514       GST_BUFFER_SIZE (buf) = size;
4515       offset = avi->offset;
4516       avi->offset += 8 + GST_ROUND_UP_2 (size);
4517
4518       stream = &avi->stream[stream_nr];
4519
4520       /* set delay (if any)
4521          if (stream->strh->init_frames == stream->current_frame &&
4522          stream->delay == 0)
4523          stream->delay = next_ts;
4524        */
4525
4526       /* parsing of corresponding header may have failed */
4527       if (G_UNLIKELY (!stream->pad)) {
4528         GST_WARNING_OBJECT (avi, "no pad for stream ID %" GST_FOURCC_FORMAT,
4529             GST_FOURCC_ARGS (tag));
4530         gst_buffer_unref (buf);
4531       } else {
4532         GstClockTime dur_ts = 0;
4533
4534         /* get time of this buffer */
4535         gst_pad_query_position (stream->pad, &format, (gint64 *) & next_ts);
4536         if (G_UNLIKELY (format != GST_FORMAT_TIME))
4537           goto wrong_format;
4538
4539         gst_avi_demux_add_assoc (avi, stream, next_ts, offset, FALSE);
4540
4541         /* increment our positions */
4542         stream->current_entry++;
4543         stream->current_total += size;
4544
4545         /* invert the picture if needed */
4546         buf = gst_avi_demux_invert (stream, buf);
4547
4548         gst_pad_query_position (stream->pad, &format, (gint64 *) & dur_ts);
4549         if (G_UNLIKELY (format != GST_FORMAT_TIME))
4550           goto wrong_format;
4551
4552         GST_BUFFER_TIMESTAMP (buf) = next_ts;
4553         GST_BUFFER_DURATION (buf) = dur_ts - next_ts;
4554         if (stream->strh->type == GST_RIFF_FCC_vids) {
4555           GST_BUFFER_OFFSET (buf) = stream->current_entry - 1;
4556           GST_BUFFER_OFFSET_END (buf) = stream->current_entry;
4557         } else {
4558           GST_BUFFER_OFFSET (buf) = GST_BUFFER_OFFSET_NONE;
4559           GST_BUFFER_OFFSET_END (buf) = GST_BUFFER_OFFSET_NONE;
4560         }
4561
4562         gst_buffer_set_caps (buf, GST_PAD_CAPS (stream->pad));
4563         GST_DEBUG_OBJECT (avi,
4564             "Pushing buffer with time=%" GST_TIME_FORMAT ", duration %"
4565             GST_TIME_FORMAT ", offset %" G_GUINT64_FORMAT
4566             " and size %d over pad %s", GST_TIME_ARGS (next_ts),
4567             GST_TIME_ARGS (GST_BUFFER_DURATION (buf)), GST_BUFFER_OFFSET (buf),
4568             size, GST_PAD_NAME (stream->pad));
4569
4570         /* update current position in the segment */
4571         gst_segment_set_last_stop (&avi->segment, GST_FORMAT_TIME, next_ts);
4572
4573         /* mark discont when pending */
4574         if (G_UNLIKELY (stream->discont)) {
4575           GST_DEBUG_OBJECT (avi, "Setting DISCONT");
4576           GST_BUFFER_FLAG_SET (buf, GST_BUFFER_FLAG_DISCONT);
4577           stream->discont = FALSE;
4578         }
4579         res = gst_pad_push (stream->pad, buf);
4580
4581         /* combine flows */
4582         res = gst_avi_demux_combine_flows (avi, stream, res);
4583         if (G_UNLIKELY (res != GST_FLOW_OK)) {
4584           GST_DEBUG ("Push failed; %s", gst_flow_get_name (res));
4585           return res;
4586         }
4587       }
4588     }
4589   }
4590
4591 done:
4592   return res;
4593
4594   /* ERRORS */
4595 wrong_format:
4596   {
4597     GST_DEBUG_OBJECT (avi, "format %s != GST_FORMAT_TIME",
4598         gst_format_get_name (format));
4599     res = GST_FLOW_ERROR;
4600     goto done;
4601   }
4602 }
4603
4604 /*
4605  * Send pending tags.
4606  */
4607 static void
4608 push_tag_lists (GstAviDemux * avi)
4609 {
4610   guint i;
4611   GstTagList *tags;
4612
4613   if (!avi->got_tags)
4614     return;
4615
4616   GST_DEBUG_OBJECT (avi, "Pushing pending tag lists");
4617
4618   for (i = 0; i < avi->num_streams; i++) {
4619     GstAviStream *stream = &avi->stream[i];
4620     GstPad *pad = stream->pad;
4621
4622     tags = stream->taglist;
4623
4624     if (pad && tags) {
4625       GST_DEBUG_OBJECT (pad, "Tags: %" GST_PTR_FORMAT, tags);
4626
4627       gst_element_found_tags_for_pad (GST_ELEMENT_CAST (avi), pad, tags);
4628       stream->taglist = NULL;
4629     }
4630   }
4631
4632   if (!(tags = avi->globaltags))
4633     tags = gst_tag_list_new ();
4634
4635   gst_tag_list_add (tags, GST_TAG_MERGE_REPLACE,
4636       GST_TAG_CONTAINER_FORMAT, "AVI", NULL);
4637
4638   GST_DEBUG_OBJECT (avi, "Global tags: %" GST_PTR_FORMAT, tags);
4639   gst_element_found_tags (GST_ELEMENT_CAST (avi), tags);
4640   avi->globaltags = NULL;
4641   avi->got_tags = FALSE;
4642 }
4643
4644 static void
4645 gst_avi_demux_loop (GstPad * pad)
4646 {
4647   GstFlowReturn res;
4648   GstAviDemux *avi = GST_AVI_DEMUX (GST_PAD_PARENT (pad));
4649
4650   switch (avi->state) {
4651     case GST_AVI_DEMUX_START:
4652       res = gst_avi_demux_stream_init_pull (avi);
4653       if (G_UNLIKELY (res != GST_FLOW_OK)) {
4654         GST_WARNING ("stream_init flow: %s", gst_flow_get_name (res));
4655         goto pause;
4656       }
4657       avi->state = GST_AVI_DEMUX_HEADER;
4658       /* fall-through */
4659     case GST_AVI_DEMUX_HEADER:
4660       res = gst_avi_demux_stream_header_pull (avi);
4661       if (G_UNLIKELY (res != GST_FLOW_OK)) {
4662         GST_WARNING ("stream_header flow: %s", gst_flow_get_name (res));
4663         goto pause;
4664       }
4665       avi->state = GST_AVI_DEMUX_MOVI;
4666       break;
4667     case GST_AVI_DEMUX_MOVI:
4668       if (G_UNLIKELY (avi->seg_event)) {
4669         gst_avi_demux_push_event (avi, avi->seg_event);
4670         avi->seg_event = NULL;
4671       }
4672       if (G_UNLIKELY (avi->got_tags)) {
4673         push_tag_lists (avi);
4674       }
4675       /* process each index entry in turn */
4676       res = gst_avi_demux_loop_data (avi);
4677
4678       /* pause when error */
4679       if (G_UNLIKELY (res != GST_FLOW_OK)) {
4680         GST_INFO ("stream_movi flow: %s", gst_flow_get_name (res));
4681         goto pause;
4682       }
4683       break;
4684     default:
4685       GST_ERROR_OBJECT (avi, "unknown state %d", avi->state);
4686       res = GST_FLOW_ERROR;
4687       goto pause;
4688   }
4689
4690   return;
4691
4692   /* ERRORS */
4693 pause:
4694   GST_LOG_OBJECT (avi, "pausing task, reason %s", gst_flow_get_name (res));
4695   avi->segment_running = FALSE;
4696   gst_pad_pause_task (avi->sinkpad);
4697
4698   if (GST_FLOW_IS_FATAL (res) || (res == GST_FLOW_NOT_LINKED)) {
4699     gboolean push_eos = TRUE;
4700
4701     if (res == GST_FLOW_UNEXPECTED) {
4702       /* handle end-of-stream/segment */
4703       if (avi->segment.flags & GST_SEEK_FLAG_SEGMENT) {
4704         gint64 stop;
4705
4706         if ((stop = avi->segment.stop) == -1)
4707           stop = avi->segment.duration;
4708
4709         GST_INFO_OBJECT (avi, "sending segment_done");
4710
4711         gst_element_post_message
4712             (GST_ELEMENT_CAST (avi),
4713             gst_message_new_segment_done (GST_OBJECT_CAST (avi),
4714                 GST_FORMAT_TIME, stop));
4715         push_eos = FALSE;
4716       }
4717     } else {
4718       /* for fatal errors we post an error message */
4719       GST_ELEMENT_ERROR (avi, STREAM, FAILED,
4720           (_("Internal data stream error.")),
4721           ("streaming stopped, reason %s", gst_flow_get_name (res)));
4722     }
4723     if (push_eos) {
4724       GST_INFO_OBJECT (avi, "sending eos");
4725       if (!gst_avi_demux_push_event (avi, gst_event_new_eos ()) &&
4726           (res == GST_FLOW_UNEXPECTED)) {
4727         GST_ELEMENT_ERROR (avi, STREAM, DEMUX,
4728             (NULL), ("got eos but no streams (yet)"));
4729       }
4730     }
4731   }
4732 }
4733
4734
4735 static GstFlowReturn
4736 gst_avi_demux_chain (GstPad * pad, GstBuffer * buf)
4737 {
4738   GstFlowReturn res;
4739   GstAviDemux *avi = GST_AVI_DEMUX (GST_PAD_PARENT (pad));
4740   gint i;
4741
4742   if (GST_BUFFER_IS_DISCONT (buf)) {
4743     GST_DEBUG_OBJECT (avi, "got DISCONT");
4744     gst_adapter_clear (avi->adapter);
4745     /* mark all streams DISCONT */
4746     for (i = 0; i < avi->num_streams; i++)
4747       avi->stream[i].discont = TRUE;
4748   }
4749
4750   GST_DEBUG ("Store %d bytes in adapter", GST_BUFFER_SIZE (buf));
4751   gst_adapter_push (avi->adapter, buf);
4752
4753   switch (avi->state) {
4754     case GST_AVI_DEMUX_START:
4755       if ((res = gst_avi_demux_stream_init_push (avi)) != GST_FLOW_OK) {
4756         GST_WARNING ("stream_init flow: %s", gst_flow_get_name (res));
4757         break;
4758       }
4759       break;
4760     case GST_AVI_DEMUX_HEADER:
4761       if ((res = gst_avi_demux_stream_header_push (avi)) != GST_FLOW_OK) {
4762         GST_WARNING ("stream_header flow: %s", gst_flow_get_name (res));
4763         break;
4764       }
4765       break;
4766     case GST_AVI_DEMUX_MOVI:
4767       if (G_UNLIKELY (avi->seg_event)) {
4768         gst_avi_demux_push_event (avi, avi->seg_event);
4769         avi->seg_event = NULL;
4770       }
4771       if (G_UNLIKELY (avi->got_tags)) {
4772         push_tag_lists (avi);
4773       }
4774       res = gst_avi_demux_stream_data (avi);
4775       break;
4776     default:
4777       GST_ELEMENT_ERROR (avi, STREAM, FAILED, (NULL),
4778           ("Illegal internal state"));
4779       res = GST_FLOW_ERROR;
4780       break;
4781   }
4782
4783   GST_DEBUG_OBJECT (avi, "state: %d res:%s", avi->state,
4784       gst_flow_get_name (res));
4785
4786   if (G_UNLIKELY (avi->abort_buffering)) {
4787     avi->abort_buffering = FALSE;
4788     res = GST_FLOW_ERROR;
4789     GST_ELEMENT_ERROR (avi, STREAM, DEMUX, (NULL), ("unhandled buffer size"));
4790   }
4791
4792   return res;
4793 }
4794
4795 static gboolean
4796 gst_avi_demux_sink_activate (GstPad * sinkpad)
4797 {
4798   if (gst_pad_check_pull_range (sinkpad)) {
4799     GST_DEBUG ("going to pull mode");
4800     return gst_pad_activate_pull (sinkpad, TRUE);
4801   } else {
4802     GST_DEBUG ("going to push (streaming) mode");
4803     return gst_pad_activate_push (sinkpad, TRUE);
4804   }
4805 }
4806
4807 static gboolean
4808 gst_avi_demux_sink_activate_pull (GstPad * sinkpad, gboolean active)
4809 {
4810   GstAviDemux *avi = GST_AVI_DEMUX (GST_OBJECT_PARENT (sinkpad));
4811
4812   if (active) {
4813     avi->segment_running = TRUE;
4814     avi->streaming = FALSE;
4815     return gst_pad_start_task (sinkpad, (GstTaskFunction) gst_avi_demux_loop,
4816         sinkpad);
4817   } else {
4818     avi->segment_running = FALSE;
4819     return gst_pad_stop_task (sinkpad);
4820   }
4821 }
4822
4823 static gboolean
4824 gst_avi_demux_activate_push (GstPad * pad, gboolean active)
4825 {
4826   GstAviDemux *avi = GST_AVI_DEMUX (GST_OBJECT_PARENT (pad));
4827
4828   if (active) {
4829     GST_DEBUG ("avi: activating push/chain function");
4830     avi->streaming = TRUE;
4831 #if 0
4832     /* create index for some push based seeking if not provided */
4833     GST_OBJECT_LOCK (avi);
4834     if (!avi->element_index) {
4835       GST_DEBUG_OBJECT (avi, "creating index");
4836       avi->element_index = gst_index_factory_make ("memindex");
4837     }
4838     GST_OBJECT_UNLOCK (avi);
4839     /* object lock might be taken again */
4840     gst_index_get_writer_id (avi->element_index, GST_OBJECT_CAST (avi),
4841         &avi->index_id);
4842 #endif
4843   } else {
4844     GST_DEBUG ("avi: deactivating push/chain function");
4845   }
4846
4847   return TRUE;
4848 }
4849
4850 static void
4851 gst_avi_demux_set_index (GstElement * element, GstIndex * index)
4852 {
4853   GstAviDemux *avi = GST_AVI_DEMUX (element);
4854
4855   GST_OBJECT_LOCK (avi);
4856   if (avi->element_index)
4857     gst_object_unref (avi->element_index);
4858   if (index) {
4859     avi->element_index = gst_object_ref (index);
4860   } else {
4861     avi->element_index = NULL;
4862   }
4863   GST_OBJECT_UNLOCK (avi);
4864   /* object lock might be taken again */
4865   if (index)
4866     gst_index_get_writer_id (index, GST_OBJECT_CAST (element), &avi->index_id);
4867   GST_DEBUG_OBJECT (avi, "Set index %" GST_PTR_FORMAT, avi->element_index);
4868 }
4869
4870 static GstIndex *
4871 gst_avi_demux_get_index (GstElement * element)
4872 {
4873   GstIndex *result = NULL;
4874   GstAviDemux *avi = GST_AVI_DEMUX (element);
4875
4876   GST_OBJECT_LOCK (avi);
4877   if (avi->element_index)
4878     result = gst_object_ref (avi->element_index);
4879   GST_OBJECT_UNLOCK (avi);
4880
4881   GST_DEBUG_OBJECT (avi, "Returning index %" GST_PTR_FORMAT, result);
4882
4883   return result;
4884 }
4885
4886 static GstStateChangeReturn
4887 gst_avi_demux_change_state (GstElement * element, GstStateChange transition)
4888 {
4889   GstStateChangeReturn ret;
4890   GstAviDemux *avi = GST_AVI_DEMUX (element);
4891
4892   switch (transition) {
4893     case GST_STATE_CHANGE_READY_TO_PAUSED:
4894       avi->streaming = FALSE;
4895       gst_segment_init (&avi->segment, GST_FORMAT_TIME);
4896       break;
4897     default:
4898       break;
4899   }
4900
4901   ret = GST_ELEMENT_CLASS (parent_class)->change_state (element, transition);
4902   if (ret == GST_STATE_CHANGE_FAILURE)
4903     goto done;
4904
4905   switch (transition) {
4906     case GST_STATE_CHANGE_PAUSED_TO_READY:
4907       gst_avi_demux_reset (avi);
4908       break;
4909     default:
4910       break;
4911   }
4912
4913 done:
4914   return ret;
4915 }