gst/isomp4/gstrtpxqtdepay.c

   1 /* GStreamer
   2  * Copyright (C) <2006> Wim Taymans <wim@fluendo.com>
   3  *
   4  * This library is free software; you can redistribute it and/or
   5  * modify it under the terms of the GNU Library General Public
   6  * License as published by the Free Software Foundation; either
   7  * version 2 of the License, or (at your option) any later version.
   8  *
   9  * This library is distributed in the hope that it will be useful,
  10  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  12  * Library General Public License for more details.
  13  *
  14  * You should have received a copy of the GNU Library General Public
  15  * License along with this library; if not, write to the
  16  * Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  17  * Boston, MA 02111-1307, USA.
  18  */
  19
  20 /*
  21  * based on http://developer.apple.com/quicktime/icefloe/dispatch026.html
  22  */
  23 #ifdef HAVE_CONFIG_H
  24 #  include "config.h"
  25 #endif
  26
  27 #include <gst/rtp/gstrtpbuffer.h>
  28
  29 #include <string.h>
  30 #include "gstrtpxqtdepay.h"
  31
  32 #define MAKE_TLV(a,b)  (((a)<<8)|(b))
  33
  34 #define TLV_sd  MAKE_TLV ('s','d')
  35 #define TLV_qt  MAKE_TLV ('q','t')
  36 #define TLV_ti  MAKE_TLV ('t','i')
  37 #define TLV_ly  MAKE_TLV ('l','y')
  38 #define TLV_vo  MAKE_TLV ('v','o')
  39 #define TLV_mx  MAKE_TLV ('m','x')
  40 #define TLV_tr  MAKE_TLV ('t','r')
  41 #define TLV_tw  MAKE_TLV ('t','w')
  42 #define TLV_th  MAKE_TLV ('t','h')
  43 #define TLV_la  MAKE_TLV ('l','a')
  44 #define TLV_rt  MAKE_TLV ('r','t')
  45 #define TLV_gm  MAKE_TLV ('g','m')
  46 #define TLV_oc  MAKE_TLV ('o','c')
  47 #define TLV_cr  MAKE_TLV ('c','r')
  48 #define TLV_du  MAKE_TLV ('d','u')
  49 #define TLV_po  MAKE_TLV ('p','o')
  50
  51 #define QT_UINT32(a)  (GST_READ_UINT32_BE(a))
  52 #define QT_UINT24(a)  (GST_READ_UINT32_BE(a) >> 8)
  53 #define QT_UINT16(a)  (GST_READ_UINT16_BE(a))
  54 #define QT_UINT8(a)   (GST_READ_UINT8(a))
  55 #define QT_FP32(a)    ((GST_READ_UINT32_BE(a))/65536.0)
  56 #define QT_FP16(a)    ((GST_READ_UINT16_BE(a))/256.0)
  57 #define QT_FOURCC(a)  (GST_READ_UINT32_LE(a))
  58 #define QT_UINT64(a)  ((((guint64)QT_UINT32(a))<<32)|QT_UINT32(((guint8 *)a)+4))
  59
  60 #define FOURCC_avc1     GST_MAKE_FOURCC('a','v','c','1')
  61 #define FOURCC_avcC     GST_MAKE_FOURCC('a','v','c','C')
  62
  63 GST_DEBUG_CATEGORY_STATIC (rtpxqtdepay_debug);
  64 #define GST_CAT_DEFAULT (rtpxqtdepay_debug)
  65
  66 /* RtpXQTDepay signals and args */
  67 enum
  68 {
  69   /* FILL ME */
  70   LAST_SIGNAL
  71 };
  72
  73 enum
  74 {
  75   ARG_0,
  76 };
  77
  78 static GstStaticPadTemplate gst_rtp_xqt_depay_src_template =
  79 GST_STATIC_PAD_TEMPLATE ("src",
  80     GST_PAD_SRC,
  81     GST_PAD_ALWAYS,
  82     GST_STATIC_CAPS_ANY);
  83
  84 static GstStaticPadTemplate gst_rtp_xqt_depay_sink_template =
  85 GST_STATIC_PAD_TEMPLATE ("sink",
  86     GST_PAD_SINK,
  87     GST_PAD_ALWAYS,
  88     GST_STATIC_CAPS ("application/x-rtp, "
  89         "payload = (int) " GST_RTP_PAYLOAD_DYNAMIC_STRING ", "
  90         "media = (string) { \"audio\", \"video\" }, clock-rate = (int) [1, MAX], "
  91         "encoding-name = (string) { \"X-QT\", \"X-QUICKTIME\" }")
  92     );
  93
  94 #define gst_rtp_xqt_depay_parent_class parent_class
  95 G_DEFINE_TYPE (GstRtpXQTDepay, gst_rtp_xqt_depay, GST_TYPE_RTP_BASE_DEPAYLOAD);
  96
  97 static void gst_rtp_xqt_depay_finalize (GObject * object);
  98
  99 static gboolean gst_rtp_xqt_depay_setcaps (GstRTPBaseDepayload * depayload,
 100     GstCaps * caps);
 101 static GstBuffer *gst_rtp_xqt_depay_process (GstRTPBaseDepayload * depayload,
 102     GstBuffer * buf);
 103
 104 static GstStateChangeReturn gst_rtp_xqt_depay_change_state (GstElement *
 105     element, GstStateChange transition);
 106
 107
 108 static void
 109 gst_rtp_xqt_depay_class_init (GstRtpXQTDepayClass * klass)
 110 {
 111   GObjectClass *gobject_class;
 112   GstElementClass *gstelement_class;
 113   GstRTPBaseDepayloadClass *gstrtpbasedepayload_class;
 114
 115   gobject_class = (GObjectClass *) klass;
 116   gstelement_class = (GstElementClass *) klass;
 117   gstrtpbasedepayload_class = (GstRTPBaseDepayloadClass *) klass;
 118
 119   parent_class = g_type_class_peek_parent (klass);
 120
 121   gobject_class->finalize = gst_rtp_xqt_depay_finalize;
 122
 123   gstelement_class->change_state = gst_rtp_xqt_depay_change_state;
 124
 125   gstrtpbasedepayload_class->set_caps = gst_rtp_xqt_depay_setcaps;
 126   gstrtpbasedepayload_class->process = gst_rtp_xqt_depay_process;
 127
 128   GST_DEBUG_CATEGORY_INIT (rtpxqtdepay_debug, "rtpxqtdepay", 0,
 129       "QT Media RTP Depayloader");
 130
 131   gst_element_class_add_pad_template (gstelement_class,
 132       gst_static_pad_template_get (&gst_rtp_xqt_depay_src_template));
 133   gst_element_class_add_pad_template (gstelement_class,
 134       gst_static_pad_template_get (&gst_rtp_xqt_depay_sink_template));
 135
 136   gst_element_class_set_static_metadata (gstelement_class,
 137       "RTP packet depayloader", "Codec/Depayloader/Network",
 138       "Extracts Quicktime audio/video from RTP packets",
 139       "Wim Taymans <wim@fluendo.com>");
 140 }
 141
 142 static void
 143 gst_rtp_xqt_depay_init (GstRtpXQTDepay * rtpxqtdepay)
 144 {
 145   rtpxqtdepay->adapter = gst_adapter_new ();
 146 }
 147
 148 static void
 149 gst_rtp_xqt_depay_finalize (GObject * object)
 150 {
 151   GstRtpXQTDepay *rtpxqtdepay;
 152
 153   rtpxqtdepay = GST_RTP_XQT_DEPAY (object);
 154
 155   g_object_unref (rtpxqtdepay->adapter);
 156   rtpxqtdepay->adapter = NULL;
 157
 158   G_OBJECT_CLASS (parent_class)->finalize (object);
 159 }
 160
 161 static gboolean
 162 gst_rtp_quicktime_parse_sd (GstRtpXQTDepay * rtpxqtdepay, guint8 * data,
 163     guint data_len)
 164 {
 165   gint len;
 166   guint32 fourcc;
 167
 168   if (data_len < 8)
 169     goto too_short;
 170
 171   len = (data[0] << 24) | (data[1] << 16) | (data[2] << 8) | data[3];
 172   if (len > data_len)
 173     goto too_short;
 174
 175   fourcc = QT_FOURCC (data + 4);
 176
 177   GST_DEBUG_OBJECT (rtpxqtdepay, "parsing %" GST_FOURCC_FORMAT,
 178       GST_FOURCC_ARGS (fourcc));
 179
 180   switch (fourcc) {
 181     case FOURCC_avc1:
 182     {
 183       guint32 chlen;
 184
 185       if (len < 0x56)
 186         goto too_short;
 187       len -= 0x56;
 188       data += 0x56;
 189
 190       /* find avcC */
 191       while (len >= 8) {
 192         chlen = QT_UINT32 (data);
 193         fourcc = QT_FOURCC (data + 4);
 194         if (fourcc == FOURCC_avcC) {
 195           GstBuffer *buf;
 196           gint size;
 197           GstCaps *caps;
 198
 199           GST_DEBUG_OBJECT (rtpxqtdepay, "found avcC codec_data in sd, %u",
 200               chlen);
 201
 202           /* parse, if found */
 203           if (chlen < len)
 204             size = chlen - 8;
 205           else
 206             size = len - 8;
 207
 208           buf = gst_buffer_new_and_alloc (size);
 209           gst_buffer_fill (buf, 0, data + 8, size);
 210           caps = gst_caps_new_simple ("video/x-h264",
 211               "codec_data", GST_TYPE_BUFFER, buf, NULL);
 212           gst_buffer_unref (buf);
 213           gst_pad_set_caps (GST_RTP_BASE_DEPAYLOAD (rtpxqtdepay)->srcpad, caps);
 214           gst_caps_unref (caps);
 215           break;
 216         }
 217         len -= chlen;
 218         data += chlen;
 219       }
 220       break;
 221     }
 222     default:
 223       break;
 224   }
 225   return TRUE;
 226
 227   /* ERRORS */
 228 too_short:
 229   {
 230     return FALSE;
 231   }
 232 }
 233
 234 static gboolean
 235 gst_rtp_xqt_depay_setcaps (GstRTPBaseDepayload * depayload, GstCaps * caps)
 236 {
 237   GstStructure *structure;
 238   gint clock_rate = 90000;      /* default */
 239
 240   structure = gst_caps_get_structure (caps, 0);
 241
 242   gst_structure_get_int (structure, "clock-rate", &clock_rate);
 243   depayload->clock_rate = clock_rate;
 244
 245   return TRUE;
 246 }
 247
 248 static GstBuffer *
 249 gst_rtp_xqt_depay_process (GstRTPBaseDepayload * depayload, GstBuffer * buf)
 250 {
 251   GstRtpXQTDepay *rtpxqtdepay;
 252   GstBuffer *outbuf = NULL;
 253   gboolean m;
 254   GstRTPBuffer rtp = { NULL };
 255
 256   rtpxqtdepay = GST_RTP_XQT_DEPAY (depayload);
 257
 258   gst_rtp_buffer_map (buf, GST_MAP_READ, &rtp);
 259
 260   if (!gst_rtp_buffer_validate (buf))
 261     goto bad_packet;
 262
 263   if (GST_BUFFER_IS_DISCONT (buf)) {
 264     /* discont, clear adapter and try to find a new packet start */
 265     gst_adapter_clear (rtpxqtdepay->adapter);
 266     rtpxqtdepay->need_resync = TRUE;
 267     GST_DEBUG_OBJECT (rtpxqtdepay, "we need resync");
 268   }
 269
 270   m = gst_rtp_buffer_get_marker (&rtp);
 271   GST_LOG_OBJECT (rtpxqtdepay, "marker: %d", m);
 272
 273   {
 274     gint payload_len;
 275     guint avail;
 276     guint8 *payload;
 277     guint8 ver, pck;
 278     gboolean s, q, l, d;
 279
 280     payload_len = gst_rtp_buffer_get_payload_len (&rtp);
 281     payload = gst_rtp_buffer_get_payload (&rtp);
 282
 283     /*                      1                   2                   3
 284      *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 285      * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 286      * | VER   |PCK|S|Q|L| RES         |D| QuickTime Payload ID        |
 287      * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 288      */
 289     if (payload_len <= 4)
 290       goto wrong_length;
 291
 292     ver = (payload[0] & 0xf0) >> 4;
 293     if (ver > 1)
 294       goto wrong_version;
 295
 296     pck = (payload[0] & 0x0c) >> 2;
 297     if (pck == 0)
 298       goto pck_reserved;
 299
 300     s = (payload[0] & 0x02) != 0;       /* contains sync sample */
 301     q = (payload[0] & 0x01) != 0;       /* has payload description */
 302     l = (payload[1] & 0x80) != 0;       /* has packet specific information description */
 303     d = (payload[2] & 0x80) != 0;       /* don't cache info for payload id */
 304     /* id used for caching info */
 305     rtpxqtdepay->current_id = ((payload[2] & 0x7f) << 8) | payload[3];
 306
 307     GST_LOG_OBJECT (rtpxqtdepay,
 308         "VER: %d, PCK: %d, S: %d, Q: %d, L: %d, D: %d, ID: %d", ver, pck, s, q,
 309         l, d, rtpxqtdepay->current_id);
 310
 311     if (rtpxqtdepay->need_resync) {
 312       /* we need to find the boundary of a new packet after a DISCONT */
 313       if (pck != 3 || q) {
 314         /* non-fragmented packet or payload description present, packet starts
 315          * here. */
 316         rtpxqtdepay->need_resync = FALSE;
 317       } else {
 318         /* fragmented packet without description */
 319         if (m) {
 320           /* marker bit set, next packet is start of new one */
 321           rtpxqtdepay->need_resync = FALSE;
 322         }
 323         goto need_resync;
 324       }
 325     }
 326
 327     payload += 4;
 328     payload_len -= 4;
 329
 330     if (q) {
 331       gboolean k, f, a, z;
 332       guint pdlen, pdpadded;
 333       gint padding;
 334       /* media_type only used for printing */
 335       guint32 G_GNUC_UNUSED media_type;
 336       guint32 timescale;
 337
 338       /*                      1                   2                   3
 339        *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 340        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 341        * |K|F|A|Z| RES                   | QuickTime Payload Desc Length |
 342        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 343        * . QuickTime Payload Desc Data ... .
 344        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 345        */
 346       if (payload_len <= 4)
 347         goto wrong_length;
 348
 349       k = (payload[0] & 0x80) != 0;     /* keyframe */
 350       f = (payload[0] & 0x40) != 0;     /* sparse */
 351       a = (payload[0] & 0x20) != 0;     /* start of payload */
 352       z = (payload[0] & 0x10) != 0;     /* end of payload */
 353       pdlen = (payload[2] << 8) | payload[3];
 354
 355       if (pdlen < 12)
 356         goto wrong_length;
 357
 358       /* calc padding */
 359       pdpadded = pdlen + 3;
 360       pdpadded -= pdpadded % 4;
 361       if (payload_len < pdpadded)
 362         goto wrong_length;
 363
 364       padding = pdpadded - pdlen;
 365       GST_LOG_OBJECT (rtpxqtdepay,
 366           "K: %d, F: %d, A: %d, Z: %d, len: %d, padding %d", k, f, a, z, pdlen,
 367           padding);
 368
 369       payload += 4;
 370       payload_len -= 4;
 371       /*                      1                   2                   3
 372        *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 373        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 374        * | QuickTime Media Type                                          |
 375        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 376        * | Timescale                                                     |
 377        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 378        * . QuickTime TLVs ... .
 379        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 380        */
 381       media_type =
 382           (payload[0] << 24) | (payload[1] << 16) | (payload[2] << 8) |
 383           payload[3];
 384       timescale =
 385           (payload[4] << 24) | (payload[5] << 16) | (payload[6] << 8) |
 386           payload[7];
 387
 388       GST_LOG_OBJECT (rtpxqtdepay, "media_type: %c%c%c%c, timescale %u",
 389           payload[0], payload[1], payload[2], payload[3], timescale);
 390
 391       payload += 8;
 392       payload_len -= 8;
 393       pdlen -= 12;
 394
 395       /* parse TLV (type-length-value triplets */
 396       while (pdlen > 3) {
 397         guint16 tlv_len, tlv_type;
 398
 399         /*                      1                   2                   3
 400          *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 401          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 402          * | QuickTime TLV Length          | QuickTime TLV Type            |
 403          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 404          * . QuickTime TLV Value ... .
 405          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 406          */
 407         tlv_len = (payload[0] << 8) | payload[1];
 408         tlv_type = (payload[2] << 8) | payload[3];
 409         pdlen -= 4;
 410         if (tlv_len > pdlen)
 411           goto wrong_length;
 412
 413         GST_LOG_OBJECT (rtpxqtdepay, "TLV '%c%c', len %d", payload[2],
 414             payload[3], tlv_len);
 415
 416         payload += 4;
 417         payload_len -= 4;
 418
 419         switch (tlv_type) {
 420           case TLV_sd:
 421             /* Session description */
 422             if (!gst_rtp_quicktime_parse_sd (rtpxqtdepay, payload, tlv_len))
 423               goto unknown_format;
 424             rtpxqtdepay->have_sd = TRUE;
 425             break;
 426           case TLV_qt:
 427           case TLV_ti:
 428           case TLV_ly:
 429           case TLV_vo:
 430           case TLV_mx:
 431           case TLV_tr:
 432           case TLV_tw:
 433           case TLV_th:
 434           case TLV_la:
 435           case TLV_rt:
 436           case TLV_gm:
 437           case TLV_oc:
 438           case TLV_cr:
 439           case TLV_du:
 440           case TLV_po:
 441           default:
 442             break;
 443         }
 444
 445         pdlen -= tlv_len;
 446         payload += tlv_len;
 447         payload_len -= tlv_len;
 448       }
 449       payload += padding;
 450       payload_len -= padding;
 451     }
 452
 453     if (l) {
 454       guint ssilen, ssipadded;
 455       gint padding;
 456
 457       /*                      1                   2                   3
 458        *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 459        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 460        * | RES                           | Sample-Specific Info Length   |
 461        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 462        * . QuickTime TLVs ...
 463        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 464        */
 465       if (payload_len <= 4)
 466         goto wrong_length;
 467
 468       ssilen = (payload[2] << 8) | payload[3];
 469       if (ssilen < 4)
 470         goto wrong_length;
 471
 472       /* calc padding */
 473       ssipadded = ssilen + 3;
 474       ssipadded -= ssipadded % 4;
 475       if (payload_len < ssipadded)
 476         goto wrong_length;
 477
 478       padding = ssipadded - ssilen;
 479       GST_LOG_OBJECT (rtpxqtdepay, "len: %d, padding %d", ssilen, padding);
 480
 481       payload += 4;
 482       payload_len -= 4;
 483       ssilen -= 4;
 484
 485       /* parse TLV (type-length-value triplets */
 486       while (ssilen > 3) {
 487         guint16 tlv_len, tlv_type;
 488
 489         /*                      1                   2                   3
 490          *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 491          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 492          * | QuickTime TLV Length          | QuickTime TLV Type            |
 493          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 494          * . QuickTime TLV Value ... .
 495          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 496          */
 497         tlv_len = (payload[0] << 8) | payload[1];
 498         tlv_type = (payload[2] << 8) | payload[3];
 499         ssilen -= 4;
 500         if (tlv_len > ssilen)
 501           goto wrong_length;
 502
 503         GST_LOG_OBJECT (rtpxqtdepay, "TLV '%c%c', len %d", payload[2],
 504             payload[3], tlv_len);
 505
 506         payload += 4;
 507         payload_len -= 4;
 508
 509         switch (tlv_type) {
 510           case TLV_sd:
 511           case TLV_qt:
 512           case TLV_ti:
 513           case TLV_ly:
 514           case TLV_vo:
 515           case TLV_mx:
 516           case TLV_tr:
 517           case TLV_tw:
 518           case TLV_th:
 519           case TLV_la:
 520           case TLV_rt:
 521           case TLV_gm:
 522           case TLV_oc:
 523           case TLV_cr:
 524           case TLV_du:
 525           case TLV_po:
 526           default:
 527             break;
 528         }
 529
 530         ssilen -= tlv_len;
 531         payload += tlv_len;
 532         payload_len -= tlv_len;
 533       }
 534       payload += padding;
 535       payload_len -= padding;
 536     }
 537
 538     rtpxqtdepay->previous_id = rtpxqtdepay->current_id;
 539
 540     switch (pck) {
 541       case 1:
 542       {
 543         /* multiple samples per packet. */
 544         outbuf = gst_buffer_new_and_alloc (payload_len);
 545         gst_buffer_fill (outbuf, 0, payload, payload_len);
 546
 547         goto done;
 548       }
 549       case 2:
 550       {
 551         guint slen;
 552
 553         /* multiple samples per packet.
 554          *                      1                   2                   3
 555          *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 556          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 557          * |S| Reserved                    | Sample Length                 |
 558          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 559          * | Sample Timestamp                                              |
 560          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 561          * . Sample Data ...                                               .
 562          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 563          * |S| Reserved                    | Sample Length                 |
 564          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 565          * | Sample Timestamp                                              |
 566          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 567          * . Sample Data ...                                               .
 568          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 569          * . ......                                                        .
 570          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 571          */
 572         while (payload_len > 8) {
 573           s = (payload[0] & 0x80) != 0; /* contains sync sample */
 574           slen = (payload[2] << 8) | payload[3];
 575           /* timestamp =
 576            *    (payload[4] << 24) | (payload[5] << 16) | (payload[6] << 8) |
 577            *    payload[7];
 578            */
 579
 580           payload += 8;
 581           payload_len -= 8;
 582
 583           if (slen > payload_len)
 584             slen = payload_len;
 585
 586           outbuf = gst_buffer_new_and_alloc (slen);
 587           gst_buffer_fill (outbuf, 0, payload, slen);
 588           if (!s)
 589             GST_BUFFER_FLAG_SET (outbuf, GST_BUFFER_FLAG_DELTA_UNIT);
 590
 591           gst_rtp_base_depayload_push (depayload, outbuf);
 592
 593           /* aligned on 32 bit boundary */
 594           slen = GST_ROUND_UP_4 (slen);
 595
 596           payload += slen;
 597           payload_len -= slen;
 598         }
 599         break;
 600       }
 601       case 3:
 602       {
 603         /* one sample per packet, use adapter to combine based on marker bit. */
 604         outbuf = gst_buffer_new_and_alloc (payload_len);
 605         gst_buffer_fill (outbuf, 0, payload, payload_len);
 606
 607         gst_adapter_push (rtpxqtdepay->adapter, outbuf);
 608
 609         if (!m)
 610           goto done;
 611
 612         avail = gst_adapter_available (rtpxqtdepay->adapter);
 613         outbuf = gst_adapter_take_buffer (rtpxqtdepay->adapter, avail);
 614
 615         GST_DEBUG_OBJECT (rtpxqtdepay,
 616             "gst_rtp_xqt_depay_chain: pushing buffer of size %u", avail);
 617
 618         goto done;
 619       }
 620     }
 621   }
 622
 623 done:
 624   gst_rtp_buffer_unmap (&rtp);
 625   return outbuf;
 626
 627 bad_packet:
 628   {
 629     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 630         ("Packet did not validate."), (NULL));
 631     goto done;
 632   }
 633 need_resync:
 634   {
 635     GST_DEBUG_OBJECT (rtpxqtdepay, "waiting for marker");
 636     goto done;
 637   }
 638 wrong_version:
 639   {
 640     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 641         ("Unknown payload version."), (NULL));
 642     goto done;
 643   }
 644 pck_reserved:
 645   {
 646     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 647         ("PCK reserved 0."), (NULL));
 648     goto done;
 649   }
 650 wrong_length:
 651   {
 652     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 653         ("Wrong payload length."), (NULL));
 654     goto done;
 655   }
 656 unknown_format:
 657   {
 658     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 659         ("Unknown payload format."), (NULL));
 660     goto done;
 661   }
 662 }
 663
 664 static GstStateChangeReturn
 665 gst_rtp_xqt_depay_change_state (GstElement * element, GstStateChange transition)
 666 {
 667   GstRtpXQTDepay *rtpxqtdepay;
 668   GstStateChangeReturn ret;
 669
 670   rtpxqtdepay = GST_RTP_XQT_DEPAY (element);
 671
 672   switch (transition) {
 673     case GST_STATE_CHANGE_READY_TO_PAUSED:
 674       gst_adapter_clear (rtpxqtdepay->adapter);
 675       rtpxqtdepay->previous_id = -1;
 676       rtpxqtdepay->current_id = -1;
 677       rtpxqtdepay->need_resync = TRUE;
 678       rtpxqtdepay->have_sd = FALSE;
 679       break;
 680     default:
 681       break;
 682   }
 683
 684   ret = GST_ELEMENT_CLASS (parent_class)->change_state (element, transition);
 685
 686   switch (transition) {
 687     case GST_STATE_CHANGE_PAUSED_TO_READY:
 688       gst_adapter_clear (rtpxqtdepay->adapter);
 689     default:
 690       break;
 691   }
 692   return ret;
 693 }