gst/isomp4/gstrtpxqtdepay.c

   1 /* GStreamer
   2  * Copyright (C) <2006> Wim Taymans <wim@fluendo.com>
   3  *
   4  * This library is free software; you can redistribute it and/or
   5  * modify it under the terms of the GNU Library General Public
   6  * License as published by the Free Software Foundation; either
   7  * version 2 of the License, or (at your option) any later version.
   8  *
   9  * This library is distributed in the hope that it will be useful,
  10  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  12  * Library General Public License for more details.
  13  *
  14  * You should have received a copy of the GNU Library General Public
  15  * License along with this library; if not, write to the
  16  * Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  17  * Boston, MA 02111-1307, USA.
  18  */
  19
  20 /*
  21  * based on http://developer.apple.com/quicktime/icefloe/dispatch026.html
  22  */
  23 #ifdef HAVE_CONFIG_H
  24 #  include "config.h"
  25 #endif
  26
  27 #include <gst/rtp/gstrtpbuffer.h>
  28
  29 #include <string.h>
  30 #include "gstrtpxqtdepay.h"
  31
  32 #define MAKE_TLV(a,b)  (((a)<<8)|(b))
  33
  34 #define TLV_sd  MAKE_TLV ('s','d')
  35 #define TLV_qt  MAKE_TLV ('q','t')
  36 #define TLV_ti  MAKE_TLV ('t','i')
  37 #define TLV_ly  MAKE_TLV ('l','y')
  38 #define TLV_vo  MAKE_TLV ('v','o')
  39 #define TLV_mx  MAKE_TLV ('m','x')
  40 #define TLV_tr  MAKE_TLV ('t','r')
  41 #define TLV_tw  MAKE_TLV ('t','w')
  42 #define TLV_th  MAKE_TLV ('t','h')
  43 #define TLV_la  MAKE_TLV ('l','a')
  44 #define TLV_rt  MAKE_TLV ('r','t')
  45 #define TLV_gm  MAKE_TLV ('g','m')
  46 #define TLV_oc  MAKE_TLV ('o','c')
  47 #define TLV_cr  MAKE_TLV ('c','r')
  48 #define TLV_du  MAKE_TLV ('d','u')
  49 #define TLV_po  MAKE_TLV ('p','o')
  50
  51 #define QT_UINT32(a)  (GST_READ_UINT32_BE(a))
  52 #define QT_UINT24(a)  (GST_READ_UINT32_BE(a) >> 8)
  53 #define QT_UINT16(a)  (GST_READ_UINT16_BE(a))
  54 #define QT_UINT8(a)   (GST_READ_UINT8(a))
  55 #define QT_FP32(a)    ((GST_READ_UINT32_BE(a))/65536.0)
  56 #define QT_FP16(a)    ((GST_READ_UINT16_BE(a))/256.0)
  57 #define QT_FOURCC(a)  (GST_READ_UINT32_LE(a))
  58 #define QT_UINT64(a)  ((((guint64)QT_UINT32(a))<<32)|QT_UINT32(((guint8 *)a)+4))
  59
  60 #define FOURCC_avc1     GST_MAKE_FOURCC('a','v','c','1')
  61 #define FOURCC_avcC     GST_MAKE_FOURCC('a','v','c','C')
  62
  63 GST_DEBUG_CATEGORY_STATIC (rtpxqtdepay_debug);
  64 #define GST_CAT_DEFAULT (rtpxqtdepay_debug)
  65
  66 /* RtpXQTDepay signals and args */
  67 enum
  68 {
  69   /* FILL ME */
  70   LAST_SIGNAL
  71 };
  72
  73 enum
  74 {
  75   ARG_0,
  76 };
  77
  78 static GstStaticPadTemplate gst_rtp_xqt_depay_src_template =
  79 GST_STATIC_PAD_TEMPLATE ("src",
  80     GST_PAD_SRC,
  81     GST_PAD_ALWAYS,
  82     GST_STATIC_CAPS_ANY);
  83
  84 static GstStaticPadTemplate gst_rtp_xqt_depay_sink_template =
  85 GST_STATIC_PAD_TEMPLATE ("sink",
  86     GST_PAD_SINK,
  87     GST_PAD_ALWAYS,
  88     GST_STATIC_CAPS ("application/x-rtp, "
  89         "payload = (int) " GST_RTP_PAYLOAD_DYNAMIC_STRING ", "
  90         "media = (string) { \"audio\", \"video\" }, clock-rate = (int) [1, MAX], "
  91         "encoding-name = (string) { \"X-QT\", \"X-QUICKTIME\" }")
  92     );
  93
  94 #define gst_rtp_xqt_depay_parent_class parent_class
  95 G_DEFINE_TYPE (GstRtpXQTDepay, gst_rtp_xqt_depay, GST_TYPE_BASE_RTP_DEPAYLOAD);
  96
  97 static void gst_rtp_xqt_depay_finalize (GObject * object);
  98
  99 static gboolean gst_rtp_xqt_depay_setcaps (GstBaseRTPDepayload * depayload,
 100     GstCaps * caps);
 101 static GstBuffer *gst_rtp_xqt_depay_process (GstBaseRTPDepayload * depayload,
 102     GstBuffer * buf);
 103
 104 static GstStateChangeReturn gst_rtp_xqt_depay_change_state (GstElement *
 105     element, GstStateChange transition);
 106
 107
 108 static void
 109 gst_rtp_xqt_depay_class_init (GstRtpXQTDepayClass * klass)
 110 {
 111   GObjectClass *gobject_class;
 112   GstElementClass *gstelement_class;
 113   GstBaseRTPDepayloadClass *gstbasertpdepayload_class;
 114
 115   gobject_class = (GObjectClass *) klass;
 116   gstelement_class = (GstElementClass *) klass;
 117   gstbasertpdepayload_class = (GstBaseRTPDepayloadClass *) klass;
 118
 119   parent_class = g_type_class_peek_parent (klass);
 120
 121   gobject_class->finalize = gst_rtp_xqt_depay_finalize;
 122
 123   gstelement_class->change_state = gst_rtp_xqt_depay_change_state;
 124
 125   gstbasertpdepayload_class->set_caps = gst_rtp_xqt_depay_setcaps;
 126   gstbasertpdepayload_class->process = gst_rtp_xqt_depay_process;
 127
 128   GST_DEBUG_CATEGORY_INIT (rtpxqtdepay_debug, "rtpxqtdepay", 0,
 129       "QT Media RTP Depayloader");
 130
 131   gst_element_class_add_pad_template (gstelement_class,
 132       gst_static_pad_template_get (&gst_rtp_xqt_depay_src_template));
 133   gst_element_class_add_pad_template (gstelement_class,
 134       gst_static_pad_template_get (&gst_rtp_xqt_depay_sink_template));
 135
 136   gst_element_class_set_details_simple (gstelement_class,
 137       "RTP packet depayloader", "Codec/Depayloader/Network",
 138       "Extracts Quicktime audio/video from RTP packets",
 139       "Wim Taymans <wim@fluendo.com>");
 140 }
 141
 142 static void
 143 gst_rtp_xqt_depay_init (GstRtpXQTDepay * rtpxqtdepay)
 144 {
 145   rtpxqtdepay->adapter = gst_adapter_new ();
 146 }
 147
 148 static void
 149 gst_rtp_xqt_depay_finalize (GObject * object)
 150 {
 151   GstRtpXQTDepay *rtpxqtdepay;
 152
 153   rtpxqtdepay = GST_RTP_XQT_DEPAY (object);
 154
 155   g_object_unref (rtpxqtdepay->adapter);
 156   rtpxqtdepay->adapter = NULL;
 157
 158   G_OBJECT_CLASS (parent_class)->finalize (object);
 159 }
 160
 161 static gboolean
 162 gst_rtp_quicktime_parse_sd (GstRtpXQTDepay * rtpxqtdepay, guint8 * data,
 163     guint data_len)
 164 {
 165   gint len;
 166   guint32 fourcc;
 167
 168   if (data_len < 8)
 169     goto too_short;
 170
 171   len = (data[0] << 24) | (data[1] << 16) | (data[2] << 8) | data[3];
 172   if (len > data_len)
 173     goto too_short;
 174
 175   fourcc = QT_FOURCC (data + 4);
 176
 177   GST_DEBUG_OBJECT (rtpxqtdepay, "parsing %" GST_FOURCC_FORMAT,
 178       GST_FOURCC_ARGS (fourcc));
 179
 180   switch (fourcc) {
 181     case FOURCC_avc1:
 182     {
 183       guint32 chlen;
 184
 185       if (len < 0x56)
 186         goto too_short;
 187       len -= 0x56;
 188       data += 0x56;
 189
 190       /* find avcC */
 191       while (len >= 8) {
 192         chlen = QT_UINT32 (data);
 193         fourcc = QT_FOURCC (data + 4);
 194         if (fourcc == FOURCC_avcC) {
 195           GstBuffer *buf;
 196           gint size;
 197           GstCaps *caps;
 198           guint8 *bdata;
 199
 200           GST_DEBUG_OBJECT (rtpxqtdepay, "found avcC codec_data in sd, %u",
 201               chlen);
 202
 203           /* parse, if found */
 204           if (chlen < len)
 205             size = chlen - 8;
 206           else
 207             size = len - 8;
 208
 209           buf = gst_buffer_new_and_alloc (size);
 210           bdata = gst_buffer_map (buf, NULL, NULL, GST_MAP_WRITE);
 211           memcpy (bdata, data + 8, size);
 212           gst_buffer_unmap (buf, bdata, -1);
 213           caps = gst_caps_new_simple ("video/x-h264",
 214               "codec_data", GST_TYPE_BUFFER, buf, NULL);
 215           gst_buffer_unref (buf);
 216           gst_pad_set_caps (GST_BASE_RTP_DEPAYLOAD (rtpxqtdepay)->srcpad, caps);
 217           gst_caps_unref (caps);
 218           break;
 219         }
 220         len -= chlen;
 221         data += chlen;
 222       }
 223       break;
 224     }
 225     default:
 226       break;
 227   }
 228   return TRUE;
 229
 230   /* ERRORS */
 231 too_short:
 232   {
 233     return FALSE;
 234   }
 235 }
 236
 237 static gboolean
 238 gst_rtp_xqt_depay_setcaps (GstBaseRTPDepayload * depayload, GstCaps * caps)
 239 {
 240   GstStructure *structure;
 241   gint clock_rate = 90000;      /* default */
 242
 243   structure = gst_caps_get_structure (caps, 0);
 244
 245   gst_structure_get_int (structure, "clock-rate", &clock_rate);
 246   depayload->clock_rate = clock_rate;
 247
 248   return TRUE;
 249 }
 250
 251 static GstBuffer *
 252 gst_rtp_xqt_depay_process (GstBaseRTPDepayload * depayload, GstBuffer * buf)
 253 {
 254   GstRtpXQTDepay *rtpxqtdepay;
 255   GstBuffer *outbuf = NULL;
 256   gboolean m;
 257   GstRTPBuffer rtp;
 258
 259   rtpxqtdepay = GST_RTP_XQT_DEPAY (depayload);
 260
 261   gst_rtp_buffer_map (buf, GST_MAP_READ, &rtp);
 262
 263   if (!gst_rtp_buffer_validate (buf))
 264     goto bad_packet;
 265
 266   if (GST_BUFFER_IS_DISCONT (buf)) {
 267     /* discont, clear adapter and try to find a new packet start */
 268     gst_adapter_clear (rtpxqtdepay->adapter);
 269     rtpxqtdepay->need_resync = TRUE;
 270     GST_DEBUG_OBJECT (rtpxqtdepay, "we need resync");
 271   }
 272
 273   m = gst_rtp_buffer_get_marker (&rtp);
 274   GST_LOG_OBJECT (rtpxqtdepay, "marker: %d", m);
 275
 276   {
 277     gint payload_len;
 278     guint avail;
 279     guint8 *payload;
 280     guint8 ver, pck;
 281     gboolean s, q, l, d;
 282     guint8 *bdata;
 283     gsize bsize;
 284
 285     payload_len = gst_rtp_buffer_get_payload_len (&rtp);
 286     payload = gst_rtp_buffer_get_payload (&rtp);
 287
 288     /*                      1                   2                   3
 289      *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 290      * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 291      * | VER   |PCK|S|Q|L| RES         |D| QuickTime Payload ID        |
 292      * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 293      */
 294     if (payload_len <= 4)
 295       goto wrong_length;
 296
 297     ver = (payload[0] & 0xf0) >> 4;
 298     if (ver > 1)
 299       goto wrong_version;
 300
 301     pck = (payload[0] & 0x0c) >> 2;
 302     if (pck == 0)
 303       goto pck_reserved;
 304
 305     s = (payload[0] & 0x02) != 0;       /* contains sync sample */
 306     q = (payload[0] & 0x01) != 0;       /* has payload description */
 307     l = (payload[1] & 0x80) != 0;       /* has packet specific information description */
 308     d = (payload[2] & 0x80) != 0;       /* don't cache info for payload id */
 309     /* id used for caching info */
 310     rtpxqtdepay->current_id = ((payload[2] & 0x7f) << 8) | payload[3];
 311
 312     GST_LOG_OBJECT (rtpxqtdepay,
 313         "VER: %d, PCK: %d, S: %d, Q: %d, L: %d, D: %d, ID: %d", ver, pck, s, q,
 314         l, d, rtpxqtdepay->current_id);
 315
 316     if (rtpxqtdepay->need_resync) {
 317       /* we need to find the boundary of a new packet after a DISCONT */
 318       if (pck != 3 || q) {
 319         /* non-fragmented packet or payload description present, packet starts
 320          * here. */
 321         rtpxqtdepay->need_resync = FALSE;
 322       } else {
 323         /* fragmented packet without description */
 324         if (m) {
 325           /* marker bit set, next packet is start of new one */
 326           rtpxqtdepay->need_resync = FALSE;
 327         }
 328         goto need_resync;
 329       }
 330     }
 331
 332     payload += 4;
 333     payload_len -= 4;
 334
 335     if (q) {
 336       gboolean k, f, a, z;
 337       guint pdlen, pdpadded;
 338       gint padding;
 339       /* media_type only used for printing */
 340       guint32 G_GNUC_UNUSED media_type;
 341       guint32 timescale;
 342
 343       /*                      1                   2                   3
 344        *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 345        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 346        * |K|F|A|Z| RES                   | QuickTime Payload Desc Length |
 347        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 348        * . QuickTime Payload Desc Data ... .
 349        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 350        */
 351       if (payload_len <= 4)
 352         goto wrong_length;
 353
 354       k = (payload[0] & 0x80) != 0;     /* keyframe */
 355       f = (payload[0] & 0x40) != 0;     /* sparse */
 356       a = (payload[0] & 0x20) != 0;     /* start of payload */
 357       z = (payload[0] & 0x10) != 0;     /* end of payload */
 358       pdlen = (payload[2] << 8) | payload[3];
 359
 360       if (pdlen < 12)
 361         goto wrong_length;
 362
 363       /* calc padding */
 364       pdpadded = pdlen + 3;
 365       pdpadded -= pdpadded % 4;
 366       if (payload_len < pdpadded)
 367         goto wrong_length;
 368
 369       padding = pdpadded - pdlen;
 370       GST_LOG_OBJECT (rtpxqtdepay,
 371           "K: %d, F: %d, A: %d, Z: %d, len: %d, padding %d", k, f, a, z, pdlen,
 372           padding);
 373
 374       payload += 4;
 375       payload_len -= 4;
 376       /*                      1                   2                   3
 377        *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 378        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 379        * | QuickTime Media Type                                          |
 380        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 381        * | Timescale                                                     |
 382        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 383        * . QuickTime TLVs ... .
 384        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 385        */
 386       media_type =
 387           (payload[0] << 24) | (payload[1] << 16) | (payload[2] << 8) |
 388           payload[3];
 389       timescale =
 390           (payload[4] << 24) | (payload[5] << 16) | (payload[6] << 8) |
 391           payload[7];
 392
 393       GST_LOG_OBJECT (rtpxqtdepay, "media_type: %c%c%c%c, timescale %u",
 394           payload[0], payload[1], payload[2], payload[3], timescale);
 395
 396       payload += 8;
 397       payload_len -= 8;
 398       pdlen -= 12;
 399
 400       /* parse TLV (type-length-value triplets */
 401       while (pdlen > 3) {
 402         guint16 tlv_len, tlv_type;
 403
 404         /*                      1                   2                   3
 405          *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 406          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 407          * | QuickTime TLV Length          | QuickTime TLV Type            |
 408          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 409          * . QuickTime TLV Value ... .
 410          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 411          */
 412         tlv_len = (payload[0] << 8) | payload[1];
 413         tlv_type = (payload[2] << 8) | payload[3];
 414         pdlen -= 4;
 415         if (tlv_len > pdlen)
 416           goto wrong_length;
 417
 418         GST_LOG_OBJECT (rtpxqtdepay, "TLV '%c%c', len %d", payload[2],
 419             payload[3], tlv_len);
 420
 421         payload += 4;
 422         payload_len -= 4;
 423
 424         switch (tlv_type) {
 425           case TLV_sd:
 426             /* Session description */
 427             if (!gst_rtp_quicktime_parse_sd (rtpxqtdepay, payload, tlv_len))
 428               goto unknown_format;
 429             rtpxqtdepay->have_sd = TRUE;
 430             break;
 431           case TLV_qt:
 432           case TLV_ti:
 433           case TLV_ly:
 434           case TLV_vo:
 435           case TLV_mx:
 436           case TLV_tr:
 437           case TLV_tw:
 438           case TLV_th:
 439           case TLV_la:
 440           case TLV_rt:
 441           case TLV_gm:
 442           case TLV_oc:
 443           case TLV_cr:
 444           case TLV_du:
 445           case TLV_po:
 446           default:
 447             break;
 448         }
 449
 450         pdlen -= tlv_len;
 451         payload += tlv_len;
 452         payload_len -= tlv_len;
 453       }
 454       payload += padding;
 455       payload_len -= padding;
 456     }
 457
 458     if (l) {
 459       guint ssilen, ssipadded;
 460       gint padding;
 461
 462       /*                      1                   2                   3
 463        *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 464        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 465        * | RES                           | Sample-Specific Info Length   |
 466        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 467        * . QuickTime TLVs ...
 468        * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 469        */
 470       if (payload_len <= 4)
 471         goto wrong_length;
 472
 473       ssilen = (payload[2] << 8) | payload[3];
 474       if (ssilen < 4)
 475         goto wrong_length;
 476
 477       /* calc padding */
 478       ssipadded = ssilen + 3;
 479       ssipadded -= ssipadded % 4;
 480       if (payload_len < ssipadded)
 481         goto wrong_length;
 482
 483       padding = ssipadded - ssilen;
 484       GST_LOG_OBJECT (rtpxqtdepay, "len: %d, padding %d", ssilen, padding);
 485
 486       payload += 4;
 487       payload_len -= 4;
 488       ssilen -= 4;
 489
 490       /* parse TLV (type-length-value triplets */
 491       while (ssilen > 3) {
 492         guint16 tlv_len, tlv_type;
 493
 494         /*                      1                   2                   3
 495          *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 496          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 497          * | QuickTime TLV Length          | QuickTime TLV Type            |
 498          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 499          * . QuickTime TLV Value ... .
 500          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 501          */
 502         tlv_len = (payload[0] << 8) | payload[1];
 503         tlv_type = (payload[2] << 8) | payload[3];
 504         ssilen -= 4;
 505         if (tlv_len > ssilen)
 506           goto wrong_length;
 507
 508         GST_LOG_OBJECT (rtpxqtdepay, "TLV '%c%c', len %d", payload[2],
 509             payload[3], tlv_len);
 510
 511         payload += 4;
 512         payload_len -= 4;
 513
 514         switch (tlv_type) {
 515           case TLV_sd:
 516           case TLV_qt:
 517           case TLV_ti:
 518           case TLV_ly:
 519           case TLV_vo:
 520           case TLV_mx:
 521           case TLV_tr:
 522           case TLV_tw:
 523           case TLV_th:
 524           case TLV_la:
 525           case TLV_rt:
 526           case TLV_gm:
 527           case TLV_oc:
 528           case TLV_cr:
 529           case TLV_du:
 530           case TLV_po:
 531           default:
 532             break;
 533         }
 534
 535         ssilen -= tlv_len;
 536         payload += tlv_len;
 537         payload_len -= tlv_len;
 538       }
 539       payload += padding;
 540       payload_len -= padding;
 541     }
 542
 543     rtpxqtdepay->previous_id = rtpxqtdepay->current_id;
 544
 545     switch (pck) {
 546       case 1:
 547       {
 548         /* multiple samples per packet. */
 549         outbuf = gst_buffer_new_and_alloc (payload_len);
 550         bdata = gst_buffer_map (outbuf, &bsize, NULL, GST_MAP_WRITE);
 551         memcpy (bdata, payload, payload_len);
 552         gst_buffer_unmap (outbuf, bdata, bsize);
 553
 554         goto done;
 555       }
 556       case 2:
 557       {
 558         guint slen;
 559
 560         /* multiple samples per packet.
 561          *                      1                   2                   3
 562          *  0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
 563          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 564          * |S| Reserved                    | Sample Length                 |
 565          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 566          * | Sample Timestamp                                              |
 567          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 568          * . Sample Data ...                                               .
 569          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 570          * |S| Reserved                    | Sample Length                 |
 571          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 572          * | Sample Timestamp                                              |
 573          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 574          * . Sample Data ...                                               .
 575          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 576          * . ......                                                        .
 577          * +-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
 578          */
 579         while (payload_len > 8) {
 580           s = (payload[0] & 0x80) != 0; /* contains sync sample */
 581           slen = (payload[2] << 8) | payload[3];
 582           /* timestamp =
 583            *    (payload[4] << 24) | (payload[5] << 16) | (payload[6] << 8) |
 584            *    payload[7];
 585            */
 586
 587           payload += 8;
 588           payload_len -= 8;
 589
 590           if (slen > payload_len)
 591             slen = payload_len;
 592
 593           outbuf = gst_buffer_new_and_alloc (slen);
 594           bdata = gst_buffer_map (outbuf, &bsize, NULL, GST_MAP_WRITE);
 595           memcpy (bdata, payload, slen);
 596           gst_buffer_unmap (outbuf, bdata, bsize);
 597           if (!s)
 598             GST_BUFFER_FLAG_SET (outbuf, GST_BUFFER_FLAG_DELTA_UNIT);
 599
 600           gst_base_rtp_depayload_push (depayload, outbuf);
 601
 602           /* aligned on 32 bit boundary */
 603           slen = GST_ROUND_UP_4 (slen);
 604
 605           payload += slen;
 606           payload_len -= slen;
 607         }
 608         break;
 609       }
 610       case 3:
 611       {
 612         /* one sample per packet, use adapter to combine based on marker bit. */
 613         outbuf = gst_buffer_new_and_alloc (payload_len);
 614         bdata = gst_buffer_map (outbuf, &bsize, NULL, GST_MAP_WRITE);
 615         memcpy (bdata, payload, payload_len);
 616         gst_buffer_unmap (outbuf, bdata, bsize);
 617
 618         gst_adapter_push (rtpxqtdepay->adapter, outbuf);
 619
 620         if (!m)
 621           goto done;
 622
 623         avail = gst_adapter_available (rtpxqtdepay->adapter);
 624         outbuf = gst_adapter_take_buffer (rtpxqtdepay->adapter, avail);
 625
 626         GST_DEBUG_OBJECT (rtpxqtdepay,
 627             "gst_rtp_xqt_depay_chain: pushing buffer of size %u", avail);
 628
 629         goto done;
 630       }
 631     }
 632   }
 633
 634 done:
 635   gst_rtp_buffer_unmap (&rtp);
 636   return outbuf;
 637
 638 bad_packet:
 639   {
 640     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 641         ("Packet did not validate."), (NULL));
 642     goto done;
 643   }
 644 need_resync:
 645   {
 646     GST_DEBUG_OBJECT (rtpxqtdepay, "waiting for marker");
 647     goto done;
 648   }
 649 wrong_version:
 650   {
 651     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 652         ("Unknown payload version."), (NULL));
 653     goto done;
 654   }
 655 pck_reserved:
 656   {
 657     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 658         ("PCK reserved 0."), (NULL));
 659     goto done;
 660   }
 661 wrong_length:
 662   {
 663     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 664         ("Wrong payload length."), (NULL));
 665     goto done;
 666   }
 667 unknown_format:
 668   {
 669     GST_ELEMENT_WARNING (rtpxqtdepay, STREAM, DECODE,
 670         ("Unknown payload format."), (NULL));
 671     goto done;
 672   }
 673 }
 674
 675 static GstStateChangeReturn
 676 gst_rtp_xqt_depay_change_state (GstElement * element, GstStateChange transition)
 677 {
 678   GstRtpXQTDepay *rtpxqtdepay;
 679   GstStateChangeReturn ret;
 680
 681   rtpxqtdepay = GST_RTP_XQT_DEPAY (element);
 682
 683   switch (transition) {
 684     case GST_STATE_CHANGE_READY_TO_PAUSED:
 685       gst_adapter_clear (rtpxqtdepay->adapter);
 686       rtpxqtdepay->previous_id = -1;
 687       rtpxqtdepay->current_id = -1;
 688       rtpxqtdepay->need_resync = TRUE;
 689       rtpxqtdepay->have_sd = FALSE;
 690       break;
 691     default:
 692       break;
 693   }
 694
 695   ret = GST_ELEMENT_CLASS (parent_class)->change_state (element, transition);
 696
 697   switch (transition) {
 698     case GST_STATE_CHANGE_PAUSED_TO_READY:
 699       gst_adapter_clear (rtpxqtdepay->adapter);
 700     default:
 701       break;
 702   }
 703   return ret;
 704 }