gst/rtpmanager/gstrtpmux.c

   1 /* RTP muxer element for GStreamer
   2  *
   3  * gstrtpmux.c:
   4  *
   5  * Copyright (C) <2007-2010> Nokia Corporation.
   6  *   Contact: Zeeshan Ali <zeeshan.ali@nokia.com>
   7  * Copyright (C) <2007-2010> Collabora Ltd
   8  *   Contact: Olivier Crete <olivier.crete@collabora.co.uk>
   9  * Copyright (C) 1999,2000 Erik Walthinsen <omega@cse.ogi.edu>
  10  *               2000,2005 Wim Taymans <wim@fluendo.com>
  11  *
  12  * This library is free software; you can redistribute it and/or
  13  * modify it under the terms of the GNU Library General Public
  14  * License as published by the Free Software Foundation; either
  15  * version 2 of the License, or (at your option) any later version.
  16  *
  17  * This library is distributed in the hope that it will be useful,
  18  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  19  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  20  * Library General Public License for more details.
  21  *
  22  * You should have received a copy of the GNU Library General Public
  23  * License along with this library; if not, write to the
  24  * Free Software Foundation, Inc., 51 Franklin St, Fifth Floor,
  25  * Boston, MA 02110-1301, USA.
  26  */
  27
  28 /**
  29  * SECTION:element-rtpmux
  30  * @see_also: rtpdtmfmux
  31  *
  32  * The rtp muxer takes multiple RTP streams having the same clock-rate and
  33  * muxes into a single stream with a single SSRC.
  34  *
  35  * <refsect2>
  36  * <title>Example pipelines</title>
  37  * |[
  38  * gst-launch rtpmux name=mux ! udpsink host=127.0.0.1 port=8888        \
  39  *              alsasrc ! alawenc ! rtppcmapay !                        \
  40  *              application/x-rtp, payload=8, rate=8000 ! mux.sink_0    \
  41  *              audiotestsrc is-live=1 !                                \
  42  *              mulawenc ! rtppcmupay !                                 \
  43  *              application/x-rtp, payload=0, rate=8000 ! mux.sink_1
  44  * ]|
  45  * In this example, an audio stream is captured from ALSA and another is
  46  * generated, both are encoded into different payload types and muxed together
  47  * so they can be sent on the same port.
  48  * </refsect2>
  49  *
  50  * Last reviewed on 2010-09-30 (0.10.21)
  51  */
  52
  53 #ifdef HAVE_CONFIG_H
  54 #include "config.h"
  55 #endif
  56
  57 #include <gst/gst.h>
  58 #include <gst/rtp/gstrtpbuffer.h>
  59 #include <string.h>
  60
  61 #include "gstrtpmux.h"
  62
  63 GST_DEBUG_CATEGORY_STATIC (gst_rtp_mux_debug);
  64 #define GST_CAT_DEFAULT gst_rtp_mux_debug
  65
  66 enum
  67 {
  68   ARG_0,
  69   PROP_TIMESTAMP_OFFSET,
  70   PROP_SEQNUM_OFFSET,
  71   PROP_SEQNUM,
  72   PROP_SSRC
  73 };
  74
  75 #define DEFAULT_TIMESTAMP_OFFSET -1
  76 #define DEFAULT_SEQNUM_OFFSET    -1
  77 #define DEFAULT_SSRC             -1
  78
  79 static GstStaticPadTemplate src_factory = GST_STATIC_PAD_TEMPLATE ("src",
  80     GST_PAD_SRC,
  81     GST_PAD_ALWAYS,
  82     GST_STATIC_CAPS ("application/x-rtp")
  83     );
  84
  85 static GstStaticPadTemplate sink_factory = GST_STATIC_PAD_TEMPLATE ("sink_%u",
  86     GST_PAD_SINK,
  87     GST_PAD_REQUEST,
  88     GST_STATIC_CAPS ("application/x-rtp")
  89     );
  90
  91 static GstPad *gst_rtp_mux_request_new_pad (GstElement * element,
  92     GstPadTemplate * templ, const gchar * name, const GstCaps * caps);
  93 static void gst_rtp_mux_release_pad (GstElement * element, GstPad * pad);
  94 static GstFlowReturn gst_rtp_mux_chain (GstPad * pad, GstObject * parent,
  95     GstBuffer * buffer);
  96 static GstFlowReturn gst_rtp_mux_chain_list (GstPad * pad, GstObject * parent,
  97     GstBufferList * bufferlist);
  98 static gboolean gst_rtp_mux_setcaps (GstPad * pad, GstRTPMux * rtp_mux,
  99     GstCaps * caps);
 100 static gboolean gst_rtp_mux_sink_event (GstPad * pad, GstObject * parent,
 101     GstEvent * event);
 102 static gboolean gst_rtp_mux_sink_query (GstPad * pad, GstObject * parent,
 103     GstQuery * query);
 104
 105 static GstStateChangeReturn gst_rtp_mux_change_state (GstElement *
 106     element, GstStateChange transition);
 107
 108 static void gst_rtp_mux_set_property (GObject * object, guint prop_id,
 109     const GValue * value, GParamSpec * pspec);
 110 static void gst_rtp_mux_get_property (GObject * object, guint prop_id,
 111     GValue * value, GParamSpec * pspec);
 112 static void gst_rtp_mux_dispose (GObject * object);
 113
 114 static gboolean gst_rtp_mux_src_event_real (GstRTPMux * rtp_mux,
 115     GstEvent * event);
 116
 117 G_DEFINE_TYPE (GstRTPMux, gst_rtp_mux, GST_TYPE_ELEMENT);
 118
 119
 120 static void
 121 gst_rtp_mux_class_init (GstRTPMuxClass * klass)
 122 {
 123   GObjectClass *gobject_class;
 124   GstElementClass *gstelement_class;
 125
 126   gobject_class = (GObjectClass *) klass;
 127   gstelement_class = (GstElementClass *) klass;
 128
 129
 130   gst_element_class_add_pad_template (gstelement_class,
 131       gst_static_pad_template_get (&src_factory));
 132   gst_element_class_add_pad_template (gstelement_class,
 133       gst_static_pad_template_get (&sink_factory));
 134
 135   gst_element_class_set_static_metadata (gstelement_class, "RTP muxer",
 136       "Codec/Muxer",
 137       "multiplex N rtp streams into one", "Zeeshan Ali <first.last@nokia.com>");
 138
 139   gobject_class->get_property = gst_rtp_mux_get_property;
 140   gobject_class->set_property = gst_rtp_mux_set_property;
 141   gobject_class->dispose = gst_rtp_mux_dispose;
 142
 143   klass->src_event = gst_rtp_mux_src_event_real;
 144
 145   g_object_class_install_property (G_OBJECT_CLASS (klass),
 146       PROP_TIMESTAMP_OFFSET, g_param_spec_int ("timestamp-offset",
 147           "Timestamp Offset",
 148           "Offset to add to all outgoing timestamps (-1 = random)", -1,
 149           G_MAXINT, DEFAULT_TIMESTAMP_OFFSET,
 150           G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
 151   g_object_class_install_property (G_OBJECT_CLASS (klass), PROP_SEQNUM_OFFSET,
 152       g_param_spec_int ("seqnum-offset", "Sequence number Offset",
 153           "Offset to add to all outgoing seqnum (-1 = random)", -1, G_MAXINT,
 154           DEFAULT_SEQNUM_OFFSET, G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
 155   g_object_class_install_property (G_OBJECT_CLASS (klass), PROP_SEQNUM,
 156       g_param_spec_uint ("seqnum", "Sequence number",
 157           "The RTP sequence number of the last processed packet",
 158           0, G_MAXUINT, 0, G_PARAM_READABLE | G_PARAM_STATIC_STRINGS));
 159   g_object_class_install_property (G_OBJECT_CLASS (klass), PROP_SSRC,
 160       g_param_spec_uint ("ssrc", "SSRC",
 161           "The SSRC of the packets (-1 == random)",
 162           0, G_MAXUINT, DEFAULT_SSRC,
 163           G_PARAM_READWRITE | G_PARAM_STATIC_STRINGS));
 164
 165   gstelement_class->request_new_pad =
 166       GST_DEBUG_FUNCPTR (gst_rtp_mux_request_new_pad);
 167   gstelement_class->release_pad = GST_DEBUG_FUNCPTR (gst_rtp_mux_release_pad);
 168   gstelement_class->change_state = GST_DEBUG_FUNCPTR (gst_rtp_mux_change_state);
 169 }
 170
 171 static void
 172 gst_rtp_mux_dispose (GObject * object)
 173 {
 174   GstRTPMux *rtp_mux = GST_RTP_MUX (object);
 175   GList *item;
 176
 177   g_clear_object (&rtp_mux->last_pad);
 178
 179 restart:
 180   for (item = GST_ELEMENT_PADS (object); item; item = g_list_next (item)) {
 181     GstPad *pad = GST_PAD (item->data);
 182     if (GST_PAD_IS_SINK (pad)) {
 183       gst_element_release_request_pad (GST_ELEMENT (object), pad);
 184       goto restart;
 185     }
 186   }
 187
 188   G_OBJECT_CLASS (gst_rtp_mux_parent_class)->dispose (object);
 189 }
 190
 191 static gboolean
 192 gst_rtp_mux_src_event (GstPad * pad, GstObject * parent, GstEvent * event)
 193 {
 194   GstRTPMux *rtp_mux = GST_RTP_MUX (parent);
 195   GstRTPMuxClass *klass;
 196   gboolean ret = FALSE;
 197
 198   klass = GST_RTP_MUX_GET_CLASS (rtp_mux);
 199
 200   ret = klass->src_event (rtp_mux, event);
 201
 202   return ret;
 203 }
 204
 205 static gboolean
 206 gst_rtp_mux_src_event_real (GstRTPMux * rtp_mux, GstEvent * event)
 207 {
 208   GstIterator *iter;
 209   gboolean result = FALSE;
 210   gboolean done = FALSE;
 211
 212   iter = gst_element_iterate_sink_pads (GST_ELEMENT (rtp_mux));
 213
 214   while (!done) {
 215     GValue item = { 0, };
 216
 217     switch (gst_iterator_next (iter, &item)) {
 218       case GST_ITERATOR_OK:
 219         gst_event_ref (event);
 220         result |= gst_pad_push_event (g_value_get_object (&item), event);
 221         g_value_reset (&item);
 222         break;
 223       case GST_ITERATOR_RESYNC:
 224         gst_iterator_resync (iter);
 225         result = FALSE;
 226         break;
 227       case GST_ITERATOR_ERROR:
 228         GST_WARNING_OBJECT (rtp_mux, "Error iterating sinkpads");
 229       case GST_ITERATOR_DONE:
 230         done = TRUE;
 231         break;
 232     }
 233   }
 234   gst_iterator_free (iter);
 235   gst_event_unref (event);
 236
 237   return result;
 238 }
 239
 240 static void
 241 gst_rtp_mux_init (GstRTPMux * rtp_mux)
 242 {
 243   GstElementClass *klass = GST_ELEMENT_GET_CLASS (rtp_mux);
 244
 245   rtp_mux->srcpad =
 246       gst_pad_new_from_template (gst_element_class_get_pad_template (klass,
 247           "src"), "src");
 248   gst_pad_set_event_function (rtp_mux->srcpad,
 249       GST_DEBUG_FUNCPTR (gst_rtp_mux_src_event));
 250   gst_element_add_pad (GST_ELEMENT (rtp_mux), rtp_mux->srcpad);
 251
 252   rtp_mux->ssrc = DEFAULT_SSRC;
 253   rtp_mux->ts_offset = DEFAULT_TIMESTAMP_OFFSET;
 254   rtp_mux->seqnum_offset = DEFAULT_SEQNUM_OFFSET;
 255
 256   rtp_mux->last_stop = GST_CLOCK_TIME_NONE;
 257 }
 258
 259 static void
 260 gst_rtp_mux_setup_sinkpad (GstRTPMux * rtp_mux, GstPad * sinkpad)
 261 {
 262   GstRTPMuxPadPrivate *padpriv = g_slice_new0 (GstRTPMuxPadPrivate);
 263
 264   /* setup some pad functions */
 265   gst_pad_set_chain_function (sinkpad, GST_DEBUG_FUNCPTR (gst_rtp_mux_chain));
 266   gst_pad_set_chain_list_function (sinkpad,
 267       GST_DEBUG_FUNCPTR (gst_rtp_mux_chain_list));
 268   gst_pad_set_event_function (sinkpad,
 269       GST_DEBUG_FUNCPTR (gst_rtp_mux_sink_event));
 270   gst_pad_set_query_function (sinkpad,
 271       GST_DEBUG_FUNCPTR (gst_rtp_mux_sink_query));
 272
 273
 274   gst_segment_init (&padpriv->segment, GST_FORMAT_UNDEFINED);
 275
 276   gst_pad_set_element_private (sinkpad, padpriv);
 277
 278   gst_pad_set_active (sinkpad, TRUE);
 279   gst_element_add_pad (GST_ELEMENT (rtp_mux), sinkpad);
 280 }
 281
 282 static GstPad *
 283 gst_rtp_mux_request_new_pad (GstElement * element,
 284     GstPadTemplate * templ, const gchar * req_name, const GstCaps * caps)
 285 {
 286   GstRTPMux *rtp_mux;
 287   GstPad *newpad;
 288
 289   g_return_val_if_fail (templ != NULL, NULL);
 290   g_return_val_if_fail (GST_IS_RTP_MUX (element), NULL);
 291
 292   rtp_mux = GST_RTP_MUX (element);
 293
 294   if (templ->direction != GST_PAD_SINK) {
 295     GST_WARNING_OBJECT (rtp_mux, "request pad that is not a SINK pad");
 296     return NULL;
 297   }
 298
 299   newpad = gst_pad_new_from_template (templ, req_name);
 300   if (newpad)
 301     gst_rtp_mux_setup_sinkpad (rtp_mux, newpad);
 302   else
 303     GST_WARNING_OBJECT (rtp_mux, "failed to create request pad");
 304
 305   return newpad;
 306 }
 307
 308 static void
 309 gst_rtp_mux_release_pad (GstElement * element, GstPad * pad)
 310 {
 311   GstRTPMuxPadPrivate *padpriv;
 312
 313   GST_OBJECT_LOCK (element);
 314   padpriv = gst_pad_get_element_private (pad);
 315   gst_pad_set_element_private (pad, NULL);
 316   GST_OBJECT_UNLOCK (element);
 317
 318   gst_element_remove_pad (element, pad);
 319
 320   if (padpriv) {
 321     g_slice_free (GstRTPMuxPadPrivate, padpriv);
 322   }
 323 }
 324
 325 /* Put our own clock-base on the buffer */
 326 static void
 327 gst_rtp_mux_readjust_rtp_timestamp_locked (GstRTPMux * rtp_mux,
 328     GstRTPMuxPadPrivate * padpriv, GstRTPBuffer * rtpbuffer)
 329 {
 330   guint32 ts;
 331   guint32 sink_ts_base = 0;
 332
 333   if (padpriv && padpriv->have_clock_base)
 334     sink_ts_base = padpriv->clock_base;
 335
 336   ts = gst_rtp_buffer_get_timestamp (rtpbuffer) - sink_ts_base +
 337       rtp_mux->ts_base;
 338   GST_LOG_OBJECT (rtp_mux, "Re-adjusting RTP ts %u to %u",
 339       gst_rtp_buffer_get_timestamp (rtpbuffer), ts);
 340   gst_rtp_buffer_set_timestamp (rtpbuffer, ts);
 341 }
 342
 343 static gboolean
 344 process_buffer_locked (GstRTPMux * rtp_mux, GstRTPMuxPadPrivate * padpriv,
 345     GstRTPBuffer * rtpbuffer)
 346 {
 347   GstRTPMuxClass *klass = GST_RTP_MUX_GET_CLASS (rtp_mux);
 348
 349   if (klass->accept_buffer_locked)
 350     if (!klass->accept_buffer_locked (rtp_mux, padpriv, rtpbuffer))
 351       return FALSE;
 352
 353   rtp_mux->seqnum++;
 354   gst_rtp_buffer_set_seq (rtpbuffer, rtp_mux->seqnum);
 355
 356   gst_rtp_buffer_set_ssrc (rtpbuffer, rtp_mux->current_ssrc);
 357   gst_rtp_mux_readjust_rtp_timestamp_locked (rtp_mux, padpriv, rtpbuffer);
 358   GST_LOG_OBJECT (rtp_mux,
 359       "Pushing packet size %" G_GSIZE_FORMAT ", seq=%d, ts=%u",
 360       rtpbuffer->map[0].size, rtp_mux->seqnum,
 361       gst_rtp_buffer_get_timestamp (rtpbuffer));
 362
 363   if (padpriv) {
 364     if (padpriv->segment.format == GST_FORMAT_TIME)
 365       GST_BUFFER_PTS (rtpbuffer->buffer) =
 366           gst_segment_to_running_time (&padpriv->segment, GST_FORMAT_TIME,
 367           GST_BUFFER_PTS (rtpbuffer->buffer));
 368   }
 369
 370   return TRUE;
 371 }
 372
 373 struct BufferListData
 374 {
 375   GstRTPMux *rtp_mux;
 376   GstRTPMuxPadPrivate *padpriv;
 377   gboolean drop;
 378 };
 379
 380 static gboolean
 381 process_list_item (GstBuffer ** buffer, guint idx, gpointer user_data)
 382 {
 383   struct BufferListData *bd = user_data;
 384   GstRTPBuffer rtpbuffer = GST_RTP_BUFFER_INIT;
 385
 386   *buffer = gst_buffer_make_writable (*buffer);
 387
 388   gst_rtp_buffer_map (*buffer, GST_MAP_READWRITE, &rtpbuffer);
 389
 390   bd->drop = !process_buffer_locked (bd->rtp_mux, bd->padpriv, &rtpbuffer);
 391
 392   gst_rtp_buffer_unmap (&rtpbuffer);
 393
 394   if (bd->drop)
 395     return FALSE;
 396
 397   if (GST_BUFFER_DURATION_IS_VALID (*buffer) &&
 398       GST_BUFFER_TIMESTAMP_IS_VALID (*buffer))
 399     bd->rtp_mux->last_stop = GST_BUFFER_TIMESTAMP (*buffer) +
 400         GST_BUFFER_DURATION (*buffer);
 401   else
 402     bd->rtp_mux->last_stop = GST_CLOCK_TIME_NONE;
 403
 404   return TRUE;
 405 }
 406
 407 static GstFlowReturn
 408 gst_rtp_mux_chain_list (GstPad * pad, GstObject * parent,
 409     GstBufferList * bufferlist)
 410 {
 411   GstRTPMux *rtp_mux;
 412   GstFlowReturn ret;
 413   GstRTPMuxPadPrivate *padpriv;
 414   gboolean drop = TRUE;
 415   struct BufferListData bd;
 416
 417   rtp_mux = GST_RTP_MUX (parent);
 418
 419   GST_OBJECT_LOCK (rtp_mux);
 420
 421   padpriv = gst_pad_get_element_private (pad);
 422   if (!padpriv) {
 423     GST_OBJECT_UNLOCK (rtp_mux);
 424     ret = GST_FLOW_NOT_LINKED;
 425     gst_buffer_list_unref (bufferlist);
 426     goto out;
 427   }
 428
 429   bd.rtp_mux = rtp_mux;
 430   bd.padpriv = padpriv;
 431   bd.drop = FALSE;
 432
 433   bufferlist = gst_buffer_list_make_writable (bufferlist);
 434   gst_buffer_list_foreach (bufferlist, process_list_item, &bd);
 435
 436   GST_OBJECT_UNLOCK (rtp_mux);
 437
 438   if (drop) {
 439     gst_buffer_list_unref (bufferlist);
 440     ret = GST_FLOW_OK;
 441   } else {
 442     ret = gst_pad_push_list (rtp_mux->srcpad, bufferlist);
 443   }
 444
 445 out:
 446
 447   return ret;
 448 }
 449
 450 static gboolean
 451 resend_events (GstPad * pad, GstEvent ** event, gpointer user_data)
 452 {
 453   GstRTPMux *rtp_mux = user_data;
 454
 455   if (GST_EVENT_TYPE (*event) == GST_EVENT_CAPS) {
 456     GstCaps *caps;
 457
 458     gst_event_parse_caps (*event, &caps);
 459     gst_rtp_mux_setcaps (pad, rtp_mux, caps);
 460   } else {
 461     gst_pad_push_event (rtp_mux->srcpad, gst_event_ref (*event));
 462   }
 463
 464   return TRUE;
 465 }
 466
 467 static GstFlowReturn
 468 gst_rtp_mux_chain (GstPad * pad, GstObject * parent, GstBuffer * buffer)
 469 {
 470   GstRTPMux *rtp_mux;
 471   GstFlowReturn ret;
 472   GstRTPMuxPadPrivate *padpriv;
 473   gboolean drop;
 474   gboolean changed = FALSE;
 475   GstRTPBuffer rtpbuffer = GST_RTP_BUFFER_INIT;
 476
 477   rtp_mux = GST_RTP_MUX (GST_OBJECT_PARENT (pad));
 478
 479   GST_OBJECT_LOCK (rtp_mux);
 480   padpriv = gst_pad_get_element_private (pad);
 481
 482   if (!padpriv) {
 483     GST_OBJECT_UNLOCK (rtp_mux);
 484     gst_buffer_unref (buffer);
 485     return GST_FLOW_NOT_LINKED;
 486   }
 487
 488   buffer = gst_buffer_make_writable (buffer);
 489
 490   if (!gst_rtp_buffer_map (buffer, GST_MAP_READWRITE, &rtpbuffer)) {
 491     GST_OBJECT_UNLOCK (rtp_mux);
 492     gst_buffer_unref (buffer);
 493     GST_ERROR_OBJECT (rtp_mux, "Invalid RTP buffer");
 494     return GST_FLOW_ERROR;
 495   }
 496
 497   drop = !process_buffer_locked (rtp_mux, padpriv, &rtpbuffer);
 498
 499   gst_rtp_buffer_unmap (&rtpbuffer);
 500
 501   if (!drop) {
 502     if (pad != rtp_mux->last_pad) {
 503       changed = TRUE;
 504       g_clear_object (&rtp_mux->last_pad);
 505       rtp_mux->last_pad = g_object_ref (pad);
 506     }
 507
 508     if (GST_BUFFER_DURATION_IS_VALID (buffer) &&
 509         GST_BUFFER_TIMESTAMP_IS_VALID (buffer))
 510       rtp_mux->last_stop = GST_BUFFER_TIMESTAMP (buffer) +
 511           GST_BUFFER_DURATION (buffer);
 512     else
 513       rtp_mux->last_stop = GST_CLOCK_TIME_NONE;
 514   }
 515
 516   GST_OBJECT_UNLOCK (rtp_mux);
 517
 518   if (changed)
 519     gst_pad_sticky_events_foreach (pad, resend_events, rtp_mux);
 520
 521   if (drop) {
 522     gst_buffer_unref (buffer);
 523     ret = GST_FLOW_OK;
 524   } else {
 525     ret = gst_pad_push (rtp_mux->srcpad, buffer);
 526   }
 527
 528   return ret;
 529 }
 530
 531 static gboolean
 532 gst_rtp_mux_setcaps (GstPad * pad, GstRTPMux * rtp_mux, GstCaps * caps)
 533 {
 534   GstStructure *structure;
 535   gboolean ret = FALSE;
 536   GstRTPMuxPadPrivate *padpriv;
 537
 538   structure = gst_caps_get_structure (caps, 0);
 539
 540   if (!structure)
 541     return FALSE;
 542
 543   GST_OBJECT_LOCK (rtp_mux);
 544   padpriv = gst_pad_get_element_private (pad);
 545   if (padpriv &&
 546       gst_structure_get_uint (structure, "clock-base", &padpriv->clock_base)) {
 547     padpriv->have_clock_base = TRUE;
 548   }
 549   GST_OBJECT_UNLOCK (rtp_mux);
 550
 551   caps = gst_caps_copy (caps);
 552
 553   gst_caps_set_simple (caps,
 554       "clock-base", G_TYPE_UINT, rtp_mux->ts_base,
 555       "seqnum-base", G_TYPE_UINT, rtp_mux->seqnum_base, NULL);
 556
 557   if (rtp_mux->send_stream_start) {
 558     gchar s_id[32];
 559
 560     /* stream-start (FIXME: create id based on input ids) */
 561     g_snprintf (s_id, sizeof (s_id), "interleave-%08x", g_random_int ());
 562     gst_pad_push_event (rtp_mux->srcpad, gst_event_new_stream_start (s_id));
 563
 564     rtp_mux->send_stream_start = FALSE;
 565   }
 566
 567   GST_DEBUG_OBJECT (rtp_mux,
 568       "setting caps %" GST_PTR_FORMAT " on src pad..", caps);
 569   ret = gst_pad_set_caps (rtp_mux->srcpad, caps);
 570
 571   if (rtp_mux->ssrc == -1) {
 572     if (gst_structure_has_field_typed (structure, "ssrc", G_TYPE_UINT)) {
 573       rtp_mux->current_ssrc = g_value_get_uint
 574           (gst_structure_get_value (structure, "ssrc"));
 575     }
 576   }
 577
 578   gst_caps_unref (caps);
 579
 580   return ret;
 581 }
 582
 583 static void
 584 clear_caps (GstCaps * caps, gboolean only_clock_rate)
 585 {
 586   gint i, j;
 587
 588   /* Lets only match on the clock-rate */
 589   for (i = 0; i < gst_caps_get_size (caps); i++) {
 590     GstStructure *s = gst_caps_get_structure (caps, i);
 591
 592     for (j = 0; j < gst_structure_n_fields (s); j++) {
 593       const gchar *name = gst_structure_nth_field_name (s, j);
 594
 595       if (strcmp (name, "clock-rate") && (only_clock_rate ||
 596               (strcmp (name, "ssrc")))) {
 597         gst_structure_remove_field (s, name);
 598         j--;
 599       }
 600     }
 601   }
 602 }
 603
 604 static gboolean
 605 same_clock_rate_fold (const GValue * item, GValue * ret, gpointer user_data)
 606 {
 607   GstPad *mypad = user_data;
 608   GstPad *pad = g_value_get_object (item);
 609   GstCaps *peercaps;
 610   GstCaps *accumcaps;
 611   GstCaps *intersect;
 612
 613   if (pad == mypad)
 614     return TRUE;
 615
 616   accumcaps = g_value_get_boxed (ret);
 617   peercaps = gst_pad_peer_query_caps (pad, accumcaps);
 618   if (!peercaps) {
 619     g_warning ("no peercaps");
 620     return TRUE;
 621   }
 622   peercaps = gst_caps_make_writable (peercaps);
 623   clear_caps (peercaps, TRUE);
 624
 625   intersect = gst_caps_intersect (accumcaps, peercaps);
 626
 627   g_value_take_boxed (ret, intersect);
 628   gst_caps_unref (peercaps);
 629
 630   return !gst_caps_is_empty (intersect);
 631 }
 632
 633 static GstCaps *
 634 gst_rtp_mux_getcaps (GstPad * pad, GstRTPMux * mux, GstCaps * filter)
 635 {
 636   GstCaps *caps = NULL;
 637   GstIterator *iter = NULL;
 638   GValue v = { 0 };
 639   GstIteratorResult res;
 640   GstCaps *peercaps;
 641   GstCaps *othercaps = NULL;
 642   GstCaps *filtered_caps;
 643
 644   peercaps = gst_pad_peer_query_caps (mux->srcpad, filter);
 645
 646   if (peercaps) {
 647     othercaps = gst_caps_intersect (peercaps,
 648         gst_pad_get_pad_template_caps (pad));
 649     gst_caps_unref (peercaps);
 650   } else {
 651     othercaps = gst_caps_copy (gst_pad_get_pad_template_caps (mux->srcpad));
 652   }
 653
 654   if (filter) {
 655     filtered_caps = gst_caps_intersect (othercaps, filter);
 656     gst_caps_unref (othercaps);
 657   } else {
 658     filtered_caps = othercaps;
 659   }
 660
 661   filtered_caps = gst_caps_make_writable (filtered_caps);
 662   clear_caps (filtered_caps, FALSE);
 663
 664   g_value_init (&v, GST_TYPE_CAPS);
 665
 666   iter = gst_element_iterate_sink_pads (GST_ELEMENT (mux));
 667   do {
 668     gst_value_set_caps (&v, filtered_caps);
 669     res = gst_iterator_fold (iter, same_clock_rate_fold, &v, pad);
 670     gst_iterator_resync (iter);
 671   } while (res == GST_ITERATOR_RESYNC);
 672   gst_iterator_free (iter);
 673
 674   caps = (GstCaps *) gst_value_get_caps (&v);
 675
 676   if (res == GST_ITERATOR_ERROR) {
 677     gst_caps_unref (caps);
 678     caps = gst_caps_new_empty ();
 679   }
 680
 681   gst_caps_unref (filtered_caps);
 682
 683   return caps;
 684 }
 685
 686 static gboolean
 687 gst_rtp_mux_sink_query (GstPad * pad, GstObject * parent, GstQuery * query)
 688 {
 689   GstRTPMux *mux = GST_RTP_MUX (parent);
 690   gboolean res = FALSE;
 691
 692   switch (GST_QUERY_TYPE (query)) {
 693     case GST_QUERY_CAPS:
 694     {
 695       GstCaps *filter, *caps;
 696
 697       gst_query_parse_caps (query, &filter);
 698       caps = gst_rtp_mux_getcaps (pad, mux, filter);
 699       gst_query_set_caps_result (query, caps);
 700       gst_caps_unref (caps);
 701       res = TRUE;
 702       break;
 703     }
 704     default:
 705       res = gst_pad_query_default (pad, parent, query);
 706       break;
 707   }
 708
 709   return res;
 710
 711
 712 }
 713
 714
 715 static void
 716 gst_rtp_mux_get_property (GObject * object,
 717     guint prop_id, GValue * value, GParamSpec * pspec)
 718 {
 719   GstRTPMux *rtp_mux;
 720
 721   rtp_mux = GST_RTP_MUX (object);
 722
 723   switch (prop_id) {
 724     case PROP_TIMESTAMP_OFFSET:
 725       g_value_set_int (value, rtp_mux->ts_offset);
 726       break;
 727     case PROP_SEQNUM_OFFSET:
 728       g_value_set_int (value, rtp_mux->seqnum_offset);
 729       break;
 730     case PROP_SEQNUM:
 731       GST_OBJECT_LOCK (rtp_mux);
 732       g_value_set_uint (value, rtp_mux->seqnum);
 733       GST_OBJECT_UNLOCK (rtp_mux);
 734       break;
 735     case PROP_SSRC:
 736       g_value_set_uint (value, rtp_mux->ssrc);
 737       break;
 738     default:
 739       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
 740       break;
 741   }
 742 }
 743
 744 static void
 745 gst_rtp_mux_set_property (GObject * object,
 746     guint prop_id, const GValue * value, GParamSpec * pspec)
 747 {
 748   GstRTPMux *rtp_mux;
 749
 750   rtp_mux = GST_RTP_MUX (object);
 751
 752   switch (prop_id) {
 753     case PROP_TIMESTAMP_OFFSET:
 754       rtp_mux->ts_offset = g_value_get_int (value);
 755       break;
 756     case PROP_SEQNUM_OFFSET:
 757       rtp_mux->seqnum_offset = g_value_get_int (value);
 758       break;
 759     case PROP_SSRC:
 760       rtp_mux->ssrc = g_value_get_uint (value);
 761       break;
 762     default:
 763       G_OBJECT_WARN_INVALID_PROPERTY_ID (object, prop_id, pspec);
 764       break;
 765   }
 766 }
 767
 768 static gboolean
 769 gst_rtp_mux_sink_event (GstPad * pad, GstObject * parent, GstEvent * event)
 770 {
 771   GstRTPMux *mux = GST_RTP_MUX (parent);
 772   gboolean is_pad;
 773   gboolean ret;
 774
 775   switch (GST_EVENT_TYPE (event)) {
 776     case GST_EVENT_CAPS:
 777     {
 778       GstCaps *caps;
 779
 780       gst_event_parse_caps (event, &caps);
 781       ret = gst_rtp_mux_setcaps (pad, mux, caps);
 782       gst_event_unref (event);
 783       return ret;
 784     }
 785     case GST_EVENT_FLUSH_STOP:
 786     {
 787       GST_OBJECT_LOCK (mux);
 788       mux->last_stop = GST_CLOCK_TIME_NONE;
 789       GST_OBJECT_UNLOCK (mux);
 790       break;
 791     }
 792     case GST_EVENT_SEGMENT:
 793     {
 794       GstRTPMuxPadPrivate *padpriv;
 795
 796       GST_OBJECT_LOCK (mux);
 797       padpriv = gst_pad_get_element_private (pad);
 798
 799       if (padpriv) {
 800         gst_event_copy_segment (event, &padpriv->segment);
 801       }
 802       GST_OBJECT_UNLOCK (mux);
 803       break;
 804     }
 805     default:
 806       break;
 807   }
 808
 809   GST_OBJECT_LOCK (mux);
 810   is_pad = (pad == mux->last_pad);
 811   GST_OBJECT_UNLOCK (mux);
 812
 813   if (is_pad) {
 814     return gst_pad_push_event (mux->srcpad, event);
 815   } else {
 816     gst_event_unref (event);
 817     return TRUE;
 818   }
 819 }
 820
 821 static void
 822 gst_rtp_mux_ready_to_paused (GstRTPMux * rtp_mux)
 823 {
 824
 825   GST_OBJECT_LOCK (rtp_mux);
 826
 827   g_clear_object (&rtp_mux->last_pad);
 828   rtp_mux->send_stream_start = TRUE;
 829
 830   if (rtp_mux->ssrc == -1)
 831     rtp_mux->current_ssrc = g_random_int ();
 832   else
 833     rtp_mux->current_ssrc = rtp_mux->ssrc;
 834
 835   if (rtp_mux->seqnum_offset == -1)
 836     rtp_mux->seqnum_base = g_random_int_range (0, G_MAXUINT16);
 837   else
 838     rtp_mux->seqnum_base = rtp_mux->seqnum_offset;
 839   rtp_mux->seqnum = rtp_mux->seqnum_base;
 840
 841   if (rtp_mux->ts_offset == -1)
 842     rtp_mux->ts_base = g_random_int ();
 843   else
 844     rtp_mux->ts_base = rtp_mux->ts_offset;
 845
 846   rtp_mux->last_stop = GST_CLOCK_TIME_NONE;
 847
 848   GST_DEBUG_OBJECT (rtp_mux, "set clock-base to %u", rtp_mux->ts_base);
 849
 850   GST_OBJECT_UNLOCK (rtp_mux);
 851 }
 852
 853 static GstStateChangeReturn
 854 gst_rtp_mux_change_state (GstElement * element, GstStateChange transition)
 855 {
 856   GstRTPMux *rtp_mux;
 857   GstStateChangeReturn ret;
 858
 859   rtp_mux = GST_RTP_MUX (element);
 860
 861   switch (transition) {
 862     case GST_STATE_CHANGE_READY_TO_PAUSED:
 863       gst_rtp_mux_ready_to_paused (rtp_mux);
 864       break;
 865     default:
 866       break;
 867   }
 868
 869   ret = GST_ELEMENT_CLASS (gst_rtp_mux_parent_class)->change_state (element,
 870       transition);
 871
 872   switch (transition) {
 873     case GST_STATE_CHANGE_PAUSED_TO_READY:
 874       g_clear_object (&rtp_mux->last_pad);
 875       break;
 876     default:
 877       break;
 878   }
 879
 880   return ret;
 881 }
 882
 883 gboolean
 884 gst_rtp_mux_plugin_init (GstPlugin * plugin)
 885 {
 886   GST_DEBUG_CATEGORY_INIT (gst_rtp_mux_debug, "rtpmux", 0, "rtp muxer");
 887
 888   return gst_element_register (plugin, "rtpmux", GST_RANK_NONE,
 889       GST_TYPE_RTP_MUX);
 890 }