gst/monoscope/gstmonoscope.c

   1 /* gstmonoscope.c: implementation of monoscope drawing element
   2  * Copyright (C) <2002> Richard Boulton <richard@tartarus.org>
   3  *
   4  * This library is free software; you can redistribute it and/or
   5  * modify it under the terms of the GNU Library General Public
   6  * License as published by the Free Software Foundation; either
   7  * version 2 of the License, or (at your option) any later version.
   8  *
   9  * This library is distributed in the hope that it will be useful,
  10  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  12  * Library General Public License for more details.
  13  *
  14  * You should have received a copy of the GNU Library General Public
  15  * License along with this library; if not, write to the
  16  * Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  17  * Boston, MA 02111-1307, USA.
  18  */
  19
  20 #ifdef HAVE_CONFIG_H
  21 #include "config.h"
  22 #endif
  23
  24 #include <gst/gst.h>
  25 #include <gst/video/video.h>
  26 #include <gst/audio/audio.h>
  27 #include "monoscope.h"
  28
  29 #define GST_TYPE_MONOSCOPE (gst_monoscope_get_type())
  30 #define GST_MONOSCOPE(obj) (G_TYPE_CHECK_INSTANCE_CAST((obj),GST_TYPE_MONOSCOPE,GstMonoscope))
  31 #define GST_MONOSCOPE_CLASS(klass) (G_TYPE_CHECK_CLASS_CAST((klass),GST_TYPE_MONOSCOPE,GstMonoscope))
  32 #define GST_IS_MONOSCOPE(obj) (G_TYPE_CHECK_INSTANCE_TYPE((obj),GST_TYPE_MONOSCOPE))
  33 #define GST_IS_MONOSCOPE_CLASS(obj) (G_TYPE_CHECK_CLASS_TYPE((klass),GST_TYPE_MONOSCOPE))
  34
  35 typedef struct _GstMonoscope GstMonoscope;
  36 typedef struct _GstMonoscopeClass GstMonoscopeClass;
  37
  38 struct _GstMonoscope {
  39   GstElement element;
  40
  41   /* pads */
  42   GstPad *sinkpad,*srcpad;
  43
  44   /* the timestamp of the next frame */
  45   guint64 next_time;
  46   gint16 datain[512];
  47
  48   /* video state */
  49   gdouble fps;
  50   gint width;
  51   gint height;
  52   gboolean first_buffer;
  53
  54   /* visualisation state */
  55   struct monoscope_state * visstate;
  56 };
  57
  58 struct _GstMonoscopeClass {
  59   GstElementClass parent_class;
  60 };
  61
  62 GType gst_monoscope_get_type(void);
  63
  64
  65 /* elementfactory information */
  66 static GstElementDetails gst_monoscope_details = {
  67   "Monoscope",
  68   "Visualization",
  69   "Displays a highly stabilised waveform of audio input",
  70   "Richard Boulton <richard@tartarus.org>"
  71 };
  72
  73 /* signals and args */
  74 enum {
  75   /* FILL ME */
  76   LAST_SIGNAL
  77 };
  78
  79 enum {
  80   ARG_0,
  81   /* FILL ME */
  82 };
  83
  84 static GstStaticPadTemplate src_template =
  85 GST_STATIC_PAD_TEMPLATE (
  86   "src",
  87   GST_PAD_SRC,
  88   GST_PAD_ALWAYS,
  89   GST_STATIC_CAPS (GST_VIDEO_RGB_PAD_TEMPLATE_CAPS_32)
  90 );
  91
  92 static GstStaticPadTemplate sink_template =
  93 GST_STATIC_PAD_TEMPLATE (
  94   "sink",
  95   GST_PAD_SINK,
  96   GST_PAD_ALWAYS,
  97   GST_STATIC_CAPS (GST_AUDIO_INT_STANDARD_PAD_TEMPLATE_CAPS)
  98 );
  99
 100
 101 static void     gst_monoscope_class_init        (GstMonoscopeClass *klass);
 102 static void     gst_monoscope_base_init         (GstMonoscopeClass *klass);
 103 static void     gst_monoscope_init              (GstMonoscope *monoscope);
 104
 105 static void     gst_monoscope_chain             (GstPad *pad, GstData *_data);
 106
 107 static GstPadLinkReturn
 108                 gst_monoscope_sinkconnect       (GstPad *pad, const GstCaps *caps);
 109 static GstPadLinkReturn
 110                 gst_monoscope_srcconnect        (GstPad *pad, const GstCaps *caps);
 111
 112 static GstElementClass *parent_class = NULL;
 113
 114 GType
 115 gst_monoscope_get_type (void)
 116 {
 117   static GType type = 0;
 118
 119   if (!type) {
 120     static const GTypeInfo info = {
 121       sizeof (GstMonoscopeClass),
 122       (GBaseInitFunc) gst_monoscope_base_init,
 123       NULL,
 124       (GClassInitFunc) gst_monoscope_class_init,
 125       NULL,
 126       NULL,
 127       sizeof (GstMonoscope),
 128       0,
 129       (GInstanceInitFunc) gst_monoscope_init,
 130     };
 131     type = g_type_register_static (GST_TYPE_ELEMENT, "GstMonoscope", &info, 0);
 132   }
 133   return type;
 134 }
 135
 136 static void
 137 gst_monoscope_base_init (GstMonoscopeClass *klass)
 138 {
 139   GstElementClass *element_class = GST_ELEMENT_CLASS (klass);
 140
 141   gst_element_class_add_pad_template (element_class,
 142                 gst_static_pad_template_get (&src_template));
 143   gst_element_class_add_pad_template (element_class,
 144                 gst_static_pad_template_get (&sink_template));
 145   gst_element_class_set_details (element_class, &gst_monoscope_details);
 146 }
 147
 148 static void
 149 gst_monoscope_class_init(GstMonoscopeClass *klass)
 150 {
 151   GObjectClass *gobject_class;
 152   GstElementClass *gstelement_class;
 153
 154   gobject_class = (GObjectClass*) klass;
 155   gstelement_class = (GstElementClass*) klass;
 156
 157   parent_class = g_type_class_ref (GST_TYPE_ELEMENT);
 158 }
 159
 160 static void
 161 gst_monoscope_init (GstMonoscope *monoscope)
 162 {
 163   /* create the sink and src pads */
 164   monoscope->sinkpad = gst_pad_new_from_template (
 165                   gst_static_pad_template_get (&sink_template ), "sink");
 166   monoscope->srcpad = gst_pad_new_from_template (
 167                   gst_static_pad_template_get (&src_template ), "src");
 168   gst_element_add_pad (GST_ELEMENT (monoscope), monoscope->sinkpad);
 169   gst_element_add_pad (GST_ELEMENT (monoscope), monoscope->srcpad);
 170
 171   gst_pad_set_chain_function (monoscope->sinkpad, gst_monoscope_chain);
 172   gst_pad_set_link_function (monoscope->sinkpad, gst_monoscope_sinkconnect);
 173   gst_pad_set_link_function (monoscope->srcpad, gst_monoscope_srcconnect);
 174
 175   monoscope->next_time = 0;
 176
 177   /* reset the initial video state */
 178   monoscope->first_buffer = TRUE;
 179   monoscope->width = 256;
 180   monoscope->height = 128;
 181   monoscope->fps = 25.; /* desired frame rate */
 182 }
 183
 184 static GstPadLinkReturn
 185 gst_monoscope_sinkconnect (GstPad *pad, const GstCaps *caps)
 186 {
 187   GstMonoscope *monoscope;
 188   monoscope = GST_MONOSCOPE (gst_pad_get_parent (pad));
 189
 190   return GST_PAD_LINK_OK;
 191 }
 192
 193 static GstPadLinkReturn
 194 gst_monoscope_negotiate (GstMonoscope *monoscope)
 195 {
 196   GstCaps *caps;
 197
 198   caps = gst_caps_new_simple ("video/x-raw-rgb",
 199       "bpp",            G_TYPE_INT, 32,
 200       "depth",  G_TYPE_INT, 32,
 201       "endianness",     G_TYPE_INT, G_BIG_ENDIAN,
 202       "red_mask",       G_TYPE_INT, R_MASK_32,
 203       "green_mask",     G_TYPE_INT, G_MASK_32,
 204       "blue_mask",      G_TYPE_INT, B_MASK_32,
 205       "width",  G_TYPE_INT, monoscope->width,
 206       "height",         G_TYPE_INT, monoscope->height,
 207       "framerate",     G_TYPE_DOUBLE, monoscope->fps, NULL);
 208
 209   return gst_pad_try_set_caps (monoscope->srcpad, caps);
 210 }
 211
 212 static GstPadLinkReturn
 213 gst_monoscope_srcconnect (GstPad *pad, const GstCaps *caps)
 214 {
 215   GstPadLinkReturn ret;
 216   GstMonoscope *monoscope = GST_MONOSCOPE (gst_pad_get_parent (pad));
 217   GstStructure *structure;
 218
 219   structure = gst_caps_get_structure (caps, 0);
 220
 221   gst_structure_get_int (structure, "width", &monoscope->width);
 222   gst_structure_get_int (structure, "height", &monoscope->height);
 223   gst_structure_get_double (structure, "framerate", &monoscope->fps);
 224
 225   if ((ret = gst_monoscope_negotiate (monoscope)) <= 0)
 226     return ret;
 227
 228   return GST_PAD_LINK_DONE;
 229 }
 230
 231 static void
 232 gst_monoscope_chain (GstPad *pad, GstData *_data)
 233 {
 234   GstBuffer *bufin = GST_BUFFER (_data);
 235   GstMonoscope *monoscope;
 236   GstBuffer *bufout;
 237   guint32 samples_in;
 238   gint16 *data;
 239   gint i;
 240
 241   monoscope = GST_MONOSCOPE (gst_pad_get_parent (pad));
 242
 243   GST_DEBUG ("Monoscope: chainfunc called");
 244
 245   samples_in = GST_BUFFER_SIZE (bufin) / sizeof (gint16);
 246
 247   GST_DEBUG ("input buffer has %d samples", samples_in);
 248
 249   /* FIXME: should really select the first 1024 samples after the timestamp. */
 250   if (GST_BUFFER_TIMESTAMP (bufin) < monoscope->next_time || samples_in < 1024) {
 251     GST_DEBUG ("timestamp is %" G_GUINT64_FORMAT ": want >= %" G_GUINT64_FORMAT, GST_BUFFER_TIMESTAMP (bufin), monoscope->next_time);
 252     gst_buffer_unref (bufin);
 253     return;
 254   }
 255
 256   data = (gint16 *) GST_BUFFER_DATA (bufin);
 257   /* FIXME: Select samples in a better way. */
 258   for (i=0; i < 512; i++) {
 259     monoscope->datain[i] = *data++;
 260   }
 261
 262   if (monoscope->first_buffer) {
 263     monoscope->visstate = monoscope_init (monoscope->width, monoscope->height);
 264     g_assert(monoscope->visstate != 0);
 265     GST_DEBUG ("making new pad");
 266     if (!GST_PAD_CAPS (monoscope->srcpad)) {
 267       if (gst_monoscope_negotiate (monoscope) <= 0) {
 268         gst_element_error (GST_ELEMENT (monoscope), "could not set caps");
 269         return;
 270       }
 271     }
 272     monoscope->first_buffer = FALSE;
 273   }
 274
 275   bufout = gst_buffer_new ();
 276   GST_BUFFER_SIZE (bufout) = monoscope->width * monoscope->height * 4;
 277   GST_BUFFER_DATA (bufout) = (guchar *) monoscope_update (monoscope->visstate, monoscope->datain);
 278   GST_BUFFER_TIMESTAMP (bufout) = monoscope->next_time;
 279   GST_BUFFER_FLAG_SET (bufout, GST_BUFFER_DONTFREE);
 280
 281   monoscope->next_time += GST_SECOND / monoscope->fps;
 282
 283   gst_pad_push (monoscope->srcpad, GST_DATA (bufout));
 284
 285   gst_buffer_unref (bufin);
 286
 287   GST_DEBUG ("Monoscope: exiting chainfunc");
 288
 289 }
 290
 291 static gboolean
 292 plugin_init (GstPlugin *plugin)
 293 {
 294   return gst_element_register(plugin, "monoscope",
 295                               GST_RANK_NONE, GST_TYPE_MONOSCOPE);
 296 }
 297
 298 GST_PLUGIN_DEFINE (
 299   GST_VERSION_MAJOR,
 300   GST_VERSION_MINOR,
 301   "monoscope",
 302   "Monoscope visualization",
 303   plugin_init,
 304   VERSION,
 305   "LGPL",
 306   GST_PACKAGE,
 307   GST_ORIGIN
 308 )