sys/msdk/gstmsdkallocator_libva.c

   1 /* GStreamer Intel MSDK plugin
   2  * Copyright (c) 2018, Intel Corporation
   3  * Copyright (c) 2018, Igalia S.L.
   4  * All rights reserved.
   5  *
   6  * Redistribution and use in source and binary forms, with or without
   7  * modification, are permitted provided that the following conditions are met:
   8  *
   9  * 1. Redistributions of source code must retain the above copyright notice,
  10  *    this list of conditions and the following disclaimer.
  11  *
  12  * 2. Redistributions in binary form must reproduce the above copyright notice,
  13  *    this list of conditions and the following disclaimer in the documentation
  14  *    and/or other materials provided with the distribution.
  15  *
  16  * 3. Neither the name of the copyright holder nor the names of its contributors
  17  *    may be used to endorse or promote products derived from this software
  18  *    without specific prior written permission.
  19  *
  20  * THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS "AS IS"
  21  * AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO,
  22  * THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
  23  * PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT HOLDER OR
  24  * CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL,
  25  * EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO,
  26  * PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR PROFITS;
  27  * OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY,
  28  * WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT (INCLUDING NEGLIGDECE
  29  * OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE,
  30  * EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
  31  */
  32
  33 #include <va/va.h>
  34 #include <va/va_drmcommon.h>
  35 #include "gstmsdkallocator.h"
  36 #include "gstmsdkallocator_libva.h"
  37 #include "msdk_libva.h"
  38
  39 mfxStatus
  40 gst_msdk_frame_alloc (mfxHDL pthis, mfxFrameAllocRequest * req,
  41     mfxFrameAllocResponse * resp)
  42 {
  43   VAStatus va_status;
  44   mfxStatus status = MFX_ERR_NONE;
  45   gint i;
  46   guint format;
  47   guint va_fourcc = 0;
  48   VASurfaceID *surfaces = NULL;
  49   VASurfaceAttrib attribs[2];
  50   guint num_attribs = 0;
  51   mfxMemId *mids = NULL;
  52   GstMsdkContext *context = (GstMsdkContext *) pthis;
  53   GstMsdkMemoryID *msdk_mids = NULL;
  54   GstMsdkAllocResponse *msdk_resp = NULL;
  55   mfxU32 fourcc = req->Info.FourCC;
  56   mfxU16 surfaces_num = req->NumFrameSuggested;
  57
  58   /* MFX_MAKEFOURCC('V','P','8','S') is used for MFX_FOURCC_VP9_SEGMAP surface
  59    * in MSDK and this surface is an internal surface. The external allocator
  60    * shouldn't be used for this surface allocation
  61    *
  62    * See https://github.com/Intel-Media-SDK/MediaSDK/issues/762
  63    */
  64   if (req->Type & MFX_MEMTYPE_INTERNAL_FRAME
  65       && fourcc == MFX_MAKEFOURCC ('V', 'P', '8', 'S'))
  66     return MFX_ERR_UNSUPPORTED;
  67
  68   if (req->Type & MFX_MEMTYPE_EXTERNAL_FRAME) {
  69     GstMsdkAllocResponse *cached =
  70         gst_msdk_context_get_cached_alloc_responses_by_request (context, req);
  71     if (cached) {
  72       /* check if enough frames were allocated */
  73       if (req->NumFrameSuggested > cached->response.NumFrameActual)
  74         return MFX_ERR_MEMORY_ALLOC;
  75
  76       *resp = cached->response;
  77       g_atomic_int_inc (&cached->refcount);
  78       return MFX_ERR_NONE;
  79     }
  80   }
  81
  82   /* The VA API does not define any surface types and the application can use either
  83    * MFX_MEMTYPE_VIDEO_MEMORY_DECODER_TARGET or
  84    * MFX_MEMTYPE_VIDEO_MEMORY_PROCESSOR_TARGET to indicate data in video memory.
  85    */
  86   if (!(req->Type & (MFX_MEMTYPE_VIDEO_MEMORY_DECODER_TARGET |
  87               MFX_MEMTYPE_VIDEO_MEMORY_PROCESSOR_TARGET)))
  88     return MFX_ERR_UNSUPPORTED;
  89
  90   va_fourcc = gst_msdk_get_va_fourcc_from_mfx_fourcc (fourcc);
  91
  92   msdk_mids =
  93       (GstMsdkMemoryID *) g_slice_alloc0 (surfaces_num *
  94       sizeof (GstMsdkMemoryID));
  95   mids = (mfxMemId *) g_slice_alloc0 (surfaces_num * sizeof (mfxMemId));
  96   surfaces =
  97       (VASurfaceID *) g_slice_alloc0 (surfaces_num * sizeof (VASurfaceID));
  98   msdk_resp =
  99       (GstMsdkAllocResponse *) g_slice_alloc0 (sizeof (GstMsdkAllocResponse));
 100
 101   if (va_fourcc != VA_FOURCC_P208) {
 102     attribs[0].type = VASurfaceAttribPixelFormat;
 103     attribs[0].flags = VA_SURFACE_ATTRIB_SETTABLE;
 104     attribs[0].value.type = VAGenericValueTypeInteger;
 105     attribs[0].value.value.i = va_fourcc;
 106     num_attribs = 1;
 107
 108     /* set VA_SURFACE_ATTRIB_USAGE_HINT_ENCODER flag for encoding */
 109 #if (MFX_VERSION >= 1025)
 110     if ((req->Type & MFX_MEMTYPE_VIDEO_MEMORY_ENCODER_TARGET) &&
 111         (req->Type & MFX_MEMTYPE_FROM_ENCODE)) {
 112       attribs[1].type = VASurfaceAttribUsageHint;
 113       attribs[1].flags = VA_SURFACE_ATTRIB_SETTABLE;
 114       attribs[1].value.type = VAGenericValueTypeInteger;
 115       attribs[1].value.value.i = VA_SURFACE_ATTRIB_USAGE_HINT_ENCODER;
 116       num_attribs = 2;
 117     }
 118 #endif
 119
 120     format =
 121         gst_msdk_get_va_rt_format_from_mfx_rt_format (req->Info.ChromaFormat);
 122
 123     if (format == VA_RT_FORMAT_YUV420 && va_fourcc == VA_FOURCC_P010)
 124 #if VA_CHECK_VERSION(1, 2, 0)
 125       format = VA_RT_FORMAT_YUV420_10;
 126 #else
 127       format = VA_RT_FORMAT_YUV420_10BPP;
 128 #endif
 129
 130 #if VA_CHECK_VERSION(1, 4, 1)
 131     if (format == VA_RT_FORMAT_YUV444 && va_fourcc == VA_FOURCC_A2R10G10B10)
 132       format = VA_RT_FORMAT_RGB32_10;
 133 #endif
 134
 135 #if ((MFX_VERSION >= 1027) && VA_CHECK_VERSION(1, 2, 0))
 136     if (format == VA_RT_FORMAT_YUV422 && va_fourcc == VA_FOURCC_Y210)
 137       format = VA_RT_FORMAT_YUV422_10;
 138     else if (format == VA_RT_FORMAT_YUV444 && va_fourcc == VA_FOURCC_Y410)
 139       format = VA_RT_FORMAT_YUV444_10;
 140 #endif
 141
 142 #if ((MFX_VERSION >= 1031) && VA_CHECK_VERSION(1, 2, 0))
 143     if (format == VA_RT_FORMAT_YUV420 && va_fourcc == VA_FOURCC_P016)
 144       format = VA_RT_FORMAT_YUV420_12;
 145
 146     if (format == VA_RT_FORMAT_YUV422 && va_fourcc == VA_FOURCC_Y216)
 147       format = VA_RT_FORMAT_YUV422_12;
 148 #endif
 149
 150     va_status = vaCreateSurfaces (gst_msdk_context_get_handle (context),
 151         format,
 152         req->Info.Width, req->Info.Height, surfaces, surfaces_num, attribs,
 153         num_attribs);
 154
 155     status = gst_msdk_get_mfx_status_from_va_status (va_status);
 156     if (status != MFX_ERR_NONE) {
 157       GST_WARNING ("failed to create VA surface");
 158       return status;
 159     }
 160
 161     for (i = 0; i < surfaces_num; i++) {
 162       /* Get dmabuf handle if MFX_MEMTYPE_EXPORT_FRAME */
 163       if (req->Type & MFX_MEMTYPE_EXPORT_FRAME) {
 164         msdk_mids[i].info.mem_type = VA_SURFACE_ATTRIB_MEM_TYPE_DRM_PRIME;
 165         va_status =
 166             vaDeriveImage (gst_msdk_context_get_handle (context), surfaces[i],
 167             &msdk_mids[i].image);
 168         status = gst_msdk_get_mfx_status_from_va_status (va_status);
 169
 170         if (MFX_ERR_NONE != status) {
 171           GST_ERROR ("failed to derive image");
 172           return status;
 173         }
 174
 175         va_status =
 176             vaAcquireBufferHandle (gst_msdk_context_get_handle (context),
 177             msdk_mids[i].image.buf, &msdk_mids[i].info);
 178         status = gst_msdk_get_mfx_status_from_va_status (va_status);
 179
 180         if (MFX_ERR_NONE != status) {
 181           GST_ERROR ("failed to get dmabuf handle");
 182           va_status = vaDestroyImage (gst_msdk_context_get_handle (context),
 183               msdk_mids[i].image.image_id);
 184           if (va_status == VA_STATUS_SUCCESS) {
 185             msdk_mids[i].image.image_id = VA_INVALID_ID;
 186             msdk_mids[i].image.buf = VA_INVALID_ID;
 187           }
 188         }
 189       } else {
 190         /* useful to check the image mapping state later */
 191         msdk_mids[i].image.image_id = VA_INVALID_ID;
 192         msdk_mids[i].image.buf = VA_INVALID_ID;
 193       }
 194
 195       msdk_mids[i].surface = &surfaces[i];
 196       mids[i] = (mfxMemId *) & msdk_mids[i];
 197     }
 198   } else {
 199     /* This is requested from the driver when h265 encoding.
 200      * These buffers will be used inside the driver and released by
 201      * gst_msdk_frame_free functions. Application doesn't need to handle these buffers.
 202      *
 203      * See https://github.com/Intel-Media-SDK/samples/issues/13 for more details.
 204      */
 205     VAContextID context_id = req->AllocId;
 206     gint width32 = 32 * ((req->Info.Width + 31) >> 5);
 207     gint height32 = 32 * ((req->Info.Height + 31) >> 5);
 208     guint64 codedbuf_size = (width32 * height32) * 400LL / (16 * 16);
 209
 210     for (i = 0; i < surfaces_num; i++) {
 211       VABufferID coded_buf;
 212
 213       va_status = vaCreateBuffer (gst_msdk_context_get_handle (context),
 214           context_id, VAEncCodedBufferType, codedbuf_size, 1, NULL, &coded_buf);
 215
 216       status = gst_msdk_get_mfx_status_from_va_status (va_status);
 217       if (status < MFX_ERR_NONE) {
 218         GST_ERROR ("failed to create buffer");
 219         return status;
 220       }
 221
 222       surfaces[i] = coded_buf;
 223       msdk_mids[i].surface = &surfaces[i];
 224       msdk_mids[i].fourcc = fourcc;
 225       mids[i] = (mfxMemId *) & msdk_mids[i];
 226     }
 227   }
 228
 229   resp->mids = mids;
 230   resp->NumFrameActual = surfaces_num;
 231
 232   msdk_resp->response = *resp;
 233   msdk_resp->request = *req;
 234   msdk_resp->refcount = 1;
 235
 236   gst_msdk_context_add_alloc_response (context, msdk_resp);
 237
 238   return status;
 239 }
 240
 241 mfxStatus
 242 gst_msdk_frame_free (mfxHDL pthis, mfxFrameAllocResponse * resp)
 243 {
 244   GstMsdkContext *context = (GstMsdkContext *) pthis;
 245   VAStatus va_status = VA_STATUS_SUCCESS;
 246   mfxStatus status;
 247   GstMsdkMemoryID *mem_id;
 248   VADisplay dpy;
 249   gint i;
 250   GstMsdkAllocResponse *cached = NULL;
 251
 252   cached = gst_msdk_context_get_cached_alloc_responses (context, resp);
 253
 254   if (cached) {
 255     if (!g_atomic_int_dec_and_test (&cached->refcount))
 256       return MFX_ERR_NONE;
 257   } else
 258     return MFX_ERR_NONE;
 259
 260   if (!gst_msdk_context_remove_alloc_response (context, resp))
 261     return MFX_ERR_NONE;
 262
 263   mem_id = resp->mids[0];
 264   dpy = gst_msdk_context_get_handle (context);
 265
 266   if (mem_id->fourcc != MFX_FOURCC_P8) {
 267     /* Make sure that all the vaImages are destroyed */
 268     for (i = 0; i < resp->NumFrameActual; i++) {
 269       GstMsdkMemoryID *mem = resp->mids[i];
 270
 271       /* Release dmabuf handle if used */
 272       if (mem->info.mem_type == VA_SURFACE_ATTRIB_MEM_TYPE_DRM_PRIME)
 273         vaReleaseBufferHandle (dpy, mem->image.buf);
 274
 275       if (mem->image.image_id != VA_INVALID_ID &&
 276           vaDestroyImage (dpy, mem->image.image_id) == VA_STATUS_SUCCESS) {
 277         mem_id->image.image_id = VA_INVALID_ID;
 278         mem_id->image.buf = VA_INVALID_ID;
 279       }
 280     }
 281
 282     va_status =
 283         vaDestroySurfaces (dpy, (VASurfaceID *) mem_id->surface,
 284         resp->NumFrameActual);
 285   } else {
 286     VASurfaceID *surfaces = mem_id->surface;
 287
 288     for (i = 0; i < resp->NumFrameActual; i++) {
 289       va_status = vaDestroyBuffer (dpy, surfaces[i]);
 290     }
 291   }
 292
 293   g_slice_free1 (resp->NumFrameActual * sizeof (VASurfaceID), mem_id->surface);
 294   g_slice_free1 (resp->NumFrameActual * sizeof (GstMsdkMemoryID), mem_id);
 295   g_slice_free1 (resp->NumFrameActual * sizeof (mfxMemId), resp->mids);
 296
 297   status = gst_msdk_get_mfx_status_from_va_status (va_status);
 298   return status;
 299 }
 300
 301 mfxStatus
 302 gst_msdk_frame_lock (mfxHDL pthis, mfxMemId mid, mfxFrameData * data)
 303 {
 304   GstMsdkContext *context = (GstMsdkContext *) pthis;
 305   VAStatus va_status;
 306   mfxStatus status;
 307   mfxU8 *buf = NULL;
 308   VASurfaceID *va_surface;
 309   VADisplay dpy;
 310   GstMsdkMemoryID *mem_id;
 311
 312   mem_id = (GstMsdkMemoryID *) mid;
 313   va_surface = mem_id->surface;
 314   dpy = gst_msdk_context_get_handle (context);
 315
 316   if (mem_id->info.mem_type == VA_SURFACE_ATTRIB_MEM_TYPE_DRM_PRIME) {
 317     GST_WARNING ("Couldn't map the buffer since dmabuf is already in use");
 318     return MFX_ERR_LOCK_MEMORY;
 319   }
 320
 321   if (mem_id->fourcc != MFX_FOURCC_P8) {
 322     va_status = vaDeriveImage (dpy, *va_surface, &mem_id->image);
 323     status = gst_msdk_get_mfx_status_from_va_status (va_status);
 324
 325     if (status != MFX_ERR_NONE) {
 326       GST_WARNING ("failed to derive image");
 327       return status;
 328     }
 329
 330     va_status = vaMapBuffer (dpy, mem_id->image.buf, (void **) &buf);
 331     status = gst_msdk_get_mfx_status_from_va_status (va_status);
 332
 333     if (status != MFX_ERR_NONE) {
 334       GST_WARNING ("failed to map");
 335       if (vaDestroyImage (dpy, mem_id->image.image_id) == VA_STATUS_SUCCESS) {
 336         mem_id->image.image_id = VA_INVALID_ID;
 337         mem_id->image.buf = VA_INVALID_ID;
 338       }
 339       return status;
 340     }
 341
 342     switch (mem_id->image.format.fourcc) {
 343       case VA_FOURCC_NV12:
 344       case VA_FOURCC_P010:
 345       case VA_FOURCC_P016:
 346         data->Pitch = mem_id->image.pitches[0];
 347         data->Y = buf + mem_id->image.offsets[0];
 348         data->UV = buf + mem_id->image.offsets[1];
 349         break;
 350       case VA_FOURCC_YV12:
 351         data->Pitch = mem_id->image.pitches[0];
 352         data->Y = buf + mem_id->image.offsets[0];
 353         data->U = buf + mem_id->image.offsets[2];
 354         data->V = buf + mem_id->image.offsets[1];
 355         break;
 356       case VA_FOURCC_YUY2:
 357         data->Pitch = mem_id->image.pitches[0];
 358         data->Y = buf + mem_id->image.offsets[0];
 359         data->U = data->Y + 1;
 360         data->V = data->Y + 3;
 361         break;
 362       case VA_FOURCC_UYVY:
 363         data->Pitch = mem_id->image.pitches[0];
 364         data->Y = buf + mem_id->image.offsets[0];
 365         data->U = data->U + 1;
 366         data->V = data->U + 2;
 367         break;
 368       case VA_FOURCC_ARGB:
 369         data->Pitch = mem_id->image.pitches[0];
 370         data->B = buf + mem_id->image.offsets[0];
 371         data->G = data->B + 1;
 372         data->R = data->B + 2;
 373         data->A = data->B + 3;
 374         break;
 375 #if (MFX_VERSION >= 1028)
 376       case VA_FOURCC_RGB565:
 377         data->Pitch = mem_id->image.pitches[0];
 378         data->R = buf + mem_id->image.offsets[0];
 379         data->G = data->R;
 380         data->B = data->R;
 381         break;
 382 #endif
 383       case VA_FOURCC_AYUV:
 384         data->PitchHigh = (mfxU16) (mem_id->image.pitches[0] / (1 << 16));
 385         data->PitchLow = (mfxU16) (mem_id->image.pitches[0] % (1 << 16));
 386         data->V = buf + mem_id->image.offsets[0];
 387         data->U = data->V + 1;
 388         data->Y = data->V + 2;
 389         data->A = data->V + 3;
 390         break;
 391 #if VA_CHECK_VERSION(1, 4, 1)
 392       case VA_FOURCC_A2R10G10B10:
 393         data->Pitch = mem_id->image.pitches[0];
 394         data->R = buf + mem_id->image.offsets[0];
 395         data->G = data->R;
 396         data->B = data->R;
 397         data->A = data->R;
 398         break;
 399 #endif
 400 #if VA_CHECK_VERSION(1, 2, 0)
 401       case VA_FOURCC_Y210:
 402       case VA_FOURCC_Y216:
 403         data->Pitch = mem_id->image.pitches[0];
 404         data->Y = buf + mem_id->image.offsets[0];
 405         data->U = data->Y + 2;
 406         data->V = data->Y + 6;
 407         break;
 408       case VA_FOURCC_Y410:
 409         data->Pitch = mem_id->image.pitches[0];
 410         data->U = buf + mem_id->image.offsets[0];       /* data->Y410 */
 411         break;
 412 #endif
 413       case VA_FOURCC_ABGR:
 414         data->Pitch = mem_id->image.pitches[0];
 415         data->R = buf + mem_id->image.offsets[0];
 416         data->G = data->R + 1;
 417         data->B = data->R + 2;
 418         data->A = data->R + 3;
 419         break;
 420
 421       default:
 422         g_assert_not_reached ();
 423         break;
 424     }
 425   } else {
 426     VACodedBufferSegment *coded_buffer_segment;
 427     va_status =
 428         vaMapBuffer (dpy, *va_surface, (void **) (&coded_buffer_segment));
 429     status = gst_msdk_get_mfx_status_from_va_status (va_status);
 430     if (MFX_ERR_NONE == status)
 431       data->Y = (mfxU8 *) coded_buffer_segment->buf;
 432   }
 433
 434   return status;
 435 }
 436
 437 mfxStatus
 438 gst_msdk_frame_unlock (mfxHDL pthis, mfxMemId mid, mfxFrameData * ptr)
 439 {
 440   GstMsdkContext *context = (GstMsdkContext *) pthis;
 441   VAStatus va_status;
 442   mfxStatus status;
 443   VADisplay dpy;
 444   GstMsdkMemoryID *mem_id;
 445
 446   mem_id = (GstMsdkMemoryID *) mid;
 447   dpy = gst_msdk_context_get_handle (context);
 448
 449   if (mem_id->fourcc != MFX_FOURCC_P8) {
 450     vaUnmapBuffer (dpy, mem_id->image.buf);
 451     va_status = vaDestroyImage (dpy, mem_id->image.image_id);
 452
 453     if (va_status == VA_STATUS_SUCCESS) {
 454       mem_id->image.image_id = VA_INVALID_ID;
 455       mem_id->image.buf = VA_INVALID_ID;
 456     }
 457   } else {
 458     va_status = vaUnmapBuffer (dpy, *(mem_id->surface));
 459   }
 460
 461   status = gst_msdk_get_mfx_status_from_va_status (va_status);
 462
 463   return status;
 464 }
 465
 466 mfxStatus
 467 gst_msdk_frame_get_hdl (mfxHDL pthis, mfxMemId mid, mfxHDL * hdl)
 468 {
 469   GstMsdkMemoryID *mem_id;
 470
 471   if (!hdl || !mid)
 472     return MFX_ERR_INVALID_HANDLE;
 473
 474   mem_id = mid;
 475   *hdl = mem_id->surface;
 476
 477   return MFX_ERR_NONE;
 478 }
 479
 480 void
 481 gst_msdk_set_frame_allocator (GstMsdkContext * context)
 482 {
 483   mfxFrameAllocator gst_msdk_frame_allocator = {
 484     .pthis = context,
 485     .Alloc = gst_msdk_frame_alloc,
 486     .Lock = gst_msdk_frame_lock,
 487     .Unlock = gst_msdk_frame_unlock,
 488     .GetHDL = gst_msdk_frame_get_hdl,
 489     .Free = gst_msdk_frame_free,
 490   };
 491
 492   gst_msdk_context_set_frame_allocator (context, &gst_msdk_frame_allocator);
 493 }
 494
 495 gboolean
 496 gst_msdk_get_dmabuf_info_from_surface (mfxFrameSurface1 * surface,
 497     gint * handle, gsize * size)
 498 {
 499   GstMsdkMemoryID *mem_id;
 500   g_return_val_if_fail (surface, FALSE);
 501
 502   mem_id = (GstMsdkMemoryID *) surface->Data.MemId;
 503   if (handle)
 504     *handle = mem_id->info.handle;
 505   if (size)
 506     *size = mem_id->info.mem_size;
 507
 508   return TRUE;
 509 }
 510
 511 gboolean
 512 gst_msdk_export_dmabuf_to_vasurface (GstMsdkContext * context,
 513     GstVideoInfo * vinfo, gint fd, VASurfaceID * surface_id)
 514 {
 515   GstVideoFormat format;
 516   guint width, height, size, i;
 517   unsigned long extbuf_handle;
 518   guint va_fourcc = 0, va_chroma = 0;
 519   VASurfaceAttrib attribs[2], *attrib;
 520   VASurfaceAttribExternalBuffers extbuf;
 521   VAStatus va_status;
 522   mfxStatus status = MFX_ERR_NONE;
 523
 524   g_return_val_if_fail (context != NULL, FALSE);
 525   g_return_val_if_fail (vinfo != NULL, FALSE);
 526   g_return_val_if_fail (fd >= 0, FALSE);
 527
 528   extbuf_handle = (guintptr) (fd);
 529
 530   format = GST_VIDEO_INFO_FORMAT (vinfo);
 531   width = GST_VIDEO_INFO_WIDTH (vinfo);
 532   height = GST_VIDEO_INFO_HEIGHT (vinfo);
 533   size = GST_VIDEO_INFO_SIZE (vinfo);
 534
 535   /* Fixme: Move to common format handling util */
 536   switch (format) {
 537     case GST_VIDEO_FORMAT_NV12:
 538       va_chroma = VA_RT_FORMAT_YUV420;
 539       va_fourcc = VA_FOURCC_NV12;
 540       break;
 541     case GST_VIDEO_FORMAT_BGRA:
 542       va_chroma = VA_RT_FORMAT_YUV444;
 543       va_fourcc = VA_FOURCC_BGRA;
 544       break;
 545     case GST_VIDEO_FORMAT_YUY2:
 546       va_chroma = VA_RT_FORMAT_YUV422;
 547       va_fourcc = VA_FOURCC_YUY2;
 548       break;
 549     case GST_VIDEO_FORMAT_P010_10LE:
 550 #if VA_CHECK_VERSION(1, 2, 0)
 551       va_chroma = VA_RT_FORMAT_YUV420_10;
 552 #else
 553       va_chroma = VA_RT_FORMAT_YUV420_10BPP;
 554 #endif
 555       va_fourcc = VA_FOURCC_P010;
 556       break;
 557     case GST_VIDEO_FORMAT_UYVY:
 558       va_chroma = VA_RT_FORMAT_YUV422;
 559       va_fourcc = VA_FOURCC_UYVY;
 560       break;
 561 #if (MFX_VERSION >= 1028)
 562     case GST_VIDEO_FORMAT_RGB16:
 563       va_chroma = VA_RT_FORMAT_RGB16;
 564       va_fourcc = VA_FOURCC_RGB565;
 565       break;
 566 #endif
 567     case GST_VIDEO_FORMAT_VUYA:
 568       va_chroma = VA_RT_FORMAT_YUV444;
 569       va_fourcc = VA_FOURCC_AYUV;
 570       break;
 571 #if VA_CHECK_VERSION(1, 4, 1)
 572     case GST_VIDEO_FORMAT_BGR10A2_LE:
 573       va_chroma = VA_RT_FORMAT_RGB32_10;
 574       va_fourcc = VA_FOURCC_A2R10G10B10;
 575       break;
 576 #endif
 577 #if VA_CHECK_VERSION(1, 2, 0)
 578     case GST_VIDEO_FORMAT_Y210:
 579       va_chroma = VA_RT_FORMAT_YUV422_10;
 580       va_fourcc = VA_FOURCC_Y210;
 581       break;
 582     case GST_VIDEO_FORMAT_Y410:
 583       va_chroma = VA_RT_FORMAT_YUV444_10;
 584       va_fourcc = VA_FOURCC_Y410;
 585       break;
 586     case GST_VIDEO_FORMAT_P012_LE:
 587       va_chroma = VA_RT_FORMAT_YUV420_12;
 588       va_fourcc = VA_FOURCC_P016;
 589       break;
 590     case GST_VIDEO_FORMAT_Y212_LE:
 591       va_chroma = VA_RT_FORMAT_YUV422_12;
 592       va_fourcc = VA_FOURCC_Y216;
 593       break;
 594 #endif
 595     default:
 596       goto error_unsupported_format;
 597   }
 598
 599   /* Fill the VASurfaceAttribExternalBuffers */
 600   extbuf.pixel_format = va_fourcc;
 601   extbuf.width = width;
 602   extbuf.height = height;
 603   extbuf.data_size = size;
 604   extbuf.num_planes = GST_VIDEO_INFO_N_PLANES (vinfo);
 605   for (i = 0; i < extbuf.num_planes; i++) {
 606     extbuf.pitches[i] = GST_VIDEO_INFO_PLANE_STRIDE (vinfo, i);
 607     extbuf.offsets[i] = GST_VIDEO_INFO_PLANE_OFFSET (vinfo, i);
 608   }
 609   extbuf.buffers = (uintptr_t *) & extbuf_handle;
 610   extbuf.num_buffers = 1;
 611   extbuf.flags = 0;
 612   extbuf.private_data = NULL;
 613
 614   /* Fill the Surface Attributes */
 615   attrib = attribs;
 616   attrib->type = VASurfaceAttribMemoryType;
 617   attrib->flags = VA_SURFACE_ATTRIB_SETTABLE;
 618   attrib->value.type = VAGenericValueTypeInteger;
 619   attrib->value.value.i = VA_SURFACE_ATTRIB_MEM_TYPE_DRM_PRIME;
 620   attrib++;
 621   attrib->type = VASurfaceAttribExternalBufferDescriptor;
 622   attrib->flags = VA_SURFACE_ATTRIB_SETTABLE;
 623   attrib->value.type = VAGenericValueTypePointer;
 624   attrib->value.value.p = &extbuf;
 625   attrib++;
 626
 627   va_status = vaCreateSurfaces (gst_msdk_context_get_handle (context),
 628       va_chroma, width, height, surface_id, 1, attribs, attrib - attribs);
 629   status = gst_msdk_get_mfx_status_from_va_status (va_status);
 630   if (status != MFX_ERR_NONE)
 631     goto error_create_surface;
 632
 633   return TRUE;
 634
 635 error_unsupported_format:
 636   {
 637     GST_ERROR ("Unsupported Video format %s, Can't export dmabuf to vaSurface",
 638         gst_video_format_to_string (format));
 639     return FALSE;
 640   }
 641 error_create_surface:
 642   {
 643     GST_ERROR ("Failed to create the VASurface from DRM_PRIME FD");
 644     return FALSE;
 645   }
 646 }
 647
 648 /**
 649  * gst_msdk_replace_mfx_memid:
 650  * This method replace the internal VA Suface in mfxSurface with a new one
 651  *
 652  * Caution: Not a thread-safe routine, this method is here to work around
 653  * the dmabuf-import use case with dynamic memID replacement where msdk
 654  * originally Inited with fake memIDs.
 655  *
 656  * Don't use anywhere else unless you really know what you are doing!
 657  */
 658 gboolean
 659 gst_msdk_replace_mfx_memid (GstMsdkContext * context,
 660     mfxFrameSurface1 * mfx_surface, VASurfaceID surface_id)
 661 {
 662   GstMsdkMemoryID *msdk_mid = NULL;
 663   VADisplay dpy;
 664   VASurfaceID *old_surface_id;
 665   VAStatus va_status;
 666   mfxStatus status = MFX_ERR_NONE;
 667
 668   g_return_val_if_fail (mfx_surface != NULL, FALSE);
 669   g_return_val_if_fail (context != NULL, FALSE);
 670
 671   msdk_mid = (GstMsdkMemoryID *) mfx_surface->Data.MemId;
 672   dpy = gst_msdk_context_get_handle (context);
 673
 674   /* Destroy the underlined VAImage if already mapped */
 675   if (msdk_mid->image.image_id != VA_INVALID_ID
 676       && msdk_mid->image.buf != VA_INVALID_ID) {
 677     status =
 678         gst_msdk_frame_unlock ((mfxHDL) context, (mfxMemId) msdk_mid, NULL);
 679     if (status != MFX_ERR_NONE)
 680       goto error_destroy_va_image;
 681   }
 682
 683   /* Destroy the associated VASurface */
 684   old_surface_id = msdk_mid->surface;
 685   if (*old_surface_id != VA_INVALID_ID) {
 686     va_status = vaDestroySurfaces (dpy, old_surface_id, 1);
 687     status = gst_msdk_get_mfx_status_from_va_status (va_status);
 688     if (status != MFX_ERR_NONE)
 689       goto error_destroy_va_surface;
 690   }
 691
 692   *msdk_mid->surface = surface_id;
 693
 694   return TRUE;
 695
 696 error_destroy_va_image:
 697   {
 698     GST_ERROR ("Failed to Destroy the VAImage");
 699     return FALSE;
 700   }
 701 error_destroy_va_surface:
 702   {
 703     GST_ERROR ("Failed to Destroy the VASurfaceID %x", *old_surface_id);
 704     return FALSE;
 705   }
 706 }