Add object detection script

Change-Id: I50d3708cdfac0547064ac3bae55238a321d27a09
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge "Add new Landmark, OffsetVec, DispVec, Edge outputmetadata for pose landmark detection" into tizen_devel

Add new Landmark, OffsetVec, DispVec, Edge outputmetadata for pose landmark detection

Change-Id: I7a2799005ebb887cf273c672132b3d9eb5a7ce40
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Cmake mediavision build refactoring

- build type to RelWithDebInfo mode
- fix wrong naming(machine_learning -> inference)
- public to private include
- remove unused project
- remove unused libraries

Change-Id: Iab2866be23830c0a8d3e3296e921572fa548c108
Signed-off-by: Kwang Son <k.son@samsung.com>

Cmake mediavision build refactoring

- include -> target_include
- clean pkg_check_modules usage
- remove manual compile option
- remove unused libraries
- remove unused command
- remove arm neon flag
- remove manual prefix

Change-Id: Ie30dfe0e04321fef8ed42652ec06b4f0d3cc0bff
Signed-off-by: Kwang Son <k.son@samsung.com>

Cmake test build refactoring

- include -> target_include
- clean pkg_check_modules usage
- remove manual compile option
- remove unused libraries
- remove unused command

Change-Id: I1e3a389ac41ed18637ff15fcd8898b2652319fbf
Signed-off-by: Kwang Son <k.son@samsung.com>

Cmake to lower case consistency

Change-Id: I3f66547d57d01aceb87278843898b146b2fb7c14
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge "Deprecate inference lic" into tizen_devel

Merge "Deprecate surveillance lic" into tizen_devel

Merge "Deprecate face lic" into tizen_devel

Deprecate inference lic

Inference licensed port code is support to change licensed version library
from opensource version. However practically no one used anymore.

Change-Id: I086f91800eb917ce89b6be9a86d765f8e1c643c4
Signed-off-by: Kwang Son <k.son@samsung.com>

Deprecate surveillance lic

Surveillance licensed port code is support to change licensed version library
from opensource version. However practically no one used anymore.

Change-Id: If77d4174ebbe55bc639c6a18eed30833ecee0fe7
Signed-off-by: Kwang Son <k.son@samsung.com>

Apply meta json data type

Change-Id: Ibd754d1b9aa78f594bd70fe1040c54758f477aff
Signed-off-by: Kwang Son <k.son@samsung.com>

Deprecate face lic

Face licensed port code is support to change licensed version library
from opensource version. However practically no one used anymore.

Change-Id: Iacefbd9de9307836442f66504fdaafeddc8bf612
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge "Update testsuite to run google face detection models with meta files" into tizen_devel

Merge "Deprecate image lic" into tizen_devel

AddressSanitizer: attempting double-free

mBackend is not allocated by Load function.
return error code is enough.

Change-Id: I3ece30b743d08892c97c2d325a14bd53685bdd43
Signed-off-by: Kwang Son <k.son@samsung.com>

Deprecate image lic

Image licensed port code is support to change licensed version library
from opensource version. However practically no one used anymore.

Change-Id: Ia5e478816c319ec0808cd3e21bd34fd6b807815f
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge "Error handling" into tizen_devel

Deprecate barcode lic

Barcode licensed port code is support to change licensed version library
from opensource version. However practically no one used anymore.

Change-Id: I7619d78d200bee0d87de0ee015b2a2d2a179059a
Signed-off-by: Kwang Son <k.son@samsung.com>

packaging: Change machine learning package name

Changed machine learning package name from capi-media-vision-inference*
tp capi-media-vision-machine_learning*.

Machine learning package includes not only inference library
also learning library so change existing inference specific package name
to generic one.

Change-Id: I6e5354f802ab836a1d4f8558d149d13b341ef323
Signed-off-by: Inki Dae <inki.dae@samsung.com>

Error handling

Change-Id: Ifb5cbb49afd26b564203a10577f48a0004322bf7
Signed-off-by: Kwang Son <k.son@samsung.com>

Add EfficientDet object detection model

Change-Id: I1cae546a2decf1b20169c4b78adcf063a31190ea
Signed-off-by: Kwang Son <k.son@samsung.com>

Update testsuite to run google face detection models with meta files

Change-Id: I95ac44eaed2d69bf11af8ad063ff06f1dcddf6df
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Move mv_inference into mv_machine_learning

Moved mv_inference directory in mv_machine_learning directory.

Mediavision will support not only inference API also learning API.
So it makes a mv_machine_learning directory on top of Mediavision,
and moves existing mv_inference into mv_machine_learning directory.

This is a first step for adding learning API support for Mediavision.

Change-Id: I2d8597064141b2392bfdad0854e08dadd8d98258
Signed-off-by: Inki Dae <inki.dae@samsung.com>

Add face detection inference with new BoxInfo, Label, Number outputmetadata

Support a model without Label and Number as well.
As an example, meta files of google hosted models for face detection
are also added.

Note that face detection is basically identical with object detection except
label is one (face). So, most codes are similar to the inference codes of
object detection.

Change-Id: I58b6e4b9fb4664e5741e9adb05a0d253ce12c5da
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

remove unused lines

Change-Id: If41ae77001d5caedefbdabbdc5f512b2bc950ff1
Signed-off-by: sangho park <sangho.g.park@samsung.com>

Update testsuite to run google object detection models with meta files

Change-Id: I538039aa055379e7ba308e21d32f97329860441a
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

remove warnings

Change-Id: I025afa35747a9caaaba855eae15eb48243043b1b
Signed-off-by: sangho park <sangho.g.park@samsung.com>

Apply object detection inference With new BoxInfo, Label, Number outputmetadata

Support a model without Label and Number as well.
A model may not support post-op and it should be decoded
with anchor boxes manually and post-processed such as non-maximum suppression.
In this patch, those are also added.

Change-Id: I9d0dc121910c05add2c0083532d7ff42b573268e
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

remove warnings

Change-Id: Ib444593a0bf641bb4b0f2a3bd86fb7ea4041c304
Signed-off-by: sangho park <sangho.g.park@samsung.com>

Delete unused code comment

Change-Id: Ic01e34d9d0cd506e3bfcddd3440fe5d7c81af9a9
Signed-off-by: Kwang Son <k.son@samsung.com>

remove warnings

Change-Id: Ie93b8373b224b65a2c091ffc35931712b2f5b753
Signed-off-by: sangho park <sangho.g.park@samsung.com>

Add BoxInfo, Label, Number classes to OutputMetadata for object detection

BoxInfo, Label, Number classes are required for object detection.
As an example, meta files of goolge hosted models for object detection
are also added.

Change-Id: I968267c1108a5e79ce9fbadbb5ec0d258fc38f8b
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

add Surveillance assessment

 Usage: mv_surveillance_assessment [OPTION...] SOURCE THRESHOLD
 [VQA-surveillance]

   -?, --help                 Give this help list
       --usage                Give a short usage message

 mediavision surveillance assessment
  e.g) mv_surveillance_assessment surveillance.avi 3

  Threshold range is 0 to 10

Change-Id: Ib69e260d8a1a2610c3909093fd3bc085ce35be8d
Signed-off-by: sangho park <sangho.g.park@samsung.com>

[MVQA] Add image classification verify

Change-Id: Ie46ccd79ae547de48a71b30278b6e51fca770b8e
Signed-off-by: Kwang Son <k.son@samsung.com>

[MVQA] Add image classification

Change-Id: Ie1c0f8bf96c0f0749c50978b8bfd9a9f298061ab
Signed-off-by: Kwang Son <k.son@samsung.com>

Change path of configuration file

Change-Id: I957ea08224f9fb7654f0e79520f975cc2a293f08
Signed-off-by: Hyunsoo Park <hance.park@samsung.com>

[Face/Barcode] Handle Error return

Change-Id: Ia1fcefc4b567fb67924113b64c9ac22ccc6094d9
Signed-off-by: Hyunsoo Park <hance.park@samsung.com>

Remove MEDIA_VISION_COLORSPACE_INVALID case in convertSourceMV2GrayCV()

It is one of colorspace which is not supported.
We don't need to separate it from other not supported error cases.

Change-Id: I2a757ed7338897f5638527aac7c2daec01661386
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Add new attributes to media-vision-config.json

New attributes as rotation and image enhancement features in barcode detection,

 - MV_BARCODE_DETECT_ATTR_ROTATION_DEGREES
 - MV_BARCODE_DETECT_ATTR_ROTATION_COUNT
 - MV_BARCODE_DETECT_ATTR_ROTATION_DIRECTION
 - MV_BARCODE_DETECT_ATTR_USE_ENHANCEMENT,

should be added to media-vision-config.json

Change-Id: I2d6dcbd215d50e32dd9a43ac31f7e11309aa38a0
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Add rotation functionality and CLAHE preprocessing in Barcode module

Change-Id: I806ad1e20a2b3a436b14b26d41218dbfa3c7fe32
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>
(cherry picked from commit a9bcad59c6c72b617a836e0e4687f0a9ef52a7e6)

Fix failure of SetInputLayerProperty

If inputMeta isn't used, property is empty resulting to failure of SetInputLayerProperty().
property, which is set to inference engine backends through inference engine interface,
should be set by mConfig, regardless of inputMeta usage.

Change-Id: I4424d3c935288ee66ac3fab966e0e06f13a22e7f
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

mv_inference: fix coverity issue

This patch returns an error if mPreProc.Run call failed correctly.

Change-Id: Ie8b75481e773115a1253ac448175da6cd0efa99d
Signed-off-by: Inki Dae <inki.dae@samsung.com>

Fix uninitialized Bvh* bvh_ member variable

Coverity issue(WGID 1192835): Uninitialized pointer field(CWE-457)

Change-Id: I28ee00646f3a70196dcfec08b819657148447a2d
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Remove vulnerable strcpy() and strcat(), use memcpy() instead.

Fix svace issue PROC_USE.VULERABLE
WGID: 456309

Change-Id: Ic547e9faa06aef0fd70def6ad1e829c15b795f69
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Add manifest

manifest is used for apply smack rule in RPM packages.

Change-Id: I385cb7ffd3ddce4a552f6c65d9e29685dd862809
Signed-off-by: Kwang Son <k.son@samsung.com>

Add readme file for MVQA

Change-Id: I21a60641bac220bbb9ca3e34a4134fbaba85aa25
Signed-off-by: Kwang Son <k.son@samsung.com>

Add Face detection using TFlite

Change-Id: I62f9de68a9d101525e2fc0df0f5791d2ed1d4f4a
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge "Change load data method" into tizen_devel

Change load data method

 - Change method to download single data of dataset from NAS server

Change-Id: I69c46a9ab1761bdf80e3ff4913dad93de8afcaef
Signed-off-by: Kwang Son <k.son@samsung.com>

Add meta files for google hosted models and update testsuite

Added meta files which support google hosted models for
image classification, and update testsuite to run the models with meta files.

Change-Id: If171f82501cfa3b7246358341d30b547d5f1c701
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Merge "Output layer names should be updated by a metafile if it exist" into tizen_devel

Merge "Add return false to setTensorBuffer() if parameters are invalid" into tizen_devel

Merge "[MVQA] Add barcode and face detection" into tizen_devel

[MVQA] Add barcode and face detection

Change-Id: Icb8be5d0eed217b5b06861cd1c21d61030ad79a2
Signed-off-by: Kwang Son <k.son@samsung.com>

Output layer names should be updated by a metafile if it exist

Change-Id: I06ae65a07528163cdff0a5fc211e129b6f9607ca
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Add return false to setTensorBuffer() if parameters are invalid

Change-Id: I35c3778513437a84cb36a09d35de97a2ed127f35
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Add TensorBuffer class

It wraps inference_engine_tensor_buffer as a member variable.
It provides methods setTesnorBuffer(), getTensorbuffer(),
and getValue without type casting, which is annoying but important
when handling the value on postprocessing.

Change-Id: I5d7f516ae9aa3113f8e296e24f08840be0c63108
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Add dequantization to postprocess and fix bug when there is no preprocess

Change-Id: I8bb520a7977ab61e9a8c4ecfc3349197a134b04a
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Add include map

Change-Id: I33441b80767fae60c738bcc83ec8b41699ccf2ae
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge "Add Metadata,  PreProcess, PostProcess class" into tizen_devel

Add Metadata,  PreProcess, PostProcess class

Introduce metadata based pre-/post-process.
User can set the input/output information of a model to a metadata file(json file)
Based on information, input tensor and output tensor are preprocessed and postprocessed,
respectively.
Metadata class with InputMetadata and OutputMetadata are added.
PreProcess and PostProcess class are added.

A meta file for classification is added as an example.
It can be used as an referece for classification case.

Change-Id: Ie86b50ae32bf2f7f5d336fe4709d6ea938930c3d
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

add Face assessment

 Usage: mv_face_assessment [OPTION...] SOURCE MODEL-TYPE
 [VQA-face]

   -?, --help                 Give this help list
       --usage                Give a short usage message

 mediavision face assessment
  e.g) mv_face_assessment face.png 0

 ModelTypes are below:
  0:haarcascade_frontalface_alt.xml
  1:haarcascade_frontalface_alt2.xml
  2:haarcascade_frontalface_alt_tree.xml

Change-Id: Idf3998911aab5ba4f9871a639df595634ece37b7
Signed-off-by: sangho park <sangho.g.park@samsung.com>

change VQA input/output format

 e.g) mv_barcode_assessment barcode.png
 2            # number of barcode
 123456789    # 1'st barcode
 987654321    # 2nd barcode

Change-Id: Id3017af1cf076a3338f66a0fe1c4497bc75c3166
Signed-off-by: sangho park <sangho.g.park@samsung.com>

[MVQA] Add benchmark database schema

Change-Id: I6d4ba715283f8960c9434e90207d736d659d22eb
Signed-off-by: Kwang Son <k.son@samsung.com>

Add mvqa run script and db

Change-Id: I1474eb6889b98b5d1513923974190bf2274af93c
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge "create new test directories for VQA (Visual Quality Assessment)" into tizen_devel

create new test directories for VQA (Visual Quality Assessment)

New directories
 - assessment

I plan to work with barcode and add the rest.

Change-Id: I948d53fa60215c8124e5e4a503dc8e4c7989bce0
Signed-off-by: sangho park <sangho.g.park@samsung.com>

Add mvqa script

MVQA(Media Vision Quality Assessment) is for benchmark of vision library
not only test result but also memory footprint, speed, cpu-usage.

Change-Id: Id49ff6e3bae995371a5248a1d42f7157ff338f04
Signed-off-by: Kwang Son <k.son@samsung.com>

Change vector<inference_engine_tensor_buffer> to map<string, inference_engine_tensor_buffer>

To use inference_engine_tensor_buffer based on input/output layers' name,
change the type from vector to map.

According to the change of inference_engine_layer_property type from vector to map,
related codes are changed.

This commit is related to change of inference-engine-interface, which is
https://review.tizen.org/gerrit/#/c/platform/core/multimedia/inference-engine-interface/+/254892/)

Change-Id: If1b22462fe5c3321600e8b6df22e826cca6eb767
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

MV_INFERENCE_BACKEND_MLAPI with MV_INFERENCE_TARGET_DEVICE_CUSTOM condition only requires to check model config path

Change-Id: Ie73cfc3488360d8a5cde0c2c52f92900410b4f7c
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Change the initial value of mTargetTypes to MV_INFERENCE_TARGET_DEVICE_CPU

mTargetTypes should be MV_INFERENCE_TARGET_DEVICE_CPU.
Otherwise, it is failed to load backend engine with mlapi.

Change-Id: I4b5110308f77b72b8bc7d572e4e8831b4b9466e2
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Remove patch diff

Change-Id: I884f89c418d9746c42a827085532273cd709e6f2
Signed-off-by: Hyunsoo Park <hance.park@samsung.com>

Merge branch 'tizen' into tizen_devel

Change-Id: I09a0df533c6b8ee7f6f9183b69801854641d7507

Check return value of malloc()

Fix svace issues DEREF_OF_NULL.RET.ALLOC
WGID: 449897, 450084

Change-Id: I20cdd26d4802b0219c897bb8025d30baaaa3c3ee
Signed-off-by: Tae-Young Chung <ty83.chung@samsung.com>

Add test resource download instruction

Change-Id: Ib16d40e224508a4b1f5385fba34cdace556e8a17
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge "Barcode: Add internal unit test case (libcheck)" into tizen

Barcode: Add internal unit test case (libcheck)

Mediavision has interactive-based test under test directory but this
patch introduce unit test.

Change-Id: Ida43b9e90bab01ddad2e83e969a2751eedea2113
Signed-off-by: Kwang Son <k.son@samsung.com>

Correct log level

Change-Id: I802bd016c3c0ca20f31bd53f2552c935e8beb1ff
Signed-off-by: Kwang Son <k.son@samsung.com>

Fix roi parameter handling

roi for check_source_roi, check_source_roi_quadrangle is optional.

Change-Id: If23a99f5b0b51edfa456476cadacfa875b942194
Signed-off-by: Kwang Son <k.son@samsung.com>

Replace gcc -w option to -Wall

Gcc -Wall option enhance code quailty and delete -w option which is
suppress warning. To clean code successfully follow bugs or warnings are fixed.

 - Cmake : -Wall -> -w and clean duplicate commands
 - Delete line : unused variables
 - strncpy : check null terminator and buffer size
 - exciplit header include
 - printf formatting, sprintf truncation
 - convert unmatched type
 - fix typo

Change-Id: I049de491b2e832aa27900b046984306ea3aeb318
Signed-off-by: Kwang Son <k.son@samsung.com>

Add gcc Wall option

Turn gcc -Wall option on instead of -w.

Change-Id: I30ed93bda037e541b38edd7e0349ab79523b9bb5
Signed-off-by: Kwang Son <k.son@samsung.com>

Fix gcc warning and bug

 - convert unmatched type
 - include explicit header
 - remove strncpy, snprintf (truncation warning)
 - check parameter validation
 - fix typo

Change-Id: I3d5185016f1b1c48a607cec0898aaa6da76968b2
Signed-off-by: Kwang Son <k.son@samsung.com>

Add clang-format file

clang-format tool help C/C++ tizen code lint.
This file made by Samsung SE team and need clang-format version 7 or newer.
https://releases.llvm.org/7.0.1/tools/clang/docs/ClangFormatStyleOptions.html

Change-Id: I702b83afdcb0384ba0f202947395d5ef46f911de
Signed-off-by: Kwang Son <k.son@samsung.com>

Fix gcc warning

 - strncpy to strdup : truncation warning
 - remove scanf : newline already handled

Change-Id: I63e10dbc8d5130835c2723018fee62a641715bc7

Fix gcc warning

 - printf formatting
 - sprintf truncation

Change-Id: I2371d525fdbd665a413892993b95769ad16be0fd

Cleanup cmake script

-DTIZEN_DEBUG : tizen specific define (duplicate in spec file also)
CMAKE_CXX_FLAGS : top parent CMakeLists has Wall option. (duplicate)

Change-Id: Ie031820c50dc019c99c10e8f250cfe5b816e7de3
Signed-off-by: Kwang Son <k.son@samsung.com>

Fix gcc warning

Change-Id: Ia0da73f38c5837a7b92e714167ebb552e370e091
Signed-off-by: Kwang Son <k.son@samsung.com>

Fix gcc warning

delete line : unused variable.
strncpy : need null value space.

Change-Id: I71781d250828ad8c5ce44a29d0732bc8cb59c962
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge "Removing unnecessary HTML link for feature/privilege" into tizen

Merge "Revert "Add Pose correction API"" into tizen

Revert "Add Pose correction API"

This reverts commit 9bf593ba1735c09d9bde22dc7a08e6cb79852639.

Reason for revert: <ACR review>

Change-Id: I8fa860433d69dc41b63fbe7193986109af1c7649

Revert "Add mv_pose_subtract test"

This reverts commit 1acdec169b90496b23cf18224e08516d8d1d3e3a.

Reason for revert: <INSERT REASONING HERE>

Change-Id: I98cb7a4d2e1f2cf3d23c02d3eec949476677bb01

Add mv_pose_subtract test

Change-Id: I5fe9047902737d1ca2582c886433e7a826c1ed8f
Signed-off-by: Kwang Son <k.son@samsung.com>

Removing unnecessary HTML link for feature/privilege

Change-Id: I74e0ac0e0535f6bdcc794fdf77d1ecc3663b23fc
Signed-off-by: Hyunsoo Park <hance.park@samsung.com>

Merge "Add Pose correction API" into tizen

Add Pose correction API

mv_pose_subtract function is first part of correction API.
With pose detection, they only get pose similarity score but hard to
know differences between user and bvh skeleton line.
Using mv_pose_subtract help how skeleton should be changed.

Change-Id: I9296c00ae17ef45e3d5b86bafa913ad87974cfc6
Signed-off-by: Kwang Son <k.son@samsung.com>

Fix test result typo

Facial -> Pose

Change-Id: Idfa0cf10713005616b59cfd6f4e4287e8f62c7cb
Signed-off-by: Kwang Son <k.son@samsung.com>

Merge branch 'tizen' into tizen_devel

mv_inference: Fix seg. fault issue at ConfigureInputInfo()

mBackendCapacity will be updated after Bind call
so access to mBackendCapacity shoud be done after the completion
of Binding. This patch makes the Bind callback to be called
before calling ConfigureTargetDevices callback.