[Filter] add a hash table for shared key

[Filter] add a hash table for shared key

Signed-off-by: Hyoung Joo Ahn <hello.ahn@samsung.com>

[Filter/Common] declare extern

Declare extern to prevent warning when using filter common functions in cpp.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[query/server] Fix possible leaks in query_server_data_free

- Free remaining TensorQueryConnection in conn_queue
- Clear error in query_connect

Signed-off-by: Yongjoo Ahn <yongjoo1.ahn@samsung.com>

[Query/Sink] handle error case

Fix error case, unmap memory block when failed to send data to client.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Query] Fix unnecessary unreference

GstBaseSink unref object after render.
So, don't need to unref out buffer.

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Query] Handle tensor query meta

 - Null check of the tensor query meta
 - Copy GstMeta of the first buffer to outbuf for collect pad.
   -> Copy policy should be updated considering multiple clients.

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Query] Change property type

Change port property type to unsigned int.

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Filter/Sub] add event handler for filter-fw v0

Add event handler for filter framework v0 and new event to check hw availability with custom option.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[mqtt/trivial] Fix typos in mqtt related codes

- Fix some minor typos in mqtt related codes

Signed-off-by: Yongjoo Ahn <yongjoo1.ahn@samsung.com>

[Test] unittest pkg

Add test directory into unittest pkg and remove generated files.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Test/Py/CodeClean] util functions to run test

Code clean, reduce duplicated source. Add util functions to run the unittest.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[tools/pbtxt/py] fix warning

remove global variables - it complains not to set global val.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Test/bmp2png]: Fix -Werror errors after warnings level increase

This fixes the following error, encountered with gcc 10.2:

| ../../../../../../workspace/sources/nnstreamer/tests/bmp2png.c: In function 'save_png_to_file':
| ../../../../../../workspace/sources/nnstreamer/tests/bmp2png.c:95:16: error: variable 'status' might be clobbered by 'longjmp' or 'vfork' [-Werror=clobbered]
|    95 |   register int status = -1;
|       |                ^~~~~~
| cc1: all warnings being treated as errors

Signed-off-by: Xavier Roumegue <xavier.roumegue@nxp.com>

[Filter/Vivante] Fix -Werror after warnings level increase

This fixes the following errors:

../../../../../../workspace/sources/nnstreamer/ext/nnstreamer/tensor_filter/vivante/tensor_filter_subplugin.c:411:50: error: unused parameter 'prop' [-Werror=unused-parameter]
  411 | vivante_close (const GstTensorFilterProperties * prop, void **private_data)
      |                ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~^~~~
../../../../../../workspace/sources/nnstreamer/ext/nnstreamer/tensor_filter/vivante/tensor_filter_subplugin.c: In function 'vivante_invoke':
../../../../../../workspace/sources/nnstreamer/ext/nnstreamer/tensor_filter/vivante/tensor_filter_subplugin.c:456:17: error: comparison of integer expressions of different signedness: 'int' and 'uint32_t' {aka 'unsigned int'} [-Werror=sign-compare]
  456 |   for (i = 0; i < pdata->graph->input.num; i++) {
      |                 ^
../../../../../../workspace/sources/nnstreamer/ext/nnstreamer/tensor_filter/vivante/tensor_filter_subplugin.c:507:17: error: comparison of integer expressions of different signedness: 'int' and 'uint32_t' {aka 'unsigned int'} [-Werror=sign-compare]
  507 |   for (i = 0; i < pdata->graph->output.num; i++) {
      |                 ^
../../../../../../workspace/sources/nnstreamer/ext/nnstreamer/tensor_filter/vivante/tensor_filter_subplugin.c:438:51: error: unused parameter 'prop' [-Werror=unused-parameter]
  438 | vivante_invoke (const GstTensorFilterProperties * prop,
      |                 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~^~~~
../../../../../../workspace/sources/nnstreamer/ext/nnstreamer/tensor_filter/vivante/tensor_filter_subplugin.c: In function 'vivante_getInputDim':
../../../../../../workspace/sources/nnstreamer/ext/nnstreamer/tensor_filter/vivante/tensor_filter_subplugin.c:538:56: error: unused parameter 'prop' [-Werror=unused-parameter]
  538 | vivante_getInputDim (const GstTensorFilterProperties * prop,
      |                      ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~^~~~
../../../../../../workspace/sources/nnstreamer/ext/nnstreamer/tensor_filter/vivante/tensor_filter_subplugin.c: In function 'vivante_getOutputDim':
../../../../../../workspace/sources/nnstreamer/ext/nnstreamer/tensor_filter/vivante/tensor_filter_subplugin.c:561:57: error: unused parameter 'prop' [-Werror=unused-parameter]
  561 | vivante_getOutputDim (const GstTensorFilterProperties * prop,
      |                       ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~^~~~
cc1: all warnings being treated as errors

Signed-off-by: Xavier Roumegue <xavier.roumegue@nxp.com>

[tools/pbtxt/py] fix warning

Fix warning - undefined variables.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Query] Support flexible tensors format

Support flexible tensors format for tensor query.

Test pipeline
server:
 gst-launch-1.0 tensor_query_serversrc host=127.0.0.1 ! other/tensors,format=flexible ! tensor_query_serversink host=127.0.0.1
client:
 gst-launch-1.0 v4l2src ! videoconvert ! videoscale !  video/x-raw,width=320,height=240,format=RGB,framerate=30/1 ! tensor_converter ! other/tensors,format=flexible ! tensor_query_client src-host=127.0.0.1 sink-host=127.0.0.1 ! tensor_converter input-dim=3:320:240 input-type=uint8 ! tensor_decoder mode=direct_video ! videoconvert ! ximagesink

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[SAM/CodeClean/Py] fix pylint and syntax error

Code clean, fix pylint warning and syntax error.
- indent with 4 spaces
- function name rule: lowercase
- 2 blank lines between class and function

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[LICENSE] Add SPDX reference in LICENSE file.

Add SPDX license identifier reference in LICENSE file.

Signed-off-by: gichan <gichan2.jang@samsung.com>

[tensor_query] Fix double free in tensor_query_server

- Assign NULL value after call `query_server_data_free` to  prevent double free
- Remove some trailing spaces

Signed-off-by: Yongjoo Ahn <yongjoo1.ahn@samsung.com>

[Query] Change GLib types to standard types.

 - Change type of the port from uint32 to uint16.
 - Change Glib types to standard types.

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Query] Add address resolver for server

Add address resolver for server.

Signed-off-by: gichan <gichan2.jang@samsung.com>

[Filter/Sub] unnecessary log to get subplugin from ini

Remove unnecessary log while loading sub-plugins from conf file.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Query] Fix resource leak

Fix resource leaks reported by coverity.

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Build] Set 'filter-aliases' option for trix-engine

The sub-plugin name of SRNPU is changed to trix-engine. So this patch
add 'trix-engine = srnpu' option in 'filter-aliases' field to provide
backward compatibility.

Signed-off-by: Sangjung Woo <sangjung.woo@samsung.com>

[Filter/Sub] Support 'filter-aliases' option

This patch supports the 'filter-aliases' option for searching the
sub-plugin. For example, if 'tf = tensorflow' option is given,
application developers can use 'framework = tf' in pipeline description
to use 'tensorflow' sub-plugin.

Signed-off-by: Sangjung Woo <sangjung.woo@samsung.com>

[fix/build] Fix build error unused vars

- Fix unused var build error in tensorrt related codes

Signed-off-by: Yongjoo Ahn <yongjoo1.ahn@samsung.com>

[Query] res leak

Code clean, fix possible res leak and invalid param.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Query] Update server elements

Update query serversrc, serversink & meta-query
Src accepts connection from clients receiving messages such as
- Request Info : send back to client w/ src tensor config
- Start : indicates beginning of data transfer
- Data : contains tensor data
- End : ends transfer

Sink can identify client by meta-query, which contains host address
Sink sends transformed tensor by same policy

Example pipeline
```
gst-launch-1.0 tensor_query_serversrc host=127.0.0.1 ! other/tensors,num_tensors=1,dimensions=3:300:300:1,types=uint8,framerate=30/1 ! tensor_query_serversink host=127.0.0.1

gst-launch-1.0 v4l2src ! videoconvert ! videoscale ! video/x-raw,width=300,height=300,format=RGB,framerate=30/1 ! tensor_converter ! tensor_query_client src-host=127.0.0.1 sink-host=127.0.0.1 ! tensor_decoder mode=direct_video ! videoconvert ! ximagesink
```

Signed-off-by: Junhwan Kim <jejudo.kim@samsung.com>

[Query/common] Update server to handle multi-clients

Query server should be capable of serving multi-clients
Update asynchronous handler to accept async connection

Signed-off-by: Junhwan Kim <jejudo.kim@samsung.com>

[Query] Implement tensor query client

Implement tensor query client.
todo: support various protocols, error handling

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Repo] remove meta

Gstreamer-meta in tensor repo only handles pad caps. Move caps into repo-data and remove repo-meta info.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Query] Implement common utils for TCP

Common API functions used for both client and server elements
Currently based on TCP connections

TODO
- Enable timeout

Signed-off-by: Junhwan Kim <jejudo.kim@samsung.com>

[Gst/Mqtt] Resolve compiler warnings

Resolve compiler warnings.
 - Unused parameter
 - Different type comparison

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Filter] Rename srnpu to trix-engine

The patch update the name 'srnpu' to 'trix-engine'.

Signed-off-by: Sangjung Woo <sangjung.woo@samsung.com>

[Config/Format] tensor format in config

Set tensor format from caps struct.
tensor stream has single format, so format in tensor-info struct is unnecessary.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

TFLite: Allow to skip flatbuf dep check

In Yocto build, it appears that flatbuf dep check
is not available:
https://github.com/nnstreamer/meta-neural-network/blob/master/recipes-nnstreamer/nnstreamer/files/0001-Disable-flatbuf-check-for-tf-lite-for-yocto-build.patch

@anyj0527 : Let's remove all *.patch files from
meta-neural-network by updating related nnstreamer/*.git
*.patch files in meta-neural-network are obvious
hazards.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

[filter/SNAP] Add TensorFlow Lite support

- SNAP v3.0 supports inference with TensorFlow Lite.
- Add the supported enum.

Signed-off-by: Yongjoo Ahn <yongjoo1.ahn@samsung.com>

[Subplugin/Py] prevent resizing the array length

In the sub-plugins for python, prevent resizing the array length when creating new array object.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Doc] Add serialized buffer description

Add serialized buffer description.(flatbuf, protobuf, flexbuf)

Signed-off-by: gichan <gichan2.jang@samsung.com>

[Test/Ubuntu] add nnfw test

enable nnfw subplugin test in ubuntu build.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Converter/Py] mem size

set memory size from mapped info, not buffer size.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Build] fix build error

Fix build error after changing warning level.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

DIST (rpm/deb): add nnstreamer-util.h

The newly introduced external header should be
included in devel package.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Style fix of gst-indent

With a lot of files modified by previous "warning fix" commit,
unrelated style fixes are required.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Increase warning level and resolve compiler warnings.

1. Increase warning level of meson from 1 --> 2.
2. Resolve all warnings.

TODO: Increase warning level further.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Common: add a common util header.

For nnstreamer developers including sub-plugin writers,
provide a common nnstreamer utility header that does not
depend on additional libraries.

TODO: migrate such functions from other external headers.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Transform: ignore warnings from generated files.

For the increased warning level, add a script to ignore
warnings from generated C files.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

[Test] fix res leak

fix res leak in tvm testcase.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

Move nnstreamer_example to tests/

With nnstreamer_example directory at the top,
some users are confused and thought that this directory
is the official nnstreamer example apps.

However, these are merely example codes for unit tests;
thus, they should be moved into tests to prevent
the confusion.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Common: refactor silent_debug() and make it common

1. Provide common macro of silent_debug and silent_debug_caps,
 which had been repeatedly defined in each plugin.
2. Refactor the two macros to get "object" as an argument
 so that it wouldn't use implicit argument exceot for "DBG".

The same macros are not touched in /ext directory
because they are not supposed to include "tensor_common.h",
which is an internal header.

@todo There are a few subplugins in /ext (not tensor-filter)
that uses "tensor_common.h". They should be refactored not to
use internal headers so that we can separate them to
independent repo anytime. Although we don't have such plans,
we need to keep them as appropriate examples for users.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

[Common] remove tensor-config struct

Remove tensor-config struct (for single tensor) and replace it to tensors-config.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Query] Define tensor query common data structures.

Re-define tensor query common data structures.

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[TVM/test] Add models for more architectures

Add tvm test models to support test on arm and aarch64

Signed-off-by: Junhwan Kim <jejudo.kim@samsung.com>

[Test] update testcases about changed caps

Old mime type for flex-tensor is removed, and added format in caps string.
Fix all related testcases.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Caps/Format] add tensor format in caps

Add tensor format in caps.
Fix pad template with flex tensor and remove old mimetype.
Now caps string for flex-tensor has framerate field.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[SparseTensor] Define SparseTensor and API

- Define a tensor_format for SparseTensor
- Define a info structure for SparseTensor which has "length" of
  non-zero elements
- Add a internal header `tensor_sparse_util.h` for util functions that
  will be used in related elements
- Add a union in GstTensorMetaInfo for SparseTensor

SparseTensors could be more efficient on processing of tensors that
contain a lot of zero values.
I'll adopt the coordinate list (COO) format for encoding it, same as
other NN frameworks.

The COO encoding for sparse tensors is comprised of REF:
(https://www.tensorflow.org/guide/sparse_tensor):

values: A 1D tensor with shape [N] containing all nonzero values.
indices: A 2D tensor with shape [N, rank], containing the indices of the
nonzero values.
dense_shape: A 1D tensor with shape [rank], specifying the shape of the
tensor.

For example a Tensor
```
[[1, 0, 0, 0]
 [0, 0, 2, 0]
 [0, 0, 0, 0]]
```
can be encoded as
```
SparseTensor(values=[1, 2], indices=[[0, 0], [1, 2]], dense_shape=[3, 4])
```

In our project, a SparseTensor should be encoded with these information:
```cpp
tensor_type   data_type;
tensor_dim    dense_shape;
unsigned int  nnz; /* the number of non-zero elements */
data_type     values[nnz];
unsigned int  indices[nnz][RANK_LIMIT];
```

Since data_type and dense_shape are could be represented in `GstTensorMetaInfo`,
Add a `GstSparseTensorInfo`, and let it have the `nnz` (number of non-zeros).
The values and indices are stored in a single memory chunk, and the
`nnz` information would be used for parsing the buffer.

Signed-off-by: Yongjoo Ahn <yongjoo1.ahn@samsung.com>

[Build/Deb] dependency to NNFW

Add new pkg for NNFW (ONE) in debian build.

Related issue: https://github.com/Samsung/ONE/issues/7196

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

Paho-mqtt: enable to use paho-mqtt w/o pkgconfig

In case pkgconfig is not available for paho-mqtt,
prepare hardcoded library dependencies for paho-mqtt.

However, using this hardcoded dependency is not recommended
and using pkgconfig files is already recommended.

paho-mqtt build is force-enabled for Debian, too.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Debian: add debian release changelog for Sid

Add Debian Sid as debian release target.
Sid is the "devel" version of Debian.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Debian: enable armnn in Sid.

Debian-Sid has armnn without pkgconfig.
Allow to use armnn without pkgconfig file.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Meson: use flatbuf if it's >= 2.0.0

Restrict flatbuf version to 2.0.0 or higher.
Older flatbuf incurs test case errors.
Disable related test cases, too.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Ubuntu: Xenial build fail with pdebuild fixed.

Xenial appears to identify build-deps before dh_clean.
Keep Ubuntu-Xenial control file as default for this issue.

In Ubuntu-Bionic or Debian-Sid, there is no such issues.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Debian: disable edge-tpu and openvino.

Debian does not have edge-tpu or openvino ready, yet.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Debian: skip SSAT for Debian

We have not duploaded SSAT for Debian.
Skip SSAT for Debian.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Debian: draft Debian distro build files.

Provided packages are a bit different between Ubuntu and Debian.
Provide a different control file for Debian builds.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Debian: multiple control files for different distros.

Build-deps cannot be dynamically replaced per distro.
Thus, we need to prepare multiple control files and
slap in appropriate control files with rules.

This allow to prepare Debian and Ubuntu simultaneously.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

[Coverity/MQTT/Sink] Fix a critical Coverity defect (WGID 1238814)

This patch fixes a critical Coverity defect (WGID 1238814), which is
tagged as FORWARD_NULL, in the GstMQTTSink plugin.

Signed-off-by: Wook Song <wook16.song@samsung.com>

[Coverity/Tests/MQTT] Fix critical defects in MQTT test cases

This patch fixes the critical defects, 1238819,1238820, 1238824,
1238830, and 1238821, which are related to resource leak, in the MQTT
test cases.

Signed-off-by: Wook Song <wook16.song@samsung.com>

[Coverity/MQTT/Src] Fix major coverity issues 1238821, 1238825, 1238826

This patch fixes the major coverity issues related to missing locks in
the MQTT source element.

Signed-off-by: Wook Song <wook16.song@samsung.com>

[Coverity/Tests/MQTT] Fix a critical coverity issue 1238828

This patch fixes a critical coverity issue (WGID: 1238828), which is
about uninitialized non-static variables in the GstMqttTestHelper class.

Signed-off-by: Wook Song <wook16.song@samsung.com>

[Build] framework priority option

Add meson-option to set fw priority for file extension (.nb, .bin)

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

Decoder: Bounding boxes: option3 comments update

Mobilenet-ssd-postprocess has its own syntax for option3.
Describe it for users.

This should be merged AFTER #3408

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

[Filter] init properites

Add init code - newly updated properties in filter.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Coverity] Fix coverity issues (689481, 689480)

Uninitialized read on `PackedFunc` assignment
Fix dynamic overflow

Signed-off-by: Junhwan Kim <jejudo.kim@samsung.com>

[armnn] Fix coverity issue

Fix converity issue
 - Fix resource leak (delete core when init failed)
 - Initialize networkid.
 - Fix use after free (stop test when there isn't test model)

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Common] util function to copy tensor config

Add util function to copy tensor config struct.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Decoder/BoundingBox]: SSD: Estimate valid detection against sigmoid value

The sigmoid/logistic function is mathematically monotonic by definition.
Hence, computing the bijective threshold value thanks to its inverse
function (logit) once and compare it directly against logistic activation
values while sorting out the valid detected objects, helps to significantly
improve pipeline latency, and reduce power consumption/cpu load.

Signed-off-by: Xavier Roumegue <xavier.roumegue@nxp.com>

[Decoder/BoundingBox]: SSD: PP parameters can be set through option3

The post processing parameters used to decode a mobilenet SSD neural
network can be optionally set through option3, using ':' as parameter
delimiter.

The option3 definition scheme is, in order, the following:
- box priors location file (mandatory)
- Detection threshold (optional, default set to 0.5)
- Y box scale (optional, default set to 10.0)
- X box scale (optional, default set to 10.0)
- h box scale (optional, default set to 5.0)
- w box scale (optional, default set to 5.0)
- IOU box valid threshold (optional, default set to 0.5)

The default parameters value could be set through the following option3
example:

... option3=box-priors.txt:0.5:10.0:10.0:5.0:5.0:0.5 ...
or
... option3=box-priors.txt ...
or
... option3=box-priors.txt:::::: ...

It's possible to set only few values, using the default values for
those not specified through the command line.
You could specify respectively the detection and IOU thresholds to 0.65
and 0.6 with the option3 parameter as follow:

... option3=box-priors.txt:0.65:::::0.6 ...

Signed-off-by: Xavier Roumegue <xavier.roumegue@nxp.com>

[Tests/GRPC] Skip GRPC tests on the qemu/arm environment either

Since some system calls required by GRPC are not supported on qemu/arm
as well, this patch blocks SSAT-based GRPC test cases' running on such
environment.

See also: 8a3eedc95a814a27949de4850f4ed6b670ac3616

Signed-off-by: Wook Song <wook16.song@samsung.com>

Filter/Vivante: apply gst-indent

Vivante filter codes incur gst-indent complaints.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Filters: add custom property descriptions

This adds custom property descriptions for
- edge-tpu
- python3
- snap
- snpe
- tf-lite
- vivante

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

[Filter/NNFW] add custom description

add custom option description in nnfw sub-plugin.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Query] add tensor query boilerplate

- draft for tensor-query

Signed-off-by: Junhwan Kim <jejudo.kim@samsung.com>

[Common/Util] function to get possible caps

Fix nego error case, add new function to get possible caps from config.
When receives caps event, element should return all possible caps.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Doc] Fix android documentation

- fix docs more likely to work for beginners

Signed-off-by: Junhwan Kim <jejudo.kim@samsung.com>

[Common] util function to handle tensor format

Add util function to handle tensor format.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Caps/Tensor] caps string with format

Define caps template with tensor format.
After this PR, old caps (tensors/tensors-flexible) will be removed, and nnstreamer elements/testcases will be updated with new caps string.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

[Spec] Remove flatbuffers-python recommends section

Because of the security issue, VD does not use the script language.
Moreover, VD officially uses Python 3.5 for debugging purposes but the
latest Tizen 6.5 uses Python 3.9. Because of this reason, 'Recommends:
flatbuffers-python' section should be removed for VD build infra.

Signed-off-by: Sangjung Woo <sangjung.woo@samsung.com>

[Query] Add common socket functions

Add common sokcet functions for tensor-query.
Other common functions are added later.
tensor_query_src, tensor_query_sink and tensor_query_filter will use
these functions.

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Split/Merge/Aggregator] caps template for single tensor

Modify pad caps template - other/tensors with num 1.
Set src-pad caps using peer caps.

Signed-off-by: Jaeyun <jy1210.jung@samsung.com>

ARMNN: fix unittest fail

1. Fix segmentation fault.

nnstreamerFilterArmnn.invoke02_n tests armnn_invoke() where
private_data == NULL, which incurs segmentation fault
of armnn subplugin.

2. Fix -EPERM of open()

If a Caffe/TFLite parser was not available at build time,
opening Caffe/TFLite file results in -EPERM.
Such cases should not be regarded as test-fail.

3. Fix error handling of armnn subplugin

Use the proper error codes!

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Tizen: re-enable armnn build.

Provide as many tensor-filter subplugins as possible!

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

ARMNN: update deprecated type enum.

QuantisedAsymm8 and QuantisedSymm16 are deprecated by both
Tizen and Debian's ARMNN versions.
Use new enum declarations.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

ARMNN: enable Caffe/TFLite parses only when available

Include Caffe-parser or TFLite-parser only if they are
available at build-time.

Note that Debian-Sid does not have Caffe-parser ready with
its ARMNN-devel packages.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

ARMNN: Fix comments

Fix ArmNNCore::makeTfLiteNetwork's Doxygen description.

Reported-by: Dongju Chae <dongju.chae@samsung.com>
Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

[TEST] Fix streambuffers test

Test fails on arm arch(gbs build) because buffer conversion takes long time.
The purpose of the test is converting other/tensors to streambuffers, so modifies the test.

Signed-off-by: Gichan Jang <gichan2.jang@samsung.com>

[Tests/GstMQTT] Initialize PTS and DTS in the dummy header

This patch adds the initialization code of PTS and DTS in the dummy
header to the helper function that fills the timestamp information.

Signed-off-by: Wook Song <wook16.song@samsung.com>

[Tests/GstMQTT] Increase the timeout for receiving a message

The default timeout, 10 secs, for receiving a message from the
subscribed topic might be short for sandboxed-test environments such as
GBS and Pbuilder. To avoid failure of GstMQTT test cases due to the
timeout, this patch increases the timeout to 1 min instead of using the
defualt one, 10 secs.

Signed-off-by: Wook Song <wook16.song@samsung.com>

[Tests/GstMQTT] Do not use 'fakevideosink' in test cases

Since 'fakevideosink' is included in gst-plugins-bad, extra dependency
should be declared to use this element. To avoid it, this patch replaces
'fakevideosink' in the MQTT test cases with 'fakesink'.

Signed-off-by: Wook Song <wook16.song@samsung.com>

[Tests/GstMQTT] Rename the test suite that uses the mocking library

This patch changes the test suite name including the test cases based
on the mocking Paho-MQTT APIs.

Signed-off-by: Wook Song <wook16.song@samsung.com>