Set parameter for Floor operation in pureACL (#2383)

This commit supports Floor operation for the GPU mode by using OpenCL in acl.
It sets appropriate parameters and invoke the acl floor function.

Signed-off-by: Jiyoung Yun <jy910.yun@samsung.com>

Update skiplist of GeneratedTests (#2385)

Update skiplist for passed GeneratedTests

Signed-off-by: Seok NamKoong <sk.namkoong@samsung.com>

[neurun] Introduce NOP operation (#2382)

This commit introduces NOP operation to do nothing.
(Actually it needs the tensor copy into other indexes. but not now.)

In this PR, the NOP operation doesn't anything, it's just the operation for graph manipulation test.

Signed-off-by: sjsujinkim <sjsujin.kim@samsung.com>

Add per-operation instrument code in pure arm compute runtime (#2362)

- Put separate copies of profiler under util/profiling
  : profile.h, profile_buffer.h, time.h, time.cc are same to original.
    It is copied to remove circular dependency.

- Add instrument code in pure arm compute runtime
  : See execution.cc

- Move profiling context to util/profiling
  : We will use Profiling Context in other runtime (i.e., neurun) later.

Related Issue: #1696

Signed-off-by: Sanggyu Lee <sg5.lee@samsung.com>

[Generated Test] addining test for Fully_Connected (#2370)

Currently all of generated tests for FC(Fully_Connected) fail.
This commit adds a test case for FC, which uses same data with nnapi_quickcheck_fully_connected_1.

The purpose of adding this test is to check whether any modification against current FC code works correctly.

(More specifically, to see if NEON FC code works for #2334)

Signed-off-by: Hyun Sik Yoon <hyunsik.yoon@samsung.com>

Introduce Floor operation into pureACL (#2367)

* Introduce Floor operation into pureACL

This commit adds Floor operation into pureACL runtime.

Signed-off-by: Jiyoung Yun <jy910.yun@samsung.com>
* Throw an exception for unsupported floor operation

Signed-off-by: Jiyoung Yun <jy910.yun@samsung.com>

[PureACL] NEON implicit MaxPool2D & AvgPool2D operation (#2361)

Added NEON implicit MaxPool2D and AvgPool2D operation.
This commits makes 2 `MaxPool2D` generated test passed among 8 tests
and makes 2 `AvgPool2D` generated test passed among 8 tests

- MaxPool2D
```
$ NEON=1 LD_LIBRARY_PATH=Product/out/lib Product/out/unittest/runtime_run_android_nn_test --gtest_filter=GeneratedTests.max_pool*

[       OK ] GeneratedTests.max_pool_float_4 (42 ms)
[       OK ] GeneratedTests.max_pool_quant8_4 (1 ms)
...
[==========] 8 tests from 1 test case ran. (51 ms total)
[  PASSED  ] 2 tests.
[  FAILED  ] 6 tests, listed below:
[  FAILED  ] GeneratedTests.max_pool_float_1
[  FAILED  ] GeneratedTests.max_pool_float_2
[  FAILED  ] GeneratedTests.max_pool_float_3
[  FAILED  ] GeneratedTests.max_pool_quant8_1
[  FAILED  ] GeneratedTests.max_pool_quant8_2
[  FAILED  ] GeneratedTests.max_pool_quant8_3

```

- AvgPool2D
```
$ NEON=1 LD_LIBRARY_PATH=Product/out/lib Product/out/unittest/runtime_run_android_nn_test --gtest_filter=GeneratedTests.avg_pool*

[       OK ] GeneratedTests.avg_pool_float_5 (42 ms)
[       OK ] GeneratedTests.avg_pool_quant8_5 (1 ms)
...
[==========] 10 tests from 1 test case ran. (50 ms total)
[  PASSED  ] 2 tests.
[  FAILED  ] 8 tests, listed below:
[  FAILED  ] GeneratedTests.avg_pool_float_1
[  FAILED  ] GeneratedTests.avg_pool_float_2
[  FAILED  ] GeneratedTests.avg_pool_float_3
[  FAILED  ] GeneratedTests.avg_pool_float_4
[  FAILED  ] GeneratedTests.avg_pool_quant8_1
[  FAILED  ] GeneratedTests.avg_pool_quant8_2
[  FAILED  ] GeneratedTests.avg_pool_quant8_3
[  FAILED  ] GeneratedTests.avg_pool_quant8_4

```

Signed-off-by: Hyun Sik Yoon <hyunsik.yoon@samsung.com>

[neurun] Move and split Plan.h (#2369)

Move and split classes in `internal/Plan.h` into separate files.

- `internal::Plan` to `neurun::codegen::Plan`
- `internal::operand::Context` to `neurun::codegen::operand::Context`
- `internal::op::Sequence` to `neurun::codegen::operation::Sequence`

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Change namespace for internal operand (#2368)

Change namespace: internal::tflite::operand -> neurun::internal::operand

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

[Generated Test] TC for Concat([4D, 4D, 4D], axis=3) (#2364)

Currently all of generated test for concat fail.
This commit adds a test case for concat with 4D inputs and axis=3 and passes without error.
The purpose of adding this test is to check whether any modification against current concat code works correctly.

Signed-off-by: Hyun Sik Yoon <hyunsik.yoon@samsung.com>

[neurun] Move internal Object class into internal/operand (#2365)

Move internal Object class from internal/Model.h(cc) to internal/operand/Object.h(cc)
Remove internal/Model.cc

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

Remove depthwise-xxx tests from skiplist (#2336)

Removed tests :

-GeneratedTests.depthwise_conv2d_float_2
-GeneratedTests.depthwise_conv2d_float_large_2_weights_as_inputs
-GeneratedTests.depthwise_conv2d_float
-GeneratedTests.depthwise_conv2d_float_weights_as_inputs
-GeneratedTests.depthwise_conv2d_quant8_2
-GeneratedTests.depthwise_conv2d_quant8_large
-GeneratedTests.depthwise_conv2d_quant8_large_weights_as_inputs
-GeneratedTests.depthwise_conv2d_quant8
-GeneratedTests.depthwise_conv2d_quant8_weights_as_inputs

Signed-off-by: Chunseok Lee <chunseok.lee@samsung.com>

[neurun] Move internal Shape class into internal/operand (#2363)

Move internald Shape class from internal/Model.h(cc) to internal/operand/Shape.h(cc)

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

[neurun] Move internal Data class into internal/operand (#2360)

Move internal Data class from internal/Model.h to internal/operand/Data.h

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

Introduce RNN operation into pureACL (#2359)

This commit introduces RNN operation into purACL.

Signed-off-by: jiseob.jang <jiseob.jang@samsung.com>

tflite_benchmark_model supports `use_nnapi` parameter. (#2337)

Previously tflite_benchmark_model always run models with interpreter only.
Now, it uses nnapi delegate on `use_nnapi=true`

```
LD_LIBRARY_PATH=Product/out/lib Product/out/bin/tflite_benchmark_model \
--graph=../models/mobilenet_quant_v1_224.tflite \
--input_layer="Placeholder" --input_layer_shape="1,224,224,3" \
--num_threads=1 --use_nnapi=true \
```

Note that it is still under development.
Instrument code for each operation is not inserted yet.

Signed-off-by: Sanggyu Lee <sg5.lee@samsung.com>

[PureACL] Add NEON Operations (#2343)

PureACL was modified to run CL or NEON operations. (Provide "NEON=1" as env variable to run NEON operations)
Three NEON operations were tested: `Add`, `Sub`, `Mul` (8 generated tests were passed).

Signed-off-by: Hyun Sik Yoon <hyunsik.yoon@samsung.com>

Fix Shape Constraints of depthwise_conv2d_explicit for quant8 (#2326)

Shape constraints of depthwise_conv2d_explicit was not correct
This commit will apply correct constraints for quant8 and enable below tests

`GeneratedTests.depthwise_conv2d_quant8_large`
`GeneratedTests.depthwise_conv2d_quant8_large_weights_as_inputs`
`GeneratedTests.depthwise_conv2d_quant8`
`GeneratedTests.depthwise_conv2d_quant8_weights_as_inputs`

Signed-off-by: Seok NamKoong <sk.namkoong@samsung.com>

Make TopK support 1D, 2D tensor (#2323)

Previous TopK supports 1D only.
This commit makes TopK support 2D also in runtime layer.
(ACL layer PR : https://github.sec.samsung.net/RS7-RuntimeNTools/ComputeLibrary/pull/41)

Signed-off-by: Hyun Sik Yoon <hyunsik.yoon@samsung.com>

[neurun] Encapsulate Linear IR (#2350)

So far Linear IR was a vector of Node elements but this commit
encapsulates it into a class. Also this commit introduces a new phase
for Graph `LINEARIZED` which indicates that the Graph IR is no longer
valid and all data structures are moved to `Linear` object. For now
nothing is moved yet, but will in the future.

Resolve #2320

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Fix typo in model.cc (#2351)

Fix typo for `or` operation in `src/frontend/model.cc`

Signed-off-by: Seok NamKoong <sk.namkoong@samsung.com>

Add logistic_quan_1 quicktest (#2345)

To verify logistic quantizied operation,
add the logistic_quan_1 test in nnapi_quicktest

Signed-off-by: Jiyoung Yun <jy910.yun@samsung.com>

Do not return fail for test all unittest (#2348)

Do not return fail for test all unittest
Setting exit code makes CI job fail without report

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

[neurun] Add assertion for Graph building methods (#2340)

Add assertions for Graph building method which must be called only in
`BUILDING` phase.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Add lower phase skeleton (#2335)

Add `lower()` method to Graph which changes Graph Phase from MODEL to
LOWERED. However it does not do actual lowering work yet.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Support quantization for Logistic activate function (#2344)

This patch allows to pass the scale and zeroPoint to backend

Signed-off-by: Jiyoung Yun <jy910.yun@samsung.com>

Modify testcase data for TopK (#2324)

Previous testcases data was already sorted and made some TopK tests passed.
With this commit, testcase uses shuffled (not sorted) data.

Signed-off-by: Hyun Sik Yoon <hyunsik.yoon@samsung.com>

Unify the order of inputs in STRIDED_SLICE operation & Update ACL (#2193)

* Unify the order of inputs in STRIDED_SLICE operation

This commit unifies the order of inputs in STRIDED_SLICE operation.
  - add reordering bits of a scalar as the order of inputdata's shape.
  - add reordering data of a vector as the order of inputdata's shape.
  - unify the order of inputs in STRIDED_SLICE.

Signed-off-by: jiseob.jang <jiseob.jang@samsung.com>
* Update ACL

This commit updates acl.
  - Extend the range in which StridedSlice is supported by cl.

Signed-off-by: jiseob.jang <jiseob.jang@samsung.com>

Modify for testing all unittest (#2288)

Fix `runall` argument type and defualt value
Fix typo `unittestall` to `unittestall_on`
Add running all unittests in `run_unittest.py`
Revise the structure of `run_unittest.py` and `run_unittest.sh` for running all unittests

Signed-off-by: Seok NamKoong <sk.namkoong@samsung.com>

[neurun] Enable operand value setting validation unittest (#2330)

Enable operand value setting validation unittest
- SetOperandValue
- SetOperandValueFromMemory

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

Skip initialization for kernel and bias if their data is null (#2327)

Skip initialization for kernel and bias if their data is null. This
situation happens when kernel's value is set at execution time.

Signed-off-by: Yongseop Kim <yons.kim@samsung.com>

[neurun] Check invalid offset for setOperandValueFromMemory (#2328)

Check invalid offset value for setOperandValueFromMemory
- offset is memory border over
- offset+length is memory border over

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

Enable multiplier of depthwise_conv2d (#2322)

Since arm compute library 18.05, multiplier of depthwise_conv2d is enabled.
By applying this feature, below tests pass
`GeneratedTests.depthwise_conv2d_float_2`
`GeneratedTests.depthwise_conv2d_float_large_2_weights_as_inputs`
`GeneratedTests.depthwise_conv2d_float`
`GeneratedTests.depthwise_conv2d_float_weights_as_inputs`
`GeneratedTests.depthwise_conv2d_quant8_2`

Signed-off-by: Seok NamKoong <sk.namkoong@samsung.com>

[neurun] Introduce codegen::Dumper for debugging (#2325)

Introduce `codegen::Dumper` for debugging which dumps the LIR info in
the order of execution.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Remove legacy operand index (#2315)

* [neurun] Remove legacy operand index

Remove legacy operand index
Use operand index in graph

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>
* Simplify input/output index access

[neurun] Check operand index and size before setting value (#2305)

* [neurun] Check operand index and size before setting value

Check operand index is exist
Check operand size before setting value
Define operand object method to get operand size
Return error when index is invalid or length is different with operand size

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>
* Add comment for type

[neurun] Remove `internal::operand::Set` (#2314)

Remove unused class `internal::operand::Set` which has been replaced
by `neurun::graph::operand::Set`.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Support initializing constant matrix(2d type) at compilation time (#2307)

- while initializing matrix at execute time as input/output
is supported, initializing constant matrix(2d type) at
compilation time is not done so far in nnfw.
- initialize constant matrix by using matrix's View, Reader and
Iterator classes at compile time.

Signed-off-by: Yongseop Kim <yons.kim@samsung.com>

[neurun] Implement DAG Checker (#2312)

A checker that tests if given graph is a directed-acyclic-graph.
If there is a cycle the checker fails, otherwise passes.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Fix test data of depthwise_conv2d_float_large_2_weights_as_inputs (#2300)

`depthwise_conv2d_float_large_2_weights_as_inputs` is another test version, using same data of `depthwise_conv2d_float_large_2`
This commit will fix the test data to be same

Signed-off-by: Seok NamKoong <sk.namkoong@samsung.com>

[neurun] Remove finish field in ANeuralNetworksModel (#2308)

Remove finish field in ANeuralNetworksModel
Use graph phase to check model building is finished

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

Introduce testcases for reduce mean (#2302)

* Introduce testcases for reduce mean

This commit introduces testcases for reduce_mean operation.
-4D input
-axises (width-height)
-keep dims

These are test cases for RS7-RuntimeNTools/ComputeLibrary#34

related issue:#2003

Signed-off-by: SungJin Choi lotieye.choi@samsung.com
* Modify mean_axis01_2 test case

This commit modifies mean_axis01_2 test case.

Signed-off-by: SungJin Choi <lotieye.choi@samsung.com>

Introduce View, Reader and IndexIterator of Matrix (#2309)

Introduce View, Reader and IndexIterator of Matrix. These classes would
be used for initializing constant matrix.

Signed-off-by: Yongseop Kim <yons.kim@samsung.com>

Add python script of run_frameworktest (#2085)

This commit will add python script of run_frameworktest

Signed-off-by: Seok NamKoong <sk.namkoong@samsung.com>

Update ACL (#2301)

- Enable QASYMM8 in the CLArithmeticAdditionKernel.
- Extend the range in which StridedSlice is supported for CPU.
- Bugfix of subtensor validation.
- Unify the order of input data in StridedSliceCPU.

Signed-off-by: jiseob.jang <jiseob.jang@samsung.com>

[neurun] Introduce Graph Phase (#2298)

`graph::Graph::Phase` is an enum class that represents which phase the
Graph is at. Since we are going to use `Graph` class for multiple
phases we need this with verification infra.

- Introduce an enum class `graph::Graph::Phase`
- Phase transition when `ANeuralNetworksModel_finish()` is called
- Call verifier from the appropriate place

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Introduce IVerifier interface (#2296)

Introduce IVerifier interface to support various verifications, each
verification can be reused from different graph phases.

This commit also contains a skeleton of `DAGChecker`.

Part of #2247

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Extract TensorMarker to codegen (#2294)

Extract TensorMarker into a separate file and move it to codegen
directory.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Move operand IObject to backend (#2293)

Move `internal::Object` to `neurun::backend::operand::Object`.

Part of #2286

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Move cpu operand Object to backend (#2289)

Move `internal::cpu::operand::Object` to
`neurun::backend::cpu::operand::Object`.

Part of #2286

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Fix feature to ACL TensorShape conversion (#2290)

Fix feature to ACL TensorShape conversion to set batch value

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

[neurun] Extract Planner to codegen (#2291)

Extract Planner into a separate file and move it to codegen directory.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Fix for Max_pool_float_* Gtest Failure (#2283)

This is fix for max_pool_float_*.Batches are now set correctly in arm_compute::tensorshape

Signed-off-by: Shubham <shub98.gupta@samsung.com>

[neurun] Extract asXX helpers into seperate file (#2278)

* [neurun] Extract asXX casting helpers into Cast.h

This commit extracts asXX casting helpers into Cast.h likes PACL(https://github.sec.samsung.net/STAR/nnfw/blob/master/runtimes/pure_arm_compute/src/internal/arm_compute/Cast.h)

Signed-off-by: sjsujinkim <sjsujin.kim@samsung.com>
* Change file name/add namespace/seperate source file

* Add empty line

Rename `kernel/cpufallback` to `kernel/cpu` (#2282)

Rename the directory to remove inconsistency with namespace name in
the code and backend module(cpu backend is in `backend/cpu`).

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Remove unused internal::Model (#2284)

Now that we replace Model with Graph IR, Model is unused anymore.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Move acl_cl operand Object to backend (#2285)

Move `internal::arm_compute::operand::Object` to
`neurun::backend::acl_cl::operand::Object`.

Part of #2286

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Fix unittest script to report error (#2280)

Fix unittest script to report error
- Save test result immediately to temporary variable
- We should save result before compare statement

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

[neurun] Remove useless assertion (#2279)

Remove useless assertion
It makes validation check fail on debug build

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

[neurun] Introduce IO::Index (#2272)

* [neurun] Introduce IOIndex/IOIndexSet

Close : #2257

This commit introduce IOIndex/IOIndexSet.
`IOIndex` is the indices for ANeuralNetworksModel_identifyInputsAndOutputs() API.
`IOIndexSet` is accessible only using with `IOIndex`.

Signed-off-by: sjsujinkim <sjsujin.kim@samsung.com>
* Revert some codes

Test driver: Test all unittest option (#2274)

Add new option to run all unittest
- Ignore skiplist
- Get test list using gtest option
- Test each unittest item using filter

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

[neurun] Remove unused TensorSetter define (#2275)

This commit removes unused `TensorSetter` function define.

Signed-off-by: sjsujinkim <sjsujin.kim@samsung.com>

[neurun] Extract PlanBuilder into a separate file (#2276)

Extract PlanBuilder into a separate file and move it to codegen
directory.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Extract BackendResolver into a separate file (#2273)

Extract BackendResolver into a separate file and move it to codegen
directory.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Introduce reduce mean operation for pure acl runtime (#2256)

* Rebase on master instead of merging

This commit does rebase on master instead of merging.

Signed-off-by: SungJin Choi <lotieye.choi@samsung.com>
* Fix and modify a typo

This commit fixes a typo
- axises => axis

Signed-off-by: SungJin Choi <lotieye.choi@samsung.com>

[neurun] Extract IPlanBuilder into a separate file (#2261)

Extract IPlanBuilder into a separate file and move it to codegen
directory.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Move directory of  backend interfaces (#2250)

Move backend interfaces to `backend` from `internal`.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Update proxy settings for arm cross build docs (#2255)

This will update proxy settings for arm cross build documents

Signed-off-by: SaeHie Park <saehie.park@samsung.com>

Remove unused apt_proxy (#2253)

This will remove not used anymore apt_proxy file while building arm rootfs

Signed-off-by: SaeHie Park <saehie.park@samsung.com>

[neurun] Apply Graph IR (#2244)

This commit replaces `internal::tflite::Model` with
`neurun::graph::Graph`.

Resolve #2155

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Specify setproxy option in build_rootfs (#2053)

Specify setproxy option with IP address value as argument instead of skipproxy option.
The ipaddress specified with be the actual proxy server.

example: ./build_rootfs.sh setproxy=<IP address of the proxy server>

Signed-off-by: Praveen D N <praveen.dn@samsung.com>

Don't formatcheck tools/tflite_benchmark_model with .FORMATDENY (#2242)

Use .FORMATDENY (#2238) to skip formatcheck tools/tflite_benchmark_model.

Signed-off-by: Sanggyu Lee <sg5.lee@samsung.com>

[neurun] Extract Plan and related classes from arm_compute namespace (#2239)

This commit extracts Plan and related classes from arm_compute namespace into ::internal.

Fix setting in config_aarch64-linux.cmake (#2245)

- aarch64-linux-gnu-g*5 -> aarch64-linux-gnu-g*
- proper rootfs path

Signed-off-by: Yongseop Kim <yons.kim@samsung.com>

Modify the quantization info to pass pureacl runtime in broadcast case. (#2098)

This commit modifies the quantization info to pass pureacl runtime in broadcast case.

Signed-off-by: jiseob.jang <jiseob.jang@samsung.com>

Make format-checker pushd/popd quiet (#2241)

Now that we have too many pushd/popd logs this commit makes it not to
print any messages from pushd/popd.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Fix test directory structure (#2240)

Move graph test sources to `test/graph` so it will look identical to
`src` directory.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Introduce .FORMATDENY (#2238)

Put .FORMATDENY in directory that you don't want to check style.

Note: Please don't make ambiguous situation.

e.g.)

```
- A
 +- .FORMATCHECKED
 +- B
    +- FORMATDENY
    +- C
       +- FORMATCHECKED
```

Related issue: #2233

Signed-off-by: Sanggyu Lee <sg5.lee@samsung.com>

Update test_driver.py script (#2210)

Replace `optparse` to `argparse`
Replace `os._exit()` to `sys.exit()`
Remove `TODO : Handle Return Value`
Add exception handling for `artifactpath`
Add `reportdir` parameter and modify related codes
Modify some conditions of checking parameters

Signed-off-by: Seok NamKoong <sk.namkoong@samsung.com>

Add tflite_benchmark_model sources (#2231)

Sources are copied from tensorflow/contrib/lite/tools/benchmark from
v1.9.0-rc2. Then, I modified the followings:

- Namespace is changed
  (tflite -> nnfw)
- Header guard is also changed
- Header include path is adjusted
  (include tensorflow/contrib/lite/profiling/* -> include *)
- Add proper qualification to fix build error (string -> std::string)
- Prepend license for sources under tflite_benchmark_model

In addition, tools/CMakeLists.txt is modified to build tflite_benchmark_model
when `BUILD_TFLITE_BENCHMARK_MODEL` is defined.

Signed-off-by: Sanggyu Lee <sg5.lee@samsung.com>

Remove squeeze from skiplist (#2236)

- Remove squeeze from skiplist

Signed-off-by: Chunseok Lee <chunseok.lee@samsung.com>

[neurun] Graph : Introduce Graph (#2235)

This commit introduces `neurun::graph::Graph` which represents our new
Graph IR. Note that nodes in the graph is operations.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

Support QASYMM8 in relu-related operators (#2237)

* Support QASYMM8 in relu-related operators

ReLU, ReLU1 and ReLU6 supports quantized operation
It adds QuantizationInfo to TensorInfo in operations that supports QASYMM8_TENSOR

Signed-off-by: Jiyoung Yun <jy910.yun@samsung.com>
* Enable quant8 testcases of relu-related operator in GeneratedTests

Enable below GeneratedTests:
GeneratedTests.relu_quant8_1
GeneratedTests.relu_quant8_2
GeneratedTests.relu1_quant8_1
GeneratedTests.relu1_quant8_2
GeneratedTests.relu6_quant8_1
GeneratedTests.relu6_quant8_2

Signed-off-by: Jiyoung Yun <jy910.yun@samsung.com>

Add Logistic operator in pure acl runtime (#2230)

* Add Logistic operator in pure acl runtime

Define Logistic namespace, node and param
Set parameter for Logistic in compilation step

Signed-off-by: Jiyoung Yun <jy910.yun@samsung.com>
* Enable logistic_float_* in GeneratedTests

Enable below two GeneratedTests:
logistic_float_1
logistic_float_2

Signed-off-by: Jiyoung Yun <jy910.yun@samsung.com>

Enable squeeze for rank-4 input (#2234)

- Remove input rank restriction from compilation

Signed-off-by: Chunseok Lee <chunseok.lee@samsung.com>

tflite_benchmark_model will not be formatchecked (#2232)

tflite_benchmark_model will keep original source's style
so that it could be tracked and diff'ed easily.

.FORMATCHEKED in tools (the parent directory of tflite_benchmark_model)
is distributed to all child directories except for
tflite_benchmark_model.

Signed-off-by: Sanggyu Lee <sg5.lee@samsung.com>

Introduce BUILD_TFLITE_BENCHMARK_MODEL option (#2226)

Related Issue: #1760, #1696

`tflite_benchmark_model` is a tool for profiling a given model.
The tools is under development in tensorflow upstream.

It was not shipped in v1.9.0 release.
Thus I made `tflite_benchmark_model` work for tflite interpreter
by chery-picking needed patches. (#2212)

This patch is a part of full changes. It only introduces build option.

By default, tflite_benchmark_model will not be built.

To build tflite_benchmark_model tool, use

```
$ OPTIONS='-DBUILD_PURE_ARM_COMPUTE=ON -DBUILD_TFLITE_BENCHMARK_MODEL=ON' \
CROSS_BUILD=1 TARGET_ARCH=armv7l make all install
```

Signed-off-by: Sanggyu Lee <sg5.lee@samsung.com>

[neurun] Define operand usage enum and check exception (#2213)

Define operand usage: model input, constant, operation output
Check exception: operand usage conflict

Signed-off-by: Hyeongseok Oh <hseok82.oh@samsung.com>

[neurun] Graph : Introduce operation Concat (#2223)

Introduce `neurun::graph::operation::Concat` which is a node in Graph
IR.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Graph : Introduce operation Conv2D (#2222)

Introduce `neurun::graph::operation::Conv2D` which is a node in Graph
IR.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Graph : Introduce operation MaxPool2D (#2220)

Introduce `neurun::graph::operation::MaxPool2D` which is a node in
Graph IR.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Graph : Introduce operation Reshape (#2219)

Introduce `neurun::graph::operation::Reshape` which is a node in Graph
IR.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Graph : Introduce operation FullyConnected (#2221)

Introduce `neurun::graph::operation::FullyConnected` which is a node
in Graph IR.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Graph : Introduce operation Softmax (#2218)

Introduce `neurun::graph::operation::Softmax` which is a node in Graph
IR.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Graph : Introduce operation `Set` (#2215)

`neurun::graph::operation::Set` holds operations and also has
ownership of them.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Graph : Introduce operation AvgPool2D (#2217)

Introduce `neurun::graph::operation::AvgPool2D` which is a node in Graph
IR.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

support rank 4 feature in pacl runtime (#2183)

* support rank 4 feature in pacl runtime

This commit enables rank 4 feature

Signed-off-by: Chunseok Lee <chunseok.lee@samsung.com>
* rank4 feature for neurun

Signed-off-by: Chunseok Lee <chunseok.lee@samsung.com>

[neurun] Remove kernel source from build (#2216)

SOURCES_KERNEL is an empty variable.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>

[neurun] Remove unused includes for Initializer in compilation.cc (#2214)

This commit removes unused includes for Initializer in compilation.cc

Signed-off-by: sjsujinkim <sjsujin.kim@samsung.com>

[neurun] Graph : Introduce operand IndexSet (#2209)

`neurun::graph::operand::IndexSet` is a list of `Index`.

Signed-off-by: Hanjoung Lee <hanjoung.lee@samsung.com>