upgrade scripts: Improve check exectuion

This change is to prevent bash from exiting a script with an error when
a command returns a code other than 0, which is expected.

E.g.:

    SOME_VAR=$(grep some_value /some/file)

as the "errexit" flag is set, if "some_value" is not found grep will
return exit code 1 and the script will abort. This behavior also varies
with different versions of bash, so it is better in such cases to avoid
invoking commands that may return non-zero code.

Change-Id: I3f9eefc51a37d9762a9b47cc716805957461891f

Merge changes I5c53427b,I6922a19d,Ibe876dd0,I67cdb84c into tizen

* changes:
  Add SHA1 verification support to upgrade-apply
  Import SHA1
  Add upgrade-apply tool
  Import ss_brotli_patch

Add SHA1 verification support to upgrade-apply

Change-Id: I5c53427b8096874c7b5e6a0abc725a9b6bcaa162

Import SHA1

This is copied from platform/core/system/libtota @ b25d02d618797b5fb2fbe61a188d6a28dc720bf8.

Change-Id: I6922a19d20f68ee2c5ba640ebdc95084f5b32cb4

Add upgrade-apply tool

This is a tool that allows us to apply an upgrade provided in a tar
archive to a partition. Hopefully this will allow us to simplify the
upgrade codebase a bit.

Change-Id: Ibe876dd0141065e8c150a360b329f67ca6935c69

Import ss_brotli_patch

This is copied from platform/core/system/libtota @ b25d02d618797b5fb2fbe61a188d6a28dc720bf8.

Change-Id: I67cdb84caa1da7bf5ed8be9669ca4c219868f5d7

Change the location of the reset partitions_cloned flag

The flag must be reset after verifying that partitions are currently
cloned, and before modifying partition contents.

Change-Id: Ieb1144ad1ff91d33acc1a0c7025d851a1d1992c3

Remove the upgrade-common.inc file that remains after a full upgrade.

Change-Id: I5b9541b6c4944ecef5a1cf37bae82034578960ea

Fix clone_partitions.sh

Change-Id: I7f56f2e710992f1e72b65b7340f5fca0bd5ca387

Remove locking from upgrade-full.sh

upgrade-full.sh is not run directly, it is called from
upgrade-trigger.sh which set the lock.

Change-Id: I11da508e0042a7acc147176a12958bea8b56302d

Skip cloning partitions if they are already cloned

Change-Id: I99709049ebc8c36e8c1a5058d06ca77e692b615f

Add a lock to the upgrade script

One of the steps in A/B upgrade is to clone a partitions from the
current slot to the next slot. At the same time there is
clone_partition.service that also clones partitions for recovery
purposes. Adding a lock is to prevent both processes from cloning
partitions at the same time.

Change-Id: I6f831eebbd6de37617a0b09145dbd70f15d7d638

Delete upgrade files when they are no longer needed

Change-Id: I950b79274a9050b8ba8e3d10a3a2799fd13f3ec4

Set/clear partition status when processing fota or partition cloning

Clear partition cloned status (as 0) before FOTA.
Set partition status as "ok" after partitions are cloned.

Change-Id: Icacc0630c716f0b4c7bc1cccf10508c63b388d05
Signed-off-by: SangYoun Kwak <sy.kwak@samsung.com>

Merge "Make check_ua_op_mode slightly less broken" into tizen

Change critical error logs to be logged as critical_logs

Change-Id: If1edd58b6c493c5f29959cc52bc52fbe617ab89b
Signed-off-by: SangYoun Kwak <sy.kwak@samsung.com>

Make check_ua_op_mode slightly less broken

Change-Id: Ib1cfa0111756d5bb7f992699da49665c27e3b0cb

Merge "Drop unneeded device_board_* commands" into tizen

Drop unneeded device_board_* commands

These are executed from running system, not from ramdisk-recovery.

Change-Id: I07bbc57beb405d60103842640891c9db3feb6678

Change the severity of the mount fail message

Change-Id: I833adcdc9b9bcfacec4e3596f4d3543d48ef7ed7

Merge branch 'tizen' into tizen_6.5

Change-Id: Icfa3053a9386f178a895ba19e1088b3733746c7d

Set upgrade progress

Change-Id: If4c51014c5f2638eae3f15bc97ab988d1de7a500

Verify the checksums of flashed images

Change-Id: I16178fe5ab33efd043db10d6d4612cce717a487d

Remove CPUQuota in clone_partitions.service

Change-Id: I780d82e233208fd84d77316d6577d789de684fb9
Signed-off-by: Hyotaek Shim <hyotaek.shim@samsung.com>

Remove CPUQuota in clone_partitions.service

Change-Id: I780d82e233208fd84d77316d6577d789de684fb9
Signed-off-by: Hyotaek Shim <hyotaek.shim@samsung.com>
(cherry picked from commit d8fbc8b33e4d5eaa155b749b690c8591da73e9af)

Merge branch 'tizen' into tizen_6.5

Change-Id: If2709885808145e43adbd120554aa16460ee1cd7

Run clone_partitions.sh in the recovery mode

In recovery mode if two slots are available, we assume that the current
one is valid and the second slot is faulty. So we clone the current
partitions to the other slot so that we have both slots from which the
system can boot correctly.

Change-Id: I12f0951bbde815eafa7b9018f3283469df435cd3

Merge branch 'tizen' into tizen_6.5

Change-Id: Iad50df2ff30dcb4ef1fba21fc5bd5e65149353f2

Add partition cloning

When the system boots correctly after the upgrade, we clone the
partitions listed in /hal/etc/upgrade/background_copy.list so that we can
boot from the other slot if nececssary.

Change-Id: I977688e1a159e3504bfe9422bda4103d3f2867a1

Merge branch 'tizen' into tizen_6.5

Change-Id: Id5ff48d149416c55d22e4732eba94955cc253049

Move all scripts to one standard location

This commit changes installation of the upgrade scripts to
/usr/libexec/upgrade-support, so that
 - delta generation scripts can copy whole directory contents
   instead of needing to follow each change in script's file names
 - other packages can potentially install additional scripts

Change-Id: I89357f31ef738d1860ff4b90cf1bf559096f4d68

Move a common part of ugprade scripts to a separate file

Change-Id: If3b6f887d245cc0b99cd648742b4d9312e90543c

Add support for the full upgrade images

An archive considered to be a full upgrade is one whose all entries in
update.cfg file are of type PRE_UA.
In this case, due to the size of the archive and the probable lack of
available space for unpacking, the images are written directly from the
packed archive.

Change-Id: Iba92d8340c6f1b9f49ecb9567f7fee3a2cbde4ff

Merge "Merge branch 'tizen' into tizen_6.5" into tizen_6.5

Merge branch 'tizen' into tizen_6.5

Change-Id: I8d9ea7af7d1eef126a5801e85c7e5ec2fdec59fa

Stop displaying unnecessary errors

Change-Id: I7579c69b110d7a42958543fca4f0145244bedddf

blkid-api: Fix incorrect pointer check

Change-Id: Iec1d8620e3e6e47d7be75bd82e96153457f6a5a4

blkid-api: Fix incorrect pointer check

Change-Id: Iec1d8620e3e6e47d7be75bd82e96153457f6a5a4

Stop displaying unnecessary errors

Change-Id: I7579c69b110d7a42958543fca4f0145244bedddf

Merge branch 'tizen_6.5' into tizen

Change-Id: Id14818e9a3d4427c6270c3164bbfcff7d7438fe6

Disable mounting of rootfs in DELTA_IMG and DELTA_IMG_AB upgrade mode

rootfs file system cannot be mounted because the next step will perform
a binary modification.

Change-Id: I8bb7b960848c5effbfafd2481df94555be91d86c

Mount rootfs as ro only when rootfs uses dm-verity

rootfs can be upgraded in two ways:

  1. By modifying files (DELTA_FS)
  2. By applying a binary patch (DELTA_IMG, DELTA_IMG_AB)

If the upgrade is done with a binary patch, the file system should be
mounted as RO so that its checksum is not changed.

Change-Id: I05a1925aa688a968cf9ecdb9f68a7be4c12d018a

Merge branch 'tizen_6.5' into tizen

Change-Id: I2433eaf408973fd8b55bf9bbf39ea413dc6b83d9

Extract additional upgrade scripts

Change-Id: I7c4675436e567059364a8e0da563e386423bba0b

Merge remote-tracking branch 'origin/tizen_6.5' into tizen

Change-Id: I6a05404cd57a58b110cfbc01364dfb7d36fd0856

Merge changes from topic "binary-diff-brotli" into tizen_6.5

* changes:
  Run scripts from the path where upgrade-trigger.sh is
  Mount rootfs as read-only
  Fix "use after free"
  Enable static linking to libtota
  Add support for DELTA_IMG_AB update type

Run scripts from the path where upgrade-trigger.sh is

Upgrade scripts like:

  upgrade-trigger.sh
  upgrade-fota.sh
  upgrade-partia.sh
  upgrade-prepare-partitions.sh

should be run from the path to which they were extracted from the
delta.tar.

Change-Id: Ic7fb2869ca41fa223997d18d9546fa01f258d609

Mount rootfs as read-only

Change-Id: I5663fac73d62888cdb284dfa88e869d5cb651c7d

Fix "use after free"

Change-Id: I832770abb9ad0dbdee65fe14883c31cd317ed73d

Enable static linking to libtota

delta.ua is provided in the delta.tar file to perform the system
upgrade. When linked dynamically it calls functions from libtota that
are on the old system, while we would like to use the new version.

Change-Id: Ifaf889ac498886eab3310edbf250d99c22cb8bd1

Add support for DELTA_IMG_AB update type

Add new partition upgrade type - DELTA_IMG_AB
A patch is a binary diff between two partition that is compressed with
the Brotli algorithm.
Brotli has a good compression ratio and allows decompression using a
small amount of memory (during tests, it did not exceed 17MB).

Change-Id: I467eb1bfefa2ffb1866515c1f18aeb21e710ebd1

Add support for the case that rootfs is a device mapped by DM

Change-Id: I074e72c9fad9289d059e81bd0801f7f26460aa64

Merge branch 'tizen' into tizen_6.5

Change-Id: Ib040e970ecd05893f67253b8134fcff067ec29c2

Revert "Ensure required 'A/B partition switch' program is available"

This reverts commit e4e165e7be32be63403e5306b73f0711423e5d8b, as
* the program is not universally available,
* it should not be needed when legacy upgrade is used.

Change-Id: I21d8adc31f64bb71989665e826676ba1a70caae1

Merge branch 'tizen' into tizen_6.5

Change-Id: I9b33cafba04a2ad4cdab903226e590000d22d423

Ensure required 'A/B partition switch' program is available

Change-Id: Idfd9b899830419581964d3b5e01a284e34b7c5c8

Reflect the change from partition_switch to device_board_switch_partition

Change-Id: I042a9468b9e3e36a68a6792c38e9fd67a596f7d5

Merge branch 'tizen' into tizen_6.5

Change-Id: I23bdab528b12fe242a8b06fd42ebc3386777a2ab

Use /run/upgrade-sysroot instead of /system

Change-Id: I1b781134eafc29b07d0e6410407c665e3bd911df

Use PARTLABEL based on LABEL from update.cfg and /hal/etc/upgrade/label_map.list

Change-Id: I25edbad79770baa298bd0f404e9ba0d1acc08eb3

Copy partitions listed in the /hal/etc/upgrade/background_copy.list

Change-Id: I283ad7e6de2997ecdfb17c44096eb5c57380e50f

Use partition_switch to change the partition slot

Change-Id: I3e4c995190d62838e1c4cff464e831d9376710f4

Merge branch 'tizen' into tizen_6.5

Change-Id: I6b199ffe055027b8cb119e27a3856e492250a84b

Support ro update during normal boot in delta.ua:

1. Allow to use GPT partition labels rather than hardcoded partitions.
2. Allow to use specified block device rather than hardcoded one.
3. Add usage function.
4. Add function that translates errors into usable form for end user.
5. Add support for a|b slot partition scheme.
6. Fix bug when logging file was not opened before usage.
7. Change log file path from /last_update.log to
   /opt/data/update/last_update.log
8. Do not disable stdout && stderr

Add blkid-print application that is used to determine partition name
based on GPT LABEL.

Change-Id: Ifbc5aaa435791d4de91a896b5b34b874cb46fe8d
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

upgrade-trigger.sh: Add support for launching A|B upgrade.

This mode has different functionality therefore there are other scripts
supporting it.

When upgrade-trigger.sh detects that system uses A|B partition scheme
it executes new upgrade type using 3 stages:
1. upgrade-prepare-partitions.sh -- it is responsible for backing up
   partitions from current slot to next one
2. upgrade-partial.sh -- it is responsible for upgrading partitions
   on next slot using dd and delta.ua
3. upgrade-fota.sh -- it is responsible for finishing upgrade
   and rebooting device into fota RW mode.

Change-Id: I1c8c4fbaf3d2b4817ba7e88690cab316a5cee6e6
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Add A|B upgrade support during normal boot mode.

Change-Id: Ibc9501827ddc1a5d3f1669d97c189ef6e05361b1
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Improve upgrade-trigger.sh flashing speed.

Change-Id: I0e9f6d29b1971893f34b773c8343a466a942018e
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Always log update progress inside ua.

Progress was not reported during headless upgrade.
This information is required for os-upgrade automatic tests.

Change-Id: Ic2ca02f1d1b92b90329abee516c7d15b6ffd7ca1
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Allow to use labels in uppercase in update.cfg

This is required to be able to flash the partition with the BOOT label,
which is in upperacse.

Change-Id: Ib018befe9cee4c66bc6ae13708d1cc436ba04f23

Improve logging in upgrade-trigger.sh script.

- Add log helper function which can log to stdout and file

logging format:
[script-name][tag]actual_log
currently supported tag formats: [Error] [Info]

Change-Id: Iebb727b8ec4a12fca80b03f6b64c472134749020
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Improve upgrade-trigger.sh script:

- Add support for delta.tar.gz
- Add missing ""
- Add proper error handling
- Remove useless cat

Change-Id: I6fd9e6e611bd9232d5a2ca5f6cf129d644a1e1f5
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Fix invalid parenthesis

Change-Id: I8cf55406c5f81bc4816d065ffdc0827dee84cc42
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Set progress to 100% as soon as hash remaking is finished

- verity-handler always use 45 seconds though hash is not made
- To prevent this situation, cancel progress thread after
  hash thread is terminated

Change-Id: Ie31f259e0270874128a98c16ae81e1cd7f8d2b81
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Update boilerplate

Change-Id: I7785ff75af0de67bfa0c69c81a81aa906d6b3f32
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Improve the readability about progress rearrangement

Change-Id: Idd92eccb52614e10b74550f03c6f3d3adda9f645
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Fix build warning

Change-Id: I21adccf31a2fc5a97598520220b5bae776dd189c
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Introduce verity-handler

- It launches verityctl and updates progress
- If dm-verity is enabled, initrd-fota will launch it

Change-Id: Ibb82ac06e4c628bbb7c0428ed5c1eefccb9ef041
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Reflect dm-verity status to update progress

- With dm-verity : 20 ~ 80%
  - 80 ~ 100% is for hash remaking
- Without dm-verity : 20 ~ 100%

Change-Id: Icf9a65456eb40334f239f12ac407ddee22d7e6a9
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Update img-verifier usage

Change-Id: Ida586c4b105ea96ca490e50c7d1f5d30a78e114d
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Input log path instead of macro

- If you want to write log file, input "-l LOG_FILE_PATH"
- In addition, you have to use "-i IMAGE_PATH" option

Change-Id: I9c7802981caa78f794d6d4518db474cbfea0cda5
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Rename pre script to setup script

Change-Id: Iaeaaf005a9760fd9c1edb0ae91a6044f2855c041
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Fix build warning

- Define unless it is defined
- No more depends on the length of the source argument
- Reduce the size of directory path to prevent string truncation

Change-Id: I71e102b9c2ce9c78af6f5afb13bc9038fd61bb8c
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Clarify argument as file path

Change-Id: I8922ecf13b8791c28bb5102ee4e4a4e5844ca612
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Hash delta in block to prevent storing whole delta

Change-Id: I0d368db79d9a5be47d28a836ff9e9534d48a72ff
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Use right stack's function

Change-Id: I464e305d39020ed4760bd2a980c4c328c38ead7c
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Version up : 1.2.9

Change-Id: I251d385639027c14aca18016e7e814bb3d3abc34
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Merge "Improve the readability of global variables" into tizen

Merge "Reject the certificate same with CA" into tizen

Improve the readability of global variables

- Declare global variables in one place
- Rename global variables

Change-Id: I8ab81482e56263c568cd5b18dec2a628c3a200a8
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Reject the certificate same with CA

- Security team guide : do not sign image same with CA

Change-Id: Ie18115fb29b0224838f357b1c3b05f44e4ad0b74
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Add return code when reboot failed

- With local update, trigger script will be executed with system_fw
- So /sbin/reboot will be failed
- If reboot fota failed, return 100

Change-Id: I93ad6d25aa9d63a94d3ced4dc1428ba2a572623b
Signed-off-by: Jeon Sang-Heon <sh95.jeon@samsung.com>

Copy img-verifier root CA to ramdisk-recovery

Change-Id: I7fe259b8f73870517cd06a16a5e2ae49238bee6b
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Verify image with all root CAs

- Each signer can use their own root CA
- Root CA dir : TZ_SYS_RO_CA_DIR/img-verifier
  - TZ_SYS_RO_CA_DIR is defined in ca-certificates

Change-Id: I4175957a24851af242836b96b6e7d4ac76cb8f77
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Rename upg-verifier to img-verifier

- Verifier is no more only for TOTA
  - System-recovery also use it

Change-Id: I2f188c6bb1782507581ac8efddff4e5313e47099
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Define the prefix of error code

- To check where this error occurs

Change-Id: Icd441b852aeb3e87762071b2c11cb3aaa131def3
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Add libtota library to WITHLIB

Change-Id: I09f25b333a8da8cfecd3eff0c0565c2f0f40c77f
Signed-off-by: Jeon Sang-Heon <sh95.jeon@samsung.com>

Fix lib path to support 64bit

- Change hardcode lib path(/usr/lib) to rpm lib macro({_libdir})

Change-Id: I6ff3f1cda446c6c0fde74e7c870bb4a64698e04d
Signed-off-by: Jeon Sang-Heon <sh95.jeon@samsung.com>

Write current progress to file by itself

- To unify with system-rw-update

- Write to socket -> Write to file
- Remove fota-gui-test

Change-Id: I79d26710b171759e40df511a5996a13f6e0e3373
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Enable 64 bit

Tizen will support 64 bit binary officially.
TOTA-UA will be included to initrd-recovery partition.
Although initrd-recovery partition size is exceeded, TOTA-UA will be applied.

Change-Id: I983e17e0b24b1e520a92f36d404dbcdb5180aae7

Make directory for TOTA root CA

Change-Id: I4909c925a19238f2e61d7c5d5d747ef4c14580a4
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>