Add critical_log to indicate upgrade progress

Change-Id: Iee469d3fcbb3bc2dd614f20fbed1158f161ff5a9
Signed-off-by: SangYoun Kwak <sy.kwak@samsung.com>

Add partition cloning verification

Change-Id: I410b9330808542f529b7e1be0f6b82d4c0294c60

Verify the checksum of the files delivered with delta.tar

Change-Id: I0e7ce71df3b3ef11e64bfc1665e62691ba63ad42

Simplify the invocation of partition cloning

Change-Id: I15dcced02fd0d9f468616212e7715ce4e18a202f

Add sleep 60 before clone_partitions.service to avoid booting congestion

Change-Id: I8e881a86874ecd935917eabef728e1b503c5f06f
Signed-off-by: Hyotaek Shim <hyotaek.shim@samsung.com>

Revert "Delay the launch of clone_partitions.service"

This reverts commit 466e3ecd38fefd6a94b01179010620f50061a2c3.

Change-Id: Ia93c180d2b69ed75717c6cf52bcd47a4c6a9ca44

Delay the launch of clone_partitions.service

The delay is needed to minimize the risk that due to a problem with some
service, the system will reboot during cloning.

Change-Id: Idb65aeee01e8987ce1fef32c0c7892d8c2a5db9e

Merge changes from topic "new_update_types" into tizen

* changes:
  Remove script responsible for full upgrade
    Rename upgrade types:

Add '-l' option to blkid for optimization

Change-Id: I8183808210a9fca55e8c754e91da1a986ff27dae
Signed-off-by: SangYoun Kwak <sy.kwak@samsung.com>

Remove script responsible for full upgrade

This type of upgrade was necessary because it was the only one that did
not require extracing files from the delta.tar.gz. At the moment each
type of A/B upgrade is performed without the need to extract images from
the archive so a separate script is unnecessary.

Change-Id: Ied4c9afc8894e1c774fb960822ca6743c0fb8b2e

  Rename upgrade types:

  Types now include information in the name about what the upgrade is
  (FULL_IMAGE, DELTA_IMAGE) and when it is to be performed
  (BEFORE_BOOT_FOTA, AT_BOOT_FOTA):

    PRE_UA    -> FULL_IMAGE:BEFORE_BOOT_FOTA
    FULL_IMG  -> FULL_IMAGE:AT_BOOT_FOTA
    DELTA_IMG -> DELTA_IMAGE:AT_BOOT_FOTA

Change-Id: Ic0a71c1e2463ac3bad9b0c0a1119ab562cd9b100

Add support for lzma patches (DELTA_IMG)

Change-Id: I48db15713776faa1366e87666bdc96a79c1c61d3

upgrade scripts: use upgrade-apply to flash images

Change-Id: Ib4d22862fb71b0e465e49200dfe92e1350338ec6

upgrade scripts: extract the common code to upgrade-common.sh

Change-Id: I01cb0deeac4aeae745bcb225a651a3b031a58ce6

Check if partitions are cloned before cloning them(except recovery mode)

Change-Id: I4ea8705f8bea55ed8b901167a93a18bf37a08325
Signed-off-by: SangYoun Kwak <sy.kwak@samsung.com>

Add dest_size

Change-Id: I0510236e0036b9409f632a4109a9e83ace58a6c7

Fix dest-sha1 parameter name in help

Change-Id: Ifd4720395217c414bbbeef99f9e347ac619badac

Depend on some libraries in a static and not dynamic way

Change-Id: I33b151e26df773593b370c063e2947cda246942f

Drop unneeded tizen prefix in service name

Change-Id: Ic0eba413c5f84b27e21b7fe12ac2281a13d679cb

upgrade scripts: Improve check exectuion

This change is to prevent bash from exiting a script with an error when
a command returns a code other than 0, which is expected.

E.g.:

    SOME_VAR=$(grep some_value /some/file)

as the "errexit" flag is set, if "some_value" is not found grep will
return exit code 1 and the script will abort. This behavior also varies
with different versions of bash, so it is better in such cases to avoid
invoking commands that may return non-zero code.

Change-Id: I3f9eefc51a37d9762a9b47cc716805957461891f

Merge changes I5c53427b,I6922a19d,Ibe876dd0,I67cdb84c into tizen

* changes:
  Add SHA1 verification support to upgrade-apply
  Import SHA1
  Add upgrade-apply tool
  Import ss_brotli_patch

Add SHA1 verification support to upgrade-apply

Change-Id: I5c53427b8096874c7b5e6a0abc725a9b6bcaa162

Import SHA1

This is copied from platform/core/system/libtota @ b25d02d618797b5fb2fbe61a188d6a28dc720bf8.

Change-Id: I6922a19d20f68ee2c5ba640ebdc95084f5b32cb4

Add upgrade-apply tool

This is a tool that allows us to apply an upgrade provided in a tar
archive to a partition. Hopefully this will allow us to simplify the
upgrade codebase a bit.

Change-Id: Ibe876dd0141065e8c150a360b329f67ca6935c69

Import ss_brotli_patch

This is copied from platform/core/system/libtota @ b25d02d618797b5fb2fbe61a188d6a28dc720bf8.

Change-Id: I67cdb84caa1da7bf5ed8be9669ca4c219868f5d7

Change the location of the reset partitions_cloned flag

The flag must be reset after verifying that partitions are currently
cloned, and before modifying partition contents.

Change-Id: Ieb1144ad1ff91d33acc1a0c7025d851a1d1992c3

Remove the upgrade-common.inc file that remains after a full upgrade.

Change-Id: I5b9541b6c4944ecef5a1cf37bae82034578960ea

Fix clone_partitions.sh

Change-Id: I7f56f2e710992f1e72b65b7340f5fca0bd5ca387

Remove locking from upgrade-full.sh

upgrade-full.sh is not run directly, it is called from
upgrade-trigger.sh which set the lock.

Change-Id: I11da508e0042a7acc147176a12958bea8b56302d

Skip cloning partitions if they are already cloned

Change-Id: I99709049ebc8c36e8c1a5058d06ca77e692b615f

Add a lock to the upgrade script

One of the steps in A/B upgrade is to clone a partitions from the
current slot to the next slot. At the same time there is
clone_partition.service that also clones partitions for recovery
purposes. Adding a lock is to prevent both processes from cloning
partitions at the same time.

Change-Id: I6f831eebbd6de37617a0b09145dbd70f15d7d638

Delete upgrade files when they are no longer needed

Change-Id: I950b79274a9050b8ba8e3d10a3a2799fd13f3ec4

Set/clear partition status when processing fota or partition cloning

Clear partition cloned status (as 0) before FOTA.
Set partition status as "ok" after partitions are cloned.

Change-Id: Icacc0630c716f0b4c7bc1cccf10508c63b388d05
Signed-off-by: SangYoun Kwak <sy.kwak@samsung.com>

Merge "Make check_ua_op_mode slightly less broken" into tizen

Change critical error logs to be logged as critical_logs

Change-Id: If1edd58b6c493c5f29959cc52bc52fbe617ab89b
Signed-off-by: SangYoun Kwak <sy.kwak@samsung.com>

Make check_ua_op_mode slightly less broken

Change-Id: Ib1cfa0111756d5bb7f992699da49665c27e3b0cb

Merge "Drop unneeded device_board_* commands" into tizen

Drop unneeded device_board_* commands

These are executed from running system, not from ramdisk-recovery.

Change-Id: I07bbc57beb405d60103842640891c9db3feb6678

Change the severity of the mount fail message

Change-Id: I833adcdc9b9bcfacec4e3596f4d3543d48ef7ed7

Merge branch 'tizen' into tizen_6.5

Change-Id: Icfa3053a9386f178a895ba19e1088b3733746c7d

Set upgrade progress

Change-Id: If4c51014c5f2638eae3f15bc97ab988d1de7a500

Verify the checksums of flashed images

Change-Id: I16178fe5ab33efd043db10d6d4612cce717a487d

Remove CPUQuota in clone_partitions.service

Change-Id: I780d82e233208fd84d77316d6577d789de684fb9
Signed-off-by: Hyotaek Shim <hyotaek.shim@samsung.com>

Remove CPUQuota in clone_partitions.service

Change-Id: I780d82e233208fd84d77316d6577d789de684fb9
Signed-off-by: Hyotaek Shim <hyotaek.shim@samsung.com>
(cherry picked from commit d8fbc8b33e4d5eaa155b749b690c8591da73e9af)

Merge branch 'tizen' into tizen_6.5

Change-Id: If2709885808145e43adbd120554aa16460ee1cd7

Run clone_partitions.sh in the recovery mode

In recovery mode if two slots are available, we assume that the current
one is valid and the second slot is faulty. So we clone the current
partitions to the other slot so that we have both slots from which the
system can boot correctly.

Change-Id: I12f0951bbde815eafa7b9018f3283469df435cd3

Merge branch 'tizen' into tizen_6.5

Change-Id: Iad50df2ff30dcb4ef1fba21fc5bd5e65149353f2

Add partition cloning

When the system boots correctly after the upgrade, we clone the
partitions listed in /hal/etc/upgrade/background_copy.list so that we can
boot from the other slot if nececssary.

Change-Id: I977688e1a159e3504bfe9422bda4103d3f2867a1

Merge branch 'tizen' into tizen_6.5

Change-Id: Id5ff48d149416c55d22e4732eba94955cc253049

Move all scripts to one standard location

This commit changes installation of the upgrade scripts to
/usr/libexec/upgrade-support, so that
 - delta generation scripts can copy whole directory contents
   instead of needing to follow each change in script's file names
 - other packages can potentially install additional scripts

Change-Id: I89357f31ef738d1860ff4b90cf1bf559096f4d68

Move a common part of ugprade scripts to a separate file

Change-Id: If3b6f887d245cc0b99cd648742b4d9312e90543c

Add support for the full upgrade images

An archive considered to be a full upgrade is one whose all entries in
update.cfg file are of type PRE_UA.
In this case, due to the size of the archive and the probable lack of
available space for unpacking, the images are written directly from the
packed archive.

Change-Id: Iba92d8340c6f1b9f49ecb9567f7fee3a2cbde4ff

Merge "Merge branch 'tizen' into tizen_6.5" into tizen_6.5

Merge branch 'tizen' into tizen_6.5

Change-Id: I8d9ea7af7d1eef126a5801e85c7e5ec2fdec59fa

Stop displaying unnecessary errors

Change-Id: I7579c69b110d7a42958543fca4f0145244bedddf

blkid-api: Fix incorrect pointer check

Change-Id: Iec1d8620e3e6e47d7be75bd82e96153457f6a5a4

blkid-api: Fix incorrect pointer check

Change-Id: Iec1d8620e3e6e47d7be75bd82e96153457f6a5a4

Stop displaying unnecessary errors

Change-Id: I7579c69b110d7a42958543fca4f0145244bedddf

Merge branch 'tizen_6.5' into tizen

Change-Id: Id14818e9a3d4427c6270c3164bbfcff7d7438fe6

Disable mounting of rootfs in DELTA_IMG and DELTA_IMG_AB upgrade mode

rootfs file system cannot be mounted because the next step will perform
a binary modification.

Change-Id: I8bb7b960848c5effbfafd2481df94555be91d86c

Mount rootfs as ro only when rootfs uses dm-verity

rootfs can be upgraded in two ways:

  1. By modifying files (DELTA_FS)
  2. By applying a binary patch (DELTA_IMG, DELTA_IMG_AB)

If the upgrade is done with a binary patch, the file system should be
mounted as RO so that its checksum is not changed.

Change-Id: I05a1925aa688a968cf9ecdb9f68a7be4c12d018a

Merge branch 'tizen_6.5' into tizen

Change-Id: I2433eaf408973fd8b55bf9bbf39ea413dc6b83d9

Extract additional upgrade scripts

Change-Id: I7c4675436e567059364a8e0da563e386423bba0b

Merge remote-tracking branch 'origin/tizen_6.5' into tizen

Change-Id: I6a05404cd57a58b110cfbc01364dfb7d36fd0856

Merge changes from topic "binary-diff-brotli" into tizen_6.5

* changes:
  Run scripts from the path where upgrade-trigger.sh is
  Mount rootfs as read-only
  Fix "use after free"
  Enable static linking to libtota
  Add support for DELTA_IMG_AB update type

Run scripts from the path where upgrade-trigger.sh is

Upgrade scripts like:

  upgrade-trigger.sh
  upgrade-fota.sh
  upgrade-partia.sh
  upgrade-prepare-partitions.sh

should be run from the path to which they were extracted from the
delta.tar.

Change-Id: Ic7fb2869ca41fa223997d18d9546fa01f258d609

Mount rootfs as read-only

Change-Id: I5663fac73d62888cdb284dfa88e869d5cb651c7d

Fix "use after free"

Change-Id: I832770abb9ad0dbdee65fe14883c31cd317ed73d

Enable static linking to libtota

delta.ua is provided in the delta.tar file to perform the system
upgrade. When linked dynamically it calls functions from libtota that
are on the old system, while we would like to use the new version.

Change-Id: Ifaf889ac498886eab3310edbf250d99c22cb8bd1

Add support for DELTA_IMG_AB update type

Add new partition upgrade type - DELTA_IMG_AB
A patch is a binary diff between two partition that is compressed with
the Brotli algorithm.
Brotli has a good compression ratio and allows decompression using a
small amount of memory (during tests, it did not exceed 17MB).

Change-Id: I467eb1bfefa2ffb1866515c1f18aeb21e710ebd1

Add support for the case that rootfs is a device mapped by DM

Change-Id: I074e72c9fad9289d059e81bd0801f7f26460aa64

Merge branch 'tizen' into tizen_6.5

Change-Id: Ib040e970ecd05893f67253b8134fcff067ec29c2

Revert "Ensure required 'A/B partition switch' program is available"

This reverts commit e4e165e7be32be63403e5306b73f0711423e5d8b, as
* the program is not universally available,
* it should not be needed when legacy upgrade is used.

Change-Id: I21d8adc31f64bb71989665e826676ba1a70caae1

Merge branch 'tizen' into tizen_6.5

Change-Id: I9b33cafba04a2ad4cdab903226e590000d22d423

Ensure required 'A/B partition switch' program is available

Change-Id: Idfd9b899830419581964d3b5e01a284e34b7c5c8

Reflect the change from partition_switch to device_board_switch_partition

Change-Id: I042a9468b9e3e36a68a6792c38e9fd67a596f7d5

Merge branch 'tizen' into tizen_6.5

Change-Id: I23bdab528b12fe242a8b06fd42ebc3386777a2ab

Use /run/upgrade-sysroot instead of /system

Change-Id: I1b781134eafc29b07d0e6410407c665e3bd911df

Use PARTLABEL based on LABEL from update.cfg and /hal/etc/upgrade/label_map.list

Change-Id: I25edbad79770baa298bd0f404e9ba0d1acc08eb3

Copy partitions listed in the /hal/etc/upgrade/background_copy.list

Change-Id: I283ad7e6de2997ecdfb17c44096eb5c57380e50f

Use partition_switch to change the partition slot

Change-Id: I3e4c995190d62838e1c4cff464e831d9376710f4

Merge branch 'tizen' into tizen_6.5

Change-Id: I6b199ffe055027b8cb119e27a3856e492250a84b

Support ro update during normal boot in delta.ua:

1. Allow to use GPT partition labels rather than hardcoded partitions.
2. Allow to use specified block device rather than hardcoded one.
3. Add usage function.
4. Add function that translates errors into usable form for end user.
5. Add support for a|b slot partition scheme.
6. Fix bug when logging file was not opened before usage.
7. Change log file path from /last_update.log to
   /opt/data/update/last_update.log
8. Do not disable stdout && stderr

Add blkid-print application that is used to determine partition name
based on GPT LABEL.

Change-Id: Ifbc5aaa435791d4de91a896b5b34b874cb46fe8d
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

upgrade-trigger.sh: Add support for launching A|B upgrade.

This mode has different functionality therefore there are other scripts
supporting it.

When upgrade-trigger.sh detects that system uses A|B partition scheme
it executes new upgrade type using 3 stages:
1. upgrade-prepare-partitions.sh -- it is responsible for backing up
   partitions from current slot to next one
2. upgrade-partial.sh -- it is responsible for upgrading partitions
   on next slot using dd and delta.ua
3. upgrade-fota.sh -- it is responsible for finishing upgrade
   and rebooting device into fota RW mode.

Change-Id: I1c8c4fbaf3d2b4817ba7e88690cab316a5cee6e6
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Add A|B upgrade support during normal boot mode.

Change-Id: Ibc9501827ddc1a5d3f1669d97c189ef6e05361b1
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Improve upgrade-trigger.sh flashing speed.

Change-Id: I0e9f6d29b1971893f34b773c8343a466a942018e
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Always log update progress inside ua.

Progress was not reported during headless upgrade.
This information is required for os-upgrade automatic tests.

Change-Id: Ic2ca02f1d1b92b90329abee516c7d15b6ffd7ca1
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Allow to use labels in uppercase in update.cfg

This is required to be able to flash the partition with the BOOT label,
which is in upperacse.

Change-Id: Ib018befe9cee4c66bc6ae13708d1cc436ba04f23

Improve logging in upgrade-trigger.sh script.

- Add log helper function which can log to stdout and file

logging format:
[script-name][tag]actual_log
currently supported tag formats: [Error] [Info]

Change-Id: Iebb727b8ec4a12fca80b03f6b64c472134749020
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Improve upgrade-trigger.sh script:

- Add support for delta.tar.gz
- Add missing ""
- Add proper error handling
- Remove useless cat

Change-Id: I6fd9e6e611bd9232d5a2ca5f6cf129d644a1e1f5
Signed-off-by: Ernest Borowski <e.borowski@samsung.com>

Fix invalid parenthesis

Change-Id: I8cf55406c5f81bc4816d065ffdc0827dee84cc42
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Set progress to 100% as soon as hash remaking is finished

- verity-handler always use 45 seconds though hash is not made
- To prevent this situation, cancel progress thread after
  hash thread is terminated

Change-Id: Ie31f259e0270874128a98c16ae81e1cd7f8d2b81
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Update boilerplate

Change-Id: I7785ff75af0de67bfa0c69c81a81aa906d6b3f32
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Improve the readability about progress rearrangement

Change-Id: Idd92eccb52614e10b74550f03c6f3d3adda9f645
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Fix build warning

Change-Id: I21adccf31a2fc5a97598520220b5bae776dd189c
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Introduce verity-handler

- It launches verityctl and updates progress
- If dm-verity is enabled, initrd-fota will launch it

Change-Id: Ibb82ac06e4c628bbb7c0428ed5c1eefccb9ef041
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Reflect dm-verity status to update progress

- With dm-verity : 20 ~ 80%
  - 80 ~ 100% is for hash remaking
- Without dm-verity : 20 ~ 100%

Change-Id: Icf9a65456eb40334f239f12ac407ddee22d7e6a9
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Update img-verifier usage

Change-Id: Ida586c4b105ea96ca490e50c7d1f5d30a78e114d
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Input log path instead of macro

- If you want to write log file, input "-l LOG_FILE_PATH"
- In addition, you have to use "-i IMAGE_PATH" option

Change-Id: I9c7802981caa78f794d6d4518db474cbfea0cda5
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>

Rename pre script to setup script

Change-Id: Iaeaaf005a9760fd9c1edb0ae91a6044f2855c041
Signed-off-by: Kichan Kwon <k_c.kwon@samsung.com>