Bugfix: Check null before inserting item

Change-Id: I86eeb71067039e9209413ce6aee5d7875fc5cbbd

Merge "[BuildMonitor] Add submit_time data at [sr_status] table" into devel

[BuildMonitor] Add submit_time data at [sr_status] table

- Add submit_time data at [sr_status] table
- import method changed
  (datetime.datetime -> datetime)

Change-Id: Ia35351819841378f3cf66c56683bae8787a4c0a5
Signed-off-by: SungHun Hwang <sh0924.hwang@samsung.com>

Prerelease - Always create repos

Change-Id: I5f848ac1caa11c555e11d025bd81e65bf3e284e1

ABS: Remove test code

Change-Id: Icd2db31e50cab3232ff4be16711f015cd206b339

ABS: change code structure

Change-Id: I4b1508d2376200666973f31705292bf723e7e2bf

Move common APIs to common/workflow module

Change-Id: I07bfa5013b4dc8113ad6a694d1c85b6762e0fa29

Move common APIs to common/workflow module

Change-Id: I07bfa5013b4dc8113ad6a694d1c85b6762e0fa29

Merge "revert git config when an exception occurs." into devel

Merge "missing "return return_obj"" into devel

Fix of Report manifest error

Change-Id: I5c310064dd2793a5fc3aa0b6360076e9123d0b42

Report manifest error

Problem: Duplicated rpms generated for the same source.
Cause: Not removing the old package after renaming the package name.
Action: Send e-mail notification to the mailing list.

Change-Id: Iadf1c2a89e0d51684809fde82ec47963f58c64a8

revert git config when an exception occurs.

PROBLEM:
- When an excepition occurs, it is possible that masquerade user
  remains.

SOLUTION:
- When an exception occurs, restore original user name.

Change-Id: Ida4e2d9f68dde8ccb93e23c25c788a3d5ea58f46
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

missing "return return_obj"

Change-Id: I530a7376fbe47f243e265eeceb6290da8609e040
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

Use latest image-configurations.rpm

In Unified builds, there could be exist out-dated image-configurations.rpm.
When creating ks file, use latest one(sort by name).

Change-Id: I1b102af2c7555296fa364a9440c066c24bf72287

[TRBS][Updated jira issue receiver]

1. Updated jira issue receiver due to change the jira policy.
2. Received as file parameter.

Change-Id: I77274efd568a011376b93bf023d752997ad30b06

Merge "Fix attribute error in SMTPDataError" into devel

Merge "Fix indentation" into devel

Fix indentation

Change-Id: Ic399e34fc0c76ea92764ae0f0683cb91c6b514ed

Split obs creation task from pre-release-gerrit job

Change-Id: Ia49ab8c249bf6e4d955147f55dc6ce6554cf0477

Fix attribute error in SMTPDataError

Change-Id: Ia2395b6f224f5597ee857bc629ec87ce845c022d

Merge "test check routine changed." into devel

Support OBS_use_specname for submitobs job

Change-Id: If98d4adfe65f45184aaf1f5d7b327fe488723e99

Merge "Check error condition before sync repo" into devel

Merge "Keep build numbers when re-installing jenkins" into devel

test check routine changed.

PROBLEM:
- If tct fail(0) and ref fail(1), set to failed even if it is good.
- If tct pass(10) and ref pass(9), set to failed even if it is good.

SOLUTION:
- Set them succeeded for both cases.

Change-Id: I6e27b172d979343fa6735826be7c68095014905a
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

Merge "assign right build_project_id" into devel

Check error condition before sync repo

Problem: Recently we met "host down" exception while creating directories.

Change-Id: I0e31b087176220dbb691f933ce8b7b2ca39d3beb

Keep build numbers when re-installing jenkins

Change-Id: I3659333f59082e33770d0a363c06f045b91a0a84

reference snapshot url error in gbs-config in job_update_gbs_meta.py

Change-Id: I2ad2bfeebfdd8077f7e47f9c8f2ea5f1c713c5ca

assign right build_project_id

PROBLEM:
- right build_project_id should be set for right info_stage data.

SOLUTION:
- Use snapshot name to get build_project_id

Change-Id: Ie720a5433105f23d2f1bd8d791e7c355f4cd0df4
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

DXLTTC-785 First SR acceptance problem.

PROBLEM : If you have a linked package when you first accept it, it will be added to linked package.

SOLUTION : First, create initial package and will be added to SR package.

Change-Id: I21ee6a4beccd9953f8503f789bdad49502da25e4

Merge "DXLTTC-783 Problems with pre-release projects" into devel

fix the problem that trigger order is mixed up

PROBLEM:
  display 'succuss' on dashboard
  but actually the image was not created

REASON:
  the trigger infomation order was mixed up
  between 'pre-release-image-creator' and 'BUILD-MONIOTR' job

SOLUTION:
  1. change the code from 'break' to 'return'
     bcz the rest progress does not need anymore
  2. remove DUMMY code

Change-Id: I898f57a74b97bb6b5f9e11f134c751f4dad9186f
Signed-off-by: SungHun Hwang <sh0924.hwang@samsung.com>

DXLTTC-783 Problems with pre-release projects

Problem : remain the project folder in /srv/obs/build of backend server.
Solution :  change the delete_project function from the cleanup funtion in a job_request job.
_bs.delete_project(prj) -> _bs.cleanup(prj, "This project has expired")

Change-Id: I56e3d22a97fc3d65438eb47640dbd62b9aa8a80c

chmod -x for all script files

Change-Id: Ie681133b19ba68560407ed102b3d9f4df7b048d9

Remove _link if _service file exists when accepting SR.

Problem: When accepting packages to multiple-linked project, it branches rather than creating it.
         This will create _link package which references the original project's.
Workaround: Remove _link if exists and set associated comments for history.

Change-Id: Ibcddef330ad666405d29bc58812ff7afc723a973

[TRBS][Handling when reference result is not existed]

PROBLEM:
- DA TRBS doesn't have REF and PERF result.

SOLUTION:
- When REF and PERF result is not existed, then skip the inserting into db.

Change-Id: I14db54ffc8f758de87deb2c2713d28d65b23b88b

Fix divide by zero

PROBLEM:
- We found there are the case that 'total_case' is zero.
- In this case, a 'divide by zero' exception occurs.

SOLUTION:
- Prior to the division, check if the value is zero.

Change-Id: Ia0d299cad2556b724f6cb85c87860da3da811cee
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

Modify job_update_gbs_meta.py as 'BASIC_SNAPSHOT_URL' is removed in jobs/configuration

Change-Id: I32fcfbe8fb89e64848b2e60366e8b803ce3a69ca

Merge "BUGFIX: undefined attribute" into devel

Merge "extension changed: php -> html" into devel

Merge "Adding linked build packages to test-trigger info." into devel

extension changed: php -> html

This javascript code moves the page if node is double-clicked.
Since we do not use php anymore, use html.

Change-Id: I35d1d4f97a8b41b0cc59a58e7f726003d4ada0fd
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

Add new jenkins job : 'update-gbs-meta' when master branch of scm/git-ref-mapping is updated

Update following gbs fullbuild related meta file
scm/manifest
scm/meta/gbs-config
scm/meta/build-config

Change-Id: Id148aa998c11be10ca769f83e53bc3778c5bde5d

Adding linked build packages to test-trigger info.

1. Read manifest xml file if exist.
2. Add 'linked_build_packages': ['blah', 'blah'] into .prerelease.description file.

Change-Id: I6e251bd632bd95fc824f35345e2ae2e275ecaf44

Merge "BUGFIX: missing count increment" into devel

Merge "Add job_test_trigger_automation.py" into devel

BUGFIX: missing count increment

Change-Id: I21093fa34b0b6d88775d973b3ced2e491887d055

Generate manifest info for pre-release projects

Change-Id: Ie639f8c965509e9aad4608156232707268a84702

Add job_test_trigger_automation.py

migration of TRBS_TEST_AUTOMATION job
 local trigger for tester
 public trigger for tester

Change-Id: Ic4ac77bcd5a3d3a75bf784e1db18dd2f5736ffee

Use OBS_package name on staging OBS project

If OBS_package field exists in mapping file, use this instead of spec name.

Change-Id: I4a7e0b62bc254a840c5d6d9171721df6e0636351

Merge "sr_stage update" into devel

BUGFIX: python-jenkinsapi limitation

Problem: get_job() uses jenkins's system url which differs from internal url.
Todo: Use api/python requests instead.

Change-Id: I06a2297cc223574b3729d97c6b99531e144fc12c

sr_stage update

Change-Id: Ib7bad69f0d582f5319de0e5c5d5e45850203bc80
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

[TRBS][Fixed trbs test result receiver]

Handling duplicate data when TRBS is retriggered.

Change-Id: I74d0216b601a74ace3aeef6e4ef92ec81a9b2e9b

Merge "[BuildMonitor] remove 'trbs' proj check code for detecting fail status" into devel

Remove test code

Change-Id: I7e2257ccf25026d11b079632d244a46b37e066de

[BuildMonitor] remove 'trbs' proj check code for detecting fail status

PROBLEM:
  stay 'Accepted(Imaging)' status at SPIN dashboard

REASON:
  download server url is changed from download to download_trbs

SOLUTION:
  remove 'trbs' check code for updating fail status properly

Change-Id: Icc4f641548592c839d981c17bcf6f483188aa661
Signed-off-by: SungHun Hwang <sh0924.hwang@samsung.com>

Merge "Option to disabling log print in trigger_next()" into devel

BUGFIX: undefined attribute

PROBLEM:
 - AttributeError: GitObsMapping instance has no attribute 'cur_OBS_staging_project'

SOLUTION:
 - assign "" at the initialization

Change-Id: I00389c3cf40a188b984e70dcb438a022e9fe7a3e
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

Add a purge rule for smr project

Define : SMR_PURGE_PRJ_HOUR
Rule : find "Tizen" and "smr" and is not "Base"

Change-Id: I6a9d08d86a16fd6375f6421c55ed568c8e9060c8

Enable trigger_next to sync

Bugfix : Can not sync to mirror server.
Solution : Add trigger_next to sync

Change-Id: If1521666a07ac9ed0a4eba328a737235629d9157

Merge "BUGFIX :  trigger to importrpm" into devel

BUGFIX :  trigger to importrpm

Add a environment variable
  IMPORT_RPM , REPO_PATH, BUILDID

To use : ref-copy-project-obs job
  SRC_PROJECT : Tizen:3.0:Mobile:ref:20170626.1
  DEST_PROJECT : Tizen:3.0:Mobile:smr:20170626.1

remove a project field of data fields.

Change-Id: I25217ebc3339f06038326e28d280ae5a5778b43b

Merge "Separate env parameter REF_USE_FOR_PRERELEASE" into devel

Separate env parameter REF_USE_FOR_PRERELEASE

Change-Id: I84e68071635278025c2e50c85a62b993b1ef1241

Option to disabling log print in trigger_next()

Change-Id: I282cd1618cb64543479607bcb07fd3d6fe7ae55e

Merge "BUGFIX: change environment variable" into devel

Merge "ABS: Use PUBLIC_OBS_* parameters" into devel

BUGFIX: change environment variable

To match environment varibles for both SPIN and public,
we will use JENKINS_URL_INTERNAL, JENKINS_USER, JENKINS_PW

Change-Id: Icc60c2286efbf58e31c0ba985b3e5eeefaa3e066
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

ABS: Use PUBLIC_OBS_* parameters

Change-Id: I6ae5ce7bf189e8adf1a6d9de0950998fbc50efc1

Add time interval between each git tagging

Change-Id: Icb01ee6dad742ba4d7433b7885b6b94390f8e518

Remove duplicated items caused by both MappingV1 and MappingV2

Change-Id: I91e4b63eb0acf29cc64d7361727c27a12b46a638

Merge "NEW FEATURE: Control ondemand slaves" into devel

NEW FEATURE: Control ondemand slaves

Dynamically create/release imager slaves through python AWS SDK.

Change-Id: I4ace932e298546bb94a7fa9c0a9c0bdfb9b199a1

Merge "Create a _aggregate package of related pakcages in submit jobs" into devel

Merge "Do not handle non-existing repo when create repos" into devel

Merge "Alternative implementation of git-domain mapping" into devel

Create a _aggregate package of related pakcages in submit jobs

PROBLEM:
 broken problem of _aggregate package to use the link project

SOLUTION:
 create a _aggregate package when create Prelease project
 REPA : latest version

Change-Id: I5e81b0e7ebdd7dd6e2239d96abfb8abf9eabb2fc

Merge "NEW: SR grouping for pre-release" into devel

Merge "Fixed mismatch base url problem: download_trbs solve : download" into devel

Fixed mismatch base url
problem: download_trbs
solve : download

Add define : RSYNC_DOWNLOAD_BASE_URL
replace from URL_PUBLIC_REPO_BASE to RSYNC_DOWNLOAD_BASE_URL

Change-Id: I4635ff83d187451ff86f274c229e10c7ed85e386

Add to set default char-set encoding to utf-8

PROBLEM:
  post-image-creation job failed

REASON:
  Among the submitter name, there is a character
  which is out of range in ascii code as below

  e.g) "submitter": "\u0141ukasz Stelmach <l.stelmach@samsung.com>

SOLUTION:
  Add to set default char-set encoding to utf-8
  at 'post-image-creation' step

[error_log]
    print "%s='%s'" % (key, data[key])
UnicodeEncodeError: 'ascii' codec can't encode character u'\u0141'
                    in position 11: ordinal not in range(128)

Change-Id: I20952a06f1d3fa6772bc42920f51be09407b27c2
Signed-off-by: SungHun Hwang <sh0924.hwang@samsung.com>

Merge "Make REPA status 'succeeded' if no error occurs." into devel

Alternative implementation of git-domain mapping

PROBLEM:
SPIN gerrit does not maintain scm/meta/git repository.
So, it is not possible to git-domain-user mapping using scm/meta/git

SOLUTION:
Gather data directly from gerrit.

Change-Id: I8513b5a0bd8255fb9e4741061536d48574a78293
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

Do not handle non-existing repo when create repos

Problem: If there exist no matched directory in live repo,
         it collects all rpms from other repos.

Change-Id: I59429968451540ba1879eb2deee8e2bbedbc54d1

Modified jenkins-scripts
1) Change the trigger_next from remote_jenkins
2) remove the --bwlimit=5120000 , --will-cite options.
3) Reduce the delay time 30 -> 10 for sync_repo.

Change-Id: Id7e9234f1cc395a35eb9021588e5561ff4af9aee

Merge "Change AWS configuration parameter name" into devel

Make REPA status 'succeeded' if no error occurs.

Change-Id: I322536cb0a5513f0778cc9557f8d6cac7f7b3b14
Signed-off-by: Junghyun Kim <jh0822.kim@samsung.com>

Change AWS configuration parameter name

Change-Id: Icd3ebcfcf8e906bf6b2f9f228398c5054b05de05

ABS: check mandatory keys for git obs map

Change-Id: I182f089966b4e2428b84ea135b7bce16b18b02be

NEW: SR grouping for pre-release

Change-Id: I52620f391492a446c1bc5b08dac10f101537bff0

Add funtion in referenct project
1) Replace a gerrit url when project is copied from reference project
2) Import a binary rpm when project is copied from reference project

Change-Id: Ia6e95ac33a32addb2551b04e3735ee5d89f3d96f

Merge "Set default node description as node name" into devel

Merge "REF: Check existence of package before delete" into devel

[Tizen.Net] add inserting memory usage data of apps.

Change-Id: Ifd845505fce0ec1c0f5cd7b9200cce75cc8c8ef4
Signed-off-by: jang <jiseob.jang@samsung.com>

Set default node description as node name

Change-Id: I78dced312afe097cf70b81b7ba4800721fd04d98

REF: Check existence of package before delete

Change-Id: Ide843947ac54b0f93fd3ad60463f4a30ec64ba62

Merge "directory for update_scm_meta_git_for_dashboard changed." into devel