Fix dbgshim race conditions

There are two race conditions in the register runtime startup logic: 1) in
CreateProcess (or CreateProcessForLaunch) between the fork() and the execv()
where for VS and mdbg we "see" the coreclr module loaded because the debugger
process and newly created child have the same modules loaded. 2) in attach
between when the child/debuggee loads the coreclr module and when coreclr
finishes initializes the global dac table. In both causes DebugActiveProcess
returns an error when one of the race conditions is hit.

The fix is to create the "continue" named semaphore on the coreclr/debuggee
process side and dbgshim uses that to determine if the coreclr process is
ready and initialized. Fixes issue #4244.

Open the old continue semaphore name and if it doesn't exists create a the new
continue semaphore name for backwards compatibility (see issue 4410).

Do PAL initalization on entry to the public functions instead of the DLLMain handler
which will only be called if the PAL's LoadLibrary is used to load dbgshim. It will be
a lot easier on the debuggers like mdbg to just use dlopen/dlsym and not have to
also call DLLMain.

Merge pull request #4472 from kyulee1/delarm64

Delete Non-Windows Arm64 Job

Delete Non-Windows Arm64 Job

Adding Versioning to Native components in non-Windows builds. (#4393)

Adding Versioning to Native components in non-Windows builds.

Merge pull request #4470 from kyulee1/ryutoclr

Package Name Update from RyuJit to ClrJit

Merge pull request #4459 from brianrob/nativeimage_perfmap

Fix empty perf map files generated by crossgen

Name Update from RyuJit to ClrJit for or package

Merge pull request #4469 from kyulee1/ryujit8

RyuJit Version Update

RyuJit Version Update

Merge pull request #4464 from Maoni0/docfix

added missing step in vs install

added missing step in vs install

Fix empty perf map files generated by crossgen.

Merge pull request #4434 from briansull/struct16-abi

ARM64 Work Item 3817, 3524 - Struct16 decomposition

Merge pull request #4449 from pgavlin/JitBuildName

Change the names of the JIT products to `clrjit`.

Merge pull request #4427 from AndyAyersMS/InlineSizeAccumulation

Inliner: estimate overall code size impact

Change the names of the JIT products to `clrjit`.

- The static library to be linked into the CLR is now
  `clrjit_static`
- The static library to be linked into crossgen is now
  `clrjit_crossgen`
- The dynamic library is now `clrjit`

Merge pull request #4443 from jkotas/gitignore

Add *.VC.db to .gitignore

ARM64 Work Item 3817, 3524 - Struct16 decomposition

    Changes to support passing of MultiReg structs using GT_LISTs
    Optional support for  struct promotion for multireg structs:
    To enable set  FEATURE_MULTIREG_STRUCT_PROMOTE to 1
    Morphs the 16-byte structs at the end of fgMorphArgs
    Careful refactoring to avoid changes to UNIX_AMD64 code
    Covers all of the 16-byte struct expansion cases in fgMorph
    Added function header comments
    Passing the tests for Arm64
    No AsmDiffs for non-Arm64 targets.
    Codegen uses Contained nodes for PUTARG_STK 16-byte stack args
    Created a genPutArgStk method for Arm64
    Updated Tests.lst with 16 additional passing tests

Merge pull request #4425 from kyulee1/cleantest2

ARM64: Another round of clean-up Tests.lst

Inliner: estimate overall code size impact

Accumulate the per-inline size impact estimates into an overall inline
size impact estimate. No size budgeting (yet); this just provides data
for further study.

Merge pull request #4396 from pgavlin/AMD64UnwindHeader

Define the AMD64 unwind codes in their own header.

Merge pull request #4439 from kyulee1/winonly

ARM64: CI triggered by Push for Windows only

Add *.VC.db to .gitignore

Merge pull request #4397 from RussKeldorph/reenable

Reenable tests per #3664

Merge pull request #4416 from RussKeldorph/cs8002

Suppress CS8002 for JIT test projects

Merge pull request #4377 from swaroop-sridhar/aagc1

ARM64: Fix GC encoding settings

Merge pull request #4433 from krytarowski/netbsd-support-69

Fix issue building mscorlib.dll

ARM64: CI triggered by Push for Windows only

Merge pull request #4418 from rahku/arm64EnableCrossgen

Enable running crossgen as part of arm64 build

Merge pull request #3879 from manu-silicon/xplat

Enable XplatEventLogger on all non-Windows platforms

Merge pull request #4405 from yizhang82/delegate_fix

Fix SysV calling convention bug in interop. We need to treat delegate…

Merge pull request #4387 from brianrob/ngenrundown

Add support for ready to run to NGEN rundown

Cast function pointer to void*

Fix issue building mscorlib.dll

/home/kamil/tmp/coreclr/src/vm/win32threadpool.cpp:2672:13: error: no matching function for call to 'FireEtwThreadPoolIOEnqueue'
            FireEtwThreadPoolIOEnqueue((LPOVERLAPPED)waitInfo, Callback, (dwFlag & WAIT_SINGLE_EXECUTION) == 0, reinterpret_cast<void*>(GetClrInstanceId()));
            ^~~~~~~~~~~~~~~~~~~~~~~~~~
/home/kamil/tmp/coreclr/bin/obj/Linux.x64.Debug/src/inc/clretwallmain.h:972:14: note: candidate function not viable: no known conversion from
      'WAITORTIMERCALLBACK' (aka 'void (*)(void *, unsigned char)') to 'const void *' for 2nd argument; take the address of the argument with &
inline ULONG FireEtwThreadPoolIOEnqueue(
             ^
/home/kamil/tmp/coreclr/src/vm/win32threadpool.cpp:3236:13: error: no matching function for call to 'FireEtwThreadPoolIODequeue'
            FireEtwThreadPoolIODequeue(waitInfo, waitInfo->Callback, reinterpret_cast<void*>(GetClrInstanceId()));
            ^~~~~~~~~~~~~~~~~~~~~~~~~~
/home/kamil/tmp/coreclr/bin/obj/Linux.x64.Debug/src/inc/clretwallmain.h:985:14: note: candidate function not viable: no known conversion from
      'WAITORTIMERCALLBACK' (aka 'void (*)(void *, unsigned char)') to 'const void *' for 2nd argument; take the address of the argument with &
inline ULONG FireEtwThreadPoolIODequeue(
             ^

Reported on Ubuntu-14.04.2 LTS with clang 3.8.0

Merge pull request #4423 from Priya91/osxcorefx

Reflect osx innerloop changes from corefx.

ARM64: Another round of clean-up Tests.lst

- Removed UNREACHED category completely
- Tag more issues to failure cases

Reflect osx innerloop changes from corefx.

Merge pull request #4414 from kyulee1/cleantest

ARM64: Clean Up Tests.lst

Enable running crossgen as part of arm64 build

ARM64: Fix GC encoding settings

This change fixes certain settings in the GCInfo encoder/decoders.
It also fixes the debug info for the stack pointer.

ARM64: Clean Up Tests.lst

- Remove all the issue tags that are resolved, or correct the issue number.
- Try to move UNSTABLE to either EXPECTED_PASS or EXPECTED_FAIL.
- Delete security transparency tests unavailable in .NET Core -- NonVirtualCall/OverwriterArray

Merge pull request #4415 from mmitche/update-ubuntu-deps

Update coreclr dependencies

Suppress CS8002 for JIT test projects

"Referenced assembly 'Foo, ...' does not have a strong name."

Happens when a .csproj has a ProjectReference for a .ilproj.  It's not
particularly interesting to give these test assemblies strong names, so
I'm just suppressing the warning.

Fixes #4232
Fixes #4233
Fixes #4234
Fixes #4235
Fixes #4236
Fixes #4237

Update coreclr dependencies

Fix SysV calling convention bug in interop. We need to treat delegate field (NFT_DELEGATE) as INTEGER (as per SysV spec) since it is marshaled as a function pointer, otherwise we would end up passing it via stack which would cause all sorts of badness. Same for SAFEHANDLE/CRITICALHANDLE. It's not clear to me what the right semantics for DATE/CURRENCY is but they are Windows-only types, so we probably don't care yet.
This fixes MarshalStructAsLayoutSeq test on mac/linux.

Merge pull request #4374 from AndyAyersMS/CheckToolRestore

Detect if powershell version is suitable for restoring build tools

Enable XplatEventLogger on all non-Windows platforms

Because on non-Windows platform, we assume event tracing, we also requires
it to compile native code for non-Windows platform.
Event tracing is only enabled on AMD64 devices for now on Unix platforms.

Add support for ready to run to NGEN rundown.

Merge pull request #4349 from rahku/master

enable build of cross target components.
This enables the build of following cross target components:
 1. crossgen
 2. mscordacore.dll
 3. sos.dll
 4. mscordbi.dll
 This is currently only enabled for arm64 and generates x64 binaries. For cross builds it uses the same hierarchy of cmake files from source root folder. At the end of build, build calls cmake again to generate solution for cross build specifying both host & target arch. This PR adds host & target arch configuration in cmake. I decided to reuse CLR_CMAKE_PLATFORM_ARCH_* to be as the host arch and CLR_CMAKE_TARGET_ARCH_* to be as target arch. For non-cross builds they are one and same and differ in cross builds. I have also refactored root CMakeLists.txt into smaller files. Binaries for cross builds are placed at bin\product<OS.Arch.Type><hostArch> (eg for arm64 they will be at bin\product\OS.arm64.debug\x64)

enable build of cross target components.
Currently only enabled for arm64

Merge pull request #3915 from hughbe/region-info-params

Add parameter names to RegionInfo constructor

Merge pull request #3535 from hughbe/patch-3

Add parameter names to ArgumentExceptions in Guid

Merge pull request #4247 from leemgs/upstream-cross-toolchain-unify2

Linux/ARM: Unifying the redundant usages of objcopy

Merge pull request #4283 from krytarowski/netbsd-support-61

Implement GetEntrypointExecutableAbsolutePath() on NetBSD

Merge pull request #4371 from krytarowski/netbsd-support-65

Add NetBSD support in dir.props

Merge pull request #4348 from AndyAyersMS/FixPerfMapAV

Fix a segfault in perf map generation

Merge pull request #4373 from krytarowski/netbsd-support-67

NetBSD: Assume GNU GCC compatible va_list in Clang/LLVM

Merge pull request #4401 from dotnet-bot/from-tfs

Merge changes from TFS

Merge pull request #4312 from mjsabby/muks/enable_rejit_xplat

Enable ReJIT on all platforms

Merge pull request #4392 from kyulee1/fixround

ARM64: Fix Round Operation

ARM64: Fix Round Operation

Math.Round is implemented as a target intrinsic for Arm64.
JIT emitted `frinta` which rounds the ties to away.
As described in MSDN
https://msdn.microsoft.com/en-us/library/system.math.round(v=vs.110).aspx#Round2_Example,
we should round the ties to even.
So, I corrected `frintn` instruction instead for such intrinsic expansion.

I've also identified that `EvalMathFuncUnary` incorrectly folds the round
operation when the argument is constant at the compile time.
The logic itself is not the right semantic as described above in MSDN.
I made a separate helper function which is essentially a duplicate of
classlib. This is not Arm64 specific fix but applies to all other targets.
So, I just fixed it while I'm here.

Fix nidump to avoid crashing while working with Ready to Run images

[tfs-changeset: 1597064]

Merge pull request #4394 from gkhanna79/VCRTArm64Fix

Fix Arm64 break

Merge pull request #4391 from RussKeldorph/buildarch

Build break: Replace $(Platform) with $(BuildArch) in arch-specific IL projects

Define the AMD64 unwind codes in their own header.

This matches the CFI unwind codes and allows the JIT to be more
precise about its includes.

Reenable tests

Merge pull request #4390 from pgavlin/JitCleanup

Cleanup some minor JIT issues.

Fix Arm64 break

Merge pull request #4370 from krytarowski/netbsd-support-64

Print message about detected NetBSD

Merge pull request #4378 from krytarowski/netbsd-support-68

Implement GetProcessIdDisambiguationKey() for NetBSD

Merge pull request #4323 from BruceForstall/CLRABI

Add CLR ABI document to Book of the Runtime

Add CLR ABI document to Book of the Runtime

Replace $(Platform) with $(BuildArch) in arch-specific IL projects

I recently fixed some IL projects for non-x64 architectures, but I tested
the wrong property.  It appears that $(Platform) is set to AnyCpu, and
$(BuildArch) is what I want.

Standardize on `assert` in the JIT.

A small amount of JIT code was using `_ASSERTE` instead of `assert`.
Change that code to use `assert` instead, which operates correctly
w.r.t. the JIT host.

Stanardize on `DEBUGARG` in the JIT.

The JIT uses both `DEBUGARG` (defined in jit.h) and `DEBUG_ARG`
(defined in /src/inc/check.h) for debug-only arguments. This
change replaces all uses of `DEBUG_ARG` with `DEBUGARG`.

Remove uses of LP{,C}UTF8 in the JIT.

Replace these with the corresponding `char*` type.

Merge pull request #4381 from gkhanna79/VCRTFix

Cleanup VCRuntime140.dll dependency from native components

Merge pull request #3807 from CarolEidt/FirstClassStructsDoc

Design document for first-class structs

Merge pull request #4375 from AndyAyersMS/UseBudget

Inliner: use time budget to avoid excessive inlining

Merge pull request #4376 from pgavlin/GcInfoRemoveUtilcode

Stop including utilcode.h in the GC info encoder.

Implement GetProcessIdDisambiguationKey() for NetBSD

Make use of the kvm(3) interface to get "struct kinfo_proc2" of the given
process.

struct kinfo_proc2 {
///....
        uint32_t p_ustart_sec;          /* STRUCT TIMEVAL: starting time. */
        uint32_t p_ustart_usec;         /* STRUCT TIMEVAL: starting time. */
///...
};

  --- /usr/include/sys/sysctl.h

Cleanup VCRuntime140.dll dependency from native components

Merge pull request #4360 from kyulee1/fixpsp

ARM64: Fix Storing PSPSym for localloc

ARM64: Fix Storing PSPSym for localloc

JIT incorrectly saves/restores PSPSym causing AVs in EH tests that have localloc with filter.
The fix is to use a right opcode (Load instead of Store) when saving PSPSym.

Merge pull request #4357 from krytarowski/netbsd-support-63

NetBSD: Add support for PAL_IsDebuggerPresent()

Detect if powershell version is suitable for restoring build tools

Powershell v3 or higher is required to decompress the build tools
bundle. Windows 7 typically has v2 installed.

Detect earlier versions and fail with a pointer to the
build prerequisites and a download link for an updated version.

Also propagate failures out of init-tools.cmd. The last step
of this is unchecked since the build tool init script can return
nonzero status even on success.

See #3510.

Merge pull request #4346 from LLITCHEV/Issue4276

Set the lvIsMultiRegArgOrRet for a variable containing the result of in-lined multi-register return call.

Merge pull request #4369 from mikedn/msgbox

Always try to load user32 instead of ntuser api set

Fix a segfault in perf map generation

Make sure instance vars get initialized to nullptr.

NetBSD: Assume GNU GCC compatible va_list in Clang/LLVM

Retire unneeded __GNUC_VA_LIST as currently all platforms build with Clang.

Merge pull request #4342 from ZhichengZhu/clrstackr

add sos clrstack -r option

Merge pull request #4368 from swgillespie/long-running-gc-fixes

Fix a difference in passing the sequential parameter between Bash and…

Stop including utilcode.h in the GC info encoder.

This required two other minor changes:
- A prototype for `ThrowOutOfMemory` is now defined in gcinfoencoder.h
- `BitArray` now defines an overload of `operator new` that accepts an
  `IAllocator`.

Merge pull request #4372 from krytarowski/netbsd-support-66

NetBSD has RAND_MAX = 0x7fffffff

The RAND_MAX value can vary by platform

Noted on NetBSD where it is 0x7FFFFFFF.

Inliner: use time budget to avoid excessive inlining

Use the time budget and time estimates to stop inlining once the
overall jit time increase estimate for the method is 10x the initial
jit time estimate.

This is implemented as part of `LegacyPolicy` and so can impact
the current inline behavior.

The budget is intentionally set quite high so that it only kicks in
for very rare cases where the call tree below the root is deep and wide
with many small methods. In extended testing on desktop this limit
fires in exactly two cases, both HFA tests.

In CoreCLR tests 12 of the HFA tests hit this limit. I've added
a directed test case here that came from the original bug report.

Closes #2472.

NetBSD: Add support for PAL_IsDebuggerPresent()

Reuse the kvm(3) interface to grab "struct kinfo_proc".

NAME
     kvm - kernel memory interface

LIBRARY
     Kernel Data Access Library (libkvm, -lkvm)

DESCRIPTION
     The kvm library provides a uniform interface for accessing kernel virtual
     memory images, including live systems and crash dumps.  Access to live
     systems is via /dev/mem while crash dumps can be examined via the core
     file generated by savecore(8).  The interface behaves identically in both
     cases.  Memory can be read and written, kernel symbol addresses can be
     looked up efficiently, and information about user processes can be
     gathered.

     kvm_open() is first called to obtain a descriptor for all subsequent
     calls

Merge pull request #4347 from ramarag/zapnyi

Removing NYI for ZapUnwindData

Always try to load user32 instead of ntuser api set

Merge pull request #4140 from myungjoo/implement/4040

Implement StartUnwindingNativeFrames Linux/ARM

Merge pull request #3240 from krytarowski/netbsd-support-50

Fix issue unveiled on NetBSD: Add PAL__vsnprintf shadow in PAL