Merge pull request #4433 from krytarowski/netbsd-support-69

Fix issue building mscorlib.dll

Merge pull request #4418 from rahku/arm64EnableCrossgen

Enable running crossgen as part of arm64 build

Merge pull request #3879 from manu-silicon/xplat

Enable XplatEventLogger on all non-Windows platforms

Merge pull request #4405 from yizhang82/delegate_fix

Fix SysV calling convention bug in interop. We need to treat delegate…

Merge pull request #4387 from brianrob/ngenrundown

Add support for ready to run to NGEN rundown

Cast function pointer to void*

Fix issue building mscorlib.dll

/home/kamil/tmp/coreclr/src/vm/win32threadpool.cpp:2672:13: error: no matching function for call to 'FireEtwThreadPoolIOEnqueue'
            FireEtwThreadPoolIOEnqueue((LPOVERLAPPED)waitInfo, Callback, (dwFlag & WAIT_SINGLE_EXECUTION) == 0, reinterpret_cast<void*>(GetClrInstanceId()));
            ^~~~~~~~~~~~~~~~~~~~~~~~~~
/home/kamil/tmp/coreclr/bin/obj/Linux.x64.Debug/src/inc/clretwallmain.h:972:14: note: candidate function not viable: no known conversion from
      'WAITORTIMERCALLBACK' (aka 'void (*)(void *, unsigned char)') to 'const void *' for 2nd argument; take the address of the argument with &
inline ULONG FireEtwThreadPoolIOEnqueue(
             ^
/home/kamil/tmp/coreclr/src/vm/win32threadpool.cpp:3236:13: error: no matching function for call to 'FireEtwThreadPoolIODequeue'
            FireEtwThreadPoolIODequeue(waitInfo, waitInfo->Callback, reinterpret_cast<void*>(GetClrInstanceId()));
            ^~~~~~~~~~~~~~~~~~~~~~~~~~
/home/kamil/tmp/coreclr/bin/obj/Linux.x64.Debug/src/inc/clretwallmain.h:985:14: note: candidate function not viable: no known conversion from
      'WAITORTIMERCALLBACK' (aka 'void (*)(void *, unsigned char)') to 'const void *' for 2nd argument; take the address of the argument with &
inline ULONG FireEtwThreadPoolIODequeue(
             ^

Reported on Ubuntu-14.04.2 LTS with clang 3.8.0

Merge pull request #4423 from Priya91/osxcorefx

Reflect osx innerloop changes from corefx.

Reflect osx innerloop changes from corefx.

Merge pull request #4414 from kyulee1/cleantest

ARM64: Clean Up Tests.lst

Enable running crossgen as part of arm64 build

ARM64: Clean Up Tests.lst

- Remove all the issue tags that are resolved, or correct the issue number.
- Try to move UNSTABLE to either EXPECTED_PASS or EXPECTED_FAIL.
- Delete security transparency tests unavailable in .NET Core -- NonVirtualCall/OverwriterArray

Merge pull request #4415 from mmitche/update-ubuntu-deps

Update coreclr dependencies

Update coreclr dependencies

Fix SysV calling convention bug in interop. We need to treat delegate field (NFT_DELEGATE) as INTEGER (as per SysV spec) since it is marshaled as a function pointer, otherwise we would end up passing it via stack which would cause all sorts of badness. Same for SAFEHANDLE/CRITICALHANDLE. It's not clear to me what the right semantics for DATE/CURRENCY is but they are Windows-only types, so we probably don't care yet.
This fixes MarshalStructAsLayoutSeq test on mac/linux.

Merge pull request #4374 from AndyAyersMS/CheckToolRestore

Detect if powershell version is suitable for restoring build tools

Enable XplatEventLogger on all non-Windows platforms

Because on non-Windows platform, we assume event tracing, we also requires
it to compile native code for non-Windows platform.
Event tracing is only enabled on AMD64 devices for now on Unix platforms.

Add support for ready to run to NGEN rundown.

Merge pull request #4349 from rahku/master

enable build of cross target components.
This enables the build of following cross target components:
 1. crossgen
 2. mscordacore.dll
 3. sos.dll
 4. mscordbi.dll
 This is currently only enabled for arm64 and generates x64 binaries. For cross builds it uses the same hierarchy of cmake files from source root folder. At the end of build, build calls cmake again to generate solution for cross build specifying both host & target arch. This PR adds host & target arch configuration in cmake. I decided to reuse CLR_CMAKE_PLATFORM_ARCH_* to be as the host arch and CLR_CMAKE_TARGET_ARCH_* to be as target arch. For non-cross builds they are one and same and differ in cross builds. I have also refactored root CMakeLists.txt into smaller files. Binaries for cross builds are placed at bin\product<OS.Arch.Type><hostArch> (eg for arm64 they will be at bin\product\OS.arm64.debug\x64)

enable build of cross target components.
Currently only enabled for arm64

Merge pull request #3915 from hughbe/region-info-params

Add parameter names to RegionInfo constructor

Merge pull request #3535 from hughbe/patch-3

Add parameter names to ArgumentExceptions in Guid

Merge pull request #4247 from leemgs/upstream-cross-toolchain-unify2

Linux/ARM: Unifying the redundant usages of objcopy

Merge pull request #4283 from krytarowski/netbsd-support-61

Implement GetEntrypointExecutableAbsolutePath() on NetBSD

Merge pull request #4371 from krytarowski/netbsd-support-65

Add NetBSD support in dir.props

Merge pull request #4348 from AndyAyersMS/FixPerfMapAV

Fix a segfault in perf map generation

Merge pull request #4373 from krytarowski/netbsd-support-67

NetBSD: Assume GNU GCC compatible va_list in Clang/LLVM

Merge pull request #4401 from dotnet-bot/from-tfs

Merge changes from TFS

Merge pull request #4312 from mjsabby/muks/enable_rejit_xplat

Enable ReJIT on all platforms

Merge pull request #4392 from kyulee1/fixround

ARM64: Fix Round Operation

ARM64: Fix Round Operation

Math.Round is implemented as a target intrinsic for Arm64.
JIT emitted `frinta` which rounds the ties to away.
As described in MSDN
https://msdn.microsoft.com/en-us/library/system.math.round(v=vs.110).aspx#Round2_Example,
we should round the ties to even.
So, I corrected `frintn` instruction instead for such intrinsic expansion.

I've also identified that `EvalMathFuncUnary` incorrectly folds the round
operation when the argument is constant at the compile time.
The logic itself is not the right semantic as described above in MSDN.
I made a separate helper function which is essentially a duplicate of
classlib. This is not Arm64 specific fix but applies to all other targets.
So, I just fixed it while I'm here.

Fix nidump to avoid crashing while working with Ready to Run images

[tfs-changeset: 1597064]

Merge pull request #4394 from gkhanna79/VCRTArm64Fix

Fix Arm64 break

Merge pull request #4391 from RussKeldorph/buildarch

Build break: Replace $(Platform) with $(BuildArch) in arch-specific IL projects

Merge pull request #4390 from pgavlin/JitCleanup

Cleanup some minor JIT issues.

Fix Arm64 break

Merge pull request #4370 from krytarowski/netbsd-support-64

Print message about detected NetBSD

Merge pull request #4378 from krytarowski/netbsd-support-68

Implement GetProcessIdDisambiguationKey() for NetBSD

Merge pull request #4323 from BruceForstall/CLRABI

Add CLR ABI document to Book of the Runtime

Add CLR ABI document to Book of the Runtime

Replace $(Platform) with $(BuildArch) in arch-specific IL projects

I recently fixed some IL projects for non-x64 architectures, but I tested
the wrong property.  It appears that $(Platform) is set to AnyCpu, and
$(BuildArch) is what I want.

Standardize on `assert` in the JIT.

A small amount of JIT code was using `_ASSERTE` instead of `assert`.
Change that code to use `assert` instead, which operates correctly
w.r.t. the JIT host.

Stanardize on `DEBUGARG` in the JIT.

The JIT uses both `DEBUGARG` (defined in jit.h) and `DEBUG_ARG`
(defined in /src/inc/check.h) for debug-only arguments. This
change replaces all uses of `DEBUG_ARG` with `DEBUGARG`.

Remove uses of LP{,C}UTF8 in the JIT.

Replace these with the corresponding `char*` type.

Merge pull request #4381 from gkhanna79/VCRTFix

Cleanup VCRuntime140.dll dependency from native components

Merge pull request #3807 from CarolEidt/FirstClassStructsDoc

Design document for first-class structs

Merge pull request #4375 from AndyAyersMS/UseBudget

Inliner: use time budget to avoid excessive inlining

Merge pull request #4376 from pgavlin/GcInfoRemoveUtilcode

Stop including utilcode.h in the GC info encoder.

Implement GetProcessIdDisambiguationKey() for NetBSD

Make use of the kvm(3) interface to get "struct kinfo_proc2" of the given
process.

struct kinfo_proc2 {
///....
        uint32_t p_ustart_sec;          /* STRUCT TIMEVAL: starting time. */
        uint32_t p_ustart_usec;         /* STRUCT TIMEVAL: starting time. */
///...
};

  --- /usr/include/sys/sysctl.h

Cleanup VCRuntime140.dll dependency from native components

Merge pull request #4360 from kyulee1/fixpsp

ARM64: Fix Storing PSPSym for localloc

ARM64: Fix Storing PSPSym for localloc

JIT incorrectly saves/restores PSPSym causing AVs in EH tests that have localloc with filter.
The fix is to use a right opcode (Load instead of Store) when saving PSPSym.

Merge pull request #4357 from krytarowski/netbsd-support-63

NetBSD: Add support for PAL_IsDebuggerPresent()

Detect if powershell version is suitable for restoring build tools

Powershell v3 or higher is required to decompress the build tools
bundle. Windows 7 typically has v2 installed.

Detect earlier versions and fail with a pointer to the
build prerequisites and a download link for an updated version.

Also propagate failures out of init-tools.cmd. The last step
of this is unchecked since the build tool init script can return
nonzero status even on success.

See #3510.

Merge pull request #4346 from LLITCHEV/Issue4276

Set the lvIsMultiRegArgOrRet for a variable containing the result of in-lined multi-register return call.

Merge pull request #4369 from mikedn/msgbox

Always try to load user32 instead of ntuser api set

Fix a segfault in perf map generation

Make sure instance vars get initialized to nullptr.

NetBSD: Assume GNU GCC compatible va_list in Clang/LLVM

Retire unneeded __GNUC_VA_LIST as currently all platforms build with Clang.

Merge pull request #4342 from ZhichengZhu/clrstackr

add sos clrstack -r option

Merge pull request #4368 from swgillespie/long-running-gc-fixes

Fix a difference in passing the sequential parameter between Bash and…

Stop including utilcode.h in the GC info encoder.

This required two other minor changes:
- A prototype for `ThrowOutOfMemory` is now defined in gcinfoencoder.h
- `BitArray` now defines an overload of `operator new` that accepts an
  `IAllocator`.

Merge pull request #4372 from krytarowski/netbsd-support-66

NetBSD has RAND_MAX = 0x7fffffff

The RAND_MAX value can vary by platform

Noted on NetBSD where it is 0x7FFFFFFF.

Inliner: use time budget to avoid excessive inlining

Use the time budget and time estimates to stop inlining once the
overall jit time increase estimate for the method is 10x the initial
jit time estimate.

This is implemented as part of `LegacyPolicy` and so can impact
the current inline behavior.

The budget is intentionally set quite high so that it only kicks in
for very rare cases where the call tree below the root is deep and wide
with many small methods. In extended testing on desktop this limit
fires in exactly two cases, both HFA tests.

In CoreCLR tests 12 of the HFA tests hit this limit. I've added
a directed test case here that came from the original bug report.

Closes #2472.

NetBSD: Add support for PAL_IsDebuggerPresent()

Reuse the kvm(3) interface to grab "struct kinfo_proc".

NAME
     kvm - kernel memory interface

LIBRARY
     Kernel Data Access Library (libkvm, -lkvm)

DESCRIPTION
     The kvm library provides a uniform interface for accessing kernel virtual
     memory images, including live systems and crash dumps.  Access to live
     systems is via /dev/mem while crash dumps can be examined via the core
     file generated by savecore(8).  The interface behaves identically in both
     cases.  Memory can be read and written, kernel symbol addresses can be
     looked up efficiently, and information about user processes can be
     gathered.

     kvm_open() is first called to obtain a descriptor for all subsequent
     calls

Merge pull request #4347 from ramarag/zapnyi

Removing NYI for ZapUnwindData

Always try to load user32 instead of ntuser api set

Merge pull request #4140 from myungjoo/implement/4040

Implement StartUnwindingNativeFrames Linux/ARM

Merge pull request #3240 from krytarowski/netbsd-support-50

Fix issue unveiled on NetBSD: Add PAL__vsnprintf shadow in PAL

Add NetBSD support in dir.props

Print message about detected NetBSD

Set the lvIsMultiRegArgOrRet for a variable containing the result of
inlined multi-register return call.

This change makes sure the lvIsMultiRegArgOrRet on a variable used to
store the result of inlined multi-register return function is set.
The way the code works today, this is not an issue since the code in
fgAttachStructInlineeToAsg always uses a CopyObj/Blk to asign the return
value from the registers to the var on stack. The CopyBlock/Obj gets the
address of the variable making it address-exposed and that prevents struct
promotion.
In the future (when CopyObj/Blk is not used) not having
lvIsMultiRegArgOrRet set could cause a problem.

Fixes issue 4276.

Fix a difference in passing the sequential parameter between Bash and Batch

add clrstack -r option

Merge pull request #4359 from gkhanna79/ROLibFix2

DelayLoadAndFixWinRTInterop

Merge pull request #4361 from joperezr/AddServiceableAttribute

Adding Serviceable attribute to mscorlib

Merge pull request #4352 from kouvel/ArmAssertFix

Fix assertion failure on ARM

Merge pull request #4338 from pgavlin/AddJit32Build

Make it possible to build JIT32 in the OSS tree.

Merge pull request #4363 from mmitche/update-corefx-paths

Update the corefx copy steps to point to the new location

Update the corefx copy steps to point to the new location

Adding Serviceable attribute to mscorlib

DelayLoadAndFixWinRTInterop

Merge pull request #4355 from dotnet-bot/from-tfs

Merge changes from TFS

Implement StartUnwindingNativeFrames Linux/ARM

StartUnwindingNativeFrames for Unix/Linux ARM.
The code is ported from AMD64 code of the same function and OS.

CONTEXT_* are moved from context2.S to asmconstants.h so that
the same macros may be sharaed between multiple files.

Fix #4040

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Merge pull request #4260 from myungjoo/fix/4259

ARM: fix build warning for unw usage

Fix assertion failure on ARM

StompWriteBarrierEphemeral may be called on the init path, where the runtime is technically not suspended, but has not started yet. Added a check for g_fEEInit in the call.

Merge pull request #4340 from jkotas/equality-comparer

Use beforefieldinit field for Comparer/EqualityComparer.Default

Merge pull request #4353 from myungjoo/fix/4107

ARM/Linux: Mark r0-r3 Saved

ARM/Linux: Mark r0-r3 Saved

Without this, exception handlers (try-catch) that
try to get SP of ThePreStub's caller (managed frame) mislocate
the caller's SP by 4 words (0x10) and get lost while
traversing managed frames.

Fix #4107

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Merge pull request #4343 from pgavlin/SeparateBitPosition

Move `BitPosition` into its own file.

Fix razzle build breaks in bcl.win

[tfs-changeset: 1596379]

Style fix: remove obsolete contents

We no longer have StartUnwindingNativeFrames.

Signed-off-by: MyungJoo Ham <myungjoo.ham@samsung.com>

Use beforefieldinit field for Comparer/EqualityComparer.Default

Merge pull request #4326 from dotnet-bot/from-tfs

Merge changes from TFS

Merge pull request #4335 from AndyAyersMS/InlineStrategy

Inliner: introducing InlineStrategy

Removing NYI for ZapUnwindData

Make it possible to build JIT32 in the OSS tree.

This change adds a new argument to build.cmd, buildjit32, that configures
the build to build and link JIT32 instead of RyuJIT if the sources are
available in `src/jit32`.

Merge pull request #4339 from fadimounir/deltests

Delete fragile tests (will fix tests in a later PR)

Delete fragile tests (will fix tests in a later PR)

Move `BitPosition` into its own file.

This will allow the GC info encoder and the JIT to use this
function without pulling in the entire utilcode header.

Inliner: introducing InlineStrategy

Create the `InlineStrategy` class to hold inline-relevant data that
spans multiple inlines. It tracks the number of inline candidates,
attempts, successes, last successful policy, and holds onto the root
context, and so on. The strategy is responsible for creating contexts
and reporting overall results for a method (either tree-based or
data-based).

The strategy also includes a simple jit time estimate. From various
observations, post-inline jit time can be modelled acceptably by simple
linear relationships on the input IL size. The strategy uses these models
to estimate the initial and current jit time. Estimate units are roughly
microseconds.

The strategy creates a time budget to flag cases where the estimated
jit time increase due to inlining is unreasonbly large. The budget
is initially based on the root method size, and may increase if there
are non-discretionary force inlines.

Once we have a bit more vetting of the budgeting mechanism, policies
will use it to limit inlining in a small number of runaway inlining cases
(see for example #2472).

Remove code under MEASURE_INLINING since the strategy plus the context
tree (optionally extended via policies) contains all that data and more.
Likewise, consolidate a number of the compiler's inlining-related member
variables into the strategy.