Libraries testing (#178)

* Add Libraries Testing framework package as inline

The existing package Microsoft.DotNet.CoreFxTesting lived in Arcade
because of no infrastructure being available to compile local tasks in
the repository. As the runtime repository now offers that we can inline
the testing framework.

* Hardcode configuration for installer.tasks

* Update ReportGenerator global tool version

* Add vstest support

* Update binary serialization blobs

Merge pull request #146 from janvorli/fix-crossgen2-devirt

Fix devirtualization in crossgen2

Propagate assertions through Exception handlers. (#160)

* propogate assertions through Exception handlers.

* Add comments.

Fix undocumented generatelayout command (#161)

* Fix undocumented generatelayout command

* Address feedback

Merge pull request #169 from fadimounir/PortPInvokeFixes

Port more Pinvoke fixes from the single-exe branch

Move back to the old arm64 queue. (#171)

This is only for arm64 musl to address #170.

Remove some indirection when raising AssemblyResolve event (#142)

* Remove some indirection when raising AssemblyResolve event
* Delete unused code

Disable tests based on #168 (#182)

Note this is an unforutunate loss of coverage.
It ups the priority on trait based tests or fixing the root cause.

Enable warn as error in corelib (#174)

Enable warn as error in corelib as the workaround was set for VS2017 which we no longer use since we moved to VS2019 and that's the recommended toolset.

Point more docs links to runtime repo (#176)

* Update links in docs/libraries

* Fix more docs/libraries links

Disable autodetection of warnings in CoreCLR subrepo build (#153)

CoreCLR subrepo build has a known existing warning coming from
pgomgr that Arcade upgrades to an error via WarnAsError. I propose
suppressing autodetection of warnings in CoreCLR build to fix this
spurious bug reproducing in release mode.

Thanks

Tomas

Fixes: #150
Follow-up tracking issue: #156

Slight refactor in looking at app paths in AssemblyBinder::BindByTpaList (#115)

Disable TestZeroTimeout test

Pass zero length array as null

Turns out zero length arrays are passed as a pointer to the non-existing element only when the array is passed by reference.

Propagate BestFitMapping/ThrowOnUnmappable from type/assembly

Reject pregenerating p/invokes for LCIDConversion

Properly sign-extend indirect loads

A couple fixes to p/invoke marshalling pregeneration

* Expose the PreserveSig bit on PInvokeMetadata and reject precompiling methods with HResult munging
* Parse CustomMarshaller records to avoid asserting
* Place marshalling cleanup in a new cleanup stream that runs in a finally block
* Place SafeHandle code into the cleanup stream

Use precompiled PInvoke stubs from R2R image without the shared IL stub (#101)

* Use precompiled PInvoke stubs from R2R image without a shared IL stub

This is only for images compiled with crossgen2.

Changes include some refactoring work around the signature parsing to compute marshalling requirements. We had two separate implementations after pulling the PInvoke work from the single-exe branch. Consolidated into one implementation.

Implement instantiating and unboxing through portable stublinker code… (#106)

* Implement instantiating and unboxing through portable stublinker code
 - Handle only the cases with register to register moves
 - Shares abi processing logic with delegate shuffle thunk creation
 - Architecture specific logic is relatively simple
 - Do not permit use of HELPERREG in computed instantiating stubs
 - Fix GetArgLoc such that it works on all architectures and OS combinations

Add a JIT stress test case for testing all of the various combinations
- Use the same calling convention test architecture that was used as part of tail call work

Rename secure delegates to wrapper delegates
- Secure delegates are no longer a feature of the runtime
- But the wrapper delegate lives on as a workaround for a weird detail of the ARM32 abi

Merge pull request #158 from VSadov/volFloat

fix volatile float/double on win-arm64   (make sure compiler does not do numeric casts)

Merge pull request #145 from maryamariyan/area-owners

Move combined area owners to issue-guide

Reflect PR feedback

fix volatile float/double on win-arm64   (make sure compiler does not do numeric casts)

Fix HashSet.Remove to use provided comparer (#154)

Use git bundles (#132)

Use artifacts dir for workload directory (#151)

Remove old note

Merge pull request #152 from dotnet/dockerignore-do-not-ignore-git

.dockerignore: remove .git from blacklist

Merge pull request #136 from ericstj/ericstj-buildVSbootstrapCLI

Use SDK from bootstrapped CLI rather than testhost

Move platform-matrix to common and add an extra common layer for all jobs to define common variables (#120)

* Add an extra common layer for all jobs to define common variables

* Move platform-matrix.yml to a common location

* PR Feedback

.dockerignore: do not ignore .git

Merge pull request #148 from eiriktsarpalis/update-dockerignore

Update .dockerignore to match .gitignore

Update .dockerignore to match .gitignore

Fix devirtualization in crossgen2

In some casesi that are only expressible in IL, devirtualization is
choosing a wrong virtual method. This causes a failure of the
JIT\Regression\JitBlue\GitHub_19222 test.

The test uses the following class hierarchy:
class A
{
    public virtual void f() {}
}

class B : A
{
    public override void f() {}
}

class C : B
{
    public new void f() {}
}

class D : C
{
    public new void f() {}
}

Then there is a local of type C to which we assign a reference to D.
After that the following virtual call is made:

callvirt instance int32 modopt([mscorlib]System.Runtime.CompilerServices.IsLong) A::f()

Devirtualization will choose C.f to call instead of the D.f.

This change disables devirtualization in such cases. Old crossgen does
the same thing.

update issue-guide

Add remaining Description info from issue-guide

Add Description column

Add combined area owners (#144)

* Add combined area owners

Set installer tasks proj to AnyCPU for output path (#135)

Fix path in crossgen comparison job (#138)

Use SDK from bootstrapped CLI rather than testhost

Port https://github.com/dotnet/corefx/commit/dd2ad4367bc4e070f3e8ca81ca6421db5733e731

This also removes copying the SDK to the testhost directory
since that is no longer needed.

Disable test based on #129 (#130)

**NO_CI**

Fix coreclr release build on windows to not use unknown switch (#128)

Disable tests based on https://github.com/dotnet/runtime/issues/84 (#85)

* Disable tests based on https://github.com/dotnet/runtime/issues/84

* Add missing tests

Implement Crc32 Isa on Arm64 (#117)

* Define Crc32 intrinsics in jit/hwintrinsiclistarm64.h

* Add Crc32 instructions in jit/emitarm64.cpp jit/instrsarm64.h

* Add entry to InstructionSet enum corresponding to Crc32 64-bit Isa in jit/instr.h

* Implement Crc32 and Crc32_Arm64 instruction sets in jit/hwintrinsicarm64.cpp

* Port ScalarBinOpTest.template to Arm in src/coreclr/tests/src/JIT/HardwareIntrinsics/Arm/Shared/ScalarBinOpTest.template

* Add Crc32 ComputeCrc32 tests in tests\src\JIT\HardwareIntrinsics\Arm

* Implement ComputeCrc32 in CodeGen::genSpecialIntrinsic in jit/hwintrinsiccodegenarm64.cpp

* Implement ComputeCrc32 in Compiler::impSpecialIntrinsic in jit/hwintrinsicarm64.cpp

* Make LeadingZeroCount and LeadingSignCount as HW_Flag_BaseTypeFromFirstArg in jit/hwintrinsiclistarm64.h

Merge pull request #111 from carlossanlop/AnonymousPipeServerStreamAcl

Add AnonymousPipeServerStream method that takes an ACL

The original corefx PR was already signed off, but the CI did not finish on time before the 5pm deadline: dotnet/corefx#42392

Approved API proposal: dotnet/corefx#41657

We don't currently have a way to create a pipe with a given ACL in .NET Core. We can modify the ACL, but it would be more secure to have the proper ACL on the pipe from the start.

This PR adds a new static class and method that can create an AnonymousPipeServerStream taking a PipeSecurity object, reusing code that can already perform this task.

Fix race in installer tasks build (#122)

Merge pull request #125 from dotnet/eirik/fix-httpstress

HttpStress: Fix windows stress runs

httpstress: fix load-corefx-testhost.ps1

[master] Update dependencies from dotnet/standard (#105)

* Update dependencies from https://github.com/dotnet/standard build 20191114.1

- NETStandard.Library - 2.2.0-prerelease.19564.1

* Update stable versions for packages

Remove duplicate job.yml (#86)

To simplify repo consolidation I temporarily kept a copy of the
job.yml file under eng/pipelines/coreclr/templates. Now that we
no longer need to maintain compatible YAML code across
non-consolidated CoreCLR vs. consolidated runtime, we can finally
remove this duplication.

Thanks

Tomas

Merge pull request #113 from danmosemsft/readme1

Update readme

Use Server Windows queues for 19H1 (#107)

move links up

dev guide

local links

update

Update readme

Add AnonymousPipeServerStream method that takes an ACL

Allow passing down an upper case subset category (#104)

[master] Update dependencies from dotnet/arcade mono/linker (#91)

* Update dependencies from https://github.com/dotnet/arcade build 20191117.2

- Microsoft.DotNet.XUnitExtensions - 5.0.0-beta.19567.2
- Microsoft.DotNet.XUnitConsoleRunner - 2.5.1-beta.19567.2
- Microsoft.DotNet.VersionTools.Tasks - 5.0.0-beta.19567.2
- Microsoft.DotNet.ApiCompat - 5.0.0-beta.19567.2
- Microsoft.DotNet.Arcade.Sdk - 5.0.0-beta.19567.2
- Microsoft.DotNet.Build.Tasks.Configuration - 5.0.0-beta.19567.2
- Microsoft.DotNet.Build.Tasks.Feed - 5.0.0-beta.19567.2
- Microsoft.DotNet.Build.Tasks.Packaging - 5.0.0-beta.19567.2
- Microsoft.DotNet.Build.Tasks.SharedFramework.Sdk - 5.0.0-beta.19567.2
- Microsoft.DotNet.CodeAnalysis - 5.0.0-beta.19567.2
- Microsoft.DotNet.CoreFxTesting - 5.0.0-beta.19567.2
- Microsoft.DotNet.GenAPI - 5.0.0-beta.19567.2
- Microsoft.DotNet.Helix.Sdk - 5.0.0-beta.19567.2
- Microsoft.DotNet.RemoteExecutor - 5.0.0-beta.19567.2
- Microsoft.DotNet.GenFacades - 5.0.0-beta.19567.2

* Update dependencies from https://github.com/mono/linker build 20191117.1

- ILLink.Tasks - 0.1.6-prerelease.19567.1

Add -vs switch to build.ps1 for libraries (#102)

* Add -vs switch to build.ps1 for libraries

* Update build.ps1

Update the Coreclr docs (#83)

* coreclr docs overhaul

* Address feedback

Add windows support for build.sh (#94)

Update windows-requirements.md (#90)

Update REAMDE.md build badge (#88)

Update windows-requirements.md (#87)

Move helixpublishwitharcade.proj one directory higher (#69)

* Move to armarch queue

* Address pr feedback

* Remove open for internal queues

* Move helixpublishwitharcade.proj one directory higher

Use artifacts layout in place of bin dir

Add convenience scripts coreclr.sh / cmd for local user workflow (#81)

Move and t.CoreSetup.sln (#82)

Paths were wrong, and it shouldn't be in the repo root.

Use xunit runner fork in coreclr (#77)

[master] Update dependencies from dotnet/arcade mono/linker (#74)

* Update dependencies from https://github.com/dotnet/arcade build 20191115.1

- Microsoft.DotNet.XUnitExtensions - 5.0.0-beta.19565.1
- Microsoft.DotNet.XUnitConsoleRunner - 2.5.1-beta.19565.1
- Microsoft.DotNet.VersionTools.Tasks - 5.0.0-beta.19565.1
- Microsoft.DotNet.ApiCompat - 5.0.0-beta.19565.1
- Microsoft.DotNet.Arcade.Sdk - 5.0.0-beta.19565.1
- Microsoft.DotNet.Build.Tasks.Configuration - 5.0.0-beta.19565.1
- Microsoft.DotNet.Build.Tasks.Feed - 5.0.0-beta.19565.1
- Microsoft.DotNet.Build.Tasks.Packaging - 5.0.0-beta.19565.1
- Microsoft.DotNet.Build.Tasks.SharedFramework.Sdk - 5.0.0-beta.19565.1
- Microsoft.DotNet.CodeAnalysis - 5.0.0-beta.19565.1
- Microsoft.DotNet.CoreFxTesting - 5.0.0-beta.19565.1
- Microsoft.DotNet.GenAPI - 5.0.0-beta.19565.1
- Microsoft.DotNet.Helix.Sdk - 5.0.0-beta.19565.1
- Microsoft.DotNet.RemoteExecutor - 5.0.0-beta.19565.1
- Microsoft.DotNet.GenFacades - 5.0.0-beta.19565.1

* Update dependencies from https://github.com/mono/linker build 20191115.1

- ILLink.Tasks - 0.1.6-prerelease.19565.1

Fix system IO ports native dependency for package testing (#68)

Remove open for internal queues

Address pr feedback

Move to armarch queue

Fixes SqlClient behavior of sending Attention signal for successful Bulk Copy operation (#61)

Fix Connection Resiliency in SqlClient (#62)

[master] Update dependencies from dotnet/arcade mono/linker (#56)

* Update dependencies from https://github.com/dotnet/arcade build 20191114.6

- Microsoft.DotNet.XUnitExtensions - 5.0.0-beta.19564.6
- Microsoft.DotNet.XUnitConsoleRunner - 2.5.1-beta.19564.6
- Microsoft.DotNet.VersionTools.Tasks - 5.0.0-beta.19564.6
- Microsoft.DotNet.ApiCompat - 5.0.0-beta.19564.6
- Microsoft.DotNet.Arcade.Sdk - 5.0.0-beta.19564.6
- Microsoft.DotNet.Build.Tasks.Configuration - 5.0.0-beta.19564.6
- Microsoft.DotNet.Build.Tasks.Feed - 5.0.0-beta.19564.6
- Microsoft.DotNet.Build.Tasks.Packaging - 5.0.0-beta.19564.6
- Microsoft.DotNet.Build.Tasks.SharedFramework.Sdk - 5.0.0-beta.19564.6
- Microsoft.DotNet.CodeAnalysis - 5.0.0-beta.19564.6
- Microsoft.DotNet.CoreFxTesting - 5.0.0-beta.19564.6
- Microsoft.DotNet.GenAPI - 5.0.0-beta.19564.6
- Microsoft.DotNet.Helix.Sdk - 5.0.0-beta.19564.6
- Microsoft.DotNet.RemoteExecutor - 5.0.0-beta.19564.6
- Microsoft.DotNet.GenFacades - 5.0.0-beta.19564.6

* Update dependencies from https://github.com/mono/linker build 20191114.1

- ILLink.Tasks - 0.1.6-prerelease.19564.1

Fix up a bunch of repo references in docs (#60)

This is just prelminary, as all of the docs need to be rationalized with each other now that they're all in the same repo.  But it at least keeps most of the links working for now.

Fix location of CodeAnalysis.ruleset (#59)

Update dependencies from https://github.com/dotnet/arcade build 20191114.2 (#50)

- Microsoft.DotNet.XUnitExtensions - 5.0.0-beta.19564.2
- Microsoft.DotNet.XUnitConsoleRunner - 2.5.1-beta.19564.2
- Microsoft.DotNet.VersionTools.Tasks - 5.0.0-beta.19564.2
- Microsoft.DotNet.ApiCompat - 5.0.0-beta.19564.2
- Microsoft.DotNet.Arcade.Sdk - 5.0.0-beta.19564.2
- Microsoft.DotNet.Build.Tasks.Configuration - 5.0.0-beta.19564.2
- Microsoft.DotNet.Build.Tasks.Feed - 5.0.0-beta.19564.2
- Microsoft.DotNet.Build.Tasks.Packaging - 5.0.0-beta.19564.2
- Microsoft.DotNet.Build.Tasks.SharedFramework.Sdk - 5.0.0-beta.19564.2
- Microsoft.DotNet.CodeAnalysis - 5.0.0-beta.19564.2
- Microsoft.DotNet.CoreFxTesting - 5.0.0-beta.19564.2
- Microsoft.DotNet.GenAPI - 5.0.0-beta.19564.2
- Microsoft.DotNet.Helix.Sdk - 5.0.0-beta.19564.2
- Microsoft.DotNet.RemoteExecutor - 5.0.0-beta.19564.2
- Microsoft.DotNet.GenFacades - 5.0.0-beta.19564.2

Remove IsRuntimeRepository checks (#43)

* Remove IsRuntimeRepository checks

* Remove YAML bits needed for building in core-setup.

* Remove remaining consolidation branches in yml

Add recently added entries for THIRD-PARTY-NOTICES (#54)

- https://github.com/dotnet/coreclr/pull/27215
- https://github.com/dotnet/coreclr/pull/27299

Fix libraries build by removing freebsd package rid from IO.Ports (#53)

Add exclusion paths for coreclr CI builds (#49)

* Add exclusion paths for coreclr CI builds

* Add CoreLib shared dir to include paths and update pr.yml

R2R pipeline fix (#38)

Fix test build of test project that referenced corefx shared corelib directly and cleanup common path usages (#47)

* Fix test build break and update common path usages to use property

* Use normalize directory for CommonPath and CommonTestPath

* Update instances of CommonPath and CommonTestPath to not use trailing \

Add CopyTo{Async} func-based overloads to refs (#48)

Fix CoreClr adapter project syntax error (#46)

Merge pull request #42 from jashook/port_corclr_27875

Port corclr 27875

Update Versions.props (#44)

Apply format patch and run git out of tempdir

Fix artifact location in build.sh (#36)

* Fix artifact location in build.sh

Port missing Path changes from old shared source mirror (#41)

It looks like the mirror didn't fully quiesce prior to snapping coreclr/corefx for the runtime consolidation.  As a result the libraries build is breaking.

Change template

Add changes to format job location

Port dotnet/coreclr/27875