Add GCStress testing for libraries tests on checked CoreCLR (#38235)

* Add GCStress testing for libraries tests on checked CoreCLR

Disable GCStress0x3 for now, as that causes many timeouts in
these tests.

* Increase timeout for GCStress scenarios

* Disable scheduled runs for libraries gcstress runs

There are currently too many failures in these jobs
so we don't want to run them on a schedule yet.

* Add tracking issue for disabling GCStress=3

Fix STOREIND optimization. (#39066)

* add 1 repro test.

* temporary disable the tranformation.

Update Environment.OSVersion for browser platform (#38790)

* Update Environment.OSVersion for browser platform

* Reflect api review

Fix precondition on OSX 10.15 mutable store tests

[Wasm] Enable System.IO.Compression.ZipFile tests (#39092)

Found that the emscripten VFS does not write user specified file attributes, so skip
part of ZipFile_Create.InvalidDates that expects this to be supported.

Co-authored-by: Steve Pfister <steve.pfister@microsoft.com>

Preserve AsyncValueTaskMethodBuilder.ObjectIdForDebugger (#39084)

These internal properties are used by the debugger, so they should be preserved when debugging is supported.

Remove type pattern from descriptor (#39047)

* Remove type pattern from descriptor

* Use CLR type name

Co-authored-by: Layomi Akinrinade <layomia@gmail.com>
Co-authored-by: Layomi Akinrinade <layomia@gmail.com>

WASM: Add PlatformNotSupportedException for System.Net.Ping (#39091)

The library isn't supported on WebAssembly.

Rewrite System.Text.Json stream tests to be async friendly and enable on WASM (#38663)

The tests dealing are using a (De)SerializationWrapper so the same code can be used both for String and Stream types.
It does that by wrapping the async Stream serialization calls in `Task.Run().GetAwaiter().GetResult()` to turn them into sync calls.
However that doesn't work on WebAssembly since we can't wait on tasks as there's only a single thread.

To fix this inverse the wrapper so the synchronous String calls are turned into async and use normal awaits for the Stream calls.

This allows the test suite to pass on WebAssembly: `Tests run: 8349, Errors: 0, Failures: 0, Skipped: 11. Time: 475.528706s`

WASM: Add PlatformNotSupportedException for System.IO.Pipes (#39089)

* WASM: Add PlatformNotSupportedException for System.IO.Pipes

The library isn't supported on WebAssembly.

* Make test TFMs match src TFMs

Span BasicSymmetricCipher and other symmetric crypto internals

WASM: Disable tests for System.Diagnostics.Process and .FileVersionInfo (#39088)

Both of these libraries throw PNSE on WebAssembly.

add IsOSPlatformOrLater and IsOSPlatformEarlierThan methods (#39005)

* add tests for IsOSPlatformOrLater and IsOSPlatformEarlierThan methods

* add IsOSPlatformOrLater and IsOSPlatformEarlierThan methods

* add xml docs that explain what the API does and what input is supported

* address code review feedback

* numbers in the middle of the platform name are not supported

Tweak crossgen2 test compilation modes (#39025)

- Change crossgen2 test coverage to compile every assembly in the application, not just the primary assembly
- Disable by default compilation with the --inputbubble flag. Instead, only use it if LargeVersionBubble is set to 1
- Add a specific error return code from crossgen2 for the case where all input assemblies are determined to be native binaries. This is used to support this scripting change

Intrinsics support for WidenFourAsciiBytesToUtf16AndWriteToBuffer (#38597)

Cleanup WASM ICU PackageReference usage to use generated property (#39053)

Add X64/Arm64 nested classes to System.Runtime.Intrinsics where missing (#38460)

* Ensure that Arm64 and X64 classes exist in the appropriate places for the HWIntrinsics

* Adding the new Arm64 and X64 instruction sets

* Add a new test validating the IsSupported heirarchy is correct

* Updating the JIT to support the new Arm64 and X64 instruction sets

* Add missing new keywords

* Fixing a member name

* Adding Runtime_34587 to the mono exclude list

Produce arm64-native Mono LLVM runtime packs (#38562)

Produce arm64-native Mono LLVM runtime packs (i.e. for running the SDK on ARM64, not publishing to ARM64 from x64)

[wasm] Addressing System.Runtime.InteropServices.RuntimeInformation.Tests failures (#39073)

Co-authored-by: Mitchell Hwang <mitchell.hwang@microsoft.com>

Bump version for Microsoft.DotNet.XunitExtensions again (#39080)

The recent darc update from https://github.com/dotnet/runtime/commit/9dc660148121c128dc960bf090b83fe67af3bc6f removed my https://github.com/dotnet/runtime/commit/4aea0a14f930eff557bb6e4f30b99be8a583d475 which is necessary to correctly detect WASM/Browser as using the Mono interpreter.

Update dependencies from https://github.com/mono/linker build 20200710.3 (#39076)

Microsoft.NET.ILLink.Tasks
 From Version 5.0.0-preview.3.20359.3 -> To Version 5.0.0-preview.3.20360.3

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>

Update IL tools (#39049)

* Update IL tools

Enable calling convention tests with updated IL tooling.

* Disable new calling convention tests on mono

fix which test should be Pri1. (#39062)

Fix g_TrapReturningThreads to be accessed as 32-bit in asm and JIT code on arm64 (#39058)

Prerequisite work item for the CSE of GT_CNS_INT for ARM64 work item  (#39021)

* Prerequisite work item for the CSE of GT_CNS_INT work item  (zero code diffs in the framework libraries)

Mark nodes that use the division by constant optimization with GTF_DIV_BY_CNS_OPT
Don't perform const prop on expressions marked with GTF_DONT_CSE, as this would undo a constant CSE
Fix for bug in AssertionProp where we assign the wrong value number when folding a conditional
When dumping the BasicBlocks print hascall when the block is marked with BBF_HAS_CALL
Call CheckDivideByConstOptimized when early prop inserts a constant node
added methods: UsesDivideByConstOptimized, CheckDivideByConstOptimized and MarkDivideByConstant
Propagate any side effect flags in the gtCallAddr field of an indirect call node
Call CheckDivideByConstOptimized when morphing a divide or remainder nodes
Don't allow changing a floating point GT_DIV into a GT_MUL in fgMorph after the global morph phase
In loop hoisting, set BBF_HAS_CALL if we hoist a tree that contains a call
When hoisting something that requires a physical register, clear that requirement in the hoisted copy

* Code review feedback

* Remove two asserts in lower because it will always make an optimization for UDIV and UMOD with a power of two divisor.

Create copies of mutable properties on X509Certificate2

Export(Cert) returned the original byte array from the PAL. If a
caller mutated the result of the export, they would be mutating the
underlying representation of RawData in the PAL. To be consistent
with Windows and Linux, we return a copy in the PAL.

Fix OpenSSL PAL to prevent side effects between mutable
SubjectName.RawData and Subject properties (similarly for Issuer)

[wasm] Fix linker dependency in the pinvoke callback table. (#39070)

Encode methods as class name+method name instead of their token.

Simplify IsWow64Process interop (#39059)

Fixes #38910

Put back missing EditorBrowsableState.Nevers on PlatformID (#39065)

Delete NetEventSource.Enter/Exit events (#38874)

They're super verbose, very inconsistent, costly, and not helpful (they appear to be trying to provide tracing of the full flow of calls, but they fail to do even that).

[wasm] Enable System.Threading.Channels.Tests (#38849)

* [wasm] Enable System.Threading.Channels.Tests and skip hangs

* [wasm] Skip failing tests in System.Threading.Channels.Tests

Co-authored-by: Mitchell Hwang <mitchell.hwang@microsoft.com>

[interp] Add debug option which reports the hottest methods (#39045)

* [interp] Reenable computed goto on desktop

Which I accidentaly removed recently.

* [interp] Add debug option which reports the hottest methods

[wasm] Implement pinvoke callback support. (#38932)

* [wasm] Implement pinvoke callback support.

* Allow void return types.

* Fix name mangling for assembly names.

* Handle MonoPInvokeCallbackAttribute as well for now.

[wasm] Modify System.Net.NetworkInformation to throw PNSE (#38928)

Add OSPlatform entries for iOS/tvOS/watchOS/Android (#36704)

* Add OSPlatform entries for iOS/tvOS/watchOS/Android

Implements the non-controversial new OSPlatform members from https://github.com/dotnet/runtime/issues/33331

* Add tests for new OSPlatform entries

[browser][wasm][tests] Deactivate Map tests due to CI failures (#39061)

Remove cross targeting for TraceSource and TextWriterTraceListener (#39043)

* stop cross targeting

Allow XmlSerializer.Generator to run on Core > 2.x (#39013)

* Allow XmlSerializer.Generator to run on Core > 2.x

* Use repo local dotnet toolchain to build Generator

Use the repo local dotnet toolchain to generate the sgen output.
Adding a test to verify that the repo local and the live built outputs
are identical by size.

WASM enable System.Collections.NonGeneric.Tests (#39020)

Define Debugger.IsSupported feature switch to allow trimming of debugger only code. (#37288)

Implementations of new HttpContent sync methods. (#38635)

addressing some missing feedback Relating to Browser (#38968)

* addressing some missing feedback

* Apply suggestions from code review

Co-authored-by: Santiago Fernandez Madero <safern@microsoft.com>
* remove odbc32 from ref

* fix stuff

Co-authored-by: Santiago Fernandez Madero <safern@microsoft.com>

WASM Re-enable Threading.Channels serialization tests (#39016)

* WASM Re-enable Threading.Channels serialization tests

* PR Feedback

* Use ConditionalFact

Delete tools-local\scripts (#39051)

Revert changes to test breaking outter loop build (#39046)

Include member name when constructing ValidationResult in CompareAttribute (#38867)

Fixes https://github.com/dotnet/runtime/issues/29214

Fix mark overflow processing (#38969)

A recent refactoring PR #1688 has regressed GC processing of mark overflow.
If GC heap segments in the segment linked list are not ordered in an ascending
order by their addresses, the mark overflow processing misses segments on
lower addresses if they follow segments on higher addresses.
This leads to some objects that are alive to not to be reported and freed.

This change fixes the problem by making sure the segment order doesn't matter.

Cleanup references to centos 6 (#39006)

* Remove Dockerfile

* Remove references to dockerfiles in runtime. These exist in dotnet-buildtools-prereqs.

Move tailcall dispatcher into corelib (#38938)

Fix #35559

[mono] Add support for UnmanagedCallersOnlyAttribute (#38728)

* [marshal] Add mono_method_has_unmanaged_callers_only_attribute

* [marshal] Allow calls to mono_marshal_get_managed_wrapped without a delegate class

   In that case, create a wrapper based on the signature of the method itself.

* [aot] Allow decode_method_ref to decode NATIVE_TO_MANAGED wrappers without a delegate class

   Bump the AOT file format

* [interp] ldftn will return a native-to-managed wrapper to UnmanagedCallersOnly methods

* aot: emit byte when we don't expect a class

* jit: create wrapper creation for ldftn in method-to-ir

   Do it at IR generation of the caller, not every time the ldftn is executed

* jit: don't create a jump trampoline for ldftn of a native-to-managed wrapper

   The wrapper might be called from a thread that's not attached to the runtime, and the jump trampoline will look at TLS vars that are not initialized

* interp: transform LDFTN into LDC of a create_method_pointer for UnmanagedCallersOnly method

* marshal: throw invalid program exception for instance and generic methods

* Emit IPE throw instead of aborting JIT or interp compilation for bad UnmanagedCallersOnly methods

   Instead of throwing while JITing (or transforming), throw when the LDFTN is executed.

* disallow delegate constructor calls on UnmanagedCallersOnly methods

* throw IPE if UnmanagedCallersOnly method has non-blittable args

* disallow DllImport and UnmanagedCallersOnly together

   throw NotSupportedException

Co-authored-by: Ryan Lucia <ryan@luciaonline.net>

WASM enable System.Collections.Specialized.Tests (#39012)

[wasm] Add beginnings of support for building with ICU. (#38977)

Co-authored-by: Alexander Köplinger <alex.koeplinger@outlook.com>

[wasm] Modify System.Drawing.Common to throw PNSE on Browser (#38999)

Co-authored-by: Santiago Fernandez Madero <safern@microsoft.com>

Add a repro test for `IsCompatibleType(cseLclVarTyp, expTyp)` (#38972)

* Add a repro test for #35724

* move it to pri1.

[browser][wasm][tests] Add tests for Map (#38862)

* [browser][wasm][map] Add tests for Map

* Address review comments

Add and use Environment.ProcessId (#38908)

* Add and use Environment.ProcessId

* Split newly added tests

Fix GC heap dump (#38893)

#36932 had a typo that caused types to never be logged

fix the condition in assert (#38965)

Make DSAKeyValueTests.LoadXml accept seed/counter may not roundtrip. (#38952)

Disable HandlerInvokedForSigQuit test on macOS (#39003)

WASM Enable System.Collections tests (#38976)

Update CadesIssuerSerial.xml (#38436)

remove extra white space

More comparisons (#37768)

HttpStress timeout increased to 60 seconds (#38669)

Silence ARM inline asm warning in libunwind (#38971)

The libunwind headers define unw_getcontext in the libunwind headers for ARM
as inline assembly with stmia instruction storing SP and PC, which clang
complains about as deprecated. However, it is required for atomic restoration
of the context, so disable that warning.

This change silences that warning.

Fix standalone GC on ARM32 (#38970)

* Fix standalone GC on ARM32

The standalone build of GC on ARM32 was missing the FEATURE_64BIT_ALIGNMENT,
which caused aligment failures at runtime for objects that require align
on 8 byte boundary and were not getting it.

This change fixes that. I had to modify the copy of MethodTable that the
standalone GC uses so that the RequireAlign8 flag can be checked.

* Move the FEATURE_64BIT_ALIGNMENT setting to gcenv.object.h

* Fix debug build where an assert required MethodTable::IsValueType

Remove local copying of emsdk_env.sh (#39004)

Recent versions of emsdk stopped supporting the construct_env argument: https://github.com/emscripten-core/emsdk/commit/819e95cd995147d8b16c600d64e16c880cc407df
Sourcing the normal isn't that slow anyway, it takes about 300ms on my machine

WASM: don't compile brotli sources into System.IO.Compression.Native (#38990)

Brotli isn't supported so we don't need it.

[wasm] Enable System.Threading.Tasks.Extensions tests (#38815)

* [wasm] Enable System.Threading.Tasks.Extensions tests

* Remove synchronous blocking from System.Threading.Tasks.Extensions tests

* [wasm] ManualResetValueTaskSourceTests remove unnecessary and add necessary conditionalfacts

* [wasm] ValueTaskTests clean up ConditionalFacts

* [wasm] Amend ManualResetValueTaskSourceTests tests asserting distinct threads

* [wasm] Skip hanging System.Threading.Tasks.Extensions tests with ActiveIssue

Co-authored-by: Mitchell Hwang <mitchell.hwang@microsoft.com>
Co-authored-by: Stephen Toub <stoub@microsoft.com>

Improve performance of DateTime.Kind property. (#38501)

* Improve performance of DateTime.Kind.

* Remove the unused field.

* Fixing whitespaces.

Co-authored-by: Ben Adams <thundercat@illyriad.co.uk>
* Revert the changes and add AgressiveInlining

* Put the attribute on the getter.

* Update src/libraries/System.Private.CoreLib/src/System/DateTime.cs

Co-authored-by: Ben Adams <thundercat@illyriad.co.uk>
Co-authored-by: Stephen Toub <stoub@microsoft.com>

Various createdump fixes and improvements to help diagnosing problems (#38940)

Better MacOS createdump thread suspend

Remove extra logging

Add trace_printf and flush diag logging

Add process id/name spew

Add stdout flushing to CrashInfo::Trace

Fix issue https://github.com/dotnet/diagnostics/issues/1305

Trim NetEventSource when EventSource.IsSupported is false (#38828)

* Trim NetEventSource when EventSource.IsSupported is false

Follow up to #38129. NetEventSource code was still left in even when EventSource.IsSupported is false, since all the usages of NetEventSource are keying off its own static property: NetEventSource.IsEnabled.

Remove NetEventSource.IsEnabled so the linker can trim NetEventSource code when EventSource.IsSupported is false.

* Remove HttpTelemetry.IsEnabled static property so the linker can trim EventSource code when EventSource.IsSupported is false.

* Fix fake NetEventSource to match what is in the product.

Set memory cache logger field as readonly (#37289)

[Wasm] Skip System.IO.Compression.Brotli tests b/c the library is PNSE (#38941)

Use mono_runtime_delegate_invoke in EventPipeInternal::CreateProvider. (#38989)

Due to issues on some platforms related to mono_delegate_to_ftnptr_impl,
switch to use mono_runtime_delegate_invoke without need for delegate
wrapper generation currently not supported on all platforms.

[CBOR] Make Half Read/Write methods public and add unit tests (#38946)

* Make Cbor Half methods public and add unit tests

* address feedback

Improve terminology used in code (#38960)

* Improve terminology used in code

* Address PR feedback

* Update src/libraries/System.Private.CoreLib/src/System/Resources/RuntimeResourceSet.cs

Co-authored-by: Michal Strehovský <MichalStrehovsky@users.noreply.github.com>
Co-authored-by: Michal Strehovský <MichalStrehovsky@users.noreply.github.com>

extend existing test that validates the sent and received bytes with a usage of sync method that uses BufferPtrSendOperation internally (#38935)

[master] Update dependencies from dotnet/arcade mono/linker Microsoft/vstest dotnet/llvm-project dotnet/xharness (#38880)

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>
Co-authored-by: Alexander Köplinger <alex.koeplinger@outlook.com>

Add feature switch for diagnostics handler in System.Net.Http (#38765)

Fix a few more license headers (#38973)

* Fix a few more license headers

I missed a few directories outside of src.

* Update Directory.Build.props

Delete unreachable code in stackwalker (#38978)

Standardize on same illink descriptor name (#38985)

Update windows-instructions.md

Delete WebHeaderCollection's event source (#38871)

The logging is verbose, arbitrary, expensive, and duplicative of logging that happens when headers are actually read/written by the underlying networking stack.  Delete.

Add browser tfm to test projects that used to run when it derived from Unix (#38954)

* Add browser tfm to test projects that used to run when it derived from Unix

* Don't build System.Net.Mail.Unit.Tests as they are already PNSE

WASM: Enable System.Runtime.Serialization.Formatters tests (#38948)

* WASM: Enable System.Runtime.Serialization.Formatters tests

We need to preserve some assemblies the BinaryFormatter needs and also skip some test cases that would cause PNSE on WebAssembly.

* Disable IsolatedStorage case too

It throws PNSE now.

Build refs only for applicable BuildTFMs (#38936)

* Build refs only for applicable BuildTFMs

Remove global properties for CoreLib P2P (#38937)

* Remove global properties for CoreLib P2P

[wasm] Add pinvokes for System.IO.Compression.dll. (#38925)

remove pragma warning from ref source files (#38907)

[metadata] Move rarely used bits out of MonoMethod and give 1 bit back to MonoMethod:slot (#38735)

The `MonoMethod:slot` width was accidentally changed in https://github.com/dotnet/runtime/commit/8465be73eb40a9c409dc8974b9d6b235a1b5158f

To compensate, we move 3 bits out to image properties
   * `verification_success` - rarely used nowadays, protected by the image lock (like all image properties)
   * `is_reabstracted`, `is_covariant_override_impl` - infrequently used features of newer C# language features (default interface methods and covariant returns).  Setting these assumes the loader lock is held.

Fix remaining license headers (#38953)

* Fix license in remainder of .cs files

* Fix license header in .vb files

* Fix license header in .py files

* Fix license headers in .c, .cpp, .h

* Fix licensing on .dat files

* Fix license header in generators

* Fix license headers in .asm

* Fix license headers in .xml

* Fix remainder of license headers

* Add license default to .editorconfig

* Add some missing headers

* Fix Doundation to Foundation in some license headers

* Add missing license headers under libraries

Fix TOC in CI Health and investigation (#38914)

Fix case where EventPipeInternal::Enable is called with NULL output file. (#38927)

Remove commented libraries windows helix queues (#38947)

* Remove commented libraries windows helix queues

* Remove accidental empty line addition.

Delete dead code related to finalization (#38906)

Add tizen-arm64 RIDs (#38832)

* Add tizen-arm64 RIDs

Since tizen 6.0.0, arm64 will be supported

* Add arm64 arch to all tizen versions

Run CLRTools unittests in PR jobs (#38694)

-Add new job to existing runtime pipeline to run the unit tests that are part of the clr.tools subset
-Avoid publishing anything other than test results from that job
-Run only on Linux-X64 as that's the platform with the most spare availability. These tests do not need to be run on a broad swath of platforms, as they are unittests of pure C#

Fix calling a ThisCall delegate via Reverse P/Invoke. (#38829)