platform/upstream/dotnet/runtime.git
4 years agoMerge branch 'master' into feature/solaris/coreclr-port-without-libunwind-changes
Adeel Mujahid [Tue, 21 Apr 2020 15:00:20 +0000 (18:00 +0300)]
Merge branch 'master' into feature/solaris/coreclr-port-without-libunwind-changes

4 years ago[mono] Fix iOS sample (#35241)
Egor Bogatov [Tue, 21 Apr 2020 14:29:25 +0000 (17:29 +0300)]
[mono] Fix iOS sample (#35241)

4 years agoAvoid unnecessary ToLower calls in RegexCompiler generated code (#35185)
Stephen Toub [Tue, 21 Apr 2020 13:37:38 +0000 (09:37 -0400)]
Avoid unnecessary ToLower calls in RegexCompiler generated code (#35185)

* Avoid unnecessary ToLower calls in RegexCompiler generated code

We can skip calling ToLower{Invariant} if the only character that could possibly lower-case to the character we're comparing against is that character itself.  This then also lets us employ optimizations like using IndexOf when searching for `\n` as part of expressions like `.*`.

* Fix a comment

* Add test to validate UnicodeCategory assumptions

4 years agoMerge pull request #34997 from janvorli/implement-native-getmoduleindex
Jan Vorlicek [Tue, 21 Apr 2020 12:14:44 +0000 (14:14 +0200)]
Merge pull request #34997 from janvorli/implement-native-getmoduleindex

Implement native GetModuleIndex

4 years ago[mono] Add LLVM support for iOS test runner; use runtime packs (#35106)
Egor Bogatov [Tue, 21 Apr 2020 10:07:28 +0000 (13:07 +0300)]
[mono] Add LLVM support for iOS test runner; use runtime packs (#35106)

4 years ago[CBOR] Implement support for tagged types (#34767)
Eirik Tsarpalis [Tue, 21 Apr 2020 09:06:34 +0000 (10:06 +0100)]
[CBOR] Implement support for tagged types (#34767)

* [CBOR] Implement support for dateTime types

* fix test errors

* refine RFC3339 dateTime formatting logic

* add invalid date string tests

* Implement BigInteger support

* initial decimal support implementation

* use stack allocated buffers instead of thread local buffers

* add test cases for negative unix time dates

* add WriteNegativeIntegerEncoding tests

* implement checkpointing logic and apply to SkipValue() method

* implement checkpointing for tagged type readers

* store reader checkpoints in the stack

* add tests for rollback logic in tagged type readers

* add tested that utilizes nested reader state rollbacks

* use culture invariant decimal parsing in tests

* add WriteUnixTimeSeconds(double) method

* split unix time and string time readers into separate methods

* add WriteUnixTestSeconds invalid input test

* add support and tests for indefinite-length buffers in tagged types

* add PeekTag() tests

* add Read/WriteInt32() convenience methods

* add pervasive buffer postcondition checks on negative reader tests; fix related bug.

* add comment on DateTime parsing

* Rename CborReader.Peek() to CborReader.PeekState()

* Use correct overload for int32 handling

* add caching to CborReader.PeekState()

* Use "simple" instead of "special" for cbor major type

* add Write/ReadUInt32() convenience methods

* add uint32 negative tests

4 years agoImprove RegexCompiler's ToLower perf (#35203)
Stephen Toub [Tue, 21 Apr 2020 01:09:00 +0000 (21:09 -0400)]
Improve RegexCompiler's ToLower perf (#35203)

* Pool LocalBuilders in RegexCompiler

Currently GenerateGo/FindFirstChar create a few _tempLocal1, _tempLocal2, etc. LocalBuilders that various parts of the methods may use.  The developer then need to keep track of which of these locals is currently being used such that we maximize the re-use of them while not accidentally overlapping their use.  And the names end up being non-descriptive, so in some cases additional names are added for convenience.

The primary purpose of the PR is cleanup.  It adds a pool of LocalBuilders that lets them be rented just where they're needed, such that we only create locals when necessary, can give them appropriate names, etc.  However, it also makes it a lot easier for helpers to create temporary locals (e.g. as was done in EmitMatchCharacterClass) which then makes it easier to add additional optimizations.

* Avoid CultureInfo.TextInfo virtual calls in RegexCompiler

To support RegexOptions.IgnoreCase, RegexCompiler ends up generating a call to `char.ToLower(c, _culture)` for every character compared.  That `ToLower` call in turn needs to access `_culture.TextInfo`, and then call its `ToLower(char)` virtual method.  We can instead get the `TextInfo` once and call its `ToLower` method directly, saving a virtual call on every character being compared.

Note that we were already doing this (for .NET 5) in RegexInterpreter, but hadn't done it in RegexCompiler because of complications around locals management.  The previous commit fixed that and made this possible.

* Update src/libraries/System.Text.RegularExpressions/src/System/Text/RegularExpressions/RegexCompiler.cs

4 years agoAdd microsoft-extensions to area owners (#35186)
Dan Moseley [Mon, 20 Apr 2020 23:03:09 +0000 (16:03 -0700)]
Add microsoft-extensions to area owners (#35186)

* Add extensions

* Add missing data rows

* Add area-CodeGen-LLVM-mono

Co-authored-by: Marek Safar <marek.safar@gmail.com>
4 years agoGuard against chaching of dangling global parent class of module (#35150)
Juan Hoyos [Mon, 20 Apr 2020 22:47:45 +0000 (15:47 -0700)]
Guard against chaching of dangling global parent class of module (#35150)

4 years agoAddress some edge cases in EncoderNLS.GetBytes draining logic (#35182)
Levi Broderick [Mon, 20 Apr 2020 22:41:24 +0000 (15:41 -0700)]
Address some edge cases in EncoderNLS.GetBytes draining logic (#35182)

4 years agoAdd test for native COM client consuming managed COM server with Events. (#35151)
Aaron Robinson [Mon, 20 Apr 2020 22:31:06 +0000 (15:31 -0700)]
Add test for native COM client consuming managed COM server with Events. (#35151)

4 years agoUse pinned arrays in Sockets (#34175)
Vladimir Sadov [Mon, 20 Apr 2020 19:14:44 +0000 (12:14 -0700)]
Use pinned arrays in Sockets (#34175)

* Use pinned arrays in SocketAsyncEventArgs

* Missed one case of defensive pinning.

4 years agoImprove char.ToUpperInvariant / ToLowerInvariant perf (#35194)
Levi Broderick [Mon, 20 Apr 2020 19:06:01 +0000 (12:06 -0700)]
Improve char.ToUpperInvariant / ToLowerInvariant perf (#35194)

4 years agoAddress PR feedback
Adeel [Mon, 20 Apr 2020 17:55:16 +0000 (17:55 +0000)]
Address PR feedback

4 years agoRemove passing tests from exclude list (#35139)
Fan Yang [Mon, 20 Apr 2020 17:49:40 +0000 (13:49 -0400)]
Remove passing tests from exclude list (#35139)

4 years ago[tests] Disable sgen-bridge.exe on Windows x64 FullAOT+LLVM (#35201)
monojenkins [Mon, 20 Apr 2020 17:44:30 +0000 (13:44 -0400)]
[tests] Disable sgen-bridge.exe on Windows x64 FullAOT+LLVM (#35201)

See https://github.com/mono/mono/issues/19603

Co-authored-by: akoeplinger <akoeplinger@users.noreply.github.com>
4 years agoOverride IsByRefLike on S.R.E.*Builder classes (#34846)
Marcus Turewicz [Mon, 20 Apr 2020 17:03:29 +0000 (03:03 +1000)]
Override IsByRefLike on S.R.E.*Builder classes (#34846)

* Override IsByRefLike on S.R.E.*Builder classes

Fixes #8828

* Adds tests

* Update System.Reflection.Emit.Tests.csproj

* Bumping CI

* Update mono as well

4 years ago[wasm][debugger] Implement `Runtime.callFunctionOn`, and support array expansion...
monojenkins [Mon, 20 Apr 2020 16:55:49 +0000 (12:55 -0400)]
[wasm][debugger] Implement `Runtime.callFunctionOn`, and support array expansion (#35156)

- This was prompted by vscode/vs requiring this for array expansion.
- It runs a given js function string, on a given object id.
- We handle the case for dotnet object ids.

Implementation:

- We build a proxy object that reflects the details of the real dotnet object/array
- And run the js function on that proxy object

- Then if `returnByValue` was requested, the result is returned as-is
- Else we cache that object, with a new special object id (`dotnet:cfo_res:..`),
  and return that id in the response.

- Subsequently, we would get `Runtime.getProperties` request on this new object id
- And a `Runtime.releaseObject` request, to free that function result.

- All this is handled currently

Tests:

- A few tests were added which invoke `callFunctionOn`, on JS objects, and checks the result
  - And the same checks are performed on equivalent dotnet objects, with the same js function
  - This should help stay in sync with what we think `callFunctionOn` should work as

  - These tests have an additional parameter - `roundtrip`, which calls a simple function
`function () { return this; }`
    .. on a dotnet object, and gets the result object id. If `roundtrip == true`, then it
    runs that same function on the result object, and gets a new result object id. And the
    tests run their checks on that.

    - this helps to check that outside of the proxy, the result object behaves same as any
      other dotnet object.

- Also, most of the tests were modified to support an additional mode (`use_cfo`).
  - With this, whenever a test wants to run `Runtime.getProperties on an object, we pass that
    object through the earlier "identity" function, and then run `getProperties` on that
    resultant object.

  - This helps to take advantage most of the existing tests, and use them for `callFunctionOn`
    testing too, by ensuring that the results of CFO returns results same as any other object.

Fixes mono/mono#19229, mono/mono#19531

Co-authored-by: radical <radical@users.noreply.github.com>
4 years agoAdd Reverse Diagnostics Server (#33307)
John Salem [Mon, 20 Apr 2020 16:12:21 +0000 (09:12 -0700)]
Add Reverse Diagnostics Server (#33307)

* Add Advertise IPC Command
* Update diagnostics server to use both reverse and traditional modes
* Change DOTNET_DiagnosticsServerAddress to DOTNET_DiagnosticsMonitorAddress and only use for reverse connection
* Add IpcStreamFactory abstraction
* IpcStreamFactory::Poll is now more similar to the poll API from Linux
* IpcPollHandle struct is used to abstract listening for client and server connections
* use overlapped io for all io on windows
* Add ConnectionState abstraction
* Implement timeout read/write

4 years agoSingle-File Bundler: Add a FileSize test (#35149)
Swaroop Sridhar [Mon, 20 Apr 2020 15:29:38 +0000 (08:29 -0700)]
Single-File Bundler: Add a FileSize test (#35149)

Add a bundler consistency tests that verifies that the size of each embedded file
(recorded in the bundle manifest) matches its original size of the file on disk.

4 years agoAdd ability to turn on just the portable executable verifier. (#35102)
monojenkins [Mon, 20 Apr 2020 14:39:32 +0000 (10:39 -0400)]
Add ability to turn on just the portable executable verifier. (#35102)

Helps fix issue: https://issuetracker.unity3d.com/issues/unity-crashes-when-opening-the-project

We were hitting a crash were a corrupted dll would get loaded and then hit an assert later on when something tried to use it. The verifier suite would correctly identify the dll as corrupt but it was impossible to turn on just the PE verification. I've added a new PE only mode above "off" to allow for just the PE verifier to be used instead of the larger verification suite.

Co-authored-by: UnityAlex <UnityAlex@users.noreply.github.com>
4 years agoHttp2LoopbackConnection properly handles stream termination (#35100)
Alexander Nikolaev [Mon, 20 Apr 2020 13:32:54 +0000 (15:32 +0200)]
Http2LoopbackConnection properly handles stream termination (#35100)

PR adds an optional stream termination handling to `Http2LoopbackConnection.ReadBodyAsync` and fixes `HttpClient` construction missing the `SocketHttpHandler` created in the test.

Fixes #31220

4 years agoRemove MicrosoftFileFormatsVersion from eng/Versions.props
Jan Vorlicek [Thu, 16 Apr 2020 08:07:09 +0000 (01:07 -0700)]
Remove MicrosoftFileFormatsVersion from eng/Versions.props

4 years agoRemove notions of the buildtools and the GetModuleIndex
Jan Vorlicek [Wed, 15 Apr 2020 21:16:58 +0000 (23:16 +0200)]
Remove notions of the buildtools and the GetModuleIndex

4 years agoAdd Mono-specific check for uninitialized default ALC on Resolving event (#35192)
Ryan Lucia [Mon, 20 Apr 2020 11:55:53 +0000 (07:55 -0400)]
Add Mono-specific check for uninitialized default ALC on Resolving event (#35192)

Unlike the other resolvers, this one *can* exist on the default ALC, so we have to add the null check like in GetAssemblyLoadContext.

Move the now-unused ResolveUsingResolvingEvent method back to the CoreCLR-specific file.

4 years agoCastTable perf tweaks. (#34427)
Vladimir Sadov [Mon, 20 Apr 2020 02:49:14 +0000 (19:49 -0700)]
CastTable perf tweaks. (#34427)

* No null check in Get.

* bypass AuxData

4 years ago[mono] Fix multidimensional array construction when using programmer-specified lower...
monojenkins [Sun, 19 Apr 2020 23:34:08 +0000 (19:34 -0400)]
[mono] Fix multidimensional array construction when using programmer-specified lower bounds. (#35091)

* [mono] Fix multidimensional array construction when using programmer-specified lower bounds.

mono_array_full_new_checked and mono_array_full_new (which is marked as
a MONO_API function) both take two pointers to buffers containing
lengths and lower bounds. mono_array_new_n_icall can split the incoming
parameter list in two before forwarding the results to
mono_array_full_new_checked, so mono_array_full_new_checked was
receiving two buffers containing interleaved lower bounds and lengths.

ECMA-335 states that array constructors that specify both lower bounds
and lengths interleave these values. Deinterleave these
in method_to_ir.

Add some tests to iltests.il that verify that multidimensional arrays
with custom lower bounds work.

Fixes https://github.com/dotnet/runtime/issues/34377.
Fixes https://github.com/dotnet/runtime/issues/34378.
Fixes https://github.com/dotnet/runtime/issues/34381.

* Deinterleave lower bounds and array lengths in the interpreter.

Also make the condition in which the deinterleaving code path is taken
more precise. Perhaps this branch should be marked as unlikely.

* Fix a typo.

Co-authored-by: imhameed <imhameed@users.noreply.github.com>
4 years agoUpdate shared-generics.md to use `Method<>` instead of `Func<>` (#35181)
nietras [Sun, 19 Apr 2020 21:23:26 +0000 (23:23 +0200)]
Update shared-generics.md to use `Method<>` instead of `Func<>` (#35181)

To avoid confusion with `Func<>` delegate and object. At least to me it create a bit of unnecessary confusion. Whether this should be `Method` or just `F` can be discussed. However, `Method` makes it clear the discussion is about a generic **method** instantiation.

4 years agofixing building of projects in VS (#35146)
Anirudh Agnihotry [Sun, 19 Apr 2020 17:09:42 +0000 (10:09 -0700)]
fixing building of projects in VS (#35146)

4 years agoMake MappingType more usable (#35168)
Andrew Au [Sun, 19 Apr 2020 17:03:57 +0000 (10:03 -0700)]
Make MappingType more usable (#35168)

4 years ago[meta] Mono ALC embedding primer (#34601)
Ryan Lucia [Sun, 19 Apr 2020 08:13:57 +0000 (04:13 -0400)]
[meta] Mono ALC embedding primer (#34601)

* [meta] Expose managed ALC fields to the runtime

* [meta] Add mono_assembly_load_full_alc to unstable

* [loader] Add preload hook V3 for netcore embedding API

* [loader] Add append parameter to preload hook V3 installation

* [meta] Fix ALC usage to be netcore-only

* Move Sequential attribute to Mono ALC declaration

* Feedback

4 years agoPort CoreCLR to SunOS
Adeel [Sun, 19 Apr 2020 05:10:45 +0000 (05:10 +0000)]
Port CoreCLR to SunOS

4 years agofix ping on OSX when running as root (#35070)
Tomas Weinfurt [Sat, 18 Apr 2020 19:42:54 +0000 (12:42 -0700)]
fix ping on OSX when running as root (#35070)

* fix ping on OSX when running as root

* feedback from review

* limit disabling DualMode to OSX

* fix osx

Co-authored-by: Tomas Weinfurt <furt@Shining.local>
4 years agoadd FreeBSD build (#34521)
Tomas Weinfurt [Sat, 18 Apr 2020 18:50:00 +0000 (11:50 -0700)]
add FreeBSD build (#34521)

* try to add FreeBSD to the build

* s/FreeBSD/FReeBSD_x64

* more fixes to pass -os FreeBSD

* add missing :

* more fixes and feedback from review

* pull in new container

* fix corelib-nativecorelib-tools-packages as well

* add crossrootfsDir

* pass crossrootfsDir

* fix installr

* fix compilation on freebsd

* fix test build on freebsd

* update to match new layout

* fix native tests

* CrossBuild?

* rootfsDir debug

* merge with linux to get container support

* fix proc_maps

* fix up buildCommandSourcesDirectory

* remove debug

* more fixup for buildCommandSourcesDirectory

* use TargetOS instead of os

* remove old section

* rever changes to get_loaded_library_from_proc_maps

* fix compilation with missing getline

* add official build

* use arch

* remove special pool for freebsd

* roll-back runtime-official.yml

Co-authored-by: Tomas Weinfurt <furt@Shining.local>
Co-authored-by: Tomas Weinfurt <furt@tocherni-t490s.middleeast.corp.microsoft.com>
4 years agoEnable JIT/Regression/JitBlue/DevDiv_578214/DevDiv_578214 for mono. (#35120)
imhameed [Sat, 18 Apr 2020 18:08:20 +0000 (11:08 -0700)]
Enable JIT/Regression/JitBlue/DevDiv_578214/DevDiv_578214 for mono. (#35120)

4 years agoUpdate dependencies from https://github.com/microsoft/vstest build 20200416-02 (...
dotnet-maestro[bot] [Sat, 18 Apr 2020 17:45:12 +0000 (19:45 +0200)]
Update dependencies from https://github.com/microsoft/vstest build 20200416-02 (#35155)

- Microsoft.NET.Test.Sdk: 16.7.0-preview-20200408-06 -> 16.7.0-preview-20200416-02

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>
4 years agoMake GCToEEInterface::Get*ConfigValue check the runtimeconfig.json (#34797)
Andrew Au [Sat, 18 Apr 2020 17:21:27 +0000 (10:21 -0700)]
Make GCToEEInterface::Get*ConfigValue check the runtimeconfig.json (#34797)

4 years agoImplement native GetModuleIndex
Jan Vorlicek [Wed, 15 Apr 2020 11:19:41 +0000 (13:19 +0200)]
Implement native GetModuleIndex

This change replaces managed GetModuleIndex tool by shell scripts using
native tools.

4 years agoEnclose paths with quotes in testPackages.proj (#34791)
Carlos Sanchez Lopez [Sat, 18 Apr 2020 08:03:10 +0000 (01:03 -0700)]
Enclose paths with quotes in testPackages.proj (#34791)

* Enclose paths with quotes in testPackages.proj

4 years agoRemove verbose test output logging (#35104)
Viktor Hofer [Sat, 18 Apr 2020 08:01:50 +0000 (10:01 +0200)]
Remove verbose test output logging (#35104)

Fixes https://github.com/dotnet/runtime/issues/33926.

As we ContinueOnError and error by reading from the ExitCode property we can set IgnoreExitCode in the msbuild Exec invocation to avoid the following verbose output: `error MSB4132: The "Exec" task returned false but did not log an error.`

4 years agoFixes nits identified in https://github.com/dotnet/runtime/pull/34980 (#35121)
Steve Pfister [Sat, 18 Apr 2020 07:48:30 +0000 (03:48 -0400)]
Fixes nits identified in https://github.com/dotnet/runtime/pull/34980 (#35121)

Co-authored-by: Steve Pfister <steve.pfister@microsoft.com>
4 years agoFixing several of the Sse/Sse2.Compare* intrinsics to account for NaN inputs (#34204)
Tanner Gooding [Sat, 18 Apr 2020 04:39:17 +0000 (21:39 -0700)]
Fixing several of the Sse/Sse2.Compare* intrinsics to account for NaN inputs (#34204)

* Adding a regression test to validate the Sse.CompareGreaterThan and related behaviors

* Fixing several of the Sse/Sse2.Compare* intrinsics to account for NaN inputs

* Applying format patch

* Switch to using compOpportunisticallyDependsOn

* Use the named intrinsic comparison macros rather than magic numbers

* Applying formatting patch

* Define the _CMP hwintrinsic macros since they aren't available by default on Unix

* Simplifying the special importation logic for Sse/Sse2 compare GreaterThan functions

* Applying formatting patch

* Add a comment explaining the naming of the _CMP_* macros used by the x86 HWIntrinsics

* Switch to mirroring the FloatComparisonMode enum rather than using the _CMP_* macros

* Apply formatting patch

* Don't use XML style doc comments for the FloatComparisonMode mirror on the C++ side

* Ensure the base type is set before it is checked

* Applying formatting patch

4 years agoRemove erroneous curlies in Xml resource (#33890)
mrj001 [Sat, 18 Apr 2020 03:55:36 +0000 (21:55 -0600)]
Remove erroneous curlies in Xml resource  (#33890)

* Added test for Issue 30218, use of resource Sch_MinLengthGtBaseMinLength

* Reworded error message to remove the invalid formatters.

Issue #30218

* Updated check of message from the exception to be more amenable to potential internationalization.

* Reworded resource Sch_MaxLengthGtBaseMaxLength and added unit test for same.

* Simplified test code per feedback from Dan Moseley, PR#33890.

* Tests to increase code coverage.   The ones that are failing trigger resource string Sch_MaxMinLengthBaseLength to be used as the Exception message.

* Removed invalid formatters from the resource string Sch_MaxMinLengthBaseLength.  Failing tests from the previous commit now pass.

* Added test for the Exception using string resource Sch_LengthGtBaseLength as its message.  This covers a source line and branch not previously covered.  This test fails due to the invalid formatters.

* Reworded string resource Sch_LengthGtBaseLength to remove the invalid formatters.

* Added unit tests for uses of string resource Sch_FacetBaseFixed.

* Made test for the message containing "fixed" more specific.

* Reworded string resource Sch_FacetBaseFixed to remove the invalid formatter.

* Added unit test to cover usage of string resource Sch_InvalidAllMax.  A second usage of this string resource is not covered as it is in a class marked Obsolete.

* Reworded string resource Sch_InvalidAllMax to remove the invalid formatter.

* Added unit test for String Resource Sch_InvalidAllElementMax - invalid formatter.

* Reworded string resource Sch_InvalidAllElementMax to remove the invalid formatter.

* Added unit test which causes an XmlSchemaException using string resource Sch_InvalidExemplar as its message.

* Reworded Sch_InvalidExemplar to remove the invalid formatter.  Also, added the name of the element which cannot be used as the substitution group affiliation.

* Added unit test that causes an XmlSchemaException to be thrown using string resource Sch_GroupBaseRestNotEmptiable as its message.

* Removed the curly braces so there are no longer any invalid formatters.

* Added unit tests that cause an XmlSchemaException to be thrown using string resource Sch_AllRefMinMax as its message.

* Changed string resource Sch_AllRefMinMax to remove the invalid formatters.

* reworded Sch_MinLengthGtBaseMinLength and Sch_MaxLengthGtBaseMaxLength similarly to Sch_LengthGtBaseLength

* Corrected error "greater than" to "less than".

* Changed name of test to more accurately  reflect its purpose.

* Changed casing of MinLength and MaxLength to match their XML facets.  Removed redundant ToLower call and comment.

* Removed all Regex used to find invalid formatters.

* renamed MaxMinLengthBaseLength_TestData to indicate that this is testing the successful case.

* Removed suppression of exception so that we will see the exception if one is thrown.

* Removed comments as there are issues tracking these.

* Fixed comment larger -> lower.

* Removed XML comments on test methods.

* Removal of XML comment that was missed.

4 years agoFix all runtime IL generation paths from passing GC types to unmanaged function calls...
Aaron Robinson [Sat, 18 Apr 2020 03:50:39 +0000 (20:50 -0700)]
Fix all runtime IL generation paths from passing GC types to unmanaged function calls. (#35026)

* Native COM clients have not been running since we switched over to SDK projects.

* Stop IL generators from passing GC types to unmanaged function calls.
Update crossgen2 IL stub generators.
Update Dynamic runtime stub generator.
Add assert for GC types in unmanaged function calls.

4 years agoRename ReadyToRun.SuperIlc to just R2RTest to save typing (#35110)
Tomáš Rylek [Sat, 18 Apr 2020 03:37:54 +0000 (05:37 +0200)]
Rename ReadyToRun.SuperIlc to just R2RTest to save typing (#35110)

* Rename ReadyToRun.SuperIlc to just R2RTest to save typing

* Apply the SuperIlc -> R2RTest rename to crossgen determinism test

4 years agoFix collectible AssemblyLoadContext shutdown race (#35131)
Jan Vorlicek [Sat, 18 Apr 2020 03:34:37 +0000 (05:34 +0200)]
Fix collectible AssemblyLoadContext shutdown race (#35131)

When the last reference to a collectible AssemblyLoadContext goes away,
its finalizer is called on the finalizer thread. It ends up calling the
native CLRPrivBinderAssemblyLoadContext::PrepareForLoadContextRelease
method which replaces a long weak GC handle to the managed
AssemblyLoadContext stored in the CLRPrivBinderAssemblyLoadContext by a
strong GC handle to the same AssemblyLoadContext and closes the original
weak handle.
The problem is that another thread may have read the weak handle pointer
and then try to use it to call into the resolving methods on the managed
AssemblyLoadContext. If that thread tries to resolve the related handle
after the finalizer thread has closed it, it fails as the handle doesn't
exist anymore. It could even get a completely different object if the
handle got reused in between. Or even worse, if the handle got reused by
another AssemblyLoadContext, the handle would resolve, but to the
different AssemblyLoadContext.

This change fixes the problem by keeping the weak handle open and
closing it after the AssemblyLoadContext shutdown completes (there are
no more assemblies that were loaded into that context and no instances
of types from those assemblies). The strong handle now serves only to
keep the managed AssemblyLoadContext alive.

4 years agoSpanize interop in System.Net.NetworkInformation (#35098)
Jan Kotas [Sat, 18 Apr 2020 01:21:57 +0000 (18:21 -0700)]
Spanize interop in System.Net.NetworkInformation (#35098)

Faster and safer

4 years agoUse ReadOnlySpan<byte> instead of byte arrays in CAPI helpers (#35125)
Kevin Jones [Fri, 17 Apr 2020 23:44:45 +0000 (19:44 -0400)]
Use ReadOnlySpan<byte> instead of byte arrays in CAPI helpers (#35125)

4 years ago[wasm][debugger] Show pointer type+address (#34934)
monojenkins [Fri, 17 Apr 2020 20:16:08 +0000 (16:16 -0400)]
[wasm][debugger] Show pointer type+address (#34934)

Co-authored-by: radical <radical@users.noreply.github.com>
4 years agoprofiler tests depend on jit events (#34919)
David Mason [Fri, 17 Apr 2020 20:00:39 +0000 (13:00 -0700)]
profiler tests depend on jit events  (#34919)

* profiler tests depend on jit events so disable R2R images via profiler eventmask

* fix RequestReJITWithInliners for R2R modules

* Update tests to work correctly when crossgenned

* fix issue where test was treating an HRESULT as a FunctionID

* fix alpine failures. you can dlopen a relative path in glib, but apparently with musl you have to have the full path. So look at /proc/self/maps to find the full path to the loaded coreclr

* re-enable profiler tests now that they are passing

* Code review feedback

* Update rejit.cpp

4 years agoEnable cross OS DBI build (#35021)
Steve MacLean [Fri, 17 Apr 2020 19:58:26 +0000 (15:58 -0400)]
Enable cross OS DBI build (#35021)

* Enable cross OS DBI build

* Fix .gitignore

* Fix Cross OS DBI compilation issues

* Review feedback

* Cleanup dummy/twowaypipe.cpp

4 years agoAdd wasm for browser RID (#34940)
Marek Safar [Fri, 17 Apr 2020 19:33:49 +0000 (21:33 +0200)]
Add wasm for browser RID (#34940)

4 years agoDisable IPGlobalProperties_TcpActiveConnections_Succeed test on Mono/Windows (#35113)
Jan Kotas [Fri, 17 Apr 2020 18:37:32 +0000 (11:37 -0700)]
Disable IPGlobalProperties_TcpActiveConnections_Succeed test on Mono/Windows (#35113)

Fixes #35111

4 years agoUpdate VS minimum dependency (#35114)
Viktor Hofer [Fri, 17 Apr 2020 18:00:49 +0000 (20:00 +0200)]
Update VS minimum dependency (#35114)

With the net5.0 TFM change and the nuget static graph restore, we require VS >= 16.6 Preview2.

4 years agoAdds support for generating Mono named NETCore.App Runtime Packs (#34980)
Steve Pfister [Fri, 17 Apr 2020 17:46:30 +0000 (13:46 -0400)]
Adds support for generating Mono named NETCore.App Runtime Packs (#34980)

Starting with osx, we will produce a uniquely named runtime pack with Mono.  The intent is to give the sdk an easier way to identify the mono runtime.

We will now publish Microsoft.NETCore.App.Mono.Runtime.<rid>.nupg

4 years agoThrow DirectoryNotFoundException on Image.Save with bad directory (#34998)
Brooke Philpott [Fri, 17 Apr 2020 17:00:58 +0000 (13:00 -0400)]
Throw DirectoryNotFoundException on Image.Save with bad directory (#34998)

* Provide better exception when saving to non-existent directory

When saving an image to a non-existent directory, throw a DirectoryNotFoundException
vs a System.Runtime.InteropServices.ExternalException.

Fix #31367

* Change exception message to be more intuitive

Use: The directory {0} of the filename {1} does not exist.
instead of: The target directory {0} of the targetPath {1} does not exist.

Fix #31367

* Fix test on unix by using built path.

We were using a hardcoded path with backslashes. That didn't match the built path for the Assert.

* Make Test conditional as it requires GDI+

* Put directory check closer to where it's used to ensure that we
capture it from all Save variations.

* Remove trailing whitespace

* Update test to ensure it doesn't run on the .NET Framework

* Change CheckIfDirectoryExists to ThrowIfDirectoryDoesntExist
to match naming conventions for throw-style methods.

Fix #31367

* Fixes typo in test name

Fix #31367

4 years agoFix assert while logging typeload failures (#34985)
Manish Godse [Fri, 17 Apr 2020 16:11:41 +0000 (09:11 -0700)]
Fix assert while logging typeload failures (#34985)

* Fix assert while logging typeload failures

* Update src/coreclr/src/vm/clsload.cpp

keeping getTypeToken for `ELEMENT_TYPE_CLASS`

Co-Authored-By: Simon Nattress <nattress@gmail.com>
Co-authored-by: Simon Nattress <nattress@gmail.com>
4 years agoSet fetch depth to 5 for stress tests on NanoServer (#35109)
Alexander Nikolaev [Fri, 17 Apr 2020 15:30:15 +0000 (17:30 +0200)]
Set fetch depth to 5 for stress tests on NanoServer (#35109)

Increases git fetch depth for Windows NanoServer to avoid checkout failures

Fixes #33428

4 years agoMove and lint ECMA-335 Augments spec (#35095)
Joseph Musser [Fri, 17 Apr 2020 15:26:55 +0000 (11:26 -0400)]
Move and lint ECMA-335 Augments spec  (#35095)

* Move specs and rename Ecma-335-Issues.md

* Fix typos

* MD009/no-trailing-spaces

* MD012/no-multiple-blanks

* MD007/ul-indent

* MD031/blanks-around-fences

* MD032/blanks-around-lists

* MD040/fenced-code-language

* MD030/list-marker-space

* Simplify markdown code span syntax

* Update title and intro

* Fix broken markdown code span

* Link addendum doc from dotnet-standards.md

4 years agoRemove IReadyToRunMethodCodeNode interface (#35085)
Simon Nattress [Fri, 17 Apr 2020 15:24:11 +0000 (08:24 -0700)]
Remove IReadyToRunMethodCodeNode interface (#35085)

`IReadyToRunMethodCodeNode` was useful in the CoreRT repo where we had multiple kinds of method code nodes and needed a common way of setting related method data from the JIT. It's not useful in crossgen2 since we only have `MethodWithGCInfo` representing code nodes.

4 years agoMinor changes - Update specific words in mono code base to be PoliCheck/TSA compliant...
Sam Patel [Fri, 17 Apr 2020 15:21:47 +0000 (11:21 -0400)]
Minor changes - Update specific words in mono code base to be PoliCheck/TSA compliant (#35053)

* Updating some comments to align with PoliCheck rules

* one additional change

* Update src/mono/mono/mini/mini-wasm-debugger.c based on pr suggestion

Co-Authored-By: Stephen Toub <stoub@microsoft.com>
* Update w32process-unix.c based on PR suggestion

Co-authored-by: Stephen Toub <stoub@microsoft.com>
4 years agoupdated output folder from 'aforementioned' to the folder where the single library...
mrj001 [Fri, 17 Apr 2020 14:45:54 +0000 (08:45 -0600)]
updated output folder from 'aforementioned' to the folder where the single library output is found. (#34340)

4 years agofix runntinf tests with targetFramework property and -f flag (#35016)
Anirudh Agnihotry [Fri, 17 Apr 2020 14:23:03 +0000 (07:23 -0700)]
fix runntinf tests with targetFramework property and -f flag (#35016)

4 years agoAdd IR support for multireg lclVars & intrinsics (#34822)
Carol Eidt [Fri, 17 Apr 2020 13:55:53 +0000 (06:55 -0700)]
Add IR support for multireg lclVars & intrinsics (#34822)

* Add IR support for multireg lclVars & intrinsics

* PR Feedback

4 years ago[mono] iOS Test runner (#34976)
Egor Bogatov [Fri, 17 Apr 2020 12:55:41 +0000 (15:55 +0300)]
[mono] iOS Test runner (#34976)

4 years agoUpdate Microsoft.NET.HostModel to reference System.Text.Json 5.0 (#35024)
Eric Erhardt [Fri, 17 Apr 2020 12:23:26 +0000 (07:23 -0500)]
Update Microsoft.NET.HostModel to reference System.Text.Json 5.0 (#35024)

Microsoft.Extensions.DependencyModel and Microsoft.NET.HostModel are both used on .NET Framework's MSBuild by dotnet/sdk's Microsoft.NET.Build.Tasks assembly. However, they are referencing differnet versions of System.Text.Json, which is causing file load errors on .NET Framework.

Fixing this by updating Microsoft.NET.HostModel to use a 5.0 version.

Fix #35006

4 years agoResetting _waitForCompletion to null was removed from DuplexContent (#35010)
Alexander Nikolaev [Fri, 17 Apr 2020 11:52:09 +0000 (13:52 +0200)]
Resetting _waitForCompletion to null was removed from DuplexContent (#35010)

`_waitForCompletion` gets reset to null in `DuplexContent.Complete` and `Fail` which leads to race condition with `SerializeToStreamAsync`. This reset seems redundant since `_waitForCompletion` is always unconditionally initialized on each call to `SerializeToStreamAsync`. This PR removes that reset logic.

Fixes #33141

4 years agoMerge pull request #35058 from janvorli/fix-vsd-stub-nullref-handling
Jan Vorlicek [Fri, 17 Apr 2020 10:53:16 +0000 (12:53 +0200)]
Merge pull request #35058 from janvorli/fix-vsd-stub-nullref-handling

Fix VSD stub null reference handling on amd64

4 years ago[aot] Fix the support for separate aot data files. Reorder the MONO_AOT_TABLE constan...
monojenkins [Fri, 17 Apr 2020 09:41:02 +0000 (05:41 -0400)]
[aot] Fix the support for separate aot data files. Reorder the MONO_AOT_TABLE constants so they match the ordering in MonoAotFileInfo. (#35064)

Co-authored-by: vargaz <vargaz@users.noreply.github.com>
4 years agoFix an incorrect CSE case with struct retyping. (#34676)
Sergey Andreenko [Fri, 17 Apr 2020 08:37:52 +0000 (01:37 -0700)]
Fix an incorrect CSE case with struct retyping. (#34676)

* Fix old printing issues.

* add a repro test that doesn't require crossgen2.

* Check that all `ADDR` sources are marked as DONT_CSE.

* Fix text(no size) diffs found by SPMI.

* Add a question/comment.

* Update src/coreclr/src/jit/compiler.hpp

Co-Authored-By: Eugene Rozenfeld <erozen@microsoft.com>
* Delete an optimization that was not proved to be correct.

* Delete useless code.

* Revert "Fix text(no size) diffs found by SPMI."

This reverts commit cd24383210b9ed22f7ea3640005217021f9fbd63.

4 years agoFix for PInvoke behavior in composite mode (#35027)
Tomáš Rylek [Fri, 17 Apr 2020 06:50:40 +0000 (08:50 +0200)]
Fix for PInvoke behavior in composite mode (#35027)

Thanks to Fadi's help I finally identified the root problem with
Crossgen2 PInvokes in composite mode: we weren't setting the
READYTORUN_FLAG_NONSHARED_PINVOKE_STUBS flag on the component
assembly R2R headers and that's what the runtime is looking at.

I believe it's both easier and more general to fix this in the compiler
as it comes for free whereas redirecting the runtime to always look
at the composite header would requite at least an additional
indirection. Also we could theoretically use different settings for
different component assemblies even though my impression from Fadi's
detailed explanation was that we basically always want to use
non-shared PInvokes in Crossgen2.

Thanks

Tomas

4 years agoUpdate rejit.cpp
David Mason [Fri, 17 Apr 2020 06:47:40 +0000 (23:47 -0700)]
Update rejit.cpp

4 years agoCode review feedback
David Mason [Thu, 16 Apr 2020 07:07:24 +0000 (00:07 -0700)]
Code review feedback

4 years agore-enable profiler tests now that they are passing
David Mason [Wed, 15 Apr 2020 23:04:40 +0000 (16:04 -0700)]
re-enable profiler tests now that they are passing

4 years agofix alpine failures. you can dlopen a relative path in glib, but apparently with...
David Mason [Wed, 15 Apr 2020 22:52:14 +0000 (15:52 -0700)]
fix alpine failures. you can dlopen a relative path in glib, but apparently with musl you have to have the full path. So look at /proc/self/maps to find the full path to the loaded coreclr

4 years agofix issue where test was treating an HRESULT as a FunctionID
David Mason [Wed, 15 Apr 2020 09:30:04 +0000 (02:30 -0700)]
fix issue where test was treating an HRESULT as a FunctionID

4 years agoUpdate tests to work correctly when crossgenned
David Mason [Wed, 15 Apr 2020 03:03:17 +0000 (20:03 -0700)]
Update tests to work correctly when crossgenned

4 years agofix RequestReJITWithInliners for R2R modules
David Mason [Wed, 15 Apr 2020 00:30:28 +0000 (17:30 -0700)]
fix RequestReJITWithInliners for R2R modules

4 years agoprofiler tests depend on jit events so disable R2R images via profiler eventmask
David Mason [Sat, 11 Apr 2020 07:32:47 +0000 (00:32 -0700)]
profiler tests depend on jit events so disable R2R images via profiler eventmask

4 years agofix endless loop in GetActiveUdpListeners (#35078)
Tomas Weinfurt [Fri, 17 Apr 2020 04:50:14 +0000 (21:50 -0700)]
fix endless loop in GetActiveUdpListeners (#35078)

4 years agoMerge pull request #34933 from monojenkins/sync-pr-19535-from-mono
Larry Ewing [Fri, 17 Apr 2020 03:39:10 +0000 (22:39 -0500)]
Merge pull request #34933 from monojenkins/sync-pr-19535-from-mono

[wasm][debugger] Show signature for delegate, or target, if available…

4 years agoFix Http.Json serialization performance by using static options (#35040)
David Cantu [Fri, 17 Apr 2020 02:59:13 +0000 (19:59 -0700)]
Fix Http.Json serialization performance by using static options (#35040)

4 years agoGet the IUnknown identity of COM instance for global ComWrappers (#35032)
Elinor Fung [Fri, 17 Apr 2020 02:20:27 +0000 (19:20 -0700)]
Get the IUnknown identity of COM instance for global ComWrappers (#35032)

4 years agoJIT: fix recursive inline checking (#35020)
Andy Ayers [Thu, 16 Apr 2020 22:39:20 +0000 (15:39 -0700)]
JIT: fix recursive inline checking (#35020)

We were not setting `m_Code` in the root inline context, and so were
sometimes allowing one level of recursive inlining.

4 years ago[jit] Add support for fconv.ovf.*.un opcodes (#34949)
Vlad Brezae [Thu, 16 Apr 2020 22:38:34 +0000 (01:38 +0300)]
[jit] Add support for fconv.ovf.*.un opcodes (#34949)

* [jit] Handle fconv_ovf_un opcodes

We handle them the same way as non _un versions, by doing a float to int64 conversion followed by a simple integer conversion to the final size.

* [jit] Remove no longer needed emulation

We no longer need to emulate fconv_ovf_u8_un and rconv_ovf_u8_un since we reuse the mechanism for non _un versions (which uses just the emulation for fconv_ovf_u8 and rconv_ovf_u8)

Partly reverts https://github.com/mono/mono/commit/de5dca22649ae581085863b0935f94eff4483e55.

* Enable some mono tests

* [jit] Properly handle conv.r.un applied to r4

Fixes src/coreclr/tests/src/JIT/Regression/VS-ia64-JIT/V2.0-Beta2/b309576/bug2.il which was silently failing before

4 years agoPR Feedback
Carol Eidt [Thu, 16 Apr 2020 21:54:37 +0000 (14:54 -0700)]
PR Feedback

4 years agoAllow known values for HttpHeaderType.Custom in KnownHeaders (#35003)
Stephen Toub [Thu, 16 Apr 2020 21:42:44 +0000 (17:42 -0400)]
Allow known values for HttpHeaderType.Custom in KnownHeaders (#35003)

4 years agoAdd OSPlatform.Browser and Architecture.Wasm (#34781)
Larry Ewing [Thu, 16 Apr 2020 20:55:45 +0000 (15:55 -0500)]
Add OSPlatform.Browser and Architecture.Wasm (#34781)

4 years ago[wasm][debugger] Show signature for delegate, or target, if available…
radical [Thu, 16 Apr 2020 19:37:50 +0000 (19:37 +0000)]
[wasm][debugger] Show signature for delegate, or target, if available…

… (#19505)

* [wasm][debugger] Show signature for delegate, or target, if available

- As object properties, we return a `Target` which has the signature of
the delegate target.

Fixes https://github.com/mono/mono/issues/19382

* [wasm][debugger] Some tidying up

* [wasm][debugger] Remove unused `sig_desc`

* [wasm][debugger] Simplify code, avoid extra allocations

.. as suggested by @lewing

(cherry picked from commit 4eca12e794764da1a0646e77af5b8c60a2e2767a)

4 years agoRemove explicit null check for VSD from JIT for 64 bit targets
Jan Vorlicek [Thu, 16 Apr 2020 19:26:30 +0000 (21:26 +0200)]
Remove explicit null check for VSD from JIT for 64 bit targets

4 years agoFix missing semicolon
Jan Vorlicek [Thu, 16 Apr 2020 19:16:56 +0000 (21:16 +0200)]
Fix missing semicolon

4 years agoMake the -Wsometimes-uninitialized into an error. (#34965)
Zoltan Varga [Thu, 16 Apr 2020 16:32:32 +0000 (12:32 -0400)]
Make the -Wsometimes-uninitialized into an error. (#34965)

4 years agoFix swapped Unix and Windows instruction codes
Jan Vorlicek [Thu, 16 Apr 2020 15:56:05 +0000 (17:56 +0200)]
Fix swapped Unix and Windows instruction codes

4 years ago[wasm][debugger] Fix typo and silence output (#35041)
monojenkins [Thu, 16 Apr 2020 15:53:08 +0000 (11:53 -0400)]
[wasm][debugger] Fix typo and silence output (#35041)

Co-authored-by: lewing <lewing@users.noreply.github.com>
4 years ago[debugger] Remove assert when the DebuggerTypeProxy cannot be instantiated (#34966)
monojenkins [Thu, 16 Apr 2020 13:17:12 +0000 (09:17 -0400)]
[debugger] Remove assert when the DebuggerTypeProxy cannot be instantiated (#34966)

Remove the assert because we don't need to stop the debug if we cannot create the object when calling the constructor using invoke_method, if it's a DebuggerTypeProxy, we are not able to show the value of the DebuggerTypeProxy, but we still can show the Raw View, if it's not the case of DebuggerTypeProxy, we just cannot evaluate this expression, but we can continue the debug session.

Fix mono/mono#19492

Co-authored-by: thaystg <thaystg@users.noreply.github.com>
4 years agoCreating a runtime pack artifacts directory in the libraries build (#34662)
Mitchell Hwang [Thu, 16 Apr 2020 12:49:20 +0000 (08:49 -0400)]
Creating a runtime pack artifacts directory in the libraries build (#34662)

This change populates a runtime pack directory structure in artifcats/bin.  This is so that we can support running libraries tests for iOS and Android.

4 years agoAdd regression test
Jan Vorlicek [Thu, 16 Apr 2020 09:39:44 +0000 (11:39 +0200)]
Add regression test

4 years agoRemove double lookups for virtual stubs
Jan Vorlicek [Thu, 16 Apr 2020 09:09:37 +0000 (11:09 +0200)]
Remove double lookups for virtual stubs

4 years agoMake the ajdustment unconditional for all architectures
Jan Vorlicek [Thu, 16 Apr 2020 09:03:42 +0000 (11:03 +0200)]
Make the ajdustment unconditional for all architectures

4 years agoFix null reference handling in VSD stubs on amd64
Jan Vorlicek [Thu, 16 Apr 2020 08:53:48 +0000 (10:53 +0200)]
Fix null reference handling in VSD stubs on amd64

When null "this" pointer is passed to the VSD dispatch and resolve
stubs on amd64, it is not converted to NullReferenceException and it
generates AccessViolationException instead, tearing down the process.
This happens due to the fact that AdjustContextForVirtualStub always
returns FALSE on amd64. It behaves correctly on ARM, x86 and ARM64.
This issue has been present at least since .NET Framework 4.5.

This change fixes it by implementing the AdjustContextForVirtualStub for
amd64 too. I've also found that we were doing this adjustment for ARM
and x86 only at some places while ARM64 needs it too. So I've made it
unconditional for all architectures at all places.