platform/upstream/dotnet/runtime.git
4 years agoFix issue #36999 (#43723)
Nikolay-parhimovich [Fri, 23 Oct 2020 15:01:26 +0000 (18:01 +0300)]
Fix issue #36999 (#43723)

* Created two resources string for exceptions.
Replaced static strings with resource.

* Fixed formatting.

Co-authored-by: Nikolay-parhimovich <>
4 years agoSuppress trim analysis warnings inside reflection implementation (#43594)
Vitek Karas [Fri, 23 Oct 2020 14:52:38 +0000 (07:52 -0700)]
Suppress trim analysis warnings inside reflection implementation (#43594)

See the Justification for each of the added suppressions.

Also annotate GetMethodBody as potentially dangerous with trimming.
Trimming can change IL of a method (can remove branches, remove local variables, change some isntructions, ...) - as such accessing the actual body of a method is potentially dangerous.

4 years agoAdd link to Discord server (#43765)
Marek Safar [Fri, 23 Oct 2020 14:49:27 +0000 (16:49 +0200)]
Add link to Discord server (#43765)

* Add link to Discord server

* Update README.md

Co-authored-by: Stephen Toub <stoub@microsoft.com>
Co-authored-by: Stephen Toub <stoub@microsoft.com>
4 years agoRemove Common Extensions HashCodeCombiner (#43454)
Eric Erhardt [Fri, 23 Oct 2020 14:34:24 +0000 (09:34 -0500)]
Remove Common Extensions HashCodeCombiner (#43454)

* Remove Common Extensions HashCodeCombiner

Fix #33259

* Add unit tests for FilePatternMatch.GetHashCode.

4 years agoUse non-generic TaskCompletionSource where possible in System.Threading.Channels...
Daniel Marbach [Fri, 23 Oct 2020 13:41:47 +0000 (15:41 +0200)]
Use non-generic TaskCompletionSource where possible in System.Threading.Channels (#40953)

* Use non-generic TaskCompletionSource where possible

* Apply suggestions from code review

Co-authored-by: Stephen Toub <stoub@microsoft.com>
Co-authored-by: Stephen Toub <stoub@microsoft.com>
4 years ago[master] Update dependencies from mono/linker (#43698)
dotnet-maestro[bot] [Fri, 23 Oct 2020 13:41:13 +0000 (13:41 +0000)]
[master] Update dependencies from mono/linker (#43698)

[master] Update dependencies from mono/linker

4 years agoFree allocated buffer after UTF8 encode on FreeBSD (#43431)
Adeel Mujahid [Fri, 23 Oct 2020 13:34:50 +0000 (16:34 +0300)]
Free allocated buffer after UTF8 encode on FreeBSD (#43431)

* Free allocated buffer after UTF8 encode on FreeBSD

* Address PR feedback

4 years agoFix NegotiateStream handling of EOF (#43739)
Stephen Toub [Fri, 23 Oct 2020 13:10:15 +0000 (09:10 -0400)]
Fix NegotiateStream handling of EOF (#43739)

In my refactoring of NegotiateStream to use async/await, I broke its handling of EOF, with it throwing an exception instead of returning 0.  This fixes it to correctly handle EOF.

4 years agoAllow WasmAppBuilder to run after the publish step. Change the (#43742)
Zoltan Varga [Fri, 23 Oct 2020 11:53:57 +0000 (07:53 -0400)]
Allow WasmAppBuilder to run after the publish step. Change the (#43742)

wasm sample to use publish.

4 years ago[mono] Use CMAKE_CURRENT_SOURCE_DIR instead of CMAKE_SOURCE_DIR (#43715)
imhameed [Fri, 23 Oct 2020 10:42:48 +0000 (03:42 -0700)]
[mono] Use CMAKE_CURRENT_SOURCE_DIR instead of CMAKE_SOURCE_DIR (#43715)

CLion creates a directory named ".idea" as a sibling to the top-level
CMakeLists.txt that describes the project; with src/mono, git clean -dXf
will delete src/mono/.idea because ".idea/" is an ignored pattern in
.gitignore.

One workaround is to create an out-of-tree CMakeLists.txt that contains
nothing but add_directory(relative/path/to/src/mono), but this changes
the value of CMAKE_SOURCE_DIR to something other than what our CMake
build files expect.

4 years agoAdd missing opcodes to k_rgnStackPushes (#42246)
Kevin Gosse [Fri, 23 Oct 2020 09:42:37 +0000 (11:42 +0200)]
Add missing opcodes to k_rgnStackPushes (#42246)

The rewriter defined two extra opcodes, CEE_COUNT and CEE_SWITCH_ARG, but does not define them in the k_rgnStackPushes array. This can cause out-of-bounds reads when computing the value of maxstack.

4 years agoFix the signature of Interop.Sys.Log () to match the native signature. (#43744)
Zoltan Varga [Fri, 23 Oct 2020 08:37:12 +0000 (04:37 -0400)]
Fix the signature of Interop.Sys.Log () to match the native signature. (#43744)

Signature mismatches cause errors on some platforms like wasm.

4 years agoDisable test against https://github.com/dotnet/runtime/issues/43754 (#43755)
Jan Kotas [Fri, 23 Oct 2020 08:33:28 +0000 (01:33 -0700)]
Disable test against https://github.com/dotnet/runtime/issues/43754 (#43755)

4 years agoMove Thread PNSE check to managed to cut more dependencies (#43730)
Marek Safar [Fri, 23 Oct 2020 07:45:44 +0000 (09:45 +0200)]
Move Thread PNSE check to managed to cut more dependencies (#43730)

4 years agoFixes to allow using OS-provided threadpool (#43726)
Jan Kotas [Fri, 23 Oct 2020 06:42:27 +0000 (23:42 -0700)]
Fixes to allow using OS-provided threadpool (#43726)

Backport from dotnet/runtimelab:NativeAOT

4 years agoTrim quoted file names passed to Crossgen2 (#43746)
Anton Lapounov [Fri, 23 Oct 2020 06:26:31 +0000 (23:26 -0700)]
Trim quoted file names passed to Crossgen2 (#43746)

4 years agoMake DebugDirectoryBuilder.AddCodeViewEntry public (#43267)
hrrrrustic [Fri, 23 Oct 2020 04:27:00 +0000 (00:27 -0400)]
Make DebugDirectoryBuilder.AddCodeViewEntry public (#43267)

4 years agoIncrease Hosting tests timeout (#43695)
Eric Erhardt [Fri, 23 Oct 2020 03:06:04 +0000 (22:06 -0500)]
Increase Hosting tests timeout (#43695)

* Increase Hosting tests timeout

There are some environments (checked CoreCLR, no tiered compilation) where the current timeout is insufficient. Increasing the timeout so the tests don't fail in these environments.

Fix #43389

4 years agoChange list-processed to ps (#42293) (#42297)
SUN Guoyun [Fri, 23 Oct 2020 01:15:44 +0000 (09:15 +0800)]
Change list-processed to ps (#42293) (#42297)

Co-authored-by: Sunguoyun <sunguoyun@loongson.cn>
4 years ago[jit] Fix gsharedvt constrained calls to Object.GetType () under netcore. (#43729)
Zoltan Varga [Thu, 22 Oct 2020 23:11:19 +0000 (19:11 -0400)]
[jit] Fix gsharedvt constrained calls to Object.GetType () under netcore. (#43729)

* [jit] Fix gsharedvt constrained calls to Object.GetType () under netcore.

Fixes https://github.com/dotnet/runtime/issues/35674.

* Update src/mono/mono/mini/jit-icalls.c

Co-authored-by: Aleksey Kliger (λgeek) <akliger@gmail.com>
Co-authored-by: Aleksey Kliger (λgeek) <akliger@gmail.com>
4 years agoAllow dynamic code sample to compile on v3.0-5.0 (#43703)
Steve Harter [Thu, 22 Oct 2020 21:41:14 +0000 (16:41 -0500)]
Allow dynamic code sample to compile on v3.0-5.0 (#43703)

4 years agogc: shorten background thread name to fit Linux name limit (#43679)
Tom Deseyn [Thu, 22 Oct 2020 20:09:11 +0000 (22:09 +0200)]
gc: shorten background thread name to fit Linux name limit (#43679)

* gc: shorten background thread name to fit Linux name limit

4 years agoUpdate "Input Image Architectures" table in r2rdump README.md (#43727)
Egor Chesakov [Thu, 22 Oct 2020 17:04:15 +0000 (10:04 -0700)]
Update "Input Image Architectures" table in r2rdump README.md (#43727)

4 years agoFix perf issue in System.Diagnostics.Activity (#43710)
Mikel Blanchard [Thu, 22 Oct 2020 16:43:25 +0000 (09:43 -0700)]
Fix perf issue in System.Diagnostics.Activity (#43710)

4 years agoFix ildasm of certain floating-point numbers (#43673)
Bruce Forstall [Thu, 22 Oct 2020 16:40:50 +0000 (09:40 -0700)]
Fix ildasm of certain floating-point numbers (#43673)

Change #42848 altered comments to print numbers in comments in
little-endian format, but went too far and changed two places
that print out numbers outside of comments that are later parsed
by ilasm in round-trip testing.

Fixes #43672

4 years agoBring back missing Exit_Failure case (#43665)
Bruce Forstall [Thu, 22 Oct 2020 16:05:33 +0000 (09:05 -0700)]
Bring back missing Exit_Failure case (#43665)

This script label and code was removed in a previous change
even though it is still required. Bring it back.

4 years agoAlign MailAddress.GetHashCode with Equals (#43573)
Bar Arnon [Thu, 22 Oct 2020 14:07:09 +0000 (17:07 +0300)]
Align MailAddress.GetHashCode with Equals (#43573)

4 years agoFix issue #43714. Guid fallback for BigEndian had icorrect offsets. (#43718)
Roman Bukin [Thu, 22 Oct 2020 13:44:47 +0000 (16:44 +0300)]
Fix issue #43714. Guid fallback for BigEndian had icorrect offsets. (#43718)

4 years agoSlim down Path::Combine by removing dependency on ValueTuple`8 (#43582)
Marek Safar [Thu, 22 Oct 2020 10:54:18 +0000 (12:54 +0200)]
Slim down Path::Combine by removing dependency on ValueTuple`8 (#43582)

Co-authored-by: Jan Kotas <jkotas@microsoft.com>
4 years agoExtend allowed Task.Delay/CTS TimeSpan values to match Timer (#43708)
Stephen Toub [Thu, 22 Oct 2020 02:13:12 +0000 (22:13 -0400)]
Extend allowed Task.Delay/CTS TimeSpan values to match Timer (#43708)

For some reason, Task.Delay(TimeSpan, ...) and CancellationTokenSource.CancelAfter(TimeSpan) cut off the max allowed timeout at int.MaxValue milliseconds, whereas Timer's TimeSpan support (which is used under the covers) goes all the way to UInt32.MaxValue - 2.  This changes Task/CancellationTokenSource to match, effectively doubling the allowed length of the timeouts.

4 years agoReplace command-line parser for Crossgen2 (#43655)
Anton Lapounov [Thu, 22 Oct 2020 01:35:14 +0000 (18:35 -0700)]
Replace command-line parser for Crossgen2 (#43655)

Switch back to the old command-line parser for Crossgen2 to improve performance of parsing arguments.

4 years ago[llvm] Fix some simd issues. (#43647)
Zoltan Varga [Thu, 22 Oct 2020 00:39:09 +0000 (20:39 -0400)]
[llvm] Fix some simd issues. (#43647)

* [llvm] Add support for MONO_TYPE_FTNPTR.

* [llvm] Fix support for some SIMD intrinsics.

* Always use OP_SSE41_ROUNDS with 2 arguments, JIT opcodes can't
  have optional arguments.
* Convert arguments to intrinsic calls, sometimes they have
  slighly different pointer or vector types.

* [jit] Refactor the SIMD intrinsics handling code to share more code.

Avoid emitting LLVM intrinsics which are not not enabled since it
would cause llc to fail.

4 years agoFix and test crossgen2 on arm and x86 (#42998)
David Wrighton [Wed, 21 Oct 2020 21:45:10 +0000 (14:45 -0700)]
Fix and test crossgen2 on arm and x86 (#42998)

Fix last issues preventing the Pri0 tests from passing under crossgen2 for arm and x86
- Add support for stackprobe helper on arm32
- Fix field layout for x86 structures that contain long enums
  - Add test suite for these enum scenarios
- Report the same alignment info to the jit for crossgen2 based compilation as was done in the core runtime

Also enable testing targetting x86 and arm

4 years agoFix fallthrough cases in portable thread pool change (#43701)
Koundinya Veluri [Wed, 21 Oct 2020 20:16:37 +0000 (16:16 -0400)]
Fix fallthrough cases in portable thread pool change (#43701)

4 years agoFix crossgen2 armel build (#42811)
t-mustafin [Wed, 21 Oct 2020 18:17:17 +0000 (21:17 +0300)]
Fix crossgen2 armel build (#42811)

Build fails with libjitinterface_armel.so and libclrjit_unix_armel_x64.so was not found after #41126.

Signed-off-by: Timur <t.mustafin@partner.samsung.com>
4 years agoCode sample for supporting dynamic objects (#42097)
Steve Harter [Wed, 21 Oct 2020 17:53:45 +0000 (12:53 -0500)]
Code sample for supporting dynamic objects (#42097)

4 years agoDelete NetEventSource.Fail (#43579)
Stephen Toub [Wed, 21 Oct 2020 17:33:59 +0000 (13:33 -0400)]
Delete NetEventSource.Fail (#43579)

At some point some Debug.Asserts/Fails were replaced by this NetEventSource.Fail helper, which both Debug.Fails and fires an EventSource event.  But asserts in our code base are intended for things that should never happen, and we needn't be emitting events for them (if we did want to emit events for them, we'd need to tackle the other ~20,000 Debug.Assert/Fails in the codebase.

I've deleted NetEventSource.Fail, and fixed up the call sites.  Some were simply replaced by Debug.Assert/Fail.  Some were deleted entirely, when from code inspection it looked like they could actually be hit, but were guarded by a check for the event source being enabled and thus were unlikely to have been triggered in our previous testing.  Etc.

4 years agoMigrate coreclr's worker thread pool to be able to use the portable thread pool in...
Koundinya Veluri [Wed, 21 Oct 2020 17:18:24 +0000 (13:18 -0400)]
Migrate coreclr's worker thread pool to be able to use the portable thread pool in opt-in fashion (#38225)

- Enables using the portable thread pool with coreclr as opt-in. Change is off by default for now, and can be enabled with COMPlus_ThreadPool_UsePortableThreadPool=1. Once it's had bake time and seen to be stable, at a reasonable time in the future the config flag would ideally be removed and the relevant parts of native implementation deleted.
- The IO thread pool is not being migrated in this change, and remains on the native side
- My goal was to get compatible behavior, compatible with diagnostics tools, and similar perf to the native implementation in coreclr. Tried to avoid changing scheduling behavior, behavior of heuristics, etc., compared with that implementation.
- The eventual goal is to have one mostly managed thread pool implementation that can be shared between runtimes, to ease maintenance going forward

Commit descriptions:
- "Add dependencies"
  - Ported LowLevelLock from CoreRT, and moved LowLevelSpinWaiter to shared. Since we support Thread.Interrupt(), they were necessary in the wait subsystem in CoreRT partly to support that, and were also used in the portable thread pool implementation where a pending thread interrupt on a thread pool thread would otherwise crash the process. Interruptible waits are already used in the managed side of the thread pool in the queue implementations. It may be reasonable to ignore the thread interrupt problem and suggest that it not be used on thread pool threads, but for now I just brought in the dependencies to keep behavior consistent with the native implementation.
- "Add config var"
  - Added config var COMPlus_ThreadPool_UsePortableThreadPool (disabled by default for now)
  - Flowed the new config var to the managed side and set up a mechanism to flow all of the thread pool config vars
  - Removed debug-only config var COMPlus_ThreadpoolTickCountAdjustment, which didn't seem to be too useful
  - Specialized native and managed thread pool paths based on the config var. Added assertions to paths that should not be reached depending on the config var.
- "Move portable RegisteredWaitHandle implementation to shared ThreadPool.cs"
  - Just moved the portable implementation, no functional changes. In preparation for merging the two implementations.
- "Merge RegisteredWaitHandle implementations"
  - Merged implementations of RegisteredWaitHandle using the portable version as the primary and specializing small parts of it for coreclr
  - Fixed PortableThreadPool's registered waits to track SafeWaitHandles instead of WaitHandles similarly to the native implementation. The SafeWaitHandle in a WaitHandle can be modified, so it is retrieved once and reused thereafter. Also added/removed refs for the SafeWaitHandles that are registered.
- "Separate portable-only portion of RegisteredWaitHandle"
  - Separated RegisteredWaitHandle.UnregisterPortable into a different file, no functional changes. Those paths reference PortableThreadPool, which is conditionally included unlike ThreadPool.cs. Just for consistency such that the new file can be conditionally included similarly to PortableThreadPool.
- "Fix timers, tiered compilation, introduced time-sensitive work item queue to simulate coreclr behavior"
  - Wired work items queued from the native side (appdomain timer callback, tiered compilation background work callback) to queue them into the managed side
  - The timer thread calls into managed code to queue the callback
  - Some tiered compilation work item queuing paths cannot call managed code, so used a timer with zero due time instead
  - Added a queue of "time-sensitive" work items to the managed side to mimic how work items queued from the native side ran previously. In particular, if the global queue is backed up, when using the native thread pool the native work items still run ahead of them periodically (based on the Dispatch quantum). Potentially they could be queued into the global queue but if it's backed up it can potentially significantly and perhaps artificially delay the appdomain timer callback and the tiering background jitting. I didn't want to change the behavior in an observable (and potentially bad) way here for now, a good time to revisit this would be when IO completion handling is added to the portable thread pool, then the native work items could be handled somewhat similarly.
- "Implement ResetThreadPoolThread, set thread names for diagnostics"
  - Aside from that, setting the thread names (at OS level) allows debuggers to identify the threads better as before. For threads that may run user code, the thread Name property is kept as null as before, such that it may be set without exception.
- "Cache-line-separate PortableThreadPool._numRequestedWorkers similarly to coreclr"
  - Was missed before, separated it for consistency
- "Post wait completions to the IO completion port on Windows for coreclr, similarly to before"
  - On Windows, wait completions are queued to the IO thread pool, which is still implemented on the native side. On Unixes, they are queued to the global queue.
- "Reroute managed gate thread into unmanaged side to perform gate activites, don't use unmanaged gate thread"
  - When the config var is enabled, removed the gate thread from the native side. Instead, the gate thread on the managed side calls into the native side to perform gate activities for the IO completion thread pool, and returns a value to indicate whether the gate thread is still necessary.
  - Also added a native-to-managed entry point to request the gate thread to run for the IO completion thread pool
- "Flow config values from CoreCLR to the portable thread pool for compat"
  - Flowed the rest of the thread pool config vars to the managed side, such that COMPlus variables continue to work with the portable thread pool
  - Config var values are stored in AppContext, made the names consistent for supported and unsupported values
- "Port - ..." * 3
  - Ported a few fixes that did not make it into the portable thread pool implementation
- "Fix ETW events"
  - Fixed the EventSource used by the portable thread pool, added missing events
  - For now, the event source uses the same name and GUID as the native side. It seems to work for now for ETW, we may switch to a separate provider (along with updating tools) before enabling the portable thread pool by default.
  - For enqueue/dequeue events, changed to use the object's hash code as the work item identifier instead of the pointer since the pointer may change between enqueue and dequeue
- "Fix perf of counts structs"
  - Structs used for multiple counts with interlocked operations were implemented with explicit struct layout and field offsets. The JIT seems to generate stack-based code for such structs and it was showing up as higher overhead in perf profiles compared to the equivalent native implementation. Slower code in compare-exchange loops can cause a larger gap of time between the read and the compare-exchange, which can also cause higher contention.
  - Changed the structs to use manual bit manipulation instead, and microoptimized some paths. The code is still not as good as that generated by C++, but it seems to perform similarly based on perf profiles.
  - Code size also improved in many cases, for example one of the larger differences was in MaybeAddWorkingWorker(), which decreased from 585 bytes to 382 bytes and with far fewer stack memory operations
- "Fix perf of dispatch loop"
  - Just some minor tweaks as I was looking at perf profiles and code of Dispatch()
- "Fix perf of ThreadInt64PersistentCounter"
  - The implementation used to count completed work items was using `ThreadLocal<T>`, which turned out to be too slow for that purpose according to perf profiles
  - Changed it to rely on the user of the component to provide an object that tracks the count, which the user of the component would obtain from a ThreadStatic field
  - Also removed the thread-local lookup per iteration in one of the hot paths in Dispatch() and improved inlining
- "Miscellaneous perf fixes"
  - A few more small tweaks as I was looking at perf profiles and code
  - In ConcurrentQueue, added check for empty into the fast path
  - For the portable thread pool, updated to trigger the worker thread Wait event after the short spin-wait completes and before actually waiting, the event is otherwise too verbose when profiling and changes performance characteristics
  - Cache-line-separated the gate thread running state as is done in the native implementation
  - Accessing PortableThreadPool.ThreadPoolInstance multiple times was generating less than ideal code that was noticeable in perf profiles. Tried to avoid it especially in hot paths, and in some cases where unnecessary for consistency if nothing else.
  - Removed an extra call to Environment.TickCount in Dispatch() per iteration
  - Noticed that a field that was intended to be cache-line-separated was not actually being separated, see https://github.com/dotnet/runtime/issues/38215, fixed
- "Fix starvation heuristic"
  - Described in comment
- "Implement worker tracking"
  - Implemented the equivalent in the portable thread pool along with raising the relevant event
- "Use smaller stack size for threads that don't run user code"
  - Using the same stack size as in the native side for those threads
- "Note some SOS dependencies, small fixes in hill climbing to make equivalent to coreclr"
  - Corresponds with PR that updates SOS: https://github.com/dotnet/diagnostics/pull/1274
  - Also fixed a couple of things to work similarly to the native implementation
- "Port some tests from CoreRT"
  - Also improved some of the tests
- "Fail-fast in thread pool native entry points specific to thread pool implementations based on config"
  - Scanned all of the managed-to-native entry points from the thread pool and thread-entry functions, and promoted some assertions to be verified in all builds with fail-fast. May help to know in release builds when a path that should not be taken is taken and to avoid running further along that path.
- "Fix SetMinThreads() and SetMaxThreads() to return true only when both changes are successful with synchronization"
  - These are a bit awkward when the portable thread pool is enabled, because they should return true only when both changes are valid and return false without making any changes otherwise, and since the worker thread pool is on the managed side and IO thread pool is on the native side
  - Added some managed-to-native entry points to allow checking validity before making the changes, all under a lock taken by the managed side
- "Fix registered wait removals for fairness since there can be duplicate system wait objects in the wait array"
  - Described in comment
- "Allow multiple DotNETRuntime event providers/sources in EventPipe"
  - Temporary change to EventPipe to be able to get events from dotnet-trace
  - For now, the event source uses the same name and GUID as the native side. It seems to work for now for ETW, and with this change it seems to work with EventPipe for getting events. Subscribing to the NativeRuntimeEventSource does not get thread pool events yet, that is left for later. We may switch to a separate provider (along with updating tools) before enabling the portable thread pool by default, as a long-term solution.
- "Fix registered wait handle timeout logic in the wait thread"
  - The timeout logic was comparing against how long the last wait took and was not timing out waits sometimes, fixed to consider the total time since the last reset of timeout instead
- "Fix Browser build"
  - Updated the Browser-specific thread pool variant based on the other changes

Corresponding PR to update SOS: https://github.com/dotnet/diagnostics/pull/1274
Fixes https://github.com/dotnet/runtime/issues/32020

4 years agoAdd test leg to the PR build to run libraries tests on Android devices (#42209)
Jo Shields [Wed, 21 Oct 2020 16:47:27 +0000 (12:47 -0400)]
Add test leg to the PR build to run libraries tests on Android devices (#42209)

The on-device version of https://github.com/dotnet/runtime/pull/37585

Co-authored-by: Premek Vysoky <premek.vysoky@microsoft.com>
Co-authored-by: Santiago Fernandez Madero <safern@microsoft.com>
4 years ago[Android] Add AndroidAppBuilder pkgproj for Android sample (#43216)
Mitchell Hwang [Wed, 21 Oct 2020 16:45:57 +0000 (12:45 -0400)]
[Android] Add AndroidAppBuilder pkgproj for Android sample (#43216)

In preparation to bring mono samples to `dotnet/samples`, files that are most likely to change will be packaged into a nuget package to be downloaded and consumed on the `dotnet/samples` end rather than mirroring changes.

This PR expands the process that created the NuGet package for `Microsoft.NETCore.BrowserDebugHost.Transport` to build a NuGet package for the Android sample.

Co-authored-by: Mitchell Hwang <mitchell.hwang@microsoft.com>
4 years agoRemove non-cmake build support from mono.proj. (#43678)
Zoltan Varga [Wed, 21 Oct 2020 16:37:00 +0000 (12:37 -0400)]
Remove non-cmake build support from mono.proj. (#43678)

4 years agoUpdate steps in debugging instruction of CLR (#43557)
Huo Yaoyuan [Wed, 21 Oct 2020 16:08:53 +0000 (00:08 +0800)]
Update steps in debugging instruction of CLR (#43557)

* Update CLR debugging instruction steps.

* Use suggested BCL path

Co-authored-by: Jan Vorlicek <janvorli@microsoft.com>
* Mention the usage cases of CORE_LIBRARIES.

Co-authored-by: Jan Vorlicek <janvorli@microsoft.com>
4 years agoRyuJIT: Don't emit null checks for constant strings (#37245)
Egor Bogatov [Wed, 21 Oct 2020 15:51:54 +0000 (18:51 +0300)]
RyuJIT: Don't emit null checks for constant strings (#37245)

* Fold "ldstr ==/!== null" (mikedn's PR)

* Formatting

* check IsUnsigned for GT_GT

* Address feedback

4 years ago[master] Update dependencies from mono/linker dotnet/arcade dotnet/xharness dotnet...
dotnet-maestro[bot] [Wed, 21 Oct 2020 15:43:28 +0000 (17:43 +0200)]
[master] Update dependencies from mono/linker dotnet/arcade dotnet/xharness dotnet/llvm-project (#43583)

* Update dependencies from https://github.com/dotnet/arcade build 20201015.7

Microsoft.DotNet.Build.Tasks.Feed , Microsoft.DotNet.Build.Tasks.Packaging , Microsoft.DotNet.Build.Tasks.SharedFramework.Sdk , Microsoft.DotNet.Build.Tasks.TargetFramework.Sdk , Microsoft.DotNet.CodeAnalysis , Microsoft.DotNet.GenAPI , Microsoft.DotNet.GenFacades , Microsoft.DotNet.XUnitExtensions , Microsoft.DotNet.Arcade.Sdk , Microsoft.DotNet.Helix.Sdk , Microsoft.DotNet.RemoteExecutor , Microsoft.DotNet.VersionTools.Tasks , Microsoft.DotNet.XUnitConsoleRunner , Microsoft.DotNet.ApiCompat
 From Version 6.0.0-beta.20514.1 -> To Version 6.0.0-beta.20515.7

* Update dependencies from https://github.com/dotnet/xharness build 20201019.2

Microsoft.DotNet.XHarness.CLI , Microsoft.DotNet.XHarness.TestRunners.Xunit
 From Version 1.0.0-prerelease.20516.1 -> To Version 1.0.0-prerelease.20519.2

* Update dependencies from https://github.com/mono/linker build 20201020.1

Microsoft.NET.ILLink.Tasks
 From Version 6.0.0-alpha.1.20516.1 -> To Version 6.0.0-alpha.1.20520.1

* Update dependencies from https://github.com/mono/linker build 20201020.2

Microsoft.NET.ILLink.Tasks
 From Version 6.0.0-alpha.1.20516.1 -> To Version 6.0.0-alpha.1.20520.2

* Update dependencies from https://github.com/dotnet/arcade build 20201016.5

Microsoft.DotNet.Build.Tasks.Feed , Microsoft.DotNet.Build.Tasks.Packaging , Microsoft.DotNet.Build.Tasks.SharedFramework.Sdk , Microsoft.DotNet.Build.Tasks.TargetFramework.Sdk , Microsoft.DotNet.CodeAnalysis , Microsoft.DotNet.GenAPI , Microsoft.DotNet.GenFacades , Microsoft.DotNet.XUnitExtensions , Microsoft.DotNet.Arcade.Sdk , Microsoft.DotNet.Helix.Sdk , Microsoft.DotNet.RemoteExecutor , Microsoft.DotNet.VersionTools.Tasks , Microsoft.DotNet.XUnitConsoleRunner , Microsoft.DotNet.ApiCompat
 From Version 6.0.0-beta.20514.1 -> To Version 6.0.0-beta.20516.5

* Update dependencies from https://github.com/dotnet/llvm-project build 20201019.1

runtime.linux-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.win-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.win-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.osx.10.12-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.osx.10.12-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.linux-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.linux-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.linux-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk
 From Version 9.0.1-alpha.1.20512.1 -> To Version 9.0.1-alpha.1.20519.1

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>
4 years agoFix incremental build of tasks.proj for mobile (#43674)
Alexander Köplinger [Wed, 21 Oct 2020 15:40:26 +0000 (17:40 +0200)]
Fix incremental build of tasks.proj for mobile (#43674)

* Fix incremental build of tasks.proj for mobile

The semaphore file that is used as the input for deciding whether to rebuild tasks.proj wasn't properly taking the mobile task projects into account.
This resulted in e.g. WasmAppBuilder not being built if you built for desktop before, resulting in a build error.

We now use the conditioned project references as an input instead of globbing through all nested projects.

Co-authored-by: Viktor Hofer <viktor.hofer@microsoft.com>
4 years ago[mono] Copy image data with AssemblyLoadContext.LoadFromStream (#43592)
Ryan Lucia [Wed, 21 Oct 2020 15:32:53 +0000 (11:32 -0400)]
[mono] Copy image data with AssemblyLoadContext.LoadFromStream (#43592)

We don't actually pin the byte array, so it must be copied or it can be overwritten once we run a GC on the LOH.

Fixes https://github.com/dotnet/runtime/issues/43402

Tested manually that it fixes the issue using the associated repro. This isn't really something that lends itself to a test, so that's the best I can do.

4 years agoAdd public JsonElement.ParseValue() and TryParseValue() (#43601)
Steve Harter [Wed, 21 Oct 2020 14:50:02 +0000 (09:50 -0500)]
Add public JsonElement.ParseValue() and TryParseValue() (#43601)

4 years agoAdd test leg to the PR build to run libraries tests on Android emulators (#37585)
Přemek Vysoký [Wed, 21 Oct 2020 14:29:45 +0000 (16:29 +0200)]
Add test leg to the PR build to run libraries tests on Android emulators (#37585)

4 years agoDisable / fix failing test in runincontext testing (#43663)
Jan Vorlicek [Wed, 21 Oct 2020 13:53:43 +0000 (15:53 +0200)]
Disable / fix failing test in runincontext testing (#43663)

* Disable all profiler tests since they launch a secondary process
  and process launch creates an infinite event loop in the
  SocketAsyncEngine on Linux. Since runincontext loads even
  framework assemblies into the unloadable context, locals in this
  loop prevent unloading.
  The tests were working before Process.Start moved to using sockets.
* Fix the multifoldertest to work under runincontext - the shell
  script generated from the .csproj was passing an absolute path
  for the multifolder.dll to the runincontext.sh/cmd instead of
  a relative path that is used in all other tests and that the
  runincontext expects.

4 years agoEnable implicit fallthrough warning (#43397)
Jan Vorlicek [Wed, 21 Oct 2020 10:48:21 +0000 (12:48 +0200)]
Enable implicit fallthrough warning (#43397)

* Enable implicit fallthrough warning

This change enables warnings for implicit fallthrough in
switch cases and fixes all the cases where the warning
was reported.
It also fixes some places where the fall through was incorrect.
Fortunately, these places were not causing functional issues.

4 years ago[Browser] don't pass redundant args to wasm (#41608)
Egor Bogatov [Wed, 21 Oct 2020 09:26:42 +0000 (12:26 +0300)]
[Browser] don't pass redundant args to wasm (#41608)

4 years agoMono: Fix the windows cmake build. (#43658)
Zoltan Varga [Wed, 21 Oct 2020 08:58:48 +0000 (04:58 -0400)]
Mono: Fix the windows cmake build. (#43658)

This will not use cmake on windows, it just fixes the conditionals so the windows build doesn't fail if cmake is enabled by default.

4 years agoAutomatically trigger the ilasm round-trip test on PRs (#43666)
Bruce Forstall [Wed, 21 Oct 2020 00:51:09 +0000 (17:51 -0700)]
Automatically trigger the ilasm round-trip test on PRs (#43666)

For changes to the ilasm or ildasm source code, trigger
the ilasm round-trip pipeline.

There could, of course, be other changes that could affect
ilasm/ildasm, but this at least catches the primary ones.

4 years agoFix missing signatures for Cross bitness DAC symbols (#43500)
Juan Hoyos [Tue, 20 Oct 2020 23:34:38 +0000 (16:34 -0700)]
Fix missing signatures for Cross bitness DAC symbols (#43500)

* Unify paths used for cross-bit components

* Pass down buildArchitecture for signing

* Pass target properties to signing

4 years agoUpdate MulticoreJit (#39996)
Dong-Heon Jung [Tue, 20 Oct 2020 23:17:09 +0000 (08:17 +0900)]
Update MulticoreJit (#39996)

- Enable Generic Methods in MulticoreJit
- Enable NDirect Stub in MulticoreJit

4 years agoClarify pre-merge commit squash guidance (#43664)
Koundinya Veluri [Tue, 20 Oct 2020 22:29:02 +0000 (18:29 -0400)]
Clarify pre-merge commit squash guidance (#43664)

4 years agoDisplay the real offset after branch tightening (#43469)
Kunal Pathak [Tue, 20 Oct 2020 22:27:41 +0000 (15:27 -0700)]
Display the real offset after branch tightening (#43469)

* display the real offset after branch tightening

* emit offset for cold codeblock

* move isColdBlock inside #DEBUG

* fix formatting

* Revert "fix formatting"

This reverts commit 0744e1e432e12c5bddd4ce8c208660e31d96f12a.

* Revert "move isColdBlock inside #DEBUG"

This reverts commit 60e511b0bfb1836476a5fcf05ff3450d32c3d907.

* Revert "emit offset for cold codeblock"

This reverts commit e760beb2fcd1a5fcfd22ddf47eb6939a7094562d.

* Use emitCurCodeOffs() to display correct offset

4 years agoUse ThrowHelper inside ValueType types (#43634)
Marek Safar [Tue, 20 Oct 2020 21:13:47 +0000 (23:13 +0200)]
Use ThrowHelper inside ValueType types (#43634)

4 years agoSync shared code from aspnetcore (#43624)
Chris Ross [Tue, 20 Oct 2020 20:54:53 +0000 (13:54 -0700)]
Sync shared code from aspnetcore (#43624)

4 years agoMono: Turn on cmake build by default (#42119)
Zoltan Varga [Tue, 20 Oct 2020 19:49:01 +0000 (15:49 -0400)]
Mono: Turn on cmake build by default (#42119)

Turns it on everywhere except Windows.

4 years agoimprove reliability of SslStream tests with failing certificate validation (#43570)
Tomas Weinfurt [Tue, 20 Oct 2020 18:50:36 +0000 (11:50 -0700)]
improve reliability of SslStream tests with failing certificate validation (#43570)

* improve reliability of SslStream tests with failing certificate validation

* Update src/libraries/System.Net.Security/src/System/Net/Security/SslStream.Implementation.cs

Co-authored-by: Stephen Toub <stoub@microsoft.com>
* fix failing ALPN test on old OpenSSL

Co-authored-by: Stephen Toub <stoub@microsoft.com>
4 years agoFixing stale version badges in docs (#43558)
afroze9 [Tue, 20 Oct 2020 18:45:40 +0000 (23:45 +0500)]
Fixing stale version badges in docs (#43558)

Fixing stale version badges in docs

From the issue description:
Improper cache-control in generated badges caused browsers caching svg
badges for a year. It is, therefore, recommend to modify related
README.md content by simple find & replace from: _version_badge.svg
to _version_badge.svg?no-cache
This will trigger github to compute and use different/new Camo proxy URL.

Fix #3822

4 years ago[browser][debugger] Clean up MessageId logic to prepare for sessions in the test...
Larry Ewing [Tue, 20 Oct 2020 18:31:33 +0000 (13:31 -0500)]
[browser][debugger] Clean up MessageId logic to prepare for sessions in the test harness (#43188)

* Clean up MessageId logic

* Update src/mono/wasm/debugger/DebuggerTestSuite/InspectorClient.cs

Co-authored-by: Ankit Jain <radical@gmail.com>
* Update src/mono/wasm/debugger/DebuggerTestSuite/InspectorClient.cs

Co-authored-by: Ankit Jain <radical@gmail.com>
* Update src/mono/wasm/debugger/DebuggerTestSuite/InspectorClient.cs

Co-authored-by: Ankit Jain <radical@gmail.com>
Co-authored-by: Ankit Jain <radical@gmail.com>
4 years agoimprove usability of NegotiateStreamInvalidOperationTest (#43622)
Tomas Weinfurt [Tue, 20 Oct 2020 18:04:43 +0000 (11:04 -0700)]
improve usability of  NegotiateStreamInvalidOperationTest (#43622)

4 years ago[System.IO.Compression] ZipHelper.DosTimeToDateTime handle empty LastModified fields...
Sergey Mikolaytis [Tue, 20 Oct 2020 17:37:13 +0000 (20:37 +0300)]
[System.IO.Compression] ZipHelper.DosTimeToDateTime handle empty LastModified fields in zip archive entry header without internal exception (#43008)

* [System.IO.Compression] ZipHelper.DosTimeToDateTime handle empty LastModified field without internal exception to improve debugging performance on several zip files opening asynchronously

* [Test][Compression][ZipArhiveEntry] Add unit test to test empty lastModified field in zip entry

* refactor unit test code

* do not use arraypool in tests

* fix test after azure pipeline checks with errors

* fix invalid assert in new test

4 years ago[iOS] Add mono runtime and AppleAppBuilder pkgproj for iOS sample (#43048)
Mitchell Hwang [Tue, 20 Oct 2020 15:09:35 +0000 (11:09 -0400)]
[iOS] Add mono runtime and AppleAppBuilder pkgproj for iOS sample (#43048)

* Add iOS sample pkgproj

* Add iOS Sample pkgproj to descriptions

* Add iOS sample pkgproj ProjectReference

* Add project reference to build AppleAppBuiler.csproj

* Fixup AppleAppBuilder assembly path

* Add AppleAppBuilder Packaging target

* Remove UI file to allow and encourage sample users to modify the UI

* Move package from dotnet6-transport to dotnet6 feed

Co-authored-by: Mitchell Hwang <mitchell.hwang@microsoft.com>
4 years agodisable DefaultConnect_EndToEnd_Ok on Windows7 (#43628)
Tomas Weinfurt [Tue, 20 Oct 2020 14:56:31 +0000 (07:56 -0700)]
disable DefaultConnect_EndToEnd_Ok on Windows7 (#43628)

* disable DefaultConnect_EndToEnd_Ok on Windows7

* update platform check

* update platform check

4 years ago[debugger] Switch to GC Unsafe in signal handler callbacks (#43600)
monojenkins [Tue, 20 Oct 2020 14:45:31 +0000 (10:45 -0400)]
[debugger] Switch to GC Unsafe in signal handler callbacks (#43600)

If the runtime gets a single step or breakpoint signal while it is already
running native code for a P/Invoke, it will be in GC Safe mode.  Switch back to
GC Unsafe to run the debugger engine steps.

Addresses https://github.com/mono/mono/issues/20490

Co-authored-by: lambdageek <lambdageek@users.noreply.github.com>
4 years agoadd activity support for android sample (#43504)
Egor Bogatov [Tue, 20 Oct 2020 06:46:15 +0000 (09:46 +0300)]
add activity support for android sample (#43504)

4 years agoAdd CSV map file generation for compiler diagnostics (#43612)
Simon Nattress [Tue, 20 Oct 2020 03:13:49 +0000 (20:13 -0700)]
Add CSV map file generation for compiler diagnostics (#43612)

Add `--csvmap` switch to Crossgen2 which causes it to generate node summary CSV files that are parsable by tests. The intent is to use this for size on disk perf tests so just the node type statistics and individual node map are implemented in CSV files.  We can add section and relocs easily if we think they'll be useful in future.

4 years agoRemove UnsupportedOsPlatform from CryptoConfig as a utility class (#43611)
Larry Ewing [Tue, 20 Oct 2020 00:26:26 +0000 (19:26 -0500)]
Remove UnsupportedOsPlatform from CryptoConfig as a utility class (#43611)

* Remove UnsupportedOsPlatform from CryptoConfig as it is a safe utility class

* Clean up the other references

4 years agoFirst draft of Dynamic Pgo proposal (#43371)
Andy Ayers [Mon, 19 Oct 2020 23:04:54 +0000 (16:04 -0700)]
First draft of Dynamic Pgo proposal (#43371)

First draft of Dynamic Pgo proposal.

4 years agoFix CG2 outerloop comparison runs and OSX leg warning (#43547)
Simon Nattress [Mon, 19 Oct 2020 20:49:43 +0000 (13:49 -0700)]
Fix CG2 outerloop comparison runs and OSX leg warning (#43547)

The outerloop run has OSX checked test runs for CG2 and CG2 composite modes. Currently both would use a log upload artifact with the same name (coreclr__TestRunLogs_R2R_CG2_OSX_x64_checked_outerloop). Disambiguate the two with a different `LogNamePrefix` for composite runs.

The crossgen2 comparison runs are failing to create the baseline crossgen'd framework because the live libraries zip's internal path has changed. .net5 has been replaced with .net6. The build should have failed when we tried to copy from the wrong folder but the error got eaten and we ended up with a malformed framework folder. Adjust the inline yml scripts so if they fail, it will fail that containing build task.

4 years agoJIT: don't inline methods with small stackallocs if the call site is … (#43516)
Andy Ayers [Mon, 19 Oct 2020 19:48:16 +0000 (12:48 -0700)]
JIT: don't inline methods with small stackallocs if the call site is … (#43516)

The logic in `fgInlinePrependStatements` that zero-initializes locals doesn't
kick in for jit temps introduced when small stackallocs are optimized. So if we
inline a method with a small stackalloc into a loop, the memory for the
stackalloc doesn't get properly re-zeroed on each iteration.

Fix by disallowing such inlines by adding an extra check: the call site must
not be in a loop.

Closes #43391.

4 years agoEquals and GetHashCode for Reflection.Pointer (#42547)
Timo [Mon, 19 Oct 2020 19:30:56 +0000 (21:30 +0200)]
Equals and GetHashCode for Reflection.Pointer (#42547)

4 years agoUse NetCorePublic-Pool pool instead of AzDO hosted pool for Browser jobs (#43589)
Alexander Köplinger [Mon, 19 Oct 2020 18:24:05 +0000 (20:24 +0200)]
Use NetCorePublic-Pool pool instead of AzDO hosted pool for Browser jobs (#43589)

The hosted pool runs into no disk space issues.

4 years agoAdd crossBuild parameter to yaml (#43319)
Steve MacLean [Mon, 19 Oct 2020 17:52:29 +0000 (13:52 -0400)]
Add crossBuild parameter to yaml (#43319)

* Add crossBuild parameter to yaml

4 years agoUse Span-based CreateHMAC where possible
Kevin Jones [Mon, 19 Oct 2020 17:40:08 +0000 (13:40 -0400)]
Use Span-based CreateHMAC where possible

4 years agoImprove performance of polymorphism (#42538)
Steve Harter [Mon, 19 Oct 2020 17:19:50 +0000 (12:19 -0500)]
Improve performance of polymorphism (#42538)

4 years agoRefactor NonAscii bit mask usage (#43537)
Eric Erhardt [Mon, 19 Oct 2020 16:38:53 +0000 (11:38 -0500)]
Refactor NonAscii bit mask usage (#43537)

* Refactor NonAscii bit mask usage

The Vector128 type is being left in a Blazor WASM application because Utf8Utility.GetPointerToFirstInvalidByte is always creating one, even though it isn't used.

I refactored the code such that the bit mask is no longer created on platforms it is not used, since it is only being used by Arm64.

4 years agoAdd test to validate precedence of roll-forward and roll-forward-on-no-candidate...
Vitek Karas [Mon, 19 Oct 2020 15:57:38 +0000 (08:57 -0700)]
Add test to validate precedence of roll-forward and roll-forward-on-no-candidate-fx settings (#43510)

The comment on the test documents the desired precedence order.

Moved some of the existing tests which validate the behavior of the two settings together into a new separate test class.

4 years agoFix async iterators to clear out state upon completion (#43522)
Stephen Toub [Sun, 18 Oct 2020 23:10:32 +0000 (19:10 -0400)]
Fix async iterators to clear out state upon completion (#43522)

AsyncIteratorMethodBuilder was only doing its clean-up for completion (e.g. zeroing out the state machine and context, removing the object from a debugger-incited tracking table) if the last call to the iterator was part of asynchronous completion; if the last MoveNextAsync completed synchronously, the used code path could miss that cleanup work.

4 years agoFix TimeZoneInfo to handle Yukon zone (#43550)
Tarek Mahmoud Sayed [Sun, 18 Oct 2020 18:48:57 +0000 (11:48 -0700)]
Fix  TimeZoneInfo to handle Yukon zone (#43550)

4 years agoConvert more interop to use function pointers (#43514)
Jan Kotas [Sat, 17 Oct 2020 17:02:31 +0000 (10:02 -0700)]
Convert more interop to use function pointers (#43514)

4 years agoadd better handling of SECBUFFER_EXTRA during TLS handshake on Windows (#43475)
Tomas Weinfurt [Sat, 17 Oct 2020 17:00:31 +0000 (10:00 -0700)]
add better handling of SECBUFFER_EXTRA during TLS handshake on Windows (#43475)

* add better handling of SECBUFFER_EXTRA during TLS handshake on Windows (#42427)

* add better handling of SECBUFFER_EXTRA during TLS handshake on Windows

* fix boundery check

* fix spelling

* update Authentication_IncorrectServerName_Fail test

* feedback from review

* Update src/libraries/System.Net.Security/tests/FunctionalTests/CertificateValidationRemoteServer.cs

Co-authored-by: Stephen Toub <stoub@microsoft.com>
Co-authored-by: Stephen Toub <stoub@microsoft.com>
4 years ago[threads] At shutdown, don't wait for native threads that aren't calling Mono (#43174)
monojenkins [Sat, 17 Oct 2020 12:04:40 +0000 (08:04 -0400)]
[threads] At shutdown, don't wait for native threads that aren't calling Mono (#43174)

* [test] Call P/Invoke callback delegates from foreign threads

Change post-detach-1.cs to also have versions that call reverse pinvokes from
foreign threads that were not attached to mono.

The foreign threads should not prevent GC and should not prevent Mono from
shutting down using mono_manage_internal.

* [threads] Don't wait for native threads that aren't calling Mono

If a thread is started from native code, and it interacts with the runtime (by
calling a thunk that invokes a managed method), the runtime will attach the
thread - it will create a `MonoInternalThread` and add it to the list of
threads hash (in threads.c).

If the thread returns from the managed call, it will still be recorded by the
runtime, but as long as it is not running managed code anymore, it will prevent
shutdown.  The problem is when we try to suspend the thread in order to abort
it, `mono_thread_state_init_from_handle` will see a NULL domain (because
`mono_threads_detach_coop_internal` will restore it to NULL when a managed
method returns back to native code).  (On systems using POSIX signals to
suspend, the same check is in `mono_thread_state_init_from_sigctx`).  As a
result, `mono_threads_suspend_begin_async_suspend` (or `suspend_signal_handler`
on POSIX) will set `suspend_can_continue` to FALSE, and
`mono_thread_info_safe_suspend_and_run` will not run the suspend callback.

As a result, when `mono_manage_internal` calls `abort_threads`, it will add the
thread handle to the wait list, but it will not actually request the thread to
abort.  As a result, after `abort_threads` returns, the subsequent call to
`wait_for_tids` will block until the native thread terminates (at which point
the TLS destructor will notify the thread handle and wait_for_tids will
unblock).

This commit changes the behavior of `abort_threads` to ignore threads that do
not run `async_suspend_critical` and not to add them to the wait list.  As a
result, if a native thread calls into managed and then returns to native code,
the runtime will not wait for it.

* [threads] Warn if mono_thread_manage_internal can't abort a thread

Give a hint to embedders to aid debugging

* rename AbortThreadData:thread_will_abort field

It's used to keep track of whether the thread will eventually throw a TAE (and
thus that we need to wait for it).

The issue is that under full coop suspend, we treat threads in GC
Safe (BLOCKING) state as if they're suspended and always execute
async_abort_critical.  So the field has nothing to do with whether the thread
was suscessfully suspended, but rather whether it will (eventually) be aborted.

* [threads] Fix async_abort_critical for full coop

If the foreign external thread doesn't have any managed methods on its
callstack, but it once called a native-to-managed wrapper, it will be left by
mono_threads_detach_coop in GC Safe (BLOCKING) state.  But under full coop, GC
Safe state is considered suspended, so mono_thread_info_safe_suspend_and_run
will run async_abort_critical for the thread.

But the thread may never call into Mono again, in which case it will never
safepoint and aknowledge the abort interruption.  So set thread_will_abort to
FALSE in this case, so that mono_thread_manage_internal won't try to wait for it.

---

Related to an issue first identified in https://github.com/mono/mono/pull/18517

---

This supersedes mono/mono#18656

Co-authored-by: lambdageek <lambdageek@users.noreply.github.com>
4 years ago[master] Update dependencies from dotnet/arcade dotnet/xharness dotnet/llvm-project...
dotnet-maestro[bot] [Sat, 17 Oct 2020 11:30:14 +0000 (13:30 +0200)]
[master] Update dependencies from dotnet/arcade dotnet/xharness dotnet/llvm-project dotnet/icu mono/linker (#43355)

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>
Co-authored-by: Viktor Hofer <viktor.hofer@microsoft.com>
Co-authored-by: Jeremy Koritzinsky <jekoritz@microsoft.com>
Co-authored-by: Marek Safar <marek.safar@gmail.com>
4 years agoOngoing cmake build work. (#43519)
Zoltan Varga [Sat, 17 Oct 2020 06:53:14 +0000 (02:53 -0400)]
Ongoing cmake build work. (#43519)

* Ongoing cmake build work.

* Fix llvm support when cross compiling
* Fix/enable ios support.

* Add support for amd64->arm/arm64 cross builds on CI.

4 years agotest for 2164 and corert 8246 (#43511)
Sergey Prytkov [Sat, 17 Oct 2020 06:31:03 +0000 (09:31 +0300)]
test for 2164 and corert 8246 (#43511)

4 years agoPort changes from dotnet/runtimelab (#43496)
Jan Kotas [Sat, 17 Oct 2020 06:30:28 +0000 (23:30 -0700)]
Port changes from dotnet/runtimelab (#43496)

- Fix build errors in System.Globalization.Native with libraries/Native warning level, add System.Globalization.Native back to the libraries/Native build to protect it,
- Misc other changes

4 years ago[mono] Ensure MonoAssemblyName is in sync between managed and native (#43536)
Ryan Lucia [Sat, 17 Oct 2020 06:29:37 +0000 (02:29 -0400)]
[mono] Ensure MonoAssemblyName is in sync between managed and native (#43536)

We also no longer appear to need the NETCORE or DISABLE_REMOTING defines in msbuild, so remove them

4 years agoEnable Mono substitutions and attributes exclusion for mobile (#43507)
Marek Safar [Sat, 17 Oct 2020 06:26:07 +0000 (08:26 +0200)]
Enable Mono substitutions and attributes exclusion for mobile (#43507)

4 years agoMake more suitable SPC instance methods static (#43280)
Marek Safar [Sat, 17 Oct 2020 06:23:23 +0000 (08:23 +0200)]
Make more suitable SPC instance methods static (#43280)

Co-authored-by: Jan Kotas <jkotas@microsoft.com>
4 years agoRemove unused Common Extensions code (#43452)
Eric Erhardt [Sat, 17 Oct 2020 03:26:03 +0000 (22:26 -0500)]
Remove unused Common Extensions code (#43452)

4 years agoAdd additional URI schemes (WIP) (#43375)
Patrick Westerhoff [Sat, 17 Oct 2020 02:55:54 +0000 (04:55 +0200)]
Add additional URI schemes (WIP) (#43375)

4 years agoFix nullable warnings in struct constructors (#43472)
Rikki Gibson [Sat, 17 Oct 2020 02:49:41 +0000 (19:49 -0700)]
Fix nullable warnings in struct constructors (#43472)

4 years agoRemove some unnecessary unsafe usage (#43430)
Stephen Toub [Sat, 17 Oct 2020 02:24:20 +0000 (22:24 -0400)]
Remove some unnecessary unsafe usage (#43430)

4 years agoFix xunit analyzers to run on library test projects (#43459)
Stephen Toub [Sat, 17 Oct 2020 02:21:45 +0000 (22:21 -0400)]
Fix xunit analyzers to run on library test projects (#43459)

We don't want most analyzers running over our test code currently (some rules could be enabled with varying degrees of effort), but we do want the xunit analyzers running, and they haven't been.  Fix that by creating a new ruleset specific to library tests, and switching over to use it when building library test projects.

4 years agoPort ACL OpenExisting overloads for EventWaitHandle/Mutex/Semaphore (#43134)
Carlos Sanchez [Sat, 17 Oct 2020 00:12:30 +0000 (17:12 -0700)]
Port ACL OpenExisting overloads for EventWaitHandle/Mutex/Semaphore (#43134)

* Add methods to ref file.

* Add empty methods to src files.

* Add the .NET Framework version of these methods for .NET Standard.

* Move OpenExistingResult enum to Common and consume it where needed.

* Remove Unix comment in Windows-only file.

* Document OpenExistingResult enum.

* Make out result parameters nullable.

* Add exception resource string.

* Imlement EventWaitHandleAcl methods.

* Implement MutexAcl methods.

* Implement SemaphoreAcl methods.

* Remove unnecessary check for null or empty name.

* Document the EventWaitHandleAcl methods.

* Document the MutexAcl methods.

* Document the SemaphoreAcl methods.

* Add negative enum check. Fix incorrect cast.

* Add NotNullWhen attribute to TryOpenExisting out parameter. Adjust docs.

* Add EventWaitHandle basic unit tests.

* Add Semaphore basic unit tests

* Add Mutex basic unit tests.

* Add Mutex exception handling unit tests.

* Add EventWaitHandle exception handling unit tests.

* Add Semaphore exception handling unit tests.

* EventWaitHandle and Mutex throw DirectoryNotFoundException when PathNotFound. Adjust documentation.

* Nullability in ref file.

* Do not check for rights out of range value, let Windows handle it. Adjust unit tests accordingly.

* Spacing.

* Remove enum range test. Add PathNotFound tests.

Co-authored-by: Carlos Sanchez Lopez <carlossanlop@users.noreply.github.com>
4 years agoFix new warnings (#43097)
Buyaa [Fri, 16 Oct 2020 23:39:19 +0000 (16:39 -0700)]
Fix new warnings (#43097)

* Fix CA1416 warnings in runtime repo