Pass resource item to workload task (#85264)

Add exceptions to TAR extended attribute constructors to disallow '=' and '\n' characters in keys and values. (#82812)

* Prevent adding extended attribute keys containing '=', '\n', or values containing '\n'.

* Add tests to verify that the PaxTarEntry and PaxGlobalExtendedAttributesTarEntry constructors that take an extended attributes dictionary, throw when a disallowed character is found.

* Apply CR suggestions

* Use enumerator to iterate items in the specified enumeration, and insert them to the lazily created dictionary if they pass the validations.

* Change IndexOf with Contains

---------

Co-authored-by: carlossanlop <carlossanlop@users.noreply.github.com>

JIT: Move some BasicBlock methods into block.cpp (#85224)

Collect up a few `BasicBlock` methods that were scattered about in other files.

Use double VectorTableLookup on ARM in ProbabilisticMap (#85189)

* Avoid scalar fallback for logical right shift on Arm

* Use double VectorTableLookup on ARM in ProbabilisticMap

* Revert 3bfd7d3f82c8256c2d7d7ce9371de679d961df96

Skip covariant checks for ldelema T[] with T exact

[browser] Enable threads in Wasm SDK (#85109)

Co-authored-by: Aleksey Kliger (λgeek) <akliger@gmail.com>

Add metadata update for overrides (#85182)

Optimize >>> to ShiftRightLogical on arm64 (#85258)

Adding TimeProvider CreateCancellationTokenSource extension method (#85131)

Fix superpmi.py to not cache local MCH files (#85187)

When an MCH file is specified via the `-mch_file` argument,
if that file is local (not on a UNC Windows share, on Windows),
then don't copy it to the MCH file cache.

This behavior -- to avoid caching local files -- was altered
with https://github.com/dotnet/runtime/pull/56871, but it's
not clear from that PR if it was required for something or
was something used for testing that wasn't reverted before merge.
I'm guessing the latter since the code was simply commented out.

Expose AVX512 variants of AVX, AVX2, and FMA instructions (#85228)

* Expose various Broadcast methods for Avx512F, Avx512BW, and Avx512DQ

* Expose ExtractVector128/256 and InsertVector128/256 methods for Avx512F and Avx512DQ

* Expose ShiftLeftLogicalVariable, ShiftRightArithmeticVariable, and ShiftRightLogicalVariable on Avx512F and Avx512BW

* Expose various FusedMultiplyAdd APIs for Avx512F

* Expose various Permute intrinsics for Avx512F, Avx512F.VL, Avx512BW, and Avx512BW.VL

* Add a cpuid check for AVX512_VBMI

* Add various Permute intrinsics for Avx512Vbmi and Avx512Vbmi.VL

* Apply formatting patch

* Ensure Avx512Vbmi is recognized

* Fixup the InstructionSetDesc for Avx512Vbmi

* Update JIT/EE Version Identifier

* Fix casing in InstructionSetDesc

[wasm] System.Net.WebSockets.Client.Tests timeouts (#85167)

Co-authored-by: Marek Fišera <mara@neptuo.com>

[wasm] Add PackedSimd saturating integer arith. (#85043)

* [wasm] Add PackedSimd saturating integer arith.

* Add doc comments

[mono][debugger] Improving debugger functionaties (#85050)

* Improve debugger functionalites

* Fix step over in the end of a method

* Implement MDBGPROT_CMD_TYPE_SET_VALUES_BY_FIELD_TOKEN

* removing unrelated change.

* Remove mscordbi from CI

* remove mscordbi from ci

* fixing tests because the behavior was changed

* Revert this change

Remove unused code for PBKDF2 on Android (#83639)

Special-case enums in Utf8.TryWrite handler (#85196)

Until we implement the Enum.TryFormat overload that targets UTF8, special-case enums in Utf8.TryWrite's handler to use the UTF16 TryFormat in order to avoid boxing the enum.

Update dependencies from https://github.com/dotnet/roslyn-analyzers build 20230423.2 (#85248)

Microsoft.CodeAnalysis.Analyzers , Microsoft.CodeAnalysis.NetAnalyzers
 From Version 3.3.5-beta1.23222.2 -> To Version 3.3.5-beta1.23223.2

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>

Update dependencies from https://github.com/dotnet/arcade build 20230424.1 (#85247)

Microsoft.DotNet.Arcade.Sdk , Microsoft.DotNet.Build.Tasks.Archives , Microsoft.DotNet.Build.Tasks.Feed , Microsoft.DotNet.Build.Tasks.Installers , Microsoft.DotNet.Build.Tasks.Packaging , Microsoft.DotNet.Build.Tasks.TargetFramework , Microsoft.DotNet.Build.Tasks.Templating , Microsoft.DotNet.Build.Tasks.Workloads , Microsoft.DotNet.CodeAnalysis , Microsoft.DotNet.GenAPI , Microsoft.DotNet.GenFacades , Microsoft.DotNet.Helix.Sdk , Microsoft.DotNet.PackageTesting , Microsoft.DotNet.RemoteExecutor , Microsoft.DotNet.SharedFramework.Sdk , Microsoft.DotNet.VersionTools.Tasks , Microsoft.DotNet.XUnitConsoleRunner , Microsoft.DotNet.XUnitExtensions
 From Version 8.0.0-beta.23222.1 -> To Version 8.0.0-beta.23224.1

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>

Use emit-based invoke for all of WASM including DI (#85065)

[mono] refactor metadata update code (#85177)

* WIP: remove mono_class_set_metadata_update_info generics blocker

* Allow GTDs to store MonoClassMetadataUpdateInfo

   allow generic type definitions to can contain added members

* [loader] Use iterator in find_method_in_class

   Instead of using a for-loop, use an interator that will also pick up added methods from hot reload.

   There's an issue here compared to the old code: the old code could cope with MonoClass:methods containing null pointers.  But the iterator approach signals that iteration is finished by returning NULL.

   Need to check whether the old code is reachable on modern .NET

* Get method add/update info for generic instance classes

* Cleanup the codepath of calling hot_reload_find_method_by_name

* Add reflection support for property of generic instance

* Fix ios build failure

* Add new capabilities

Fixes https://github.com/dotnet/runtime/issues/82792
Fixes https://github.com/dotnet/runtime/issues/82791

---------

Co-authored-by: Aleksey Kliger <alklig@microsoft.com>

Remove common tests from the Roslyn3.11 test project. (#85165)

* Remove shared tests from the Roslyn3.11 test project.

* Decouple Roslyn3.11 smoke tests from shared test classes.

* Fix project file order.

Fix compiling errors within LoongArch64 and RISCV64 for `ins_Move_Extend`. (#85216)

* Fix compiling errors within LA64 and RISCV64 for `ins_Move_Extend`.

* update for CR.

[mono] remove unneeded PKG_CONFIG_PATH for FreeBSD (#84062)

Almost complete sync of logic for generating DAM/RUC reflection access warnings between ILLink and NativeAOT (#84770)

This enables the last of the disabled `RequiresCapability` tests for NativeAOT.

The implementation basically copies the logic from ILLink on how to produce warnings when method or field is marked due to reflection access.

We decided that producing warnings due to reflection access to compiler generated methods is more trouble than benefit and thus we won't do that anymore. See reasoning in https://github.com/dotnet/runtime/issues/85042.

Otherwise the behavior in NativeAOT fully copies the one in ILLink (small exceptions due to better method overload resolution in NativeAOT).

High-level behavior changes in NativeAOT:
* Finally allow the NativeAOT compiler to produce IL2110, IL2111, IL2113 and IL2115
* Avoid generating warnings for override methods if the warning is already generated on the base method (for DAM marking)
* Implement correct marking (and warnings) for "DAM on type" when the derived class has broader annotation than the base class/interface (this is mostly to avoid noise warnings)
* Rename a set of methods and classes in data flow scanner to "Token", because they're only used when a given entity is accessed through its token (so `ldtoken` and similar). This allows for more precise handling of the cases above.

Testing changes:
* Allow specifying tool exceptions for `SkipKepItemsValidationAttribute` - this allows to enable one of the reflection tests for its diagnostics coverage, avoiding the necessity to fix everything around Kept behavior yet.
* Couple of fixes in the test validator to correctly compare expected/actual diagnostics

This fixes final bits of https://github.com/dotnet/runtime/issues/68786
Fixes https://github.com/dotnet/runtime/issues/68688
This helps with https://github.com/dotnet/runtime/issues/82447

[LoongArch64] fix the assertion error: 'numPlacedArgLocals < ArrLen(placedArgLocals)'. (#85238)

[wasi] implement ICU bundling (#85049)

* InvariantGlobalization
* fix unbundled sample

Skip libs native runtime packages build in source-index-stage job (#85239)

* Revert "Fix source-index-stage1 official build (#85215)"

This reverts commit e0e1085528f3c7febf757580b8cee781b986cf54.

* Skip libs native runtime packages in source-index-stage job

Fixes official build regression introduced in
21fb96b6ee011576d3db184765658bb1bc9c178d

[LoongArch64] fix the errors for mod/div after #82924. (#85140)

Update ECMA-335 for function pointer changes (#84962)

#81006 changes the meaning of function pointer types.

[mono] fix two call get_default_jit_mm make hotreload work in non default alc (#84247)

* mono_runtime_delegate_invoke wrapper with MONO_ENTER_GC_UNSAFE/MONO_EXIT_GC_UNSAFE;

mono_runtime_delegate_invoke wrapper with MONO_ENTER_GC_UNSAFE/MONO_EXIT_GC_UNSAFE;

* Update object.c

* add mono_alc_foreach

* implmented mono_alc_foreach

* Update loader-internals.h

* fix get_default_jit_mm()

* fix compiler error

* fix type cast

* fix compile error

* change mono_alc_foreach to mono_alc_get_all

* Update assembly-load-context.c

* Update interp.c

* fix

Add public Encoding.TryGetBytes/Chars (#85120)

Fix source-index-stage1 official build (#85215)

With https://github.com/dotnet/runtime/commit/21fb96b6ee011576d3db184765658bb1bc9c178d, the libs.native subset is now required to be built as well for the source-index-stage1 leg.

Set `GTF_GLOB_REF` in `gtNewIndir` (#85204)

Update dependencies from https://github.com/dotnet/roslyn-analyzers build 20230422.2 (#85219)

Microsoft.CodeAnalysis.Analyzers , Microsoft.CodeAnalysis.NetAnalyzers
 From Version 3.3.5-beta1.23221.1 -> To Version 3.3.5-beta1.23222.2

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>

Update dependencies from https://github.com/dotnet/arcade build 20230422.1 (#85218)

Microsoft.DotNet.Arcade.Sdk , Microsoft.DotNet.Build.Tasks.Archives , Microsoft.DotNet.Build.Tasks.Feed , Microsoft.DotNet.Build.Tasks.Installers , Microsoft.DotNet.Build.Tasks.Packaging , Microsoft.DotNet.Build.Tasks.TargetFramework , Microsoft.DotNet.Build.Tasks.Templating , Microsoft.DotNet.Build.Tasks.Workloads , Microsoft.DotNet.CodeAnalysis , Microsoft.DotNet.GenAPI , Microsoft.DotNet.GenFacades , Microsoft.DotNet.Helix.Sdk , Microsoft.DotNet.PackageTesting , Microsoft.DotNet.RemoteExecutor , Microsoft.DotNet.SharedFramework.Sdk , Microsoft.DotNet.VersionTools.Tasks , Microsoft.DotNet.XUnitConsoleRunner , Microsoft.DotNet.XUnitExtensions
 From Version 8.0.0-beta.23221.8 -> To Version 8.0.0-beta.23222.1

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>

Return int.MaxValue in GC.GetGeneration(nongc_obj) and same for profiler's GetObjectGeneration (#85017)

Add a test for STORE_DYN_BLK(..., IND(null), ...) (#85103)

Enable `StripSymbols` by default (#85139)

See discussion in https://github.com/dotnet/sdk/pull/31739#discussion_r1164126543.

Improve ProbabilisticMap performance for small value sets (#85202)

Fix typo (#85210)

Support non core types for signature and other type references (#85112)

* Support non core types for signature and other type references

* Add handle to TypeBuilderImpl and implement MetadataToken, remove callbacks

* Remove unnecessary MetadataHelper type

Adding Shuffle(). (#85129)

* Adding Shuffle().

* Fixing Vector256 bug + Simplifying logic by switching to AND instead of ConditionalSelect

* Adding regression test.

DateTimeParse: accept all white space chars in the format string for DateTimeStyles Allow White (#85102)

Update dependencies from https://github.com/dotnet/arcade build 20230421.8 (#85194)

Microsoft.DotNet.Arcade.Sdk , Microsoft.DotNet.Build.Tasks.Archives , Microsoft.DotNet.Build.Tasks.Feed , Microsoft.DotNet.Build.Tasks.Installers , Microsoft.DotNet.Build.Tasks.Packaging , Microsoft.DotNet.Build.Tasks.TargetFramework , Microsoft.DotNet.Build.Tasks.Templating , Microsoft.DotNet.Build.Tasks.Workloads , Microsoft.DotNet.CodeAnalysis , Microsoft.DotNet.GenAPI , Microsoft.DotNet.GenFacades , Microsoft.DotNet.Helix.Sdk , Microsoft.DotNet.PackageTesting , Microsoft.DotNet.RemoteExecutor , Microsoft.DotNet.SharedFramework.Sdk , Microsoft.DotNet.VersionTools.Tasks , Microsoft.DotNet.XUnitConsoleRunner , Microsoft.DotNet.XUnitExtensions
 From Version 8.0.0-beta.23220.2 -> To Version 8.0.0-beta.23221.8

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>

Avx512: Abs, ceil, floor, min, max (#84937)

* Minmax implementation

* Fixing new instruction issues

* Abs, Ceil and Floor implementation.

* unary oprations: Sqrt, Negate, Addition

* Removing debug function for condition

* Fixing formatting issues

* fixing merge issue

* Fixing rebase formatting

* Reverting changes to fix rebase issues

* Update src/coreclr/jit/hwintrinsiclistxarch.h

Removing unnecessary HW_Flag_NoEvexSemantics flag

Co-authored-by: Tanner Gooding <tagoo@outlook.com>
* Update src/coreclr/jit/hwintrinsiclistxarch.h

Co-authored-by: Tanner Gooding <tagoo@outlook.com>
* Update src/coreclr/jit/hwintrinsiclistxarch.h

Co-authored-by: Tanner Gooding <tagoo@outlook.com>
* Update src/coreclr/jit/gentree.cpp

Co-authored-by: Tanner Gooding <tagoo@outlook.com>
* Update src/coreclr/jit/gentree.cpp

Co-authored-by: Tanner Gooding <tagoo@outlook.com>
* Addressing review comments. Merging AVX512 Abs conditions

* formatting issues

* removing AVX only flag from 512 floor

* Update src/coreclr/jit/gentree.cpp

Co-authored-by: Tanner Gooding <tagoo@outlook.com>
* adding appropriate round functions

* Reverting creating new instruction for AVX512 round and just updating the code gen part with EVEX encoding.

* Update src/coreclr/jit/instrsxarch.h

Co-authored-by: Tanner Gooding <tagoo@outlook.com>
* Fix formatting issue

---------

Co-authored-by: Tanner Gooding <tagoo@outlook.com>

Drain ConsoleLogProcessor on Dispose (#85162)

Use `gtNewIndir` everywhere (#84528)

* gtNewIndir everywhere

* Add a quirk

This dramatically reduces the number of diffs (many of them regressions).

(Cause of regressions was the well-known "CSE doesn't work well
with local non-null propagation" problem)

Note that this is simply a diff quirk: there is no correctness
impact as the caller will remorph the tree and restore GTF_EXCEPT.

* Fix a correctness bug with FIELD_ADDR morphing

Indirection contexts, if used, invalidate previously set NONFAULTING bits.

* Fix the TP regression

Tweak TimeProviderTaskExtensions handling of CreateTimer (#85200)

Avoid the separate Timer.Change call by tweaking how cleanup happens.

Add vectorization to improve CRC32 performance (#83321)

* Add x86 intrinsics to improve CRC32 performance

This significantly improves performance for System.IO.Hashing.Crc32 for
cases where the source span is 64 bytes or larger on Intel x86/x64
architectures.

The change only applies to .NET 7 and later targets of System.IO.Hashing
because it uses some Vector128 APIs added in .NET 7.

BenchmarkDotNet=v0.13.2.2052-nightly, OS=Windows 11 (10.0.22000.1641/21H2)
Intel Core i7-10850H CPU 2.70GHz, 1 CPU, 12 logical and 6 physical cores
.NET SDK=8.0.100-preview.1.23115.2
  [Host]     : .NET 8.0.0 (8.0.23.11008), X64 RyuJIT AVX2
  Job-PBKTIR : .NET 8.0.0 (42.42.42.42424), X64 RyuJIT AVX2
  Job-TVEBLV : .NET 8.0.0 (42.42.42.42424), X64 RyuJIT AVX2

PowerPlanMode=00000000-0000-0000-0000-000000000000  IterationTime=250.0000 ms  MaxIterationCount=20
MinIterationCount=15  WarmupCount=1

| Method | Job        | BufferSize |        Mean |     Error |    StdDev |      Median |         Min |         Max | Ratio |
|------- |----------- |----------- |------------:|----------:|----------:|------------:|------------:|------------:|------:|
| Append | Current    |        128 |   228.20 ns |  2.366 ns |  2.213 ns |   228.07 ns |   225.54 ns |   232.75 ns |  1.00 |
| Append | Intrinsics |        128 |    17.62 ns |  0.096 ns |  0.075 ns |    17.59 ns |    17.56 ns |    17.80 ns |  0.08 |
|        |            |            |             |           |           |             |             |             |       |
| Append | Current    |       1024 | 1,988.07 ns | 47.120 ns | 54.264 ns | 1,990.18 ns | 1,892.83 ns | 2,089.15 ns |  1.00 |
| Append | Intrinsics |       1024 |    64.71 ns |  0.794 ns |  0.704 ns |    64.67 ns |    63.13 ns |    65.96 ns |  0.03 |

* Use vector operator overloads and ref byte indexing

* Fix error and remove ref ROS

* Drop aggressive inlining and legibility improvements

* Don't overcheck intrinsics

* First pass at ARM support

* ARM tweaks

* A bit of cleanup for legibility

* A little more cleanup

* Add license notices

* Move vector shift right to helper function

* A bit of cleanup

* Use System.Diagnostics.UnreachableException

* Use ReadUnaligned for ARM CRC

Fix generic recursion condition when calling DeserializeAsyncEnumerable in NativeAOT. (#85176)

* Fix polymorphic recursion condition when calling DeserializeAsyncEnumerable in NativeAOT.

* Address feedback

Use IndexOfAnyValues in FileProviders PathUtils (#85190)

* Use IndexOfAnyValues in FileProviders PathUtils

* Turn two fields into methods

Handle not compatible parameters to IndexOf (#84692)

* Handle not compatible parameters to IndexOf

Fixes ImmutableArray<T> and SortedSet<T> for the following:
* IList.IndexOf is called with a null "value" parameter
* IList.IndexOf is called with an incorrectly-typed "value" parameter

Fix #84565

* Fixed performance of IsCompatibleObject

JIT: use blend rather then repair for profile inconsistencies (#85171)

If we have a partial profile then the current count reconstruction will
adjust the exit likelihood of some loop exit when it hits a capped loop.
But for multiple exit loops we might wish to see some profile flow out
of all exits, not just one.

In `ludcmp` we choose to send all the profile weights down an early return
path, leaving the bulk of the method with zero counts.

Instead of trying increasingly elaborate repair schemes, we will now use
blend mode for these sorts of problems; this gives a more balanced count
redistribution.

I also updated blend to use the same logic as repair if a block has zero
weights, since presumably whatever likelihood was assigned there during
reconstruction is not well supported.

Fixes the `ludcmp` regression with PGO over no PGO, noted in
https://github.com/dotnet/runtime/issues/84264#issuecomment-1517046280

Update dependencies from https://github.com/dotnet/roslyn-analyzers build 20230421.1 (#85195)

Microsoft.CodeAnalysis.Analyzers , Microsoft.CodeAnalysis.NetAnalyzers
 From Version 3.3.5-beta1.23220.3 -> To Version 3.3.5-beta1.23221.1

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>

[browser][non-icu] `HybridGlobalization` checking for prefix/suffix (#85093)

* Implementation.

* HG does not belong to legacy code.

* No need to create new instance when existing one is exported.

* TextEncoder's behavior varies between hosts.

* Nit

* Cutting prevents us from using IgnoreSymbols.

* Fixed asserts.

* Fix.

* Match platform with behavior.

* Missing changes to prev commit.

Optimize GDV checks for objects with known type (#84661)

Co-authored-by: Jan Kotas <jkotas@microsoft.com>

[main] Update dependencies from 9 repositories (#84635)

* Update dependencies from https://dev.azure.com/dnceng/internal/_git/dotnet-optimization build 20230406.7

optimization.linux-arm64.MIBC.Runtime , optimization.linux-x64.MIBC.Runtime , optimization.windows_nt-arm64.MIBC.Runtime , optimization.windows_nt-x64.MIBC.Runtime , optimization.windows_nt-x86.MIBC.Runtime , optimization.PGO.CoreCLR
 From Version 1.0.0-prerelease.23175.4 -> To Version 1.0.0-prerelease.23206.7

* Update dependencies from https://github.com/dotnet/hotreload-utils build 20230412.6

Microsoft.DotNet.HotReload.Utils.Generator.BuildTool
 From Version 1.1.0-alpha.0.23179.3 -> To Version 8.0.0-alpha.0.23212.6

* Update dependencies from https://dev.azure.com/dnceng/internal/_git/dotnet-optimization build 20230411.4

optimization.linux-arm64.MIBC.Runtime , optimization.linux-x64.MIBC.Runtime , optimization.windows_nt-arm64.MIBC.Runtime , optimization.windows_nt-x64.MIBC.Runtime , optimization.windows_nt-x86.MIBC.Runtime , optimization.PGO.CoreCLR
 From Version 1.0.0-prerelease.23175.4 -> To Version 1.0.0-prerelease.23211.4

* Update dependencies from https://github.com/dotnet/icu build 20230412.1

Microsoft.NETCore.Runtime.ICU.Transport
 From Version 8.0.0-preview.4.23203.1 -> To Version 8.0.0-preview.4.23212.1

* Use -Wno-deprecated-declarations on wasi and wasm.

* Add HAVE_UCOL_CLONE check to mono for ICU

* configure.cmake not working for wasm, bake it into mono cmake

* Update dependencies from https://github.com/dotnet/xharness build 20230412.1

Microsoft.DotNet.XHarness.CLI , Microsoft.DotNet.XHarness.TestRunners.Common , Microsoft.DotNet.XHarness.TestRunners.Xunit
 From Version 1.0.0-prerelease.23178.2 -> To Version 1.0.0-prerelease.23212.1

* Update dependencies from https://dev.azure.com/dnceng/internal/_git/dotnet-optimization build 20230412.3

optimization.linux-arm64.MIBC.Runtime , optimization.linux-x64.MIBC.Runtime , optimization.windows_nt-arm64.MIBC.Runtime , optimization.windows_nt-x64.MIBC.Runtime , optimization.windows_nt-x86.MIBC.Runtime , optimization.PGO.CoreCLR
 From Version 1.0.0-prerelease.23175.4 -> To Version 1.0.0-prerelease.23212.3

* Bump icudt symbol

* Update dependencies from https://github.com/dotnet/emsdk build 20230414.1

Microsoft.NET.Workload.Emscripten.Current.Manifest-8.0.100.Transport
 From Version 8.0.0-preview.4.23205.3 -> To Version 8.0.0-preview.4.23214.1

* Update dependencies from https://dev.azure.com/dnceng/internal/_git/dotnet-optimization build 20230413.3

optimization.linux-arm64.MIBC.Runtime , optimization.linux-x64.MIBC.Runtime , optimization.windows_nt-arm64.MIBC.Runtime , optimization.windows_nt-x64.MIBC.Runtime , optimization.windows_nt-x86.MIBC.Runtime , optimization.PGO.CoreCLR
 From Version 1.0.0-prerelease.23175.4 -> To Version 1.0.0-prerelease.23213.3

* Revert ICU bump

* Revert extra ICU related changes

* Update dependencies from https://github.com/dotnet/runtime build 20230418.4

Microsoft.NET.ILLink.Tasks , Microsoft.NET.Sdk.IL , Microsoft.NETCore.App.Runtime.win-x64 , Microsoft.NETCore.ILAsm , runtime.native.System.IO.Ports , System.Text.Json
 From Version 8.0.0-preview.4.23177.1 -> To Version 8.0.0-preview.4.23218.4

* Update dependencies from https://github.com/dotnet/emsdk build 20230417.1

Microsoft.NET.Workload.Emscripten.Current.Manifest-8.0.100.Transport
 From Version 8.0.0-preview.4.23177.1 -> To Version 8.0.0-preview.4.23217.1

* Update dependencies from https://dev.azure.com/dnceng/internal/_git/dotnet-optimization build 20230414.3

optimization.linux-arm64.MIBC.Runtime , optimization.linux-x64.MIBC.Runtime , optimization.windows_nt-arm64.MIBC.Runtime , optimization.windows_nt-x64.MIBC.Runtime , optimization.windows_nt-x86.MIBC.Runtime , optimization.PGO.CoreCLR
 From Version 1.0.0-prerelease.23175.4 -> To Version 1.0.0-prerelease.23214.3

* Update dependencies from https://github.com/dotnet/icu build 20230412.1

Microsoft.NETCore.Runtime.ICU.Transport
 From Version 8.0.0-preview.4.23177.3 -> To Version 8.0.0-preview.4.23212.1

* Update dependencies from https://github.com/dotnet/llvm-project build 20230418.2

runtime.linux-arm64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.linux-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.linux-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.linux-arm64.Microsoft.NETCore.Runtime.ObjWriter , runtime.linux-musl-arm64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.linux-musl-arm64.Microsoft.NETCore.Runtime.ObjWriter , runtime.linux-musl-x64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.linux-musl-x64.Microsoft.NETCore.Runtime.ObjWriter , runtime.linux-x64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.linux-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.linux-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.linux-x64.Microsoft.NETCore.Runtime.ObjWriter , runtime.osx-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.osx-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.osx-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.osx-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.win-arm64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.win-arm64.Microsoft.NETCore.Runtime.ObjWriter , runtime.win-x64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.win-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.win-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.win-x64.Microsoft.NETCore.Runtime.ObjWriter
 From Version 14.0.0-alpha.1.23179.1 -> To Version 14.0.0-alpha.1.23218.2

* Revert to older ICU

* Update dependencies from https://github.com/dotnet/runtime-assets build 20230418.1

Microsoft.DotNet.CilStrip.Sources , System.ComponentModel.TypeConverter.TestData , System.Data.Common.TestData , System.Drawing.Common.TestData , System.Formats.Tar.TestData , System.IO.Compression.TestData , System.IO.Packaging.TestData , System.Net.TestData , System.Private.Runtime.UnicodeData , System.Runtime.Numerics.TestData , System.Runtime.TimeZoneData , System.Security.Cryptography.X509Certificates.TestData , System.Text.RegularExpressions.TestData , System.Windows.Extensions.TestData
 From Version 8.0.0-beta.23179.4 -> To Version 8.0.0-beta.23218.1

* Update dependencies from https://github.com/dotnet/emsdk build 20230419.1

Microsoft.NET.Workload.Emscripten.Current.Manifest-8.0.100.Transport
 From Version 8.0.0-preview.4.23218.1 -> To Version 8.0.0-preview.4.23219.1

* Update dependencies from https://github.com/dotnet/hotreload-utils build 20230419.2

Microsoft.DotNet.HotReload.Utils.Generator.BuildTool
 From Version 1.1.0-alpha.0.23179.3 -> To Version 8.0.0-alpha.0.23219.2

* Update dependencies from https://github.com/dotnet/cecil build 20230418.2

Microsoft.DotNet.Cecil
 From Version 0.11.4-alpha.23178.1 -> To Version 0.11.4-alpha.23218.2

* Update dependencies from https://dev.azure.com/dnceng/internal/_git/dotnet-optimization build 20230420.15

optimization.linux-arm64.MIBC.Runtime , optimization.linux-x64.MIBC.Runtime , optimization.windows_nt-arm64.MIBC.Runtime , optimization.windows_nt-x64.MIBC.Runtime , optimization.windows_nt-x86.MIBC.Runtime , optimization.PGO.CoreCLR
 From Version 1.0.0-prerelease.23175.4 -> To Version 1.0.0-prerelease.23220.15

* Update dependencies from https://github.com/dotnet/llvm-project build 20230421.2

runtime.linux-arm64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.linux-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.linux-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.linux-arm64.Microsoft.NETCore.Runtime.ObjWriter , runtime.linux-musl-arm64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.linux-musl-arm64.Microsoft.NETCore.Runtime.ObjWriter , runtime.linux-musl-x64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.linux-musl-x64.Microsoft.NETCore.Runtime.ObjWriter , runtime.linux-x64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.linux-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.linux-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.linux-x64.Microsoft.NETCore.Runtime.ObjWriter , runtime.osx-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.osx-arm64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.osx-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.osx-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.win-arm64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.win-arm64.Microsoft.NETCore.Runtime.ObjWriter , runtime.win-x64.Microsoft.NETCore.Runtime.JIT.Tools , runtime.win-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Sdk , runtime.win-x64.Microsoft.NETCore.Runtime.Mono.LLVM.Tools , runtime.win-x64.Microsoft.NETCore.Runtime.ObjWriter
 From Version 14.0.0-alpha.1.23179.1 -> To Version 14.0.0-alpha.1.23221.2

* Roll back dotnet-optimization updates

---------

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>
Co-authored-by: Steve Pfister <steve.pfister@microsoft.com>
Co-authored-by: Larry Ewing <lewing@microsoft.com>
Co-authored-by: Marek Safar <marek.safar@gmail.com>
Co-authored-by: Stephen Toub <stoub@microsoft.com>

Making sure we have at least one region per gen during plan phase (#83076)

* Making sure we have at least one region per gen during plan phase

Currently we can get into the situation that we didn't have at least one region in each generation we
need to plan. And most of the time we are getting away with it because we can just get a new region
in thread_final_regions. But if we can't, it's a functional problem because we will not maintain our
at least one region per generation invariant.

This change keeps how many regions are planned in each generation and if needed we will attempt to get
new regions during plan phase. And if we can't we will go into the special sweep mode.

When we demote regions with only pinned surv, we detect the ones with no surv at all - those can be
freely planned into any generation we need. We could actually plan regions with only pinned surv to
any generation, eg, we could promote a gen0 region to gen2. However it means we'd need to set cards
on those pinned objects because we will not have a chance later. The benefit of doing this is small
in general as when we get into process_remaining_regions, it's rare we don't already have planned regions
in higher generations. So I don't think it's worth the complexicity for now. We may consider it for the future.

Add options to optimize for size/speed (#85133)

Publicly exposing the undocumented switches, adding test legs.

Ascii.Equals and Ascii.EqualsIgnoreCase (#84886)

* Ascii.Equals and Ascii.EqualsIgnoreCase

* add Equals(byte, byte) and Equals(char, char)

* address code review feedback: remove ByteArrayHelpers type, use Ascii directly

* Apply suggestions from code review

Co-authored-by: Günther Foidl <gue@korporal.at>
* address code review and API review feedback

---------

Co-authored-by: Günther Foidl <gue@korporal.at>

[mono][wasm][aot] Prevent llvm from optimizing away stack stores of valuetypes containing object references when they are returned from a method as a scalar. (#85152)

Fixes https://github.com/dotnet/runtime/issues/85012.

Shared Readme: expand the section on GH Actions (#85173)

...to clarify that dotnet->aspnetcore is automatic but aspnetcore->dotnet is manual.

Prompted by #85149

Merge pull request #85179 from am11/feature/external-deps/update-llvm-libunwind

Update llvm-libunwind to v16.0.2

Opt out of jitstress for profiler/multiple test (#84507)

[browser] Enable webcil in Wasm SDK (#84977)

* Webcil in WasmSDK for build

* Fix file writes. Wip on publish

* Make publish work

Ensure ins_Copy, ins_Load, ins_Move, and ins_Store all handle TYP_MASK (#85110)

* Ensure ins_Copy, ins_Load, ins_Move, and ins_Store all handle TYP_MASK

* Ensure REG_SP is still handled on Arm64

* Filter out TYP_MASK from Unix x86

Fix type initialization ordering under R2R (#84275)

Expand the fix in #80485 to cover helpers including common ones for R2R as well as some generic helpers for JIT.

This would cause regressions (100ks code size in diffs) if done alone, so it also includes checks on whether a helper may trigger a cctor and whether it is beforefieldinit. The precise ordering of the fix is only required for a non-beforefieldinit ctor. This recovers the (small) losses from #80485 and mitigates this fix.

As before, the primary diff is moving type initialization into (for correctness) or out of (the mitigation optimization) a JIT tree. These leads to secondary effects as values may need to be preserved around the type initialization code.

The end result of the fix+mitigations is very little code size change, but viewing the diffs suggests possible future code improvements. However, the impact of any of these should be established first.
- A type initializer will never invoke itself
- When type initialization is removed/CSEed late, it is too late for forward subst/etc., so the loss of the intact tree can still impact code generation
- A custom calling convention for the static helpers (tuned to the common case of no type initialization needing to occur) could help with the impact of calling it in the middle of a calculation
- Code can use beforefieldinit in more place

Fixes #84007

 Fix some issues with null check handling  (#84523)

* Fix some issues with null check handling

Code assumed that, given a non-null address, it
must have no side effects. This is not correct.

Fix by centralizing the logic for no-op null check
removal in morph instead of spreading it over to
places that create null checks.

This is both a CQ and TP win.

* Add a test

* Fix early prop bug

Avoid null ref in JsonSeparatorNamingPolicy (#85002)

* Avoid null ref in JsonSeparatorNamingPolicy

* Implement desired null-handling behavior

* Use throw helper for exception

* Create shared throw helper and fix CI issues

[wasm][debugger] ActiveIssue for DebuggerTests.EvaluateOnCallFrameTests timeouts (#85169)

* active issue https://github.com/dotnet/runtime/issues/85168

* rename offender

Zlib: Add some protections to the allocator used by zlib (#84604)

See comments in the allocator files for more information on the protections offered.

Also:
- Normalizes how we detect if we're using zlib or intel-zlib
- Updates pal_zlib includes
- Updates pal_zlib to use calloc instead of malloc

Update version.txt

Apply all patches

Update llvm-libunwind to v16

[LoongArch64] fix the arg regs' loop depending. (#85085)

* [LoongArch64] fix the arg regs' loop depending.

* amend the value naming by CR.

Use "genActualType" in "LowerSwitch" (#85122)

[LoongArch64] revert TARGET_LOONGARCH64 which destroyed by RISCV#84584. (#85151)

add nixos ping executable path (#84997)

* add nixos ping executable path

* delete useless /

Add NativeAOT runtime pack build for iOS/tvOS/Catalyst (#85047)

NativeAOT ComWrappers: extend managed object lifetime based on refcount (#85087)

Co-authored-by: Jeremy Koritzinsky <jkoritzinsky@gmail.com>
Co-authored-by: Andrii Kurdiumov <kant2002@gmail.com>

[main] Update dependencies from dotnet/arcade (#85096)

* Update dependencies from https://github.com/dotnet/arcade build 20230419.2

Microsoft.DotNet.Arcade.Sdk , Microsoft.DotNet.Build.Tasks.Archives , Microsoft.DotNet.Build.Tasks.Feed , Microsoft.DotNet.Build.Tasks.Installers , Microsoft.DotNet.Build.Tasks.Packaging , Microsoft.DotNet.Build.Tasks.TargetFramework , Microsoft.DotNet.Build.Tasks.Templating , Microsoft.DotNet.Build.Tasks.Workloads , Microsoft.DotNet.CodeAnalysis , Microsoft.DotNet.GenAPI , Microsoft.DotNet.GenFacades , Microsoft.DotNet.Helix.Sdk , Microsoft.DotNet.PackageTesting , Microsoft.DotNet.RemoteExecutor , Microsoft.DotNet.SharedFramework.Sdk , Microsoft.DotNet.VersionTools.Tasks , Microsoft.DotNet.XUnitConsoleRunner , Microsoft.DotNet.XUnitExtensions
 From Version 8.0.0-beta.23217.1 -> To Version 8.0.0-beta.23219.2

* Update dependencies from https://github.com/dotnet/arcade build 20230420.2

Microsoft.DotNet.Arcade.Sdk , Microsoft.DotNet.Build.Tasks.Archives , Microsoft.DotNet.Build.Tasks.Feed , Microsoft.DotNet.Build.Tasks.Installers , Microsoft.DotNet.Build.Tasks.Packaging , Microsoft.DotNet.Build.Tasks.TargetFramework , Microsoft.DotNet.Build.Tasks.Templating , Microsoft.DotNet.Build.Tasks.Workloads , Microsoft.DotNet.CodeAnalysis , Microsoft.DotNet.GenAPI , Microsoft.DotNet.GenFacades , Microsoft.DotNet.Helix.Sdk , Microsoft.DotNet.PackageTesting , Microsoft.DotNet.RemoteExecutor , Microsoft.DotNet.SharedFramework.Sdk , Microsoft.DotNet.VersionTools.Tasks , Microsoft.DotNet.XUnitConsoleRunner , Microsoft.DotNet.XUnitExtensions
 From Version 8.0.0-beta.23217.1 -> To Version 8.0.0-beta.23220.2

---------

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>

Update dependencies from https://github.com/dotnet/roslyn-analyzers build 20230420.3 (#85157)

Microsoft.CodeAnalysis.Analyzers , Microsoft.CodeAnalysis.NetAnalyzers
 From Version 3.3.5-beta1.23218.1 -> To Version 3.3.5-beta1.23220.3

Co-authored-by: dotnet-maestro[bot] <dotnet-maestro[bot]@users.noreply.github.com>

Inline function pointer composition details into MethodTable (#85141)

I initially placed function pointer composition info into a separate hashtable because it's not a runtime concern. Turns out this makes things really inconvenient within the type loader. We store information about runtime-constructed types in hashtables like `RuntimeTypeHandleToParameterTypeRuntimeTypeHandleHashtable`. But those are one way only (from composition to `MethodTable`). We'd need another hashtable to go from `MethodTable` to composition.

Inline the composition details into `MethodTable` instead. We have prior art - the runtime doesn't care about composition of non-variant generic types, but we still keep them as part of `MethodTable`. Similar to parameter types of pointers or byrefs. (For arrays, the runtime does care because of variance so I'm not naming those.)

[JIT] ARM64 - Combine 'neg' and 'cmp' to 'cmn' (#84667)

* Combine compare and shift ops into a single compare op

* Fix comment

* Expanding IsContainableBinaryOp.

* Remove commented code

* Added more cases

* Initial work

* Emitting cmn

* Handle shift-version of neg and cmn

* Add optimization check

* Check for set flags

* Added extra asserts

* Renamed IsContainableBinaryOp to IsContainableUnaryOrBinaryOp. Fixed an assert.

* Remove optimizing code from TryLowerConditionToFlagsNode. Added additional check in containing NEG for a CMP or compare op.

Keep instrumentings some intrinsics (#85130)

Sync shared code from aspnetcore (#85149)

 [browser][non-icu] `HybridGlobalization` update string decoding for comparison (#85098)

* Use well tested decoding in comparison.

* Fix length calculation.

[wasm-mt] A version of LowLevelLifoSemaphore that uses callbacks on the browser (#84491)

This is part of https://github.com/dotnet/runtime/issues/84489 - landing support for async JS interop on threadpool threads in multi-threaded WebAssembly.

This PR adds two things:

1. A new unmanaged `LifoSemaphoreAsyncWait` semaphore that can use Emscripten's ability to push C calls from one thread to another in order to implement a callback-based semaphore - when a thread wants to wait, it sets up a success callback and a timeout callback, and then can return to the JS event loop.  When the semaphore is released, Emscripten will trigger the callback to run on the waiting thread.  If the wait times out, the timeout callback will run.
2. A new managed `LowLevelLifoAsyncWaitSemaphore` that doesn't have the normal `Wait()` function, and instead needs to use the callback-based `PrepareAsyncWait()` function.  Also refactored `LowLevelLifoSemaphore` to pull out a common `LowLevelLifoSemaphoreBase` class to share with the async wait version.

* [wasm-mt][mono] Add new LifoSemaphoreAsyncWait C primitive

Add a new kind of LifoSemaphore that has a callback-based wait
function, instead of a blocking wait using Emscripten's ability to
send work from one webworker to another in C.

This will allow us to wait for a semaphore from the JS event loop in a
web worker.

* [wasm-mt][mono] split LowLevelLifoSemaphore into two kinds

A normal LowLevelLifoSemaphore that can do a synchronous wait
and another that can do a callback-based wait from the JS event loop

* Add LowLevelLifoSemaphoreBase

Move the counts to the base class

Move Release to the base class, make ReleaseCore abstract

* make a new LowLevelLifoAsyncWaitSemaphore for wasm-mt

* Revert unintentional package-lock.json changes

* fix possible null dereference

* use a separate icall for async wait InitInternal

instead of magic constants that are otherwise not needed in managed

* remove dead code; fixup comments

* LowLevelLifoSemaphore: decrement timeoutMs if we lost InterlockedCompareExchange

When a thread wakes after waiting for a semaphore to be released, if
it raced with another thread that is also trying to update the
semaphore counts and loses, it has to go back to waiting again.

In that case, decrement the remaining timeout by the elapsed wait time
so that the next wait is shorter.

* better timeout decrement code

* move timeoutMs == 0 check to PrepareAsyncWaitCore

make PrepareAsyncWaitCore static and remove a redundant argument

Fix reproNative project (#85150)

Try to untangle the rid calculation. (#82832)

* Try to untangle the rid calculation.

* Ignore __portableOS.

* Add back musl detection.

* Try fix AnyOS tests.

* Try fix coreclr linux_musl_arm64 job.

* src/tests/build.proj: use PackageRID for restore.

* Use RuntimeOS as an override for _packageOS.

* Remove (probably) out-dated override for non-portable ToolsRID.

* CI cross-builds for linux-musl use linux.

* Add missing arch to rid.

* Try simplified ToolsRID.

* Update comments.

* Rename OutputRid to OutputRID.

* Tweak comment.

* Move TargetsLinux{Bionic,Musl} with the other Targets properties.

* Don't use RuntimeOS for PackageRID for CrossBuilds.

* Move RuntimeOS condition to ToolsRID assignment.

* Clean up a few things.

* Fix broken Condition.

* Try fix the linux-bionic build.

* Try fix the linux-bionic build, part II.

* Try fix the linux-bionic build, part III.

* Fix PackageRID.

* Use RuntimeOS as _packageOS override.

* Remove RuntimeOS.

* Fix '-os linux-musl' mapping.

* Clean up .

* Rename __PortableOS to __PortableTargetOS.

* Extend comments.

* Extend OutputRID comment too.

* build.sh: include linux-bionic, linux-musl in usage.

* SourceBuild.props: no need to pass RuntimeOS. Only set ToolsOS, PackageOS when RuntimeOS is not empty.

* Fix comment.

* linux-bionic doesn't get built on linux-bionic.

* Unconditionally assign TargetsLinuxBionic/TargetsLinuxMusl.

* Remove SkipInferTargetOSName.

Fix System.Net.Security.Enterprise.Tests build (#84795)

* Fix enterprise linux build

Ensure a recent lld is available on the build host

* Remove lld

As it is now installed in the ubuntu-22.04 image

* Try enabling legacy provider

* Fix legacy under [provider_sect]

Unsubscribe from codegen-coreclr notifications (#85124)

[wasm] WBT: Re-enable previously disabled test (#85009)

Block Runtime_84693 with the issue #85081 (#85123)

[wasm] Detect constant-size cpblk copies in the jiterpreter and unroll them into raw moves (#85125)

This slightly improves performance for Number.Formatting WriteXXXDigits

Lowering Vector512() methods : comparison + shift (#84942)

* LessThan(), LessThanOrEqual(), GreaterThan(), GreaterThanOrEqual() + corresponding *ANY(), *ALL() and ConditionaSelect()
ShiftLeft, ShiftRight, ShiftRightArithmetic

* Update src/coreclr/jit/lowerxarch.cpp : review comment

Co-authored-by: Kunal Pathak <Kunal.Pathak@microsoft.com>
---------

Co-authored-by: Kunal Pathak <Kunal.Pathak@microsoft.com>
Co-authored-by: Tanner Gooding <tagoo@outlook.com>
Co-authored-by: Bruce Forstall <brucefo@microsoft.com>

Jettison vxsort support in the GC when optimizing for size (#85036)

Vxsort comes with precomputed tables that are more than 100 kB in size.

Jettison them when optimizing for size. Hello world with optimize for size + invariant globalization is now 1.08 MB.

Fixes #84749.

JsonConsoleFormatter: keep escaped line breaks for Exceptions #83726 (#84972)

Simplify `impSIMDPopStack` and delete a quirk from `gtNewLoadValueNode` (#85070)

Acclerate `Vector512` multiply and divide. (#84941)

* Accelerate Vector512 multiply.

* Accelerate Vector512 divide.

* Small build fix.

* Fix accidental removal for Vector256_op_division.

* Review edits.

* Assert fix.

---------

Co-authored-by: Tanner Gooding <tagoo@outlook.com>