JitBench scenarios fix for 2.1 branch (#17317)

* JitBench scenarios fix (#17154)

* each web app should use a separate directory to avoid conflicts + dead code removal

* update the framework package version to get scenarios benchmarks working

* use the correct version for 2.1 branch

Merge pull request #17323 from dotnet/wesh/FixIdentityPackageBuild

Fix identity package filtering

Fix identity package filtering

We only want to filter out identity package builds on
official builds that aren't windows x64, to avoid building
and publishing them more then once in an official build.

We also need to account for source-build which sets the
OfficialBuildId property to replicate the official builds,
so we also look at the DotNetBuildOffline property to
determine that we should still build the identity package.

Group disabled default interface tests together (#17297)

Fixes #17013.

Merge pull request #17279 from dotnet/wesh/SyncInitToolsWithSourceBuild

[release/2.1] Sync init-tools scripts with what is in source-build

Sync init-tools scripts with what is in source-build

Merge pull request #17268 from weshaggard/Fix21OptDataSourceBuild

[release/2.1] Fix opt data for source build

Turn off PGO unprofiled warning on Linux (#17262) (#17271)

This warning will break the build when new files are added to the build that do not have PGO data, meaning that release builds will be broken until a new PGO collection can be run. We should not break the build if there are not counts for new files.

Disable MSBuildEventLogging for optdata alias

We don't need the binclash logger for optdata so disable it
by pass a single space (note empty string means default).

The default value points at net46 which isn't what we want on
linux.

Merge various restore tasks into one Sync target

There were various restore targets happening independently
when they should all be combined so the sync step can be
independent from the build step. This change merges them
together under the Sync target.

In particular this moves RestoreOptData and RestoreNETCorePlatforms
to be part of the sync step instead of being individually ran.

Pass BuildType to sync commands so optdata gets restored correctly

Fix RestoreSources for optdata packages

Pass unprocessed args to restore optdata step so it
can override the sources when doing restore

Handle prority as an unprocessed arg for the sync alias

Fix EventSource Test Failures in CoreFX (#16999) (#17260)

Merge pull request #16500 from dotnet-maestro-bot/release/2.1-UpdateDependencies

Update BuildTools, CoreClr, CoreFx, PgoData to preview2-02621-01, preview2-26324-04, preview2-26324-01, release-20180228-0037, respectively (release/2.1)

Update BuildTools, CoreClr, CoreFx, PgoData to preview2-02621-01, preview2-26324-04, preview2-26324-01, release-20180228-0037, respectively

Updating scenarios and disabling min_opt and tiered permutations. (#17074)

Change directory in AgentTools tasks

Merge test job updates from master (#17066)

* Remove obselete buildtests job

* Update queues

Adding running tests on Alpine for coreclr build (#17048)

Merge pull request #17010 from RussKeldorph/release/2.1

merge master into release/2.1

Disable tests for issue #17013

Merge commit 'cea438a8e885cc11f96671367bebf23137f45a5a' into release/2.1

Use vectorized T=byte implementations to optimize all MemoryExtensions APIs for T != byte (#28080)

* Adding IsTypeNumeric helper

* Add more NUint operations and use IsTypeNumeric everywhere.

* Revert addition of LangVersion 7.2

* Fix formatting

* Revert use of nuint and IsNumericType for *IndexOf* APIs

* Fix comment, undo leftover changes, and fix indentation.

* Address PR feedback - use nuint where possible.

* PR feedback - Cleanup SequenceEqual just like SequenceCompareTo

* Add new NUInt operations for netcoreapp/coreclr mirror.

* Address PR feedback

* Add T = char and T = long tests for StartsWith and EndsWith

Signed-off-by: dotnet-bot-corefx-mirror <dotnet-bot@microsoft.com>

Merge pull request #17000 from sdmaclea/PR-Enable-Arm64-Simd

[Arm64] Enable arm64 simd test

Prevent concurrent use corruption from causing infinite loops (#16991)

Updates unsafe String constructors to be consistent when handling null value (#17002)

Merge pull request #16980 from jcagme/master

Move extension task at beginning and end of build def

Add task extension to test pipeline

Merge branch 'master' of https://github.com/dotnet/coreclr

Put the path on IOException strings when possible (#16998)

Remove internal only copy of DriveNotFoundException. Will create an issue
to move the implementation down from S.IO.DriveInfo.

Note that this Win32Marshal can be used directly from CoreFX,  will follow up
once this flows. (e.g. remove the copy in CoreFX)

[Arm64] Disable broken tests dependent on #16310

[Arm64] Enable HW Intrinsic Simd tests

Fix test for GC.GetAllocatedBytesForCurrentThread to be more lenient with the accuracy (#16976)

Avoid allocating _IOCompletionCallback when flow is suppressed (#16984)

This delegate was showing up in a sockets allocation trace, even though execution flow is suppressed while creating the associated PreAllocatedOverlapped.

Change csharp_indent_labels from flush_left to one_less_than_current (#16983)

Merge branch 'master' of https://github.com/dotnet/coreclr

Update CoreClr, CoreFx to preview2-26316-03, preview2-26316-03, respectively (#16988)

JIT: fix return type mismatch inline block for literal argument (#16966)

When we inline a method that returns one of its arguments, we need to make sure
to apply the callee's view of the argument type.

We fixed this for arguments that are caller locals in #11218. This change applies
similar logic to handle the case where the caller passes a literal constant.

Closes #16944.

Remove tests from main pipeline.json (#16975)

* Remove tests from main pipeline.json
Tests are now broken out into a separate json file, which means prodcon builds avoid waiting on tests.

Fix comment in IgnoreCase CompareInfo handling.

Use managed marvin hashing for IgnoreCase comparison (#16945)

* Use managed marvin hashing for IgnoreCase comparison

* Return rented buffer & reduce string allocation

* Move Marvin to shared partition & PR feedback

* Marvin input slicing & ToUpper optimization

* Use ToUpperInvariant instead of ToUpper

* Use ToUpperInvariant in favor of the whole manual optimization logic

* Fix typo

* Use ToUpperInvariant length for slicing

Implement AVX/AVX2 InsertVector128 and ExtractVector128 intrinsic

Implement AVX Insert/Extract helper-intrinsics in managed code

Add tests for AVX Insert/Extract helper-intrinsics

Add tests for AVX Insert/ExtractVector128

Add tests and templates for AVX2 Insert/Extract

Add AllReady scenario to JitBench (#16905)

* reuse MusicStoreBenchmark for AllReady scenario

* bug fix, should set JITBENCH_FRAMEWORK_VERSION, not JITBENCH_TARGET_FRAMEWORK_VERSION

* include informations from AllReady.dll

* temp: point to my fork before the https://github.com/aspnet/JitBench/pull/85 gets merged

* clone the repo and get the submodule, downloading .zip is not enough when working with GIT submodules

* fail benchmark when git command fails

* point to the updated aspnet/JitBench repo, not my fork

[Arm64/Ubuntu] Enable official builds (#16981)

Update CoreClr, CoreFx to preview2-26315-05, preview2-26316-01, respectively (#16970)

Convert Sse2 tests to template driven version - part 1

Move extension task at beginning and end of build def

Port SequentialEqual() optimizations to ReadOnlySpan overloads (#28073)

Signed-off-by: dotnet-bot-corefx-mirror <dotnet-bot@microsoft.com>

Merge pull request #16858 from echesakovMSFT/FixGenerateEventLogCrossArchBuildFailure

Fix etmdummy.h file not found during Linux/arm crosscomponent build

Merge pull request #16969 from jcagme/master

Replace Agent.HomeDirectory with AgentToolsPath

Remove AgentToolsPath

Replace AgentToolsPath

Fix error type check in InternalSetThreadPriority (#16959)

The pthread_setschedparam returns error code as a return value and not
in the errno as the existing code supposes. I have found it when a test
in the lab has failed to set the priority and asserted in this code, but
reported errno as 0.

Also fix the flaky DuplicateHandle test7 that was failing rarely due to the
fact that the secondary thread it has created didn't wait until the main thread
finished fiddling with the priority of that thread.

Update CoreClr, CoreFx to preview2-26315-02, preview2-26315-01, respectively (#16949)

Fix etmdummy.h file not found during cross crossarchitecture build

Fix to not reuse preallocated jump stubs for dynamic methods (#16941)

Fix to not reuse preallocated jump stubs for dynamic methods

Fixes https://github.com/dotnet/coreclr/issues/16940
- Allocate an extra jump stub per temporary entry points chunk that is shared by all precodes in the chunk. This jump stub always points to PrecodeFixupThunk.
- Use that for PrecodeFixupThunk, and use the precode-associated jump stub for pointing to the jitted code
- Considered allocating the extra jump stub only if coreclr is far away, but it involves reallocation which may be common in some environments/scenarios. Figured 12 extra bytes per dynamic type is not too significant.

Merge pull request #16813 from CarolEidt/FixDD544983

Mark operands of dead FIELD_LIST as unused

[Arm64] Fix EmitShuffleThunk reg allocation (#16947)

Merge pull request #16928 from briansull/fix-16892

Fix GH Issue 16892 - GC hole due to GT_INDEX_ADDR

Fix GetTempPath (#16921)

* Fix GetTempPath

GetTempPath and GetTempFileName weren't updated to handle long paths.
Update to use API properly and stop using StringBuilder. Also tweak
Normalize to allow utilizing an existing Span as input.

* Assert for null, fix ProjectN wrap

* Address more feedback

* One more tweak

* Tweak Normalize to be usable in CoreFX

* Change another span Equals

* Split AsSpan() to avoid risk of losing inlining

Add EventSource TraceLogging Support for EventPipe (#16861)

Merge pull request #16794 from echesakovMSFT/DisableFeatureNIBindFallbackByDefault

Disable FEATURE_NI_BIND_FALLBACK by default for all platforms

Include Linux/cross-arch components into NuGet packages (#16859)

* Add __DoCrossArchBuild settings to config.json
* HasCrossTargetComponents computes to 'true' on Linux when __DoCrossArchBuild is 1 in dir.props
* Include cross-architecture libclrjit.so crossgen into NuGet props files when HasCrossTargetComponents is 'true'
* Pass $__DoCrossArchBuild to run.sh when generating NuGet packages in build.sh

Merge pull request #16895 from echesakovMSFT/DoNotFragileNGenSystemPrivateCoreLibARM

[ARM] Disable fragile NGen when compiling S.P.C.dll for _TARGET_ARM_

Mark operands of dead FIELD_LIST as unused

This requires fixing the side-effects check in dead code elimination.
Also, fixes gtSetFlags() to be usable from DCE in the non-legacy case.

Merge pull request #16909 from jcagme/master

Use task extensions on SCEP ops

Merge branch 'master' of https://github.com/dotnet/coreclr

Merge pull request #16923 from brianrob/eventlistener_activityid

Plumb the Activity ID Through to EventListener

Fix GH Issue 16892 - GC hole due to GT_INDEX_ADDR
Added test case

Add TaskCanceledException ctor that takes CancellationToken (#16939)

To help with maintaining compatibility when implementing types like SocketsHttpHandler, this ctor allows for constructing a TaskCanceledException with the same inputs as an OperationCanceledException.

Merge pull request #16832 from dotnetrt/StoreNonTemporal

 Implement SSE2 StoreNonTemporal HW intrinsic - complete SSE2 ISA

Use $(Agent.HomeDirectory)

DIfferent Directory Separator for linux (#16936)

No need of arguments

Change after Begin/End approach

Turn sizeondisk tests back on (#16937)

Update CoreClr to preview2-26314-04 (#16927)

Merge pull request #16797 from dotnetrt/SetAllVector128_Managed

Managed implementation of SetAllVector128 SSE2 helper HW intrinsic

Merge pull request #16853 from dotnetrt/CnvertScInt64

Fix ConvertScalarToVector128(U)Int64 codegen and improve tests

Remove call to GenerateLayoutOnly for throughput runs (#16919)

Mark GenericContext test as incompatible with GCStress (#16918)

Convert implementation of SetAllVector128 SSE HW intrinsic to managed

Add SSE2 SetAllVector128 helper HW intrinsic tests

Managed implementation of SSE2 SetAllVector128 helper HW intrinsic

Fix GetHashCode with invariant mode

Merge pull request #16907 from dotnet-maestro-bot/master-UpdateDependencies

Update CoreFx to preview2-26313-03 (master)

Revert "Revert "Fix handling of incorrect assemblies on Unix (#16747)" (#16790)" (#16917)

This reverts commit 47bef69b68a35eafa069d08187727684a5f47901.

Plumb the activity ID through to EventListener.

Add SSE2 StoreNonTemporal HW intrinsic tests

Implement SSE2 StoreNonTemporal HW intrinsic - complete SSE2 ISA

Merge pull request #16872 from fiigii/avxpermute

Implement AVX Shuffle and Permute intrinsics

change bool to bool (#16914)

Fix shuffling thunk for Unix AMD64 (#16904)

The shufflign thunk was generated incorrectly for some edge cases when
a struct was passed in a register or a pair of registers in the
destination, but on stack in the source.
This change implements a new algorithm that ensures that argument slots
are never overwritten before their current value is moved out.

It also adds an extensive regression test that checks various
interesting combinations of arguments that were causing issues before.

Merge pull request #16888 from jashook/up_jit_stress_timeout

Up the jit stress timeout to 5 hours

Unblock official builds (#16913)

Removing arm64 linux cross build for now

Merge pull request #16390 from sdmaclea/PR-16176

[Arm64] Mark removed compare zero nodes unused

Merge pull request #16822 from sdmaclea/PR-ARM64-BASE-INTRINSICS

[Arm64] Base HW Intrinsics