Move CI build to Hosted Ubuntu 1604

Ipc spec update (#290)

* create section headers
* Add profiler and dump documentation
* change pipe name in spec to dotnet

Do not swallow exception and stuck in case we have an exception thrown during tracing

Missing profile argument

The providers help mention profile, but it is not in the docs.

I took the profile description from https://github.com/dotnet/diagnostics/blob/master/documentation/design-docs/dotnet-tools.md

But I'm not sure if we should keep the information in both places

It also refers to some profiles not available in the current release 1.0.3-preview5.19251.2. The only profile in this version is runtime-basic

Two changes to !dumpasync (#286)

* Display state machine fields in DumpAsync for -stacks

Currently the DumpAsync -fields option just impacts whether the state machine fields are output for the top-level state machines.  We received feedback that it would be more expected for -fields to also cause the fields to be output for all state machines listed as part of continuation chains.  This does that.

* Improve performance of !dumpasync SOS command

A significant majority of the time spent in dumpasync was in getting the type name of each object in order to compare it to "AsyncStateMachineBox".  This switches to comparing by module and mdTypeDef.  On an ~1GB dump, the time to execute !dumpasync dropped from 43 to 11 seconds on my machine.

Add Diagnostic Ipc client (#271)

* * Add infrastructure for a new IPC client in line with the propsed spec
* update EventPipeClient to use new IpcClient
* Update DiagnosticHelpers to use IpcClient

* * fix typo
* change to use uint32 instead of INT for generate core dump command

* * remove dead code

* * bring error codes in line with the now checked0in spec

* Remove extra error code

* Rename Miscellaneous to Dump for command sets and Ids

* fix typing issue

* * update profiler attach to use IpcClient

* * Change errors to be int32 HRESULTS

* * remove unnecessary todo
* simplify size checking

* * add ASSERT that MAGIC is always the correct length

* * Fix using statement

Update dotnet-counters link to docs (#281)

Merge pull request #274 from davmason/profiler_attach

Add profiler attach message

Add comment about timeout

IPC protocol spec (#198)

* Add initial draft of ipc protocol spec

* Update IPC spec to account for feedback:
* add clarity about what needs to be wrapped in a header
* add image representing communication flow
* flesh out packet headers

* fix image rendering

* Remove TODOs

* Rewrite overview and add transport description.

* * update spec to account for feedback
* formalize terminology
* update diagrams to account for new terminology
* update header size

* * Add notes on pipe and socket naming conventions

* * expand error section and define error codes
* simplify description of optional continuation
* clarify terminology w.r.t. Commands and Command specific things
* explicitly write out current set of command_sets and command_ids

* * update EventPipe payload example to be reality
* fix comments
* Update transport name with explicit sprintf codes

* * Document current workings of EventPipe Commands

* specify IpcHeader.magic as uint8_t instead of ambiguous char

* * increase detail of eventpipe commands
* expand on and streamline the error model
* remove hypotheticals
* correct bug in example messages

* * changes in response to feedback
* add notes about MacOS App Group case

Update message ID

Windows arm32 and Linux arm/arm64 support (#276)

Fix issue: https://github.com/dotnet/diagnostics/issues/242

Update command include files from coreclr to fix arm build problems.

Add warning headers to common includes: issue https://github.com/dotnet/diagnostics/issues/38

Added calling dbgeng DAC IOCTL fallback so ".cordll" works.

Added host runtime directory to diasymreader search.

Remove installing sudo on 18.04 docker images (docker-init.sh).

Change the dotnet-dump setthread command to take the thread index (#275)

Update System.CommandLine for dotnet-dump (#270)

Update System.CommandLine for dotnet-dump

Update System.CommandLine to 0.2.0-alpha.19254.1.

Fixes issues: https://github.com/dotnet/diagnostics/issues/127 https://github.com/dotnet/diagnostics/issues/234

Remove the separate older System.CommandLine version for the Repl. Replaced
the depreciated MethodBinder usage with explicit reflection invoke.

Added the CommandInvoke and HelpInvoke attributes to mark the entry
points into the command class.

Changed the command invoke from async (Task InvokeAsync) to synchronous
(void Invoke) because SOS and CLRMD are basically single threaded.

Allow the screen width for the repl console to change dynamically.

add profiler attach message

Add list-processes command to dotnet-counters (#243)

* Add list-processes command

* addressing some pr feedback related to system.commandline

Add alpine/MUSL SOS build/packaging (#264)

Build on alpine docker container.

Add new MUSL SOS binaries to dotnet-dump/dotnet-sos.

Add new "linux-musl-x64" rid to SOS installer and
dotnet-dump.

Skip the "clrstack -i" tests that fail on alpine and 3.0.x.

Enable build for arm / arm64 (#268)

Enable build for arm / arm64

Merge pull request #269 from MarioHewardt/master

fixed hung app markdown

fixed hung app markdown

Merge pull request #267 from MarioHewardt/master

Added new hang scenario

Added new hang scenario

Merge pull request #262 from MarioHewardt/master

New tutorial scenario

pr feedback

Filter event counter payloads using CounterType payload (#261)

added intermittent mem spike endpoint

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Make SOS packing dependencies invisible in VS's solution viewer (#259)

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Change the GenerateCoreDump protocol to use UTF16 dump file name (#258)

Download and register DAC with CLRMD (#248)

Issue https://github.com/dotnet/diagnostics/issues/158

Add SOSInitializeByHost SOS module entry so the SOSHost
code can pass the temp dir created, DAC module path downloaded for
clrmd and the symbol store enabled flag.

Removed ISOSHostServices and replaced initializing the SOSNetCoreCallbacks
initialization as part of the call to SOSInitializeByHost.

Added the "clrmodules" command as a test of a pure CLRMD command and
as place to add the module version requested by some customers.

Catch the DllNotFoundException exception and add "try installing libc6-dev"
to exception message and documentation to work around Microsoft stretch docker
image problems.

Issue: https://github.com/dotnet/diagnostics/issues/201

Generate core dump diagnostic server command (#257)

Generate core dump diagnostic server command

Add DiagnosticHelpers class with the GenerateCoreDump API.

Change dotnet-dump collect on Linux to use this new API.

Update dotnet-dump collect doc. Remove sudo.

Make dotnet-counters exit gracefully on runtime shutdown

Update README.md

Update README.md

Update README.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

Update intermittent_memory_spike.md

initial add

[dotnet-counters] Make refresh-interval optional (#253)

* --refresh-interval is now optional

* Make the default refresh-interval 1

Restore commit information to native images (#250)

Terminate dotnet-trace when the runtime closes the eventpipe

Fix a small typo in memory leak tutorial (#249)

Overall cleanup for build system - part 1 (#247)

* Remove dotnet-analyze from build and CreateVersionFile
* Rename NuGet config file to be compliant with casing
* Use msbuild command in place of hardcoded paths
* Add details file
* Consolidate versions into a single file
* Over all cleanup of project files, properties, and targets
* Little workaround for older version of Arcade around license
* Change format of versioning resources for readability
* Update XUnit versions

Merge pull request #245 from MarioHewardt/master

Initial scenario based tutorial

fix pr feedback

Moving counters doc to where all other documentations live (#246)

Initial scenario based tutorial

Update installation instruction for dotnet-counters for P5 (#244)

Dotnet counters doc (#219)

* some documentation updates to dotnet-counters

* Readme under dotnet-counters directory

* some cleanup

* Adding example for filtering'

* fix list cmd

* Adding some more description in example usage per PR feedback

* PR feedback

* Give some example counters to intro section

* Some syntax fix

* Add dotnet-counters doc to main README

Fix missing metadata in Linux core dumps. (#229)

* Fix missing metadata in Linux core dumps.

Issue #https://github.com/dotnet/diagnostics/issues/56

Both Windows and Linux minidumps don't save all the assemblies' metadata which can cause
stack traces to display !Unknown. On Windows most debuggers like Windbg and VS can load
the module from file for this kind of dumps. On Linux lldb/SOS doesn't load the native
modules and really doesn't know anything about the managed assemblies.

Add metadata callback to datatarget and it's implementation in SOS.NETCore.

Add IsMetadataMemory() and the metadata region list. This is because lldb on core dumps
returns 0's on missing metadata memory reads instead of an error.

Merge pull request #236 from dotnet/juhoyosa/rollforward-major

Add runtime config template for major rollforward

Update docs for preview 5. (#238)

Update the tools version to 1.0.3-preview5.19251.2.

Add runtime config template for major rollforward

Ignore any provider specified via --profile option if they are already specified with --providers option (#224)

Preview5 doc update. (#225)

Add Release notes for dotnet-dump.

Remove --add-source in installation instructions.

Fix issue with dotnet-counters not being able to target user-defined EventSource (#222)

Fixing list command (#218)

Merge pull request #214 from mikem8361/fromrelease

Commits from release/3.0.

Merge pull request #213 from mikem8361/updoc

Update tool installation docs to 1.0.3-preview5.19228.1

Merge pull request #211 from mikem8361/fixazdo

Fix artifacts.

Merge pull request #209 from mikem8361/fixpush

Fix artifact publishing.

Fix artifact publishing.

Merge pull request #208 from mikem8361/fixart

Fix naming of artifacts.

Fix naming of artifacts.

Add Convert command (#196)

* Add Convert command:
* make default format for all platforms 'netperf'
* update spec to refelct impl

* Simplify try/catch to using statements in converter code

* Account for scenario when someone doesn't specify an output filename and the input trace file doesn't have the default name

* Grammar nit

* Update enum value to use Pascal case
* remove -f shorthand for format option

* * remove try/catch
* use ExistingOnly argument extension
* remove unnecessary Arity qualifications

Add command handler to dotnet-counters (#200)

Bringing dotnet counters up to spec [part 1] (#199)

* fix build warnings

* For some reason we dont have CounterType field inside the payload...

* support multiple providers

* Filtering

* Fix broken alignment on list command

* spaces

* support filtering for an entire provider

* Removing -r option

* Add filter for System.Runtime for default monitoring session

Make dotnet-counter stream values in real time (#197)

* Streaming counters

* DisplayName stuff

* fix build

* few demo changes

* parsing command-line provided counter list works now

* No more string parsing!!!

* some more fixes in writer

* update license header, display rates

* Removing useless files

* Use known displaynames for known providers

* cleanup

* spaces

* more cleanup

* more cleanup

* PR feedback

Renaming non-spec options on dotnet-trace (#192)

* Rename the "profiles" verb to "list-profiles"
* Rename the "endpoints" verb to "list-processes"
* Move pack option/verb to future.
* Move the 'g' command (capture GC heap snapshot) to future.
* Updating docs with missing functionality.

Not ready on Non-Windows platform. (#178)

Not ready on Non-Windows platform for **.NET 3.0 Preview5**. This is related to this bug fix: https://github.com/dotnet/coreclr/pull/24198, which will be included in **Preview6**.
The issue manifests when EventPipe is enabled without LTTng. In this case, GC events are disabled after the first GC because LTTng probes are disabled.

Merge pull request #187 from mikem8361/fixlldbdoc

Fix lldb build instructions and scripts.

Fix lldb build instructions and scripts.

For CentOS 7, Fedora 24 and OpenSUSE.

Typos (#177)

* comamnd -> command
* commited -> committed
* convinient -> convenient
* currnet -> current
* deafualts -> defaults
* defualts -> defaults
* dianostics -> diagnostics
* interogates -> interrogates
* precendent -> precedent
* Redit -> Redis
* if -> is

Merge pull request #179 from mikem8361/fixcentos7

Fix the build-install-lldb.sh network failure.

Fix the build-install-lldb.sh network failure.

Changed downloading binutils from sourceware.org to http://ftp.gnu.org/gnu/binutils.

Merge pull request #176 from mikem8361/vs2019fix

Fix building with vs2019 only.

Fix building with vs2019 only.

Updating gc/gc-collect options to map PerfView flags. (#175)

Merge pull request #164 from github-john-doe/typos

Typos

[dotnet-trace] Small changes (#173)

- Replace hardcoded numbers with existing/equivalent enum.
- Move non-common options to Collect, and started plumbing pack options.
- Remove comment.
- Remove pack changes

Speedscope format (#171)

* Incorporate code from closed PR #114 to enable speedscope output:
* adds format option

* Actually add the converter...

* update dotnet-trace instructions

* Expanded on output format section of instructions

* Change protection level of TraceFileFormatConverter

* Updates in response to feedback

* Update src/Tools/dotnet-trace/TraceFileFormatConverter.cs

Co-Authored-By: josalem <josalem@microsoft.com>
* Update src/Tools/dotnet-trace/CommandLine/Options/CommonOptions.cs

Co-Authored-By: josalem <josalem@microsoft.com>
* Fix typos

[dotnet-trace] Adding --profile options and minor fixes. (#172)

* OnStop: rename pid -> processId
* Adding a Versions.props
* Update Collect output format. Added the process main module path.
* Adding profiles verb
* Adding --profile option.
* up-to-spec
* Renaming few ETW instances to EventPipe.

Merge pull request #169 from mikem8361/gcheap

Add a destructor for sos::GCHeap