windows: use WriteConsoleOutput instead of printf to avoid moving cursor

disallow crlf in manifest files

It turns out to be trickier than expected to process these correctly.
It turns out to also be trickier than expected to give a nice error
message on encountering these.  But the behavior prior to this patch
would just be silent failures where we attempted to examine paths
that accidentally contained embedded \r.

For now, fix all regexes of the form [^...] to include \r in the
excluded block, then assert that we get a vague lexer error near the
problem.

In the future perhaps we can open manifest files in text mode on Windows
or just disallow Windows-style CRLF in the manual.

explain mode: show which input is more recent

Patch from Scott Graham <scottmg@chromium.org>.

windows: get correct path for ninja_syntax

Patch from Scott Graham <scottmg@chromium.org>.

gitignore unpacked gtest

Patch from Scott Graham <scottmg@chromium.org>.

subprocess_test: make SetWithLots run on all non-Windows platforms

I think it might have been an oversight that this was marked
Linux-specific.

ninja_syntax: escape colons in paths

Merge pull request #340 from sgraham/fix-win-build

fix win32 compile, fix BuildLogTest.WriteRead on 2nd run

Merge pull request #363 from usovalx/subprocess_test_build_failure

Add missing include of <sys/resouce.h>

fix manual to reflect reality of depfile cleaning

Fixes issue #362.

Merge pull request #364 from tfarina/pragma-once

Remove #pragma once from our header files.

Remove #pragma once from our header files.

https://github.com/martine/ninja/issues/358

Signed-off-by: Thiago Farina <tfarina@chromium.org>

Add missing include of <sys/resouce.h>

Merge pull request #361 from HeisSpiter/master

Check more efficiently for emptiness

Efficiently check for emptiness

Merge pull request #359 from tedv/old-arch

Fix missing POLLRDHUP constant on older systems.

Clarify comment wording.

Fix missing POLLRDHUP constant on older systems.

Attempting to compile with g++ 4.1.2 failed because the POLLRDHUP
constant was not defined when <poll.h> is included.

Merge pull request #357 from tfarina/manifest-parser

Rename parsers.* to manifest_parser.*

Rename parsers.* to manifest_parser.*

So it matches with the class name in there.

Signed-off-by: Thiago Farina <tfarina@chromium.org>

Merge pull request #313 from wolfp/restat_missing_input

Do not reset restat_mtime if an input is missing

Merge pull request #350 from maximuska/proposed/improve-dump-edge-node

Improving Edge::Dump, introducing Node::Dump

Improving Edge::Dump, introducing Node::Dump

- Edge::Dump could crash if called while inputs_ is being extended
- Node::Dump prints Node attributes, in-edge and lists of out-edges
- Dump functions now accept "prefix" parameter, printed along with the object
  for easier orientation. For example, edge->Dump("Re-reading deps files").

Add a test for missing input files in restat rules

Do not reset restat_mtime if an input is missing (issue #295)

remove unnecessary manual Close()

don't leak file handle on fail-to-upgrade case

fix win32 compile, fix BuildLogTest.WriteRead on 2nd run

switch build log to print hashes as hex

Nico convinced me that it's safe to do this without revving the build
log format: the old decimal values will still parse as hex (just as
different numbers) and cause a superfluous rebuild.

add copyright header

add new binaries to gitignore

drop support of log formats < 4

Log format 4 was introduced in January.
There's been plenty of time to migrate.

use PRIu64 for printing 64-bit in, %d for printing int

Fixes a warning.

make canon_perftest build, add license

Merge pull request #338 from syntheticpp/empty-log-file

no recompacting needed when log file is empty

no recompacting needed when log file is empty

Merge pull request #316 from tfarina/struct

No need to write 'struct' before type name when declaraing variables in ...

fix quoting thinko

rearrange shell quoting in configure.py

Merge pull request #333 from jonforums/no-main-multi-defs

Prevent multiple definition link error

Prevent multiple definition link error

Globbed inclusion of `src/hash_collision_bench.cc` cause link errors

Merge pull request #331 from sgraham/add-in_newline

Add $in_newline

Merge pull request #330 from sgraham/win32-hash-build

fix windows build

improve test

add $in_newline

fix windows build

Merge pull request #329 from nico/hash2

Only store command hashes in the build log.

Add a hash collision benchmark.

Only store command hashes in the build log.

.build_log load time 350ms -> 17ms, filesize 197MB -> 1.6MB on
Mac. On Windows, it's 500ms -> 20ms.

Makes the build log a lot less useful for scripts, but there could
be a tool for use cases that need log information. A prototype of
such a tool is in https://github.com/nico/ninja/commit/1b243d311

The hash function is 64bit murmurhash2. Assuming that that different
commands get the same hash only by chance, it's is very unlikely
for two different commands to hash to the same value with a 64bit
hash.

Merge pull request #328 from nico/canonperf

add canon_perftest

allow '(' and ')' in depfile paths

Fixes issue #327.

add a note to HACKING about how to get gtest

fix a typo in a test name

Merge pull request #325 from luvit/fix-path-magic

bootstrap: fix path magic on windows

bootstrap: fix path magic on windows

It was reported that argv[0] doesn't get set on windows. Some research
showed that using abspath(__filename__) should accomplish this.

Merge pull request #323 from luvit/bootstrap-from-cwd

bootstrap: chdir to bootstrap's directory

bootstrap: chdir to bootstrap's directory

When integrating ninja into luvit I naively tried calling:

    ./tools/ninja/bootstrap.py

This broke because bootstrap expects you to be in the ninja directory
when you call it. This patch makes it possible to run bootstrap.py like
above and have it work.

Merge pull request #306 from nico/winunbreakconf

Strip leading whitespace from commands on Windows.

Fix configure.py on windows, which does not permit a leading space.

Merge pull request #311 from nico/cleanups

Cleanups

add canon_perftest

Merge pull request #321 from nico/diff

Fix a bug that caused total_time to always be -1.

Remove code that was never executed.

total_time was always -1, because it computed a pointer difference,
not a time difference (should've been |*end_time - *start_time|).

Merge pull request #320 from nico/cleanup

Remove unused variable last_update_millis_.

Merge pull request #319 from nico/vimp

Make `:set spell` only check spelling in comments. Patch from Thilo Six ...

Remove unused variable last_update_millis_.

Make `:set spell` only check spelling in comments. Patch from Thilo Six <T.Six@gmx.de>!

Merge pull request #318 from jsternberg/master

Missing/unused header files

Missing header file for "getenv".

Removing unused sys/termios.h header.

Header guards were missing from some header files.

No need to write 'struct' before type name when declaraing variables in C++.

Signed-off-by: Thiago Farina <tfarina@chromium.org>

Merge pull request #314 from ehird/master

Use subprocess.call for Python 2.4 compatibility

Use subprocess.call for Python 2.4 compatibility

Merge pull request #312 from nico/vimfile

vim syntax file: Highlight ninja comments.

vim syntax file: Highlight ninja comments.

Minor spelling fixes in manual.

comment fix

Merge pull request #310 from nico/landreader

Speed up build log reading (0.5s on Win, 0.1s on Mac, 30ms on Linux)

Merge pull request #309 from nico/buildlogtest

Add more tests for BuildLog.

Switch LineReader from fgets() to just fread().

fgets() needs to search for a \n in the input, and LineReader's
strstr() did the same work again. By using fread() directly, this
duplicate work can be saved.

(I tried using readline() / fgetln() for the same saving, but those
functions are not standard, and were slower than the code in this CL.)

Results from running build_log_perftest, on OS X:
Before: min 369ms  max 372ms  avg 370.4ms
After:  min 243ms  max 247ms  avg 244.8ms

On Windows:
Before: min 796ms  max 904ms  avg 858.0ms
After:  min 359ms  max 375ms  avg 371.4ms

On Linux:
Before: min 161ms  max 169ms  avg 164.8ms
Before: min 130ms  max 137ms  avg 132.6ms

Pull BuildLog line reading into its own class. No performance or behavior change.

Add a BuildLog test that checks that very long command liens don't crash.

Add a BuildLog test that checks duplicate version headers don't crash.

Merge pull request #307 from sgraham/nul-input

pass subprocesses handle to nul device rather than null handle

pass subprocesses handle to nul device rather than null handle

Merge pull request #305 from nico/winperftest

Make parser_perftest and build_log_perftest link on Windows.

Make parser_perftest and build_log_perftest link on Windows.

Merge pull request #304 from nico/perftest

Add a BuildLog loading perftest.

Add a BuildLog loading perftest.

include version number

clarify what i mean by "policy"

Merge pull request #301 from nico/logfix

Don't write ninja log header to log on every build on Windows.

Don't write ninja log header to log on every build on Windows.

Merge pull request #297 from nico/colorclang

Produce colored diagnostics when building ninja with clang.

Merge pull request #299 from tfarina/explicit-ctors

views: Mark single-argument constructors as explicit.

views: Mark single-argument constructors as explicit.

This was reported by cpplint as:

python ~/depot_tools/cpplint.py 2>&1 | grep -v "Done processing" | grep explicit

Signed-off-by: Thiago Farina <tfarina@chromium.org>

Merge pull request #298 from tfarina/build-log-string

No need to convert log_path to c-string. Two places.

No need to convert log_path to c-string. Two places.

Signed-off-by: Thiago Farina <tfarina@chromium.org>

Produce colored diagnostics when building ninja with clang.

This can be disabled by having -fno-color-diagnostics in CFLAGS,
or setting TERM to dumb.