Imported Upstream version 1.8.2
[platform/upstream/ninja.git] / doc / manual.asciidoc
1 The Ninja build system
2 ======================
3 v1.8.2, Sep 2017
4
5
6 Introduction
7 ------------
8
9 Ninja is yet another build system.  It takes as input the
10 interdependencies of files (typically source code and output
11 executables) and orchestrates building them, _quickly_.
12
13 Ninja joins a sea of other build systems.  Its distinguishing goal is
14 to be fast.  It is born from
15 http://neugierig.org/software/chromium/notes/2011/02/ninja.html[my
16 work on the Chromium browser project], which has over 30,000 source
17 files and whose other build systems (including one built from custom
18 non-recursive Makefiles) would take ten seconds to start building
19 after changing one file.  Ninja is under a second.
20
21 Philosophical overview
22 ~~~~~~~~~~~~~~~~~~~~~~
23
24 Where other build systems are high-level languages, Ninja aims to be
25 an assembler.
26
27 Build systems get slow when they need to make decisions.  When you are
28 in a edit-compile cycle you want it to be as fast as possible -- you
29 want the build system to do the minimum work necessary to figure out
30 what needs to be built immediately.
31
32 Ninja contains the barest functionality necessary to describe
33 arbitrary dependency graphs.  Its lack of syntax makes it impossible
34 to express complex decisions.
35
36 Instead, Ninja is intended to be used with a separate program
37 generating its input files.  The generator program (like the
38 `./configure` found in autotools projects) can analyze system
39 dependencies and make as many decisions as possible up front so that
40 incremental builds stay fast.  Going beyond autotools, even build-time
41 decisions like "which compiler flags should I use?"  or "should I
42 build a debug or release-mode binary?"  belong in the `.ninja` file
43 generator.
44
45 Design goals
46 ~~~~~~~~~~~~
47
48 Here are the design goals of Ninja:
49
50 * very fast (i.e., instant) incremental builds, even for very large
51   projects.
52
53 * very little policy about how code is built.  Different projects and
54   higher-level build systems have different opinions about how code
55   should be built; for example, should built objects live alongside
56   the sources or should all build output go into a separate directory?
57   Is there a "package" rule that builds a distributable package of
58   the project?  Sidestep these decisions by trying to allow either to
59   be implemented, rather than choosing, even if that results in
60   more verbosity.
61
62 * get dependencies correct, and in particular situations that are
63   difficult to get right with Makefiles (e.g. outputs need an implicit
64   dependency on the command line used to generate them; to build C
65   source code you need to use gcc's `-M` flags for header
66   dependencies).
67
68 * when convenience and speed are in conflict, prefer speed.
69
70 Some explicit _non-goals_:
71
72 * convenient syntax for writing build files by hand.  _You should
73   generate your ninja files using another program_.  This is how we
74   can sidestep many policy decisions.
75
76 * built-in rules. _Out of the box, Ninja has no rules for
77   e.g. compiling C code._
78
79 * build-time customization of the build. _Options belong in
80   the program that generates the ninja files_.
81
82 * build-time decision-making ability such as conditionals or search
83   paths. _Making decisions is slow._
84
85 To restate, Ninja is faster than other build systems because it is
86 painfully simple.  You must tell Ninja exactly what to do when you
87 create your project's `.ninja` files.
88
89 Comparison to Make
90 ~~~~~~~~~~~~~~~~~~
91
92 Ninja is closest in spirit and functionality to Make, relying on
93 simple dependencies between file timestamps.
94
95 But fundamentally, make has a lot of _features_: suffix rules,
96 functions, built-in rules that e.g. search for RCS files when building
97 source.  Make's language was designed to be written by humans.  Many
98 projects find make alone adequate for their build problems.
99
100 In contrast, Ninja has almost no features; just those necessary to get
101 builds correct while punting most complexity to generation of the
102 ninja input files.  Ninja by itself is unlikely to be useful for most
103 projects.
104
105 Here are some of the features Ninja adds to Make.  (These sorts of
106 features can often be implemented using more complicated Makefiles,
107 but they are not part of make itself.)
108
109 * Ninja has special support for discovering extra dependencies at build
110   time, making it easy to get <<ref_headers,header dependencies>>
111   correct for C/C++ code.
112
113 * A build edge may have multiple outputs.
114
115 * Outputs implicitly depend on the command line that was used to generate
116   them, which means that changing e.g. compilation flags will cause
117   the outputs to rebuild.
118
119 * Output directories are always implicitly created before running the
120   command that relies on them.
121
122 * Rules can provide shorter descriptions of the command being run, so
123   you can print e.g. `CC foo.o` instead of a long command line while
124   building.
125
126 * Builds are always run in parallel, based by default on the number of
127   CPUs your system has.  Underspecified build dependencies will result
128   in incorrect builds.
129
130 * Command output is always buffered.  This means commands running in
131   parallel don't interleave their output, and when a command fails we
132   can print its failure output next to the full command line that
133   produced the failure.
134
135
136 Using Ninja for your project
137 ----------------------------
138
139 Ninja currently works on Unix-like systems and Windows. It's seen the
140 most testing on Linux (and has the best performance there) but it runs
141 fine on Mac OS X and FreeBSD.
142
143 If your project is small, Ninja's speed impact is likely unnoticeable.
144 (However, even for small projects it sometimes turns out that Ninja's
145 limited syntax forces simpler build rules that result in faster
146 builds.)  Another way to say this is that if you're happy with the
147 edit-compile cycle time of your project already then Ninja won't help.
148
149 There are many other build systems that are more user-friendly or
150 featureful than Ninja itself.  For some recommendations: the Ninja
151 author found http://gittup.org/tup/[the tup build system] influential
152 in Ninja's design, and thinks https://github.com/apenwarr/redo[redo]'s
153 design is quite clever.
154
155 Ninja's benefit comes from using it in conjunction with a smarter
156 meta-build system.
157
158 http://code.google.com/p/gyp/[gyp]:: The meta-build system used to
159 generate build files for Google Chrome and related projects (v8,
160 node.js).  gyp can generate Ninja files for all platforms supported by
161 Chrome. See the
162 https://chromium.googlesource.com/chromium/src/+/master/docs/ninja_build.md[Chromium Ninja documentation for more details].
163
164 https://cmake.org/[CMake]:: A widely used meta-build system that
165 can generate Ninja files on Linux as of CMake version 2.8.8.  Newer versions
166 of CMake support generating Ninja files on Windows and Mac OS X too.
167
168 https://github.com/ninja-build/ninja/wiki/List-of-generators-producing-ninja-build-files[others]:: Ninja ought to fit perfectly into other meta-build software
169 like http://industriousone.com/premake[premake].  If you do this work,
170 please let us know!
171
172 Running Ninja
173 ~~~~~~~~~~~~~
174
175 Run `ninja`.  By default, it looks for a file named `build.ninja` in
176 the current directory and builds all out-of-date targets.  You can
177 specify which targets (files) to build as command line arguments.
178
179 There is also a special syntax `target^` for specifying a target
180 as the first output of some rule containing the source you put in
181 the command line, if one exists. For example, if you specify target as
182 `foo.c^` then `foo.o` will get built (assuming you have those targets
183 in your build files).
184
185 `ninja -h` prints help output.  Many of Ninja's flags intentionally
186 match those of Make; e.g `ninja -C build -j 20` changes into the
187 `build` directory and runs 20 build commands in parallel.  (Note that
188 Ninja defaults to running commands in parallel anyway, so typically
189 you don't need to pass `-j`.)
190
191
192 Environment variables
193 ~~~~~~~~~~~~~~~~~~~~~
194
195 Ninja supports one environment variable to control its behavior:
196 `NINJA_STATUS`, the progress status printed before the rule being run.
197
198 Several placeholders are available:
199
200 `%s`:: The number of started edges.
201 `%t`:: The total number of edges that must be run to complete the build.
202 `%p`:: The percentage of started edges.
203 `%r`:: The number of currently running edges.
204 `%u`:: The number of remaining edges to start.
205 `%f`:: The number of finished edges.
206 `%o`:: Overall rate of finished edges per second
207 `%c`:: Current rate of finished edges per second (average over builds
208 specified by `-j` or its default)
209 `%e`:: Elapsed time in seconds.  _(Available since Ninja 1.2.)_
210 `%%`:: A plain `%` character.
211
212 The default progress status is `"[%f/%t] "` (note the trailing space
213 to separate from the build rule). Another example of possible progress status
214 could be `"[%u/%r/%f] "`.
215
216 Extra tools
217 ~~~~~~~~~~~
218
219 The `-t` flag on the Ninja command line runs some tools that we have
220 found useful during Ninja's development.  The current tools are:
221
222 [horizontal]
223 `query`:: dump the inputs and outputs of a given target.
224
225 `browse`:: browse the dependency graph in a web browser.  Clicking a
226 file focuses the view on that file, showing inputs and outputs.  This
227 feature requires a Python installation. By default port 8000 is used
228 and a web browser will be opened. This can be changed as follows:
229 +
230 ----
231 ninja -t browse --port=8000 --no-browser mytarget
232 ----
233 +
234 `graph`:: output a file in the syntax used by `graphviz`, a automatic
235 graph layout tool.  Use it like:
236 +
237 ----
238 ninja -t graph mytarget | dot -Tpng -ograph.png
239 ----
240 +
241 In the Ninja source tree, `ninja graph.png`
242 generates an image for Ninja itself.  If no target is given generate a
243 graph for all root targets.
244
245 `targets`:: output a list of targets either by rule or by depth.  If used
246 like +ninja -t targets rule _name_+ it prints the list of targets
247 using the given rule to be built.  If no rule is given, it prints the source
248 files (the leaves of the graph).  If used like
249 +ninja -t targets depth _digit_+ it
250 prints the list of targets in a depth-first manner starting by the root
251 targets (the ones with no outputs). Indentation is used to mark dependencies.
252 If the depth is zero it prints all targets. If no arguments are provided
253 +ninja -t targets depth 1+ is assumed. In this mode targets may be listed
254 several times. If used like this +ninja -t targets all+ it
255 prints all the targets available without indentation and it is faster
256 than the _depth_ mode.
257
258 `commands`:: given a list of targets, print a list of commands which, if
259 executed in order, may be used to rebuild those targets, assuming that all
260 output files are out of date.
261
262 `clean`:: remove built files. By default it removes all built files
263 except for those created by the generator.  Adding the `-g` flag also
264 removes built files created by the generator (see <<ref_rule,the rule
265 reference for the +generator+ attribute>>).  Additional arguments are
266 targets, which removes the given targets and recursively all files
267 built for them.
268 +
269 If used like +ninja -t clean -r _rules_+ it removes all files built using
270 the given rules.
271 +
272 Files created but not referenced in the graph are not removed. This
273 tool takes in account the +-v+ and the +-n+ options (note that +-n+
274 implies +-v+).
275
276 `compdb`:: given a list of rules, each of which is expected to be a
277 C family language compiler rule whose first input is the name of the
278 source file, prints on standard output a compilation database in the
279 http://clang.llvm.org/docs/JSONCompilationDatabase.html[JSON format] expected
280 by the Clang tooling interface.
281 _Available since Ninja 1.2._
282
283 `deps`:: show all dependencies stored in the `.ninja_deps` file. When given a
284 target, show just the target's dependencies. _Available since Ninja 1.4._
285
286 `recompact`:: recompact the `.ninja_deps` file. _Available since Ninja 1.4._
287
288
289 Writing your own Ninja files
290 ----------------------------
291
292 The remainder of this manual is only useful if you are constructing
293 Ninja files yourself: for example, if you're writing a meta-build
294 system or supporting a new language.
295
296 Conceptual overview
297 ~~~~~~~~~~~~~~~~~~~
298
299 Ninja evaluates a graph of dependencies between files, and runs
300 whichever commands are necessary to make your build target up to date
301 as determined by file modification times.  If you are familiar with
302 Make, Ninja is very similar.
303
304 A build file (default name: `build.ninja`) provides a list of _rules_
305 -- short names for longer commands, like how to run the compiler --
306 along with a list of _build_ statements saying how to build files
307 using the rules -- which rule to apply to which inputs to produce
308 which outputs.
309
310 Conceptually, `build` statements describe the dependency graph of your
311 project, while `rule` statements describe how to generate the files
312 along a given edge of the graph.
313
314 Syntax example
315 ~~~~~~~~~~~~~~
316
317 Here's a basic `.ninja` file that demonstrates most of the syntax.
318 It will be used as an example for the following sections.
319
320 ---------------------------------
321 cflags = -Wall
322
323 rule cc
324   command = gcc $cflags -c $in -o $out
325
326 build foo.o: cc foo.c
327 ---------------------------------
328
329 Variables
330 ~~~~~~~~~
331 Despite the non-goal of being convenient to write by hand, to keep
332 build files readable (debuggable), Ninja supports declaring shorter
333 reusable names for strings.  A declaration like the following
334
335 ----------------
336 cflags = -g
337 ----------------
338
339 can be used on the right side of an equals sign, dereferencing it with
340 a dollar sign, like this:
341
342 ----------------
343 rule cc
344   command = gcc $cflags -c $in -o $out
345 ----------------
346
347 Variables can also be referenced using curly braces like `${in}`.
348
349 Variables might better be called "bindings", in that a given variable
350 cannot be changed, only shadowed.  There is more on how shadowing works
351 later in this document.
352
353 Rules
354 ~~~~~
355
356 Rules declare a short name for a command line.  They begin with a line
357 consisting of the `rule` keyword and a name for the rule.  Then
358 follows an indented set of `variable = value` lines.
359
360 The basic example above declares a new rule named `cc`, along with the
361 command to run.  In the context of a rule, the `command` variable
362 defines the command to run, `$in` expands to the list of
363 input files (`foo.c`), and `$out` to the output files (`foo.o`) for the
364 command.  A full list of special variables is provided in
365 <<ref_rule,the reference>>.
366
367 Build statements
368 ~~~~~~~~~~~~~~~~
369
370 Build statements declare a relationship between input and output
371 files.  They begin with the `build` keyword, and have the format
372 +build _outputs_: _rulename_ _inputs_+.  Such a declaration says that
373 all of the output files are derived from the input files.  When the
374 output files are missing or when the inputs change, Ninja will run the
375 rule to regenerate the outputs.
376
377 The basic example above describes how to build `foo.o`, using the `cc`
378 rule.
379
380 In the scope of a `build` block (including in the evaluation of its
381 associated `rule`), the variable `$in` is the list of inputs and the
382 variable `$out` is the list of outputs.
383
384 A build statement may be followed by an indented set of `key = value`
385 pairs, much like a rule.  These variables will shadow any variables
386 when evaluating the variables in the command.  For example:
387
388 ----------------
389 cflags = -Wall -Werror
390 rule cc
391   command = gcc $cflags -c $in -o $out
392
393 # If left unspecified, builds get the outer $cflags.
394 build foo.o: cc foo.c
395
396 # But you can shadow variables like cflags for a particular build.
397 build special.o: cc special.c
398   cflags = -Wall
399
400 # The variable was only shadowed for the scope of special.o;
401 # Subsequent build lines get the outer (original) cflags.
402 build bar.o: cc bar.c
403
404 ----------------
405
406 For more discussion of how scoping works, consult <<ref_scope,the
407 reference>>.
408
409 If you need more complicated information passed from the build
410 statement to the rule (for example, if the rule needs "the file
411 extension of the first input"), pass that through as an extra
412 variable, like how `cflags` is passed above.
413
414 If the top-level Ninja file is specified as an output of any build
415 statement and it is out of date, Ninja will rebuild and reload it
416 before building the targets requested by the user.
417
418 Generating Ninja files from code
419 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
420
421 `misc/ninja_syntax.py` in the Ninja distribution is a tiny Python
422 module to facilitate generating Ninja files.  It allows you to make
423 Python calls like `ninja.rule(name='foo', command='bar',
424 depfile='$out.d')` and it will generate the appropriate syntax.  Feel
425 free to just inline it into your project's build system if it's
426 useful.
427
428
429 More details
430 ------------
431
432 The `phony` rule
433 ~~~~~~~~~~~~~~~~
434
435 The special rule name `phony` can be used to create aliases for other
436 targets.  For example:
437
438 ----------------
439 build foo: phony some/file/in/a/faraway/subdir/foo
440 ----------------
441
442 This makes `ninja foo` build the longer path.  Semantically, the
443 `phony` rule is equivalent to a plain rule where the `command` does
444 nothing, but phony rules are handled specially in that they aren't
445 printed when run, logged (see below), nor do they contribute to the
446 command count printed as part of the build process.
447
448 `phony` can also be used to create dummy targets for files which
449 may not exist at build time.  If a phony build statement is written
450 without any dependencies, the target will be considered out of date if
451 it does not exist.  Without a phony build statement, Ninja will report
452 an error if the file does not exist and is required by the build.
453
454
455 Default target statements
456 ~~~~~~~~~~~~~~~~~~~~~~~~~
457
458 By default, if no targets are specified on the command line, Ninja
459 will build every output that is not named as an input elsewhere.
460 You can override this behavior using a default target statement.
461 A default target statement causes Ninja to build only a given subset
462 of output files if none are specified on the command line.
463
464 Default target statements begin with the `default` keyword, and have
465 the format +default _targets_+.  A default target statement must appear
466 after the build statement that declares the target as an output file.
467 They are cumulative, so multiple statements may be used to extend
468 the list of default targets.  For example:
469
470 ----------------
471 default foo bar
472 default baz
473 ----------------
474
475 This causes Ninja to build the `foo`, `bar` and `baz` targets by
476 default.
477
478
479 [[ref_log]]
480 The Ninja log
481 ~~~~~~~~~~~~~
482
483 For each built file, Ninja keeps a log of the command used to build
484 it.  Using this log Ninja can know when an existing output was built
485 with a different command line than the build files specify (i.e., the
486 command line changed) and knows to rebuild the file.
487
488 The log file is kept in the build root in a file called `.ninja_log`.
489 If you provide a variable named `builddir` in the outermost scope,
490 `.ninja_log` will be kept in that directory instead.
491
492
493 [[ref_versioning]]
494 Version compatibility
495 ~~~~~~~~~~~~~~~~~~~~~
496
497 _Available since Ninja 1.2._
498
499 Ninja version labels follow the standard major.minor.patch format,
500 where the major version is increased on backwards-incompatible
501 syntax/behavioral changes and the minor version is increased on new
502 behaviors.  Your `build.ninja` may declare a variable named
503 `ninja_required_version` that asserts the minimum Ninja version
504 required to use the generated file.  For example,
505
506 -----
507 ninja_required_version = 1.1
508 -----
509
510 declares that the build file relies on some feature that was
511 introduced in Ninja 1.1 (perhaps the `pool` syntax), and that
512 Ninja 1.1 or greater must be used to build.  Unlike other Ninja
513 variables, this version requirement is checked immediately when
514 the variable is encountered in parsing, so it's best to put it
515 at the top of the build file.
516
517 Ninja always warns if the major versions of Ninja and the
518 `ninja_required_version` don't match; a major version change hasn't
519 come up yet so it's difficult to predict what behavior might be
520 required.
521
522 [[ref_headers]]
523 C/C++ header dependencies
524 ~~~~~~~~~~~~~~~~~~~~~~~~~
525
526 To get C/C++ header dependencies (or any other build dependency that
527 works in a similar way) correct Ninja has some extra functionality.
528
529 The problem with headers is that the full list of files that a given
530 source file depends on can only be discovered by the compiler:
531 different preprocessor defines and include paths cause different files
532 to be used.  Some compilers can emit this information while building,
533 and Ninja can use that to get its dependencies perfect.
534
535 Consider: if the file has never been compiled, it must be built anyway,
536 generating the header dependencies as a side effect.  If any file is
537 later modified (even in a way that changes which headers it depends
538 on) the modification will cause a rebuild as well, keeping the
539 dependencies up to date.
540
541 When loading these special dependencies, Ninja implicitly adds extra
542 build edges such that it is not an error if the listed dependency is
543 missing.  This allows you to delete a header file and rebuild without
544 the build aborting due to a missing input.
545
546 depfile
547 ^^^^^^^
548
549 `gcc` (and other compilers like `clang`) support emitting dependency
550 information in the syntax of a Makefile.  (Any command that can write
551 dependencies in this form can be used, not just `gcc`.)
552
553 To bring this information into Ninja requires cooperation.  On the
554 Ninja side, the `depfile` attribute on the `build` must point to a
555 path where this data is written.  (Ninja only supports the limited
556 subset of the Makefile syntax emitted by compilers.)  Then the command
557 must know to write dependencies into the `depfile` path.
558 Use it like in the following example:
559
560 ----
561 rule cc
562   depfile = $out.d
563   command = gcc -MMD -MF $out.d [other gcc flags here]
564 ----
565
566 The `-MMD` flag to `gcc` tells it to output header dependencies, and
567 the `-MF` flag tells it where to write them.
568
569 deps
570 ^^^^
571
572 _(Available since Ninja 1.3.)_
573
574 It turns out that for large projects (and particularly on Windows,
575 where the file system is slow) loading these dependency files on
576 startup is slow.
577
578 Ninja 1.3 can instead process dependencies just after they're generated
579 and save a compacted form of the same information in a Ninja-internal
580 database.
581
582 Ninja supports this processing in two forms.
583
584 1. `deps = gcc` specifies that the tool outputs `gcc`-style dependencies
585    in the form of Makefiles.  Adding this to the above example will
586    cause Ninja to process the `depfile` immediately after the
587    compilation finishes, then delete the `.d` file (which is only used
588    as a temporary).
589
590 2. `deps = msvc` specifies that the tool outputs header dependencies
591    in the form produced by Visual Studio's compiler's
592    http://msdn.microsoft.com/en-us/library/hdkef6tk(v=vs.90).aspx[`/showIncludes`
593    flag].  Briefly, this means the tool outputs specially-formatted lines
594    to its stdout.  Ninja then filters these lines from the displayed
595    output.  No `depfile` attribute is necessary, but the localized string
596    in front of the the header file path. For instance
597    `msvc_deps_prefix = Note: including file: `
598    for a English Visual Studio (the default). Should be globally defined.
599 +
600 ----
601 msvc_deps_prefix = Note: including file:
602 rule cc
603   deps = msvc
604   command = cl /showIncludes -c $in /Fo$out
605 ----
606
607 If the include directory directives are using absolute paths, your depfile
608 may result in a mixture of relative and absolute paths. Paths used by other
609 build rules need to match exactly. Therefore, it is recommended to use
610 relative paths in these cases.
611
612 [[ref_pool]]
613 Pools
614 ~~~~~
615
616 _Available since Ninja 1.1._
617
618 Pools allow you to allocate one or more rules or edges a finite number
619 of concurrent jobs which is more tightly restricted than the default
620 parallelism.
621
622 This can be useful, for example, to restrict a particular expensive rule
623 (like link steps for huge executables), or to restrict particular build
624 statements which you know perform poorly when run concurrently.
625
626 Each pool has a `depth` variable which is specified in the build file.
627 The pool is then referred to with the `pool` variable on either a rule
628 or a build statement.
629
630 No matter what pools you specify, ninja will never run more concurrent jobs
631 than the default parallelism, or the number of jobs specified on the command
632 line (with `-j`).
633
634 ----------------
635 # No more than 4 links at a time.
636 pool link_pool
637   depth = 4
638
639 # No more than 1 heavy object at a time.
640 pool heavy_object_pool
641   depth = 1
642
643 rule link
644   ...
645   pool = link_pool
646
647 rule cc
648   ...
649
650 # The link_pool is used here. Only 4 links will run concurrently.
651 build foo.exe: link input.obj
652
653 # A build statement can be exempted from its rule's pool by setting an
654 # empty pool. This effectively puts the build statement back into the default
655 # pool, which has infinite depth.
656 build other.exe: link input.obj
657   pool =
658
659 # A build statement can specify a pool directly.
660 # Only one of these builds will run at a time.
661 build heavy_object1.obj: cc heavy_obj1.cc
662   pool = heavy_object_pool
663 build heavy_object2.obj: cc heavy_obj2.cc
664   pool = heavy_object_pool
665
666 ----------------
667
668 The `console` pool
669 ^^^^^^^^^^^^^^^^^^
670
671 _Available since Ninja 1.5._
672
673 There exists a pre-defined pool named `console` with a depth of 1. It has
674 the special property that any task in the pool has direct access to the
675 standard input, output and error streams provided to Ninja, which are
676 normally connected to the user's console (hence the name) but could be
677 redirected. This can be useful for interactive tasks or long-running tasks
678 which produce status updates on the console (such as test suites).
679
680 While a task in the `console` pool is running, Ninja's regular output (such
681 as progress status and output from concurrent tasks) is buffered until
682 it completes.
683
684 Ninja file reference
685 --------------------
686
687 A file is a series of declarations.  A declaration can be one of:
688
689 1. A rule declaration, which begins with +rule _rulename_+, and
690    then has a series of indented lines defining variables.
691
692 2. A build edge, which looks like +build _output1_ _output2_:
693    _rulename_ _input1_ _input2_+. +
694    Implicit dependencies may be tacked on the end with +|
695    _dependency1_ _dependency2_+. +
696    Order-only dependencies may be tacked on the end with +||
697    _dependency1_ _dependency2_+.  (See <<ref_dependencies,the reference on
698    dependency types>>.)
699 +
700 Implicit outputs _(available since Ninja 1.7)_ may be added before
701 the `:` with +| _output1_ _output2_+ and do not appear in `$out`.
702 (See <<ref_outputs,the reference on output types>>.)
703
704 3. Variable declarations, which look like +_variable_ = _value_+.
705
706 4. Default target statements, which look like +default _target1_ _target2_+.
707
708 5. References to more files, which look like +subninja _path_+ or
709    +include _path_+.  The difference between these is explained below
710    <<ref_scope,in the discussion about scoping>>.
711
712 6. A pool declaration, which looks like +pool _poolname_+. Pools are explained
713    <<ref_pool, in the section on pools>>.
714
715 Lexical syntax
716 ~~~~~~~~~~~~~~
717
718 Ninja is mostly encoding agnostic, as long as the bytes Ninja cares
719 about (like slashes in paths) are ASCII.  This means e.g. UTF-8 or
720 ISO-8859-1 input files ought to work.
721
722 Comments begin with `#` and extend to the end of the line.
723
724 Newlines are significant.  Statements like `build foo bar` are a set
725 of space-separated tokens that end at the newline.  Newlines and
726 spaces within a token must be escaped.
727
728 There is only one escape character, `$`, and it has the following
729 behaviors:
730
731 `$` followed by a newline:: escape the newline (continue the current line
732 across a line break).
733
734 `$` followed by text:: a variable reference.
735
736 `${varname}`:: alternate syntax for `$varname`.
737
738 `$` followed by space:: a space.  (This is only necessary in lists of
739 paths, where a space would otherwise separate filenames.  See below.)
740
741 `$:` :: a colon.  (This is only necessary in `build` lines, where a colon
742 would otherwise terminate the list of outputs.)
743
744 `$$`:: a literal `$`.
745
746 A `build` or `default` statement is first parsed as a space-separated
747 list of filenames and then each name is expanded.  This means that
748 spaces within a variable will result in spaces in the expanded
749 filename.
750
751 ----
752 spaced = foo bar
753 build $spaced/baz other$ file: ...
754 # The above build line has two outputs: "foo bar/baz" and "other file".
755 ----
756
757 In a `name = value` statement, whitespace at the beginning of a value
758 is always stripped.  Whitespace at the beginning of a line after a
759 line continuation is also stripped.
760
761 ----
762 two_words_with_one_space = foo $
763     bar
764 one_word_with_no_space = foo$
765     bar
766 ----
767
768 Other whitespace is only significant if it's at the beginning of a
769 line.  If a line is indented more than the previous one, it's
770 considered part of its parent's scope; if it is indented less than the
771 previous one, it closes the previous scope.
772
773 [[ref_toplevel]]
774 Top-level variables
775 ~~~~~~~~~~~~~~~~~~~
776
777 Two variables are significant when declared in the outermost file scope.
778
779 `builddir`:: a directory for some Ninja output files.  See <<ref_log,the
780   discussion of the build log>>.  (You can also store other build output
781   in this directory.)
782
783 `ninja_required_version`:: the minimum version of Ninja required to process
784   the build correctly.  See <<ref_versioning,the discussion of versioning>>.
785
786
787 [[ref_rule]]
788 Rule variables
789 ~~~~~~~~~~~~~~
790
791 A `rule` block contains a list of `key = value` declarations that
792 affect the processing of the rule.  Here is a full list of special
793 keys.
794
795 `command` (_required_):: the command line to run.  Each `rule` may
796   have only one `command` declaration. See <<ref_rule_command,the next
797   section>> for more details on quoting and executing multiple commands.
798
799 `depfile`:: path to an optional `Makefile` that contains extra
800   _implicit dependencies_ (see <<ref_dependencies,the reference on
801   dependency types>>).  This is explicitly to support C/C++ header
802   dependencies; see <<ref_headers,the full discussion>>.
803
804 `deps`:: _(Available since Ninja 1.3.)_ if present, must be one of
805   `gcc` or `msvc` to specify special dependency processing.  See
806    <<ref_headers,the full discussion>>.  The generated database is
807    stored as `.ninja_deps` in the `builddir`, see <<ref_toplevel,the
808    discussion of `builddir`>>.
809
810 `msvc_deps_prefix`:: _(Available since Ninja 1.5.)_ defines the string
811   which should be stripped from msvc's /showIncludes output. Only
812   needed when `deps = msvc` and no English Visual Studio version is used.
813
814 `description`:: a short description of the command, used to pretty-print
815   the command as it's running.  The `-v` flag controls whether to print
816   the full command or its description; if a command fails, the full command
817   line will always be printed before the command's output.
818
819 `generator`:: if present, specifies that this rule is used to
820   re-invoke the generator program.  Files built using `generator`
821   rules are treated specially in two ways: firstly, they will not be
822   rebuilt if the command line changes; and secondly, they are not
823   cleaned by default.
824
825 `in`:: the space-separated list of files provided as inputs to the build line
826   referencing this `rule`, shell-quoted if it appears in commands.  (`$in` is
827   provided solely for convenience; if you need some subset or variant of this
828   list of files, just construct a new variable with that list and use
829   that instead.)
830
831 `in_newline`:: the same as `$in` except that multiple inputs are
832   separated by newlines rather than spaces.  (For use with
833   `$rspfile_content`; this works around a bug in the MSVC linker where
834   it uses a fixed-size buffer for processing input.)
835
836 `out`:: the space-separated list of files provided as outputs to the build line
837   referencing this `rule`, shell-quoted if it appears in commands.
838
839 `restat`:: if present, causes Ninja to re-stat the command's outputs
840   after execution of the command.  Each output whose modification time
841   the command did not change will be treated as though it had never
842   needed to be built.  This may cause the output's reverse
843   dependencies to be removed from the list of pending build actions.
844
845 `rspfile`, `rspfile_content`:: if present (both), Ninja will use a
846   response file for the given command, i.e. write the selected string
847   (`rspfile_content`) to the given file (`rspfile`) before calling the
848   command and delete the file after successful execution of the
849   command.
850 +
851 This is particularly useful on Windows OS, where the maximal length of
852 a command line is limited and response files must be used instead.
853 +
854 Use it like in the following example:
855 +
856 ----
857 rule link
858   command = link.exe /OUT$out [usual link flags here] @$out.rsp
859   rspfile = $out.rsp
860   rspfile_content = $in
861
862 build myapp.exe: link a.obj b.obj [possibly many other .obj files]
863 ----
864
865 [[ref_rule_command]]
866 Interpretation of the `command` variable
867 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
868 Fundamentally, command lines behave differently on Unixes and Windows.
869
870 On Unixes, commands are arrays of arguments.  The Ninja `command`
871 variable is passed directly to `sh -c`, which is then responsible for
872 interpreting that string into an argv array.  Therefore the quoting
873 rules are those of the shell, and you can use all the normal shell
874 operators, like `&&` to chain multiple commands, or `VAR=value cmd` to
875 set environment variables.
876
877 On Windows, commands are strings, so Ninja passes the `command` string
878 directly to `CreateProcess`.  (In the common case of simply executing
879 a compiler this means there is less overhead.)  Consequently the
880 quoting rules are deterimined by the called program, which on Windows
881 are usually provided by the C library.  If you need shell
882 interpretation of the command (such as the use of `&&` to chain
883 multiple commands), make the command execute the Windows shell by
884 prefixing the command with `cmd /c`.
885
886 [[ref_outputs]]
887 Build outputs
888 ~~~~~~~~~~~~~
889
890 There are two types of build outputs which are subtly different.
891
892 1. _Explicit outputs_, as listed in a build line.  These are
893    available as the `$out` variable in the rule.
894 +
895 This is the standard form of output to be used for e.g. the
896 object file of a compile command.
897
898 2. _Implicit outputs_, as listed in a build line with the syntax +|
899    _out1_ _out2_+ + before the `:` of a build line _(available since
900    Ninja 1.7)_.  The semantics are identical to explicit outputs,
901   the only difference is that implicit outputs don't show up in the
902   `$out` variable.
903 +
904 This is for expressing outputs that don't show up on the
905 command line of the command.
906
907 [[ref_dependencies]]
908 Build dependencies
909 ~~~~~~~~~~~~~~~~~~
910
911 There are three types of build dependencies which are subtly different.
912
913 1. _Explicit dependencies_, as listed in a build line.  These are
914    available as the `$in` variable in the rule.  Changes in these files
915    cause the output to be rebuilt; if these file are missing and
916    Ninja doesn't know how to build them, the build is aborted.
917 +
918 This is the standard form of dependency to be used e.g. for the
919 source file of a compile command.
920
921 2. _Implicit dependencies_, either as picked up from
922    a `depfile` attribute on a rule or from the syntax +| _dep1_
923    _dep2_+ on the end of a build line.  The semantics are identical to
924    explicit dependencies, the only difference is that implicit dependencies
925    don't show up in the `$in` variable.
926 +
927 This is for expressing dependencies that don't show up on the
928 command line of the command; for example, for a rule that runs a
929 script, the script itself should be an implicit dependency, as
930 changes to the script should cause the output to rebuild.
931 +
932 Note that dependencies as loaded through depfiles have slightly different
933 semantics, as described in the <<ref_rule,rule reference>>.
934
935 3. _Order-only dependencies_, expressed with the syntax +|| _dep1_
936    _dep2_+ on the end of a build line.  When these are out of date, the
937    output is not rebuilt until they are built, but changes in order-only
938    dependencies alone do not cause the output to be rebuilt.
939 +
940 Order-only dependencies can be useful for bootstrapping dependencies
941 that are only discovered during build time: for example, to generate a
942 header file before starting a subsequent compilation step.  (Once the
943 header is used in compilation, a generated dependency file will then
944 express the implicit dependency.)
945
946 File paths are compared as is, which means that an absolute path and a
947 relative path, pointing to the same file, are considered different by Ninja.
948
949 Variable expansion
950 ~~~~~~~~~~~~~~~~~~
951
952 Variables are expanded in paths (in a `build` or `default` statement)
953 and on the right side of a `name = value` statement.
954
955 When a `name = value` statement is evaluated, its right-hand side is
956 expanded immediately (according to the below scoping rules), and
957 from then on `$name` expands to the static string as the result of the
958 expansion.  It is never the case that you'll need to "double-escape" a
959 value to prevent it from getting expanded twice.
960
961 All variables are expanded immediately as they're encountered in parsing,
962 with one important exception: variables in `rule` blocks are expanded
963 when the rule is _used_, not when it is declared.  In the following
964 example, the `demo` rule prints "this is a demo of bar".
965
966 ----
967 rule demo
968   command = echo "this is a demo of $foo"
969
970 build out: demo
971   foo = bar
972 ----
973
974 [[ref_scope]]
975 Evaluation and scoping
976 ~~~~~~~~~~~~~~~~~~~~~~
977
978 Top-level variable declarations are scoped to the file they occur in.
979
980 Rule declarations are also scoped to the file they occur in.
981 _(Available since Ninja 1.6)_
982
983 The `subninja` keyword, used to include another `.ninja` file,
984 introduces a new scope.  The included `subninja` file may use the
985 variables and rules from the parent file, and shadow their values for the file's
986 scope, but it won't affect values of the variables in the parent.
987
988 To include another `.ninja` file in the current scope, much like a C
989 `#include` statement, use `include` instead of `subninja`.
990
991 Variable declarations indented in a `build` block are scoped to the
992 `build` block.  The full lookup order for a variable expanded in a
993 `build` block (or the `rule` is uses) is:
994
995 1. Special built-in variables (`$in`, `$out`).
996
997 2. Build-level variables from the `build` block.
998
999 3. Rule-level variables from the `rule` block (i.e. `$command`).
1000    (Note from the above discussion on expansion that these are
1001    expanded "late", and may make use of in-scope bindings like `$in`.)
1002
1003 4. File-level variables from the file that the `build` line was in.
1004
1005 5. Variables from the file that included that file using the
1006    `subninja` keyword.