Hide backend-specific shape functions

Also remove shaper_options argument to hb_shape_full().  That was
unused and for "future".  Let it go.

More shaper API coming in preparation for plan/planned API.

Add names to enums

gdb was showing <anonymous enum> instead of useful stuff, so name
all our enums.

Make it an error to include non-top-level headers

Users should #include <hb.h> (or hb-ft.h, hb-glib.h, etc), but
never things like hb-shape.h directly.  This makes it easier to
refactor headers later on without breaking compatibility.

Minor

Fix bug with not setting Unicode props of the first character

Fixes Mongolian shaping issue:
https://bugs.freedesktop.org/show_bug.cgi?id=45695

Minor

Add Mongolian test case

Fix left-matra positioning in Indic

Fixes 200 failures out of previous 4290 cases in the OO.o Indic
dictionary (of ~16000 entries).

Adjust TODO

[hangul] Apply *jmo features to all Hangul chars

This is what old HB does.  Morever, fixes rendering with Win8 malgun
font.  The Win7 version doesn't compose with either Uniscribe nor HB,
but Win8 version works as expected, like Uniscribe, with this change.

Lets call Hangul done for now.

Update TODO

Add Hangul test

Fix diff tool

Don't create hb_apply_context_t per glyph!

I couldn't measure significant performance gains out of this; maybe
about 5% (with one million Malayalam strings).  Still, not bad.
But reminds me that optimizing this codebase without profiling first
is simply not going to work.  Oh well...

Fix shape to presentation forms font check

As reported by Jonathan Kew on the list.

Fix build with some compilers

As reported by Jonathan Kew on the list.

In Arabic fallback shaping, check that the font has glyph for new char

Minor

Implement Arabic fallback shaping mandatory ligatures

Do Arabic fallback shaping

Generate fallback Arabic shaping table

Not hooked up yet.

Add Thai shaper that does SARA AM decomposition / reordering

That's not in the OpenType spec, but it's what MS and Adobe do.

Minor

Add Thai test case for SARA AM decomposition

Move around

Move code around, in prep for Thai/Lao shaper

Add simple Hangul shaper that recomposes Jamo when feasible

Previously, we were NOT actually recomposing Hangul Jamo.  We do now.
The two lines in:

test/shaping/texts/in-tree/shaper-default/script-hangul/misc/misc.txt

Now render the same with the UnDotum.ttf font.  Previously the second
linle was rendering boxes.

We can also start applying OpenType Jamo features later.  At this time,
I have no idea how the 'ljmo', 'vjmo', 'tjmo' features are supposed to
work.  Maybe someone can explain them to me?

Implement normalization mode HB_OT_SHAPE_NORMALIZATION_MODE_COMPOSED_FULL

In this mode we try composing CCC=0 with CCC=0 characters.  Useful for
Hangul.

Bring normalization algorithm closer to the spec

No logical difference so far.

Flip logic around

Add Hangul test case

Composed, and decomposed, of the same text.

Add normalize mode

In preparation for Hangul shaper.

More moving code around

Move code around

More sorting by Unicode version

This is the most convenient way to browse scripts.

Minor

More Unicode script age annotation, and a couple more RTL scripts

Cross-checked with Mark Davis's spreadsheet at http://goo.gl/x9ilM

Make src tests pass again

Separate Unicode 3.1 and Unicode 3.2 additions

Route three Unicode 6.1 scripts through Indic shaper

Add Unicode 6.1.0 scripts

Lydian and Kharoshthi are right-to-left

Whitespace

Use generic shaper for Buhid

As requested by Jonathan Kew.

We need to devise a better mechanism to choose which scripts to
pass through the Indic shaper.  Moreover, currently we are storing
data for some scripts in the Indic shaper that are not even going
through that shaper.  Need to find a better way...

Update Indic table to Unicode 6.1 data

Typo

Minor doc fixes

Add Hebrew diacritics test cases

From:
https://bugzilla.mozilla.org/show_bug.cgi?id=662055

Fix cluster formation in Indic

Makes number of failures against Uniscribe with hi_IN dictionary from
OO.o to go down from 6334 to 4290.  Not bad for a one-line change!

Mozilla Bug 729626 - ASAN: heap-buffer-overflow HTML

Fix atomic-int op on Apple

The OSAtomicAdd32Barrier operator returns the new value, we want the
old value.

Add support for atomic int and mutex on Apple systems

So, apparently there's no atomic int 'get' method on Apple.  You have to
add(0) to get.  And that's not const-friendly.  So switch inert-object
checking to a non-atomic get.  This, however, is safe, and a negligible
performance boost too.

Remove unused hb_atomic_int_set()

Apparently it can't be implemented on OS X.  We weren't using it anyway.

Add hb-warning.cc.  Oops!

Allow disabling multi-threaded support

By defining HB_NO_MT.

Also, only warn once per missing MT feature support.

Mozilla Bug 666661 - gfx/harfbuzz/src/hb-prive.h - compiler warnings on mac

Minor

Followup: Reorder Hebrew combining classes for better rendering

Patch from Jonathan Kew.

Bug 662055 - advanced Hebrew diacritics are shown correctly only in
particular order.

Reorder Hebrew combining classes for better rendering

Patch from Jonathan Kew.

Bug 662055 - advanced Hebrew diacritics are shown correctly only in particular order

Add test case from https://bugzilla.mozilla.org/show_bug.cgi?id=714067

Minor error handling

Update git.mk to new upstream

Make checks more OS X friendly

Fix check-header-guards on OS X

Minor

Add a few more tests

Add a couple Thai test cases from Thep

Add Devanagari test from Tom Hacohen

Also ignore "ChangeLog" in manifests

Remove newline

Allow --color=html in hb-diff

Not that useful right now as we don't escape < and >.  Perhaps
another tool can be added to convert the ANSI output to HTML.

Fallback to Latin script if the font has no other usable scripts

Patch and description from Jonathan Kew:

It turns out that some legacy Thai fonts provide OpenType substitution
features to implement mark positioning, but (incorrectly) put those
features/lookups under the 'latn' script tag instead of using 'thai' (or
possibly 'DFLT'). See
https://bugzilla.mozilla.org/show_bug.cgi?id=719366 for an example and
more detailed description.

Although this is really a font bug, I suggest that we could improve the
rendering of such fonts by looking for the 'latn' as a fallback if
neither the requested script nor "default" is found in
hb_ot_layout_table_choose_script. Suggested patch against harfbuzz
master is attached.

This does _not_ affect the other kind of legacy Thai font, where custom
code to support vendor-specific PUA codepoints would be needed. I'm not
keen to go down that path; IMO, such fonts should be ruthlessly stamped
out in favour of standards-based solutions. :)

JK

More shoveling around

Cleanup

Distribute testing tools

Speed up colorless diff

Cleanup manifest code

Port hb-manifest-update to Python

Ignore Broken Pipe errors

[util] Make clusters work with char offset instead of UTF-8 offset

This means the --features indices also refer to char position
instead of byte position now.  Same for cluster values reported
by hb-shape.

Will add an option for byte indices later.

Correctly print out Unicode strings

Misc fixes

Port hb-manifest-read to Python

Add final residues from test-shape-complex

Add Punjabi tests from test-shape-complex also

Add Tamil test data from Muguntharaj Subramanian

Import test data from late test-shape-complex

Fix Unicode encoding issue

Make test tools interactive

By bypassing readlines() buffering.

Move most testing logic into hb_test_tools.py

The actual utils are one-liners now.

Remove test-shape-complex

New shaping testsuite and framework coming.

Add hb-unicode-encode

[hb-shape] Add parantheses around --show-text output

Add hb-diff-filter-failures

Move

Minor

Minor

[test/shaping] Add some Indic test data for the new test suite

Imported from UTRRS.

Fix

Move hb-diff to test/shaping/

Add hb-unicode-decode

Minor