[scanner] Make it compatible with Python 2.5 again

with statement is available in python 2.5, but only
if you import it from __future__

Enhancement #612253 - add configure --with-glib-src=PATH

This enables glib documentation to be added to the generated gir using the original source
eg. --with-glib-src=/usr/src/glib

Revert "Fix non-source-dir build failure"

This reverts commit 26c66df6bdc3e3ce836c7462958fa38cc3e1062f.

[scanner] Revert static method pairing

Static method pairing changes the API and should be futher
discussed in https://bugzilla.gnome.org/show_bug.cgi?id=572408

[scanner] Clarify exception message

Fix non-source-dir build failure

Make sure all giscanner python files are available in builddir, so the module
is invokable during build time.

https://bugzilla.gnome.org/show_bug.cgi?id=571591

Signed-off-by: Theppitak Karoonboonyanan <thep@linux.thai.net>

[pep8] Skip emacs backup files

[scanner] Remove a bunch of unused functions

Bug 628594 — Handle slashes when building _gir_name

Convert slashes to underscores in _gir_name so that non-recursive builds can
use Makefile.introspection. Closes: bgo#628594

Remove extra lines from the license comment

[VFuncBlob] Unknown struct offset should be 0xFFFF

Documentation says about g_vfunc_get_offset():

 "Obtain the offset of the function pointer in the class struct.
  The value 0xFFFF indicates that the struct offset is unknown."

But g-ir-compiler did set the value to 0 when the offset is unknown.
This patch fixes it.

https://bugzilla.gnome.org/show_bug.cgi?id=628270

[tests] Link libfoo against girepository

To avoid undefined references to gi_cclosure_marshal_generic

Fixes https://bugzilla.gnome.org/show_bug.cgi?id=625995

Update CONTRIBUTORS

[girepository] Document GIStructInfo & GIUnionInfo

https://bugzilla.gnome.org/show_bug.cgi?id=628753

scanner: Add backwards compatibility with some annotation types

These were listed on the wiki up until just now...

scanner: Don't clear out ctype on annotation strings if we fail to resolve

We don't have an "annotation source" for Type right now; so as a quick
hack, stuff it in the ctype but only if we fail to resolve.

scanner: Fix previous rename-to handling commit

scanner: Fix rename-to handling

We were writing the attributes backwards.  Also actually use
the attribute in the typelib generation.

scanner: Fix misuse of message.warn_symbol

The "symbol" is actually just a string identifier, not
a real symbol.  We already added the file positions when
parsing earlier.

scanner: Readd --warn-error to tests, fix test case

Commit b6fb70f9 wrongly disabled fatal warnings - in fact there
is a way to make this test case work, and it was a bug in the
scanner not processing virtual function annotations correctly.

Add a different test case for un-named parameters that doesn't
have a callback.

Remove old everything.[ch]

scanner: Actually exit with code 1 on fatal warnings again

Fix typo (reported by philn-tp)

[scanner] Move a function from transformer to ast

It doesn't use any internal state, so it can easily
be moved over to the type as a factory function

[test] Add warning tests for enums

[tests] Handle multiple errors per file better

girepository: Call init_globals()

This fixes the search path initialization if g_irepository_require
is called first thing.

[scannermain] Use mkstemp

Since the delete parameter of NamedTemporaryFile is only
available on python 2.6

[giscanner] Make pyflakes happy

[tests] Add callback scope tests

And fix a bug in the warning call in the scanner

[tests] Rework tester to be executed once per test

Instead of running all tests in the same instance

[tests] Add test infrastructure for warnings

Add an infrastructure for testing warnings, add two
examples how to verify warnings

[scanner] Improve an error message, include lineno

[message] exit after calling message.fatal()

scanner: Associate constructors with correct class

scanner: Add --include-uninstalled

We need a way to add a .gir file, without also attempting to load
the pkg-config file for it (since it may not be installed yet).

Example: clutter builds multiple .gir files, Cally-1.0 depends on
Clutter-1.0.

[scannermain] Create a new option parser

Create a new option parser when parsing pkg-config output

[message] Add an output parameter

[scanner] Remove old logging functions

And migrate over to using the message logger

[scanner] Move over remaining callsites to message

Move the remaining callsites over to the new message
module

[scanner] Simplify strip_identifer/strip_symbol

The strip_* functions are problematic since they
have a fatal switch which determines if the message should
kill the scanner. Change the api to make it easier to extend
with other logging categories and move over the callsites to
use the new message module

[scanner] add a message module

This module will be used to report warnings, which
doesn't explicitly depend on the transformer instance.

scanner: Don't throw an exception on unresolved types

Instead we'll warn in the introspectablepass.

[scanner] Allow nameless parameters for vfuncs

Add a test case and disable fatal warnings since there's
currently no way to avoid the warning(s)

Fixes https://bugzilla.gnome.org/show_bug.cgi?id=628567

[scanner] Move namespace out of Transformer

[transformer] Don't pass around source scanner

Pass around its symbols instead

[annotationparser] Send in comments directly

[scanner] Create the cachestore in the transformer

[scanner] Remove support for xpath assertions

It has been broken for a while and nobody uses it.

[scannermain] Hide a couple of private options

[scannermain] Use _error() consistently

[scannermain] Simplify writing of output data

Make the common case (no validation) much simple and
add error checking while writing the output

[scannermain] Use return instead of sys.exit()

[scannermain] Use shutil.move instead of os.rename

In case that the temporary directory and the output directory
is not on the same filesystem.

[scannermain] Write to tempdir if needed

If the current directory is not writable nor if
the directory of the output file isn't, use the standard
temporayr directory as a last resort.

[scannermain] Add - as an alias for stdout

[scannermain] Sort imports alphabetically

scanner: Also look for enums and bitfields with GType names

scanner: Better handling of GType names

Before, Type instances could be indeterminate, holding a "ctype",
which means "This is some unresolved string".  However, we also get
data from GType, so add gtype_name as another indeterminate state.

Clean up how we create and resolve Type instances from GType data.

girepository: Fix compatibility typedefs

scanner: Skipped nodes aren't introspectable either

tests: Move FooSkippable to public headers to test comments in headers

scanner: Don't parse constructors on non-registered, warn for return values

First, we can't support constructors on unregistered types.

Second, warn if we see a return value of an unregistered.

scanner: Cosmetic cleanup to namespace parsing functions

For symmetry with split_ctype_namespaces, have add split_csymbol_namespaces
too, and simplify the implementation of split_csymbol.

scanner: Refactor name parsing

First, merge the implementations of parsing both identifiers and
symbols, since they had more in common than they had differences.

Secondly, fix the logic for priority of --accept-unprefixed in
the presence of unprefixed includes.  The current namespace should
win.  An example of this is mutter which has unprefixed public
symbols, but also includes xlib, which has no prefix.

Third, for unprefixed namespaces, actually look at the contents
rather than just blindly returning them.  This is a bit of a hack,
but better than the alternatives.

scanner: Add --accept-unprefixed

This is necessary for Mutter right now.

scanner: Avoid infinite loop in constructor check

[GIRepository] Add missing transfer and skip

[GIRepository] Rename GTypelib to GITypelib

Keep a typedef for backwards compatibility, until
the major bindings has moved over.

[GIRepository] Rename GArgument to GIArgument

Keep a typedef for backwards compatibility, until
the major bindings has moved over.

[girepository] Add a couple of missing transfer

configure: Bump version to 0.9.5

No official release yet, but this allows consumer configure.ac
to check for a new enough version.

makefile: Fix name of maintransformer

scanner: Filter interface prerequisites and class implements for unknown types

This works around the hidden GtkFileChooserEmbed interface of GtkFileChooserWidget.

scanner: Add a hack for AtkAttributeSet

scanner: Better handling of empty namespace prefix for X

Add namespacing prefixes to the static .gir files.  Support the empty
prefix, as is needed for xlib.

scanner: Avoid internal invalid Type instances from parents

We were adding a trailing ',' in the parent string, clean that up; and
don't attempt to create a Type from the empty string.

major: Fix parent for GInitiallyUnowned

gimarshallingtests: Fix (inout) test cases, drop unsupported API

First, (inout) doesn't mean "mutates the argument".  It means "I take an
input argument here, and will also return a *new* argument in this position."

C API which mutates e.g. structures is just unannotated.  Mutation of
containers like GList, GHashTable is simply disallowed.

Secondly, we can't support C API which returns non-boxed structures with
a transfer other than (none).  The scanner will warn about this in the future.

tests: A few fixes for building

tests: Readd gimarshallingtests.[ch]

For backwards compatibility with tests, for now resurrect these
test cases (also, fix the namespacing on them while we're here).

Like Everything, these get installed in source form.

Major rewrite

One of the first big changes in this rewrite is changing the Type
object to have separate target_fundamental and target_giname properties,
rather than just being strings.  Previously in the scanner, it was
awful because we used heuristics around strings.

The ast.py is refactored so that not everything is a Node - that
was a rather useless abstraction.  Now, only things which can have
a GIName are Node.  E.g. Type and Field are no longer Node.

More things were merged from glibast.py into ast.py, since it isn't
a very useful split.

transformer.py gains more intelligence and will e.g. turn GLib.List
into a List() object earlier.  The namespace processing is a lot
cleaner now; since we parse the included .girs, we know the C
prefix for each namespace, and have functions to parse both
C type names (GtkFooBar) and symbols gtk_foo_bar into their
symbols cleanly.  Type resolution is much, much saner because
we know Type(target_giname=Gtk.Foo) maps to the namespace Gtk.

glibtransformer.py now just handles the XML processing from the dump,
and a few miscellaneous things.

The major heavy lifting now lives in primarytransformer.py, which
is a combination of most of annotationparser.py and half of
glibtransformer.py.

annotationparser.py now literally just parses annotations; it's
no longer in the business of e.g. guessing transfer too.

finaltransformer.py is a new file which does post-analysis for
"introspectability" mainly.

girparser.c is fixed for some introspectable=0 processing.

pep8: Update to 99 length lines

69 is just too short for a compiler with long error messages and
nested code.

tests/scanner: Update annotations and tests

First of all, add missing (transfer) annotations that will be
required by the new scanner.

Other changes:
Don't use the (type bitfield) hack; the new scanner will not accept it.
Use shifts in the flag constants instead.

Use typedefs consistently for structures.

Drop scanning of anonymous structure/union members.

Use GLib types consistently

Rather than have the scanner/parser handle both e.g. "glong" and
"long", simply use the GLib types everywhere.

This commit adds TYPE_LONG_LONG and TYPE_LONG_DOUBLE to the
scanner types; however, rather than add them to the typelib,
they're just marked as not-introspectable.

Move alias target to <type>

This makes type parsing more uniform.

Delete the typedef for GSList in foo.h - that's not
supported anymore, or at least for now.

tests: Fix namespacing for BarApp (should be just Bar)

tests: Remove GIMarshallingTests, rename Everything to Regress

GIMarshallingTests will be replaced with automatically
generated code; it was far from comprehensive, and was a pain
to maintain.

The namespacing in Everything was broken; it had an empty C
prefix effectively, because all the symbols just started with
"test".  We do want "test" as part of the symbols, since otherwise
the exported API would be weird.  Fix this by changing the namespace
to Regress (i.e. prefixing all the C code with Regress).  This
makes sense anyways because Everything wasn't really Everything.

We no longer install a pre-built regress.(so,gir,typelib); instead we
install the C code to
$(datadir)/gobject-introspection/tests/regress.[ch].
Bindings should compile this.

gobject-introspection-1.0.pc: Export datadir

This will be used for consumers to find regress.[ch].

.gitignore: Update

scanner: If GI_SCANNER_DEBUG is set, drop into a debugger on error

Useful when debugging build problems for both me, and potentially over
IRC.

Add pre-commit to EXTRA_DIST

Makefile.introspection: Add _EXPORT_PACKAGES variable.

This new variable maps to --pkg-export.

add annotation for g_get_language_names

Add properties to Everything.TestObj for testing more types

Fix warning when using g_irepository_enumerate_version()

The reason for the warning was that g_irepository_get_version() expects
the typelib to be already loaded, but enumerate_version() can be called
on typelibs that are not.

Include the loaded version in g_irepository_enumerate_versions()

Logically speaking, the already loaded version of a namespace is part of
the currently available versions, and can be forgotten if we only
consider the versions available in GI_TYPELIB_PATH, as it could have
been loaded using g_irepository_require_private().

As a side effect, it meant that bindings relying on enumerate_version()
(like pygobject) were not able to require private versions through their
classical requirement scheme.

This patch fixes it by adding the loaded version to the unsorted list of
available versions returned by g_irepository_enumerate_versions()

This patch also uses g_list_prepend() instead of g_list_append() in that
function.

https://bugzilla.gnome.org/show_bug.cgi?id=625983

Add a pre-commit hook and enforce it

[gircompiler] Clean up parsing

We never actually include multiple modules in the compiler,
so just nuke that.  Also rather than passing around GIrModule
consistently pass around a GIrTypelibBuild structure which
has various things.

This lets us maintain a stack there which we can walk for
better error messages.

Also, fix up the node lookup in giroffsets.c; previously
it didn't really handle includes correctly.  We really need to
switch to always using Foo.Bar (i.e. GIName) names internally...

[girepository] Fix up error printing

We didn't show the right error message if we failed to find
the symbol; fix this by removing error printing from the
middle of the dumper, and add it correctly to the toplevel
dump entry point.