Function to forcefully convert to some charset.

One can use this function to avoid check for UTF-8 before converting,
this will avoid problems when you know the encoding and it was
accepted as UTF-8 (ie: UTF-16).

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@40 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Set len to 0 if string is empty.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@35 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Fix problem with SubIFD in Exif.

Patch-By: Leonardo Sobral Cunha <leonardo.cunha@openbossa.org>
git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@34 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Check for zero-padded strings.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@33 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Get both lead artist and band, use in order: band, artist

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@32 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Cosmetic simplification.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@31 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Just get "lead artist" (TPE1), don't try others.

id3lib helpers used to get all of those, using an *ordered* search for
the fields.

However these multiple searches were slow and I'm now doing one walk
and registering the found fields, in the order they're listed on the
file. This lead to "composer" showing before "lead artist" and thus
being used, producing undesired results for "cover albums" where you
want the artist to be the playing one, not the original.

We have 2 solutions, I used the first:
 * just get "lead artist", most of tag editors just edit them or at
   least enable users to change that. Most software just use this.
 * get all the fields, consider them as a group for "todo" analysis
   and at the end of the search use in the specific order. This is
   more complex and would require lots of allocation/copy/free to a
   case that is often uncommon.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@30 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Add PNG image support (just size)

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@25 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Add audio-dummy to build.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@24 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Add audio-dummy with missing audio formats.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@23 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Add .wmv to video-dummy.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@22 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Add copyright to all source files.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@19 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Consider DQT frame as JFIF (ignore and get just the size).

If DQT frame is found, then no extra information is available,
consider like JFIF and go straight to image dimension.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@18 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Also get size from other SOF (progressive, extended sequential...)

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@17 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Provide means to stop check/process.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@16 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Add Doxyfiles to EXTRA_DIST

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@10 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

DoxyGen support.

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@5 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Merge branch 'master' of /home/gustavo/Development/git/lightmediascanner

* 'master' of /home/gustavo/Development/git/lightmediascanner: (60 commits)
  Modules are optional, don't fail when they fail.
  Adding support to ogg
  Implement lms_check()
  Refactor lightmediascanner_process.c
  Add missing new lines to messages
  Avoid breaking strict-aliasing rules.
  Use correct pointer types for iconv, avoid warnings.
  Move process stuff into own file, will add lms_check() and use part of it.
  Charset conversion support.
  Change plugin API to take a "context" instead of "db".
  Remove unused API macros.
  Cache lms_db_* per DB instance instead of globally.
  Provide data caching based on DB instance.
  Fix copy&paste legacy: s/ldi/ldv/g in lightmediascanner_db_video.c
  id3lib now uses playcnt.
  Add playcnt to audios table.
  PLS Parser.
  Also index audios by trackno.
  M3U parser.
  Fix memory leak and possible buffer overrun.
  ...

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@2 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Initial Repository Layout

git-svn-id: https://garage.maemo.org/svn/lms/lightmediascanner@1 fe9ffe84-2fc0-424c-a0c2-0ec162e4acf5

Modules are optional, don't fail when they fail.

Adding support to ogg

Implement lms_check()

This function is used to check files previously processed by
lms_process(), it will walk the registered files and stat(2) to see
current status, if required it will reparse files that changed.

Refactor lightmediascanner_process.c

This refactor moves DB-related work to lightmediascanner_db_common.c,
so we can use them later in upcoming lightmediascanner_check.c and
possible others. These DB operations now get the compiled statement,
so each user can create its own "struct db".

Add missing new lines to messages

Avoid breaking strict-aliasing rules.

Use correct pointer types for iconv, avoid warnings.

Move process stuff into own file, will add lms_check() and use part of it.

Charset conversion support.

Now one can register various charsets to try to convert from and then
call lms_charset_conv() to get it converted to UTF-8.

All plugins were fixed to use this function. No non-UTF-8 data should
be stored on DB anymore.

Change plugin API to take a "context" instead of "db".

This makes room to passing more data to plugins without changing the
API every time, will need for upcoming charset support.

Remove unused API macros.

Cache lms_db_* per DB instance instead of globally.

This change enable us to have various lms instances running on
multiple database connections at the same time.

Provide data caching based on DB instance.

Today we're caching lms_db_* instances as a global, this just enable
us to use one db instance. With this new infrastructure we'll be able
to cache those based on DB and thus have multiple sqlite3 connections.

Fix copy&paste legacy: s/ldi/ldv/g in lightmediascanner_db_video.c

id3lib now uses playcnt.

Add playcnt to audios table.

PLS Parser.

Also index audios by trackno.

M3U parser.

Fix memory leak and possible buffer overrun.

Add playlist indexes

Add video indexes

Fix header parameters to make naming consistent.

Playlist database support.

This database helper will be used by upcoming playlist parsers.

Remove thumb size from "images" table.

Leave this to applications, since hardcoding some size and size policy
will not help everybody.

Store file size.

Support DB upgrades.

Tables now have versions and can be upgrade by means of update functions.

Make path a BLOB.

Paths are not supposed to be encoded, but kept as-is, doing
translations may result in files not found if it's not in UTF-8 as
SQLite expect.

Remove unused function.

Use file name if no title is found.

Export db_path attribute via lms_get_db_path()

Check NULL pointers on public-API, log errors.

pkg-config support.

Dummy parser to register videos by extension only.

This parser does no parsing at all, it does not even open the files,
just register files that matches the know extensions.

Video database support.

This database helper will be used by upcoming video parser.

Don't store song length in DB, it's unreliable.

MP3 support using id3lib.

Clear dtime on files that had it but were found again.

If file was deleted (ie: media was unmounted), it's marked with the
time this deletion was detected (dtime). If it's found again (ie:
media was re-mounted), then this should be made 0 (it's not deleted).

Fix typo

Performance improvement and safety check.

 * Just process lms_db_*_start() once.
 * Check if _references would drop below 0 and log.

Audio database support.

This database helper will be used by upcoming MP3 parser.

Add lms_db_bind_int64_or_null().

This function will be used to handle cases where int64 fiels can be
NULL, like the upcoming lightmediascanner_db_audio.c

Cosmetic changes (static and remove string spaces).

Remove useless debug message.

Split plugin start and setup phase.

Earlier SQLite3 version doesn't provide sqlite3_prepare_v2(), so if
you change the database schema (ie: create another table or trigger,
...) the previously prepared statements are invalidated and need to be
regenerated, sqlite3_prepare_v2() does that for us, but we need not to
rely on that to run on some older platforms (maemo bora).

Plugins now should create tables on setup() and prepare statements on
start().

Add functions missing in older SQLite3 versions (maemo bora uses it).

JPEG parser plugin.

This plugin is self contained and can parse JPEG images, it's able to
get image size, comments, artist, date and more.

There are just two to-do items:
 * get GPS data.
 * check if worth using mmap() to minimize seeking while reading IFD.

Make some errors non-fatal.

If scanner failed or directory doesn't exist, just log and continue.

Delete files that failed all parsers.

Replace "is_valid" with "dtime" (deletion time), so we can expire them.

Split out db utilities from core and add image db functions.

Refactor lightmediascanner.c, move utilities to
lightmediascanner_db_common, add lightmediascanner_db_image with
functions to be used by image parsers.

Plugins now have a start/finish call before enter the processing loop.

Add lightmediascanner_utils.

It provides:
 * lms_strstrip(): remove spaces from string begin and end, accounts length.
 * lms_which_extension(): check which of the given extension the name ends,
   returns it index.

Add missing empty definition for GNUC_NON_NULL() for non-GCC compilers.

Build system improvements.

Support configurable commit_interval.

Commit interval is the number of files to be scanned in each transaction.

SQLite3 support.

It still does just one transaction for the whole process, if one
parser fails, then the whole set of changes is lost.

Setup things for future SQLite integration: stat, match and friends.

Parsers now should provide match() callback to say if it will handle
parse() on that file, this enable us to register in DB files that are
in use and avoid parsing if stat() reports newer mtime.

Add configurable slave_timeout support.

Initial revision of Light Media Scanner.

Provides barebones for future work, plugin support is already
included, but no SQLite3 handling is done yet.