Merge pull request #592 from lz4/compressEnd

fix LZ4F_compressEnd()

fixed #589

following recommendations by @raggi.

The fix is slightly different, but achieves the same goal,
and is backed by a test tool which proves that it works
(generates the error before the patch, no longer after the patch).

added a test for LZ4F_compressEnd()

which actively tries to make it write out of bound.
For this scenario to be possible,
it's necessary to set dstCapacity < LZ4F_compressBound()

When a compression operation fails,
the CCtx context is left in an undefined state,
therefore compression cannot resume.
As a consequence :
- round trip tests must be aborted, since there is nothing valid to decompress
- most users avoid this situation, by ensuring that dstCapacity >= LZ4F_compressBound()

For these reasons, this use case was poorly tested up to now.

Merge pull request #588 from khabinov/stream-dirty-followups

Some followups and renamings

Merge pull request #586 from blezsan/custom_block_sizes

support custom block sizes

support custom block sizes: fix memory leak to make CI builds happy

Some followups and renamings

support custom block sizes: remove unneeded fudging, fix leaked filehandles, other nits

Merge branch 'dev' into custom_block_sizes

Merge pull request #587 from lz4/hintbug

fixed improper hint

Merge pull request #580 from khabinov/stream-error-flag-initCheck

Rename initCheck to dirtyContext and use it in LZ4_resetStream_fast()

fixed improper hint

when LZ4F_decompress() decodes an uncompressed block,
it provides an incorrect hint for next block
when frame checksum is enabled and block checksum is not.

Impact is low : the hint is just an hint,
the decoder works whatever the amount of input provided.

But the assumption that each call to LZ4F_decompress()
would generate just one complete block if input size hint was respected
was broken by this error.

Rename initCheck to dirtyContext and use it in LZ4_resetStream_fast() to check if full reset is needed.

support custom block sizes: fix const

support custom block sizes: fix usage message & remove unused functions

support custom block sizes - fix types

support custom block sizes

Merge pull request #578 from lz4/support128bit

Support for 128bit pointers like AS400

changed LZ4_streamDecode member order

to reduce memory usage on 128-bits systems

Merge pull request #581 from lz4/cppcheck

Added cppcheck static analyzer test

tried to clean another bunch of cppcheck warnings

so "funny" thing with cppcheck
is that no 2 versions give the same list of warnings.

On Mac, I'm using v1.81, which had all warnings fixed.
On Travis CI, it's v1.61, and it complains about a dozen more/different things.
On Linux, it's v1.72, and it finds a completely different list of a half dozen warnings.

Some of these seems to be bugs/limitations in cppcheck itself.
The TravisCI version v1.61 seems unable to understand %zu correctly, and seems to assume it means %u.

Merge branch 'dev' into cppcheck

Merge pull request #579 from lz4/xxhash

updated xxhash to latest version

added cppcheck

as Makefile target and Travis CI test.

Fixed last cppcheck warnings in tests and examples

fixed minor cppcheck warnings in examples

fixed minor cppcheck warnings in programs

fixed minor cppcheck warnings in lib

updated xxhash to latest version

increase size of LZ4 contexts for 128-bit systems

Merge branch 'dev' into support128bit

Merge pull request #575 from lz4/apiDoc

unpublish static-only functions

increase lz4hc context size as constant for 128-bit systems

use byU32 mode for any pointer > 32-bit

including 128-bit, like IBM AS-400

Merge pull request #574 from lz4/enumComma

avoid final trailing comma for enum lists

Merge pull request #573 from laffer1/laffer1-pkgconfig-mnbsd

FIx pkgconfig file installation on MidnightBSD

updated build doc

unpublish static-only function

these functions are now unpublished in dll by default.
One needs to opt-in, using macro LZ4_PUBLISH_STATIC_FUNCTIONS.

used this opportunity to update a bunch of api comments in lz4.h

avoid final trailing comma for enum lists

as detected in #485 by @JoachimSchneider.

Refactored the c_standards tests
so that these issues get automatically detected in CI tests.

removed image from repository

used for v1.8.2 announcement

fixed NEWS for v1.8.3

FIx pkgconfig file installation on MidnightBSD

updated NEWS for v1.8.3 release

Merge branch 'dev' of github.com:Cyan4973/lz4 into dev

Merge pull request #571 from lz4/mflimit

 clarify constant MFLIMIT

clarify constant MFLIMIT

and separate it from MATCH_SAFEGUARD_DISTANCE.

While both constants have same value,
they do not seve same purpose, hence should not be confused.

Merge pull request #569 from lz4/circle2

Migrate CircleCI tests from 1.0 towards 2.0

Merge pull request #570 from lz4/partialDecode

Partial decode

fixed minor warning in fuzzer.c

added a few more comments and assert()

restored nullifying output

to counter possible (offset==0)

removed temporary debug traces

Merge branch 'dev' into partialDecode

Merge pull request #569 from lz4/circle2

Migrate CircleCI tests from 1.0 towards 2.0

Merge pull request #565 from lz4/lz4f_init

Introduced constants LZ4F_INIT_*

switched to circle 2.0

using automated config-translation

Merge branch 'dev' of github.com:Cyan4973/lz4 into dev

Merge pull request #567 from laffer1/dev

Add support for MidnightBSD

Add support for MidnightBSD

fixed fuzzer test

and removed one blind copy, since there is no more guarantee that at least 4 bytes are still available in output buffer

updated function interface documentation

first sketch for a byte-accurate partial decoder

updated API documentation

Merge pull request #563 from lz4/docDict

updated documentation for dictionary compression

added comments on version numbers

Merge pull request #564 from lz4/cTime

fixed compression time

frameCompress : added an error detection case

check for potential input data not consumed.

Merge branch 'dev' into lz4f_init

Merge pull request #548 from cd127/dev

Fix bug in frame decompress example

Introduced constants LZ4F_INIT_*

to simplify initialization of lz4frame.h structures.
Partially in response to #546.

Merge pull request #556 from kou/add-missing-exeext

Add missing $(EXT)

fixed compression time

displayed at the end (#555)

Merge pull request #562 from lz4/roundTrip

Round trip test for #560

updated documentation regarding dictionary compression

following suggestion from @stbrumme (#558)

Also : bumped version number, regenerated man page and html doc

removed one assert() condition

which is not correct when using LZ4_HC with dictionary and starting from a low address (<0x10000).

made roundTripTest fully general

no longer "locked" on level 9

fixed #560

it was a fairly complex scenario,
involving source files > 64K
and some extraordinary conditions related to specific layout of ranges of zeroes.
and only on level 9.

fix minor cast warning for C++ compilation

new test program : roundTripTest

make a round trip test with arbitrary input file,
generate an `abort()` on error,
to work in tandem with `afl`.

note : currently locked on level 9, to investigate #560.

Add missing $(EXT)

Merge pull request #553 from mrjoel/mrjoel/cmake-optional-lz4c

Add CMake option to not build legacy lz4c program

Add CMake option to not build legacy lz4c program

Merge pull request #552 from jackluo923/dev

fixed spelling mistake in lz4_manual and lz4.h

fixed spelling mistake in lz4.h

fixed spelling mistake in lz4_manual

Merge pull request #547 from jennifermliu/dev

Add --fast command to cli

Merge pull request #550 from terrelln/compress-doc

Fix LZ4_compress_fast_continue() docs

Fix LZ4_compress_fast_continue() docs

Fixes #549.

Fix bug in frame decompress example

The decompression was failing as the srcEnd pointer in
decompress_file_internal was wrongly computed beyond
the end of the memory block.
We need to account for the fact that the header ("info")
was already read in the calling function ("alreadyConsumed").

Fixed bugs about incorrect acceleration calculation and benchmarking negative compresion level

Fixed invalid argument test and reformatted else

Fixed code based on comments from pull request

Removed duplicated circile.yml file

Fixed lz4 not found error part 2

Fixed lz4 not found error

delete commented out code in bench.c

fix yml file

Fixed bug about file to be compressed is not present

Added --fast command to cli

set up sample .ysml

Merge pull request #543 from nrgiii/aix_32bit_fuzzer

Aix 32bit fuzzer

Merge branch 'master' of https://github.com/nrgiii/lz4 into aix_32bit_fuzzer