Avoid out-of-bounds write overflow due to uint32 overflow computation on images with huge dimensions. Credit to Google Autofuzz project for providing test case

Merge pull request #1055 from ideasman42/patch-1

Note that seek uses SEEK_SET behavior.

Note that seek uses SEEK_SET behavior.

opj_t2_encode_packet(): disable setting empty packet header bit to 1 when there is an empty packet

This effectively reverts commit 2609fb8077125b5b31f1bcc2f98c12ff1e6572d7
since it has been reported that
such packets cause decoding issues with cinema J2K hardware
decoders: https://groups.google.com/forum/#!topic/openjpeg/M7M_fLX_Bco

Merge pull request #1047 from stweil/coverity

Fix resource leak (CID 179466)

Merge pull request #1050 from szukw000/changes-for-obsolete-doxygen-tags

Some Doxygen tags are removed

Add known failure for Windows VC10 i386 target (refs #1043)

Some Doxygen tags are removed

Fix resource leak (CID 179466)

Coverity report:

CID 179466 (#1 of 1): Resource leak (RESOURCE_LEAK)
93. leaked_storage: Variable name going out of scope leaks the storage it points to.

Signed-off-by: Stefan Weil <sw@weilnetz.de>

Add known failure for i386 target (refs #1043)

opj_j2k_read_cod: remove check for 'No more than one COD marker per tile' (fixes #1043)

This check was added per https://github.com/uclouvain/openjpeg/commit/daed8cc9195555e101ab708a501af2dfe6d5e001
to fix https://github.com/uclouvain/openjpeg/issues/476 , but it does not seem
to be necessary with latest master (issue476.jp2 doesn't cause memory issues),
and breaks reading legit files.

Fix typo in comments

Merge pull request #1042 from radarhere/cmake

Changed cmake version test to allow for cmake 2.8.11.x

Changed cmake version test to allow for cmake 2.8.11.x

Merge pull request #1037 from gfiumara/master

Add missing fclose() statement in error condition.

Add missing fclose() statement in error condition.

CMakeLists.txt: turn BUILD_PKGCONFIG_FILES ON by default on Windows if compiler is GCC

opj_j2k_set_threads(): add sanity check to error out if called after opj_read_header()

Improve doc of opj_codec_set_threads()

Unix build: fix regression of 2.3.0 where a shared-only or static-only build lacks the installation target for the library (#1019, fixes regression introduced by 3dfc6ca2bcf06fd1adb6b6b4cecc6c092f08ba0b)

opj_decompress -h: document -threads ALL_CPUS

Finalise ABI check update for v2.3.0

Update ABI check for v2.3.0

Update CHANGELOG.md

Update NEWS.md

Update CHANGELOG.md

Update NEWS.md

Preparing v2.3.0 release

Merge pull request #1028 from quangnh89/master

update instructions to build with Visual Studio and 64-Bit Visual C++ Toolset.

update instructions to build with Visual Studio and 64-Bit Visual C++ Toolset.

Merge pull request #1022 from rouault/partial_component_decoding

Add capability to decode only a subset of all components of an image.

Remove opjstyle binary that went inadvertently committed in d4e54e9f35d532062533f1d369c159810b01d224 (#1026)

INSTALL.md: add instructions to build with Visual Studio (#1023, from Winfried instructions)

Merge pull request #1024 from stweil/warnings

Add missing newline at end of file

Add missing newline at end of file

This fixes warnings from the clang compiler:

/openjpeg/src/lib/openjp2/sparse_array.h:141:32: warning:
 no newline at end of file [-Wnewline-eof]

Signed-off-by: Stefan Weil <sw@weilnetz.de>

Add assertion

Comment dead code (Coverity CID 94681)

Workaround Coverity CID 113061

Workaround Coverity CID 169392

opj_j2k_get_default_thread_count(): validate value of OPJ_NUM_THREADS to fix Coverity 179465 and 179463

Fix copy&paste error (Coverity CID 169394)

opj_decompress: add a warning when -d and -t are used together (#693)

Use a #define J2K_MAX_POCS 32 to avoid hard-coded constant (#349)

Avoid index-out-of-bounds access when invoking opj_compress with -n 11 or higher. But not a proper fix itself (refs #493)

Avoid relying on operator precedence (raised by cppcheck)

Workaroudn cppcheck (correct) warning about same code in then and else branches

Fix badly named variable in function prototype (raised by cppcheck)

Remove redundant test (raised by cppcheck)

Replace  C++ style comments by C ones

Replace  C++ style comments by C ones

opj_set_decoded_components(): add a provision for a apply_color_transforms parameter in case we support it in the future

Add capability to decode only a subset of all components of an image.

This adds a opj_set_decoded_components(opj_codec_t *p_codec,
OPJ_UINT32 numcomps, const OPJ_UINT32* comps_indices) function,
and equivalent "opj_decompress -c compno[,compno]*" option.

When specified, neither the MCT transform nor JP2 channel transformations
will be applied.

Tests added for various combinations of whole image vs tiled-based decoding,
full or reduced resolution, use of decode area or not.

src/bin/jp3d/convert.c: add missing fclose() in error code path (#1018)

Fix warnings and errors when compiling with a c++ compiler (#1021)

Fix compilation with AppleClang 8.1.0.8020042 (#1020)

Build: make sure that -DBUILD_SHARED_LIBS:bool=off is honoured to build only the static lib (#1019)

opj_tcd_mct_decode(): avoid heap buffer overflow when components have not the same number of resolutions. Also fixes an issue with subtile decoding. Fixes https://bugs.chromium.org/p/oss-fuzz/issues/detail?id=3331. Credit to OSS Fuzz

opj_j2k_update_image_data(): restrict optimized path

Use opj_image_data_free() where appropriate (adapted from https://github.com/uclouvain/openjpeg/pull/1015/commits/dab9db0723a5bb9f3d745f9dd7a0b8b3b18b8054, #1014)

Properly fix cc893a4ebfaf8c42cf1221ac82c83df91e77340b to avoid heap-buffer-overflow when numcomps < 3

Avoid malloc poisoning issue when including <pthread.h> of uclibc (#1013)

opj_tcd_mct_decode(): fix checks to verify MCT can be done safely. Fixes https://bugs.chromium.org/p/oss-fuzz/issues/detail?id=3305 (master only)

Fix invalid access out of bounds, and bad behaviour, when calling repeatdly opj_get_decoded_tile() on an image with a color palette

Fix 2.2.0 regression when reading codestream with reperated calls to opj_get_decoded_tile() where tile parts of a same tile are not consecutive

This check was introduced per #939, but relied on the incorrect assumption
we decode all the tile parts of all tiles.

Fix null pointer dereference on partial tile decoding when they are empty. Fixes https://bugs.chromium.org/p/oss-fuzz/issues/detail?id=3297 (master only)

Add knownfailures-Ubuntu12.04-gcc4.6.3-x86_64-Release-3rdP.txt

For some reason, the OPJ_CI_ARCH=x86_64 OPJ_CI_BUILD_CONFIGURATION=Release OPJ_NUM_THREADS=2
configuration fails once PR1010 has been merged in master
( https://travis-ci.org/uclouvain/openjpeg/jobs/272219011 ) whereas (almost) the same
code in my branch didn't fail per https://travis-ci.org/rouault/openjpeg/jobs/271738113

The errors we get are the same as with the other x86_64 compilers, so nothing alarming here.

Merge pull request #1010 from rouault/subtile_decoding_stage3

Subtile decoding: memory use reduction and perf improvements

Replace uses of size_t by OPJ_SIZE_T

opj_getopt.c: avoid crash on invalid input (#301)

Improve error message when specifying a too big cp_reduce parameter (#474)

opj_v4dwt_decode_step1_sse(): rework a bit to improve code generation

opj_j2k_update_image_data(): avoid allocating image buffer if we can just reuse the tile buffer one

opj_t1_clbl_decode_processor(): use SSE2 in subtile decoding code path, for irreversible

Replace error message 'Not enough memory for tile data' by 'Size of tile data exceeds system limits' (refs https://github.com/uclouvain/openjpeg/pull/730#issuecomment-326654188)

opj_t1_decode_cblk(): move some code to codeblock processor for (theoretical) better multi-threading in subtile decoding

sparse_array: optimizations for lossy case

opj_tcd_rateallocate(): make sure to use all passes for a lossless layer (#1009)

And save a useless loop, which should be a tiny faster.

opj_j2k_setup_encoder(): emit warnings if tcp_rates are not decreasing or tcp_distoratio are not increasing (#1009)

opj_j2k_setup_encoder(): avoid potential int overflow in computations related to max_cs_size

opj_compress help: revert 32572617765cb9d77302384653a48d793b8f657f and indicate 1 again as being the value to get lossless for -r. In opj_j2k_setup_encoder(), make sure that ll rates[] <= 1.0 are set to 0. Document 0 as being lossless for -q / tcp_distoratio (#1009)

opj_compress help: indicate 0 value, instead of 1, for -r parameter to get lossless encoding (#1009)

opj_v4dwt_decode_step2_sse(): loop unroll

opj_dwt_decode_partial_97(): simplify/more efficient use of sparse arrays in vertical pass

opj_tcd_dc_level_shift_decode(): optimize lossy case

opj_dwt_decode_partial_1_parallel(): add SSE2 optimization

Sub-tile decoding: speed up vertical pass in IDWT5x3 by processing 4 cols at a time

Tiny perf improvement in T1 stage for subtile decoding

test_decode_area: accept user bounds in -strip_height mode

Optimize opj_dwt_decode_partial_1() when cas == 0

opj_j2k_update_image_data(): avoid zero-ing the buffer if not needed

Optimize reading/write into sparse array

Allow several repeated calls to opj_set_decode_area() and opj_decode() for single-tiled images

* Only works for single-tiled images --> will error out cleanly, as currently
  in other cases
* Save re-reading the codestream for the tile, and re-use code-blocks of the
  previous decoding pass.
* Future improvements might involve improving opj_decompress, and the image writing logic,
  to use this strategy.

opj_j2k_decode_tiles(): apply whole single tile image decoding optimization to reading at reduced resolution as well

Various changes to allow tile buffers of more than 4giga pixels

Untested though, since that means a tile buffer of at least 16 GB. So
there might be places where uint32 overflow on multiplication still occur...

TCD: allow tile buffer to be greater than 4GB on 64 bit hosts (but number of pixels must remain under 4 billion)

Fix compiler warning in release mode

Remove limitation that prevents from opening images bigger than 4 billion pixels

However the intermediate buffer for decoding must still be smaller than 4
billion pixels, so this is useful for decoding at a lower resolution level,
or subtile decoding.

opj_tcd_init_tile(): fix typo on overflow detection condition (introduced in previous commit)

opj_dwt_decode_partial_tile(): avoid undefined behaviour in lifting operation by properly initializing working buffer

Sub-tile decoding: only allocate tile component buffer of the needed dimension

Instead of being the full tile size.

* Use a sparse array mechanism to store code-blocks and intermediate stages of
  IDWT.
* IDWT, DC level shift and MCT stages are done just on that smaller array.
* Improve copy of tile component array to final image, by saving an intermediate
  buffer.
* For full-tile decoding at reduced resolution, only allocate the tile buffer to
  the reduced size, instead of the full-resolution size.