Pass limited span instead of checking range all the time.

Simplify handling of high/low spans.

Spans are already ordered, so to get high (wide) spans,
all we need is to find first span with upper bound >0x100
and point at it.

Moved wide span barrier to 0x100 rather than 0xFF.

0x100 corresponds to condition 'encoding.szCodeUnit () <= 1',
cause field 'ub' in 'Span' means upper bound of char interval.

Removed useless statistics counter.

Verified with 'assert (dSpans >= lTargets);'

Reclaced class member with a local variable.

Replaced class member with a local variable.

Eliminated redundant variable.

Removed unused variable.

Removed dead code.

Extracted common functionality in codegen -g and -b flags.

Removed obsolete condition (makes no sense in single-pass mode).

Simplified .dot codegen:

- draw a single arrow for all transitions between two given states
- label all arrows with corresponding character ranges in square
  brackests (no "default" label, single characters also appear in
  square brackets)
- .dot output became much smaller, thus pictures are drawn faster
  and generally look better: e.g. it takes ~10x less time to draw
  PHP lexer and the resulting graph is shaped better.

Simplified switch generetion in codegen.

Continued separating .dot case from other cases in codegen.

Continued separating .dot case from other cases in codegen.

Continued separating .dot case from other cases in codegen. Added test.

Continued separating .dot case from other cases in codegen.

Continued separating .dot case from other cases in codegen.

Started to separate .dot case from other cases in codegen.

Removed dead code.

Used 'if (next) assert(next->label == from->label + 1);'
to ensure that code is really dead (and 'next' is always
the next state to 'from').

Hided 'OutputFile' structure.

Code cleanup in input/output:

- Use 'open' function instead of checking return status
  (one may forget to check return status, but if one forgets to
  open file, the error will be obvious)
- Introduced separate file type for header.
  Header is much simpler than output, it doesn't need delayed
  code fragments and can be generated in destructor.

Finally get rid of 'file_info' and 'stream_lc.h'

Reduce 'file_info' usage (in order to get rid of 'stream_lc.h').

'token.h' no longer depends on 'file_info'.

Part of campaign to remove 'stream_lc.h'.

Now input stream is simple 'FILE *'.

This is first part of campaign to remove 'stream_lc.h'.

Dead code elimination.

Removed unused enum members.

I was unsure if delayed generation was also needed for genCondGoto
and genCondTable; so I kept those enum members as a reminder. Now
I know that all conditions are known by the moment re2c block is
parsed and code generation starts.

Moved operator definition to where it belongs.

One pass.

Second pass was used because some information (which influences
early parts of the generated code, e.g enum with condition names
or YYMAXFILL definition) becomes available only at the end of first
pass.

I isolate all (I hope so) these things and generate stubs for them,
which are filled later. I restructured output as follows: the whole
output consists of source and header, each of them is a list of
blocks (corresponding to re2c blocks in source file), each block
is a list of code fragments (which can be either regular strings
with code or stubs that will be filled later).

Updated version to 0.14.1.dev

Release 0.14.

Makefile.am: added bootstrap/re2c.1 to dist files.

Makefile.am: copy re2c.1 to bootstrap files

Makefile.am: added forgotten header.

Makefile.am: removed obsolete MSVC files and added forgotten header.

Updated CHANGELOG and index.html

Updated docs.

Added tests from PHP repository: https://github.com/php/php-src

Test results are almost identical to re2c-0.13.6
(there're some few changes, I believe they are due to
commit 255262b02928d3f38c00dd91952e3253c11c78f1 and
completely harmless).

Renamed YYEOI -> YYLESSTHAN

Revert "Renamed re2c primitives:"

This reverts commit 7f816a85b03dd26f279868b1d0eaddb50bc8eb4c.

Renamed re2c primitives:

    YYPEEK       ---> RE2C_PEEK
    YYSKIP       ---> RE2C_SKIP
    YYBACKUP     ---> RE2C_BACKUP
    YYBACKUPCTX  ---> RE2C_BACKUP_CTX
    YYRESTORE    ---> RE2C_RESTORE
    YYRESTORECTX ---> RE2C_RESTORE_CTX
    YYEOI        ---> RE2C_LESS_THAN

Updated tests and examples accordingly.

Renamed functions:

    expr_eoi        ---> expr_less_than
    expr_eoi_one    ---> expr_less_than_one
    stmt_backupctx  ---> stmt_backup_ctx
    stmt_restorectx ---> stmt_restore_ctx

Fixed changelog formatting on re2c.org.

Added some examples of "--input custom" usage.

Had to modify .gitignore to unmask README in subfolders.

Replaced "YYHAS (n)" with "YYEOI (n)".

The actual meaning of this primitive is to check if
there's not enough characters left in the input stream,
e.g. "(YYLIMIT - YYCURSOR) < n" or whatever else.

Added tests for "--input custom".

This implied modifying runtests.sh, as it couldn't handle
test names of the form "basename.--long-switch.re":
it inserted '-' in front of all switches.

Removed "--input istream".

It's impossible to correctly implement this switch in general,
since not all istreams support seek (simplest counterexample:
std::cin).

Even for simple istreams like std::istringstream, proper
error handling requires adding something like "YYERROR ()".

A little cleanup of new input API:

- moved enum and pretty-printing functions to a class
- renamed files 'input.{h,cc}' to 'input_api.{h,cc}'
- for "--input istream": moved input position increment to 'stmt_restorectx'
- main.cc: removed useless include

New input API.

- command-line switch "--input <default | istream | custom>"
- with "--input default" (the default) no changes to generated code
- with "--input istream" assume YYCURSOR is std::istream object
    and YYLIMIT is length of input stream
- with "--input custom" expose primitives:
    YYPEEK ()
    YYSKIP ()
    YYBACKUP ()
    YYBACKUPCTX ()
    YYRESTORE ()
    YYRESTORECTX ()
    YYHAS (n)

Added test for bug #46.

Added test for bug #47.

Fixed bug #47: Dot output label escaped characters.

Double-escape special characters for dot.
Example:
    17 -> 18 [label="\n"]
results in an "unlabeled" arrow in the rendered graph, but
    17 -> 18 [label="\\n"]
is ok.

Removed outdated MSVC files, cleaned .gitignore

Back up re2c.1 manpage for those who build from git but don't have asciidoc.

Updated version to 0.13.8.dev

Revert "Updated version to 0.13.6.dev"

This reverts commit bbb49c05b95ba951c764a8159e6d461d4a9b6265.

Updated version to 0.13.6.dev

Release 0.13.7.5.

Alternation of 'RegExp's should preserve 'ins_access' attribute.

When one builds 'AltOp' from two 'RegExp's, one sometimes has to
break these 'RegExp's in pieces in order to merge their common prefix.
In such cases, if one of the original 'RegExp's has 'ins_access'
set to 'PRIVATE', it is lost (defaults to 'SHARED') after alternation.

This commit fixes Gentoo bug https://bugs.gentoo.org/show_bug.cgi?id=518904.

Replaced hand-written dynamic type introspection with dynamic_cast.

Fixed typo in comment.

run_tests.sh: set locale "LC_ALL=C" for sed.

This fixes test failure on MacOS X.

release.sh: force directory removal

Updated version to 0.13.7.5.dev

Release 0.13.7.4.

release.sh: don't forget to push as well as push tags

release.sh: updated to use '--enable-docs' in configure

release.sh: renamed configure.in -> configure.ac

Enable 'make docs' only if configured with '--enable-docs'.

./configure --enable-docs checks for asciidoc and a2x

Disallow to use yacc/byacc instead of bison to build parser.

Currently parser fails to build with yacc/byacc.
A slightly modified parser, build by byacc, causes 3 tests to fail.

Renamed configure.in -> configure.ac

Fixed compile error for freebsd5 (found by Sergei Trofimovich).

Sample error:
    parser.y: In function `void re2c::parse(re2c::Scanner&, std::ostream&, std::ostream*)':
    parser.y:564: error: `yyparse' undeclared (first use this function)

run_tests.sh: avoid non-portable sed feature

release.sh: clean tarball directory before rsync'ing to sourceforge

(shouldn't push old tarballs)

Update version to 0.13.7.4.dev

Release 0.13.7.3.

Got rid of asciidoc build-time dependency.

Fixed compilation warning for clang.

Sample warning:
    warning: struct 'RegExp' was previously declared as a class [-Wmismatched-tags]
    struct RegExp; // forward
    ^

Updated version to 0.13.8.dev.

Release 0.13.7.2.

Makefile.am: added prerequisites for man page.

Makefile.am: include man page into dist, respect users CXXFLAGS.

release.sh: allow version of a more general form.

Updated version to 0.13.8.dev

Added tagging to release.sh

Release 0.13.7.1.

Added missing headers to tarball and dist-check to release.sh.

Update version to 0.13.8.dev

Release 0.13.7.

Prepare release 0.13.7.

Reduced space taken by Unicode tests (~700MB -> ~14MB).

Dynamically generate Unicode strings, used in tests,
instead of hardcoding them in source files.

Added tests for '--encoding-policy' option.

Added option to control how invalid code points are treated.

Usage: 're2c --encoding-policy <fail | substitute | ignore> ...'

When re2c encounters invalis code point (e.g., surrogate in Unicode),
it acts with regard to current encoding policy:
    'fail' - fail with error;
    'substitute' - silently substitute offending code point with
        error code point;
    'ignore' - ignore offending code point, consider it valid.

Moved encoding-specific character handling to 'Enc' class.

Disallow to set multiple encodings.

Fail, if someone tries to set non-ASCII encoding
when another non-ASCII encoding is already set.
If encoding has been set successfully, it is
guaranteed to be valid.

Moved 'Range' stuff to separate file.

Makefile: enabled GCC warnings.

Moved character-printing functions to separate file.

Allow all encoding flags in inplace configurations regardless to '-r' flag.

Also allow use '-r' together with '-e'. Added test.

Allow flag names in inplace configurations start with digit (to allow '-8').