ICU-20923 Fix compact notation with percent.

ICU-13727 limit length of input for Punycode encode/decode

See #1241

ICU-21249 BRS68RC Version update and regenerate configure for v68

BRS68RC Updating files for release

ICU-21247 Move #include "unicode/localpointer.h" into U_SHOW_CPLUSPLUS_API block

ICU-13727 add U_INPUT_TOO_LONG_ERROR & ICUInputTooLongException

ICU-21035 Replace backward compatibility _getVariant*() functions.

The one single caller of _getVariantEx() is _getVariant() and this in
turn only has 3 callers, one of which is commented out (so it can be
deleted), one of which doesn't actually do anything (so it too can be
deleted) and one which can be replaced by inlining the use of
CheckedArrayByteSink.

This also allows _getVariantEx() to be renamed to _getVariant() as it's
the only such function left now.

ICU-13416 change Armenian (hy) uppercase/titlecase of և ligature ech-yiwn

ICU-21036 use StringBuilder(String str) not StringBuilder(int capacity)

ICU-21051 Add Locale::createCanonical performance test

ICU-20164 Make NoUnit a zero-cost abstraction over MeasureUnit.

See #1230

ICU-21246 Handle kilogram SI prefix correctly

Fix kilogram parsing: ignore 'kilogram' as a stem, we have 'gram'.

Failures in the added unit test before the fix: withSIPrefix resulted
in 'microkilogram', and kilogram's prefix was considered to be
"ONE" (i.e. 10^0).

ICU-20927 Adding French narrow duration unit test.

ICU-21242 rephrase documentation using term master

See #1255

ICU-21240 Removing unused makefile files and updating docs.

ICU-21066 Copy includelist of CLDR testData with tools/cldr/build.xml

ICU-21232 Improve performance of DecimalFormat#parse on long numbers

ICU-21028 Adding ICU version file generation to tools

See #1248

ICU-21035 Replace backward compatibility locale_getKeywords() function.

By updating the last 3 callers to do dynamic memory allocation instead,
the fixed memory buffer function becomes obsolete.

ICU-21249 Updating double-conversion for ICU 68

ICU-21035 Remove obsolete use of CharString::getAppendBuffer().

The complicated buffer allocation code is inherited from times past but
no longer serves any purpose, it's now possible to instead simply call
the CharString copy constructor.

ICU-21035 Replace backward compatibility ulocimp_getCountry() overload.

By always calling the dynamic memory allocation implementation directly
instead, the fixed memory buffer boundary gets pushed one step further
towards the edges.

ICU-21035 Replace backward compatibility ulocimp_getScript() overload.

By always calling the dynamic memory allocation implementation directly
instead, the fixed memory buffer boundary gets pushed one step further
towards the edges.

ICU-21157 Fix test code

See #1256

ICU-21230 Add status to MaybeStackArray(int32_t newCapacity), plumb it through.

ICU-21035 add & use CharString::extract(dest buffer)

See #1253

ICU-21184 rephrase docs/comments using the term grandfathered

ICU-21157 Fix incorrect null termination.

See #1236

ICU-21035 Replace backward compatibility ulocimp_getLanguage() overload.

By always calling the dynamic memory allocation implementation directly
instead, the fixed memory buffer boundary gets pushed one step further
towards the edges.

ICU-20808 Add test for the C locale to default to en_US_POSIX

ICU-21237 Copyright fix

ICU-21159 Fix memory leaks in cintltst TestUsingDefaultWarning.

ICU-21237 Improving how file deletion and cleanup works by adding a build label.

See #1246

ICU-21219 Fix for Java version number overflow problem

Internal API VersionInfo.javaVersion() maps Java version number to  4 integer fields. Each field must be up to 255. However, recent OpenJDK 8 update exceed this range.

Luckily, we have only one reference in our code base for checking Java version. CharsetUTF16 uses maxBytePerChar = 4 for Java 5 and older, maxBytePerChar = 2 for newer Java version. Because we no longer support Java 5 runtime, we don't need this conditional check.

We don't have any other uses of VersionInfo.javaVersion(). Java's version range is not what we can control, so I decided to delete the internal use only API completely.

ICU-20088 fix code, tables, typos, broken links, add code styling

ICU-21149 Integrating LocaleDistanceBuilder functionality into LDML tooling

See #1165

ICU-21066 Improvements in Ant build files

See #1224

ICU-21227 Fixing pseudo locale generation to include RTL control chars in exemplars

See #1237

ICU-20774 Add option to icupkg to allow missing deps between resource files.

ICU-20088 User Guide migration: Fix links on formatting page.

ICU-21159 Document U_USING_DEFAULT_WARNING in .h

Document the fact
uloc_getDisplay(Language|Script|Country|Variant|Keyword|KeywordValue)
would fallback with the code, case canonicalied in same cases, and
set the status to U_USING_DEFAULT_WARNING.

No change to the implementation behavior. Only complete the missing
comments and tweak line wrap, remove double spaces and add test to
validate this pre-existing behavior that I added the documents now.

ICU-21228 fix test broken by https://github.com/unicode-org/cldr/pull/615

ICU-20088 User Guide migration: Add navigation structure and TOC for Jekyll, fix formatting issues, etc.

ICU-20088 User Guide migration: Add custom 404 page, and add Gemfile/Gemfile.lock for Jekyll.

ICU-20088 User Guide migration: Initial setup with Jekyll and the Just-The-Docs theme.

Using the theme from: https://github.com/pmarsceill/just-the-docs

ICU-21030 validate ACE label edge cases

ICU-21212 full range check for Punycode digits

ICU-21217 Windows: Fix link command for extra/scrptrun

ICU-21182 Adding UNumberRangeFormatter (C API).

See #1193

ICU-21056 Remove obsolete logKnownIssues in CompactDecimalFormatTest

ICU-21057 Remove obsolete logKnownIssue for ICU-11025

ICU-21191 Improve configurability of testtagsguards.sh

ICU-21176 Add aliases for terms "whitelist" and "blacklist" in data filter

See #1189

ICU-21174 Add error-checking methods to MaybeStackVector & MemoryPool.

- MaybeStackVector::emplaceBackAndCheckErrorCode()
- MemoryPool::createAndCheckErrorCode()

Started with cherry-picks of:
3b505977c0e82659896125698389b59eabe50b14
63b93bde5c4c9fe030d490d5d448087aa0d4e5fd

ICU-20725 Fix stack overflow of u_unescapeAt

See #1207

ICU-21216 Windows: Ensure directory exists before running rc

When building in parallel it's possible that the rc command is invoked
before other rules get around to creating the output directory.

ICU-21174 Debug msg nitpick: s/MaybeStacArray/MaybeStackArray/

ICU-21174 Delete not-to-be-used methods. Add a constructor warning.

ICU-21174 Add a memory allocation check in MeasureUnit.

ICU-20088 turn off liquid processing in MessageFormat page

ICU-20088 index page for ICU GitHub Pages

Entry point to find the new home of the User Guide.

ICU-20088 Move User Guide to Markdown

See #919

ICU-21059 Load simple unit IDs from convertUnits.

PR: https://github.com/icu-units/icu/pull/41
Commit: 7877f0409019827b2d8d43b0843656322181972b

ICU-21174 Increase safety of Measure and writeAffixes.

Measure: initialize unit to nullptr, and don't dereference it if it is
nullptr.

NumberFormatterImpl::writeAffixes: U_ASSERT not-null, instead of
segfaulting for coding mistakes.

ICU-21175 Add cnvalias as a dependency of misc_res

ICU-21076 Delete unneeded MeasureUnit data & code

ICU-20465 Calendar/DateFormat listen to tz extension

See #1176

ICU-21158 Fix doc of UDISPCTX_NO_SUBSTITUTE

See #1200

ICU-20734 Improve fuzzer_driver

See #1204

ICU-21122 Fix flaky TestAdoptCalendarLeak

ICU-20684 Fix uninitialized in isMatchAtCPBoundary

Downstream bug https://bugs.chromium.org/p/oss-fuzz/issues/detail?id=15505
Fix Fuzzer-detected Use-of-uninitialized-value in isMatchAtCPBoundary

To test to show the bug in the new test case, configure and build with
CFLAGS="-fsanitize=memory" CXXFLAGS="-fsanitize=memory" ./runConfigureICU \
  --enable-debug --disable-release  Linux  --disable-layoutex

Test with
cintltst /tsutil/custrtst

ICU-21178 Add check for corrupt rbbitst.txt data.

In the test data from rbbitst.txt, two or more adjacent boundary markers with
no intervening test data were accepted, with no indication of a problem.

This situation occurred, as described in bug ICU-21178, with a bad import of
some test cases from CLDR. PR #1194 corrected the problem with the test data
in ICU4C. This PR adds code to flag this situation in the test data, and
also propagates the data fix to ICU4J's copy of rbbitst.txt.

ICU-21160 Fix the length return by preflight

See #1178

ICU-13590 RBBI, improve handling of concurrent look-ahead rules.

Change the mapping from rule number to boundary position to use a simple array
instead of a linear search lookup map.

Look-ahead rules have a preceding context, a boundary position, and following context.
In the implementation, when the preceding context matches, the potential boundary
position is saved. Then, if the following context proves to match, the saved boundary is
returned as an actual boundary.

Look-ahead rules are numbered, and the implementation maintains a map from
rule number to the tentative saved boundary position.

In an earlier improvement to the rule builder, the rule numbering was changed to be a
contiguous sequence, from the original sparse numbering. In anticipation of
changing the mapping from number to position to use a simple array.

ICU-13339 Do not parse decimal point for integers

ICU-21192 MeasureUnit Identifier spec compliance: s/p/pow/

Specification:
https://www.unicode.org/reports/tr35/tr35-general.html#Unit_Identifiers

ICU-20697 Delete now unused files and documentation for the old ICU LDML tooling.

ICU-21178 Adding the trailing space back into two RBBI test cases.

ICU-11992 uprv_tzname doesn't return valid time zone on Android

ICU-21173 Add support for more currency variants. ICU4C equivalent of…

See #1184

ICU-21174 Add a const version of MaybeStackVector::getAlias().

(Also makes a tiny tweak to appendAll() documentation.)

ICU-21176 spoof checker: remove whitelist/blacklist metaphors from API docs

ICU-13733 Added test for mismatching currency format for strict-mode parsing

See #1169

ICU-21170 Fix function prototypes

ICU-21177 Update README.md badges to point to new Azure Pipelines URL.

ICU-21177 Skip running the Exhaustive tests on changes to docs and other files.

ICU-20545 Ensure that path ends with detected file separator

CharString, when asked, appends U_FILE_SEP_CHAR at the end of the string
it holds, if it won't find U_FILE_SEP_CHAR or U_FILE_ALT_SEP_CHAR there.
The problem starts if the dir variable uses
U_FILE_ALT_SEP_CHAR which is not equal to U_FILE_SEP_CHAR. Then the
resulting path could look like this
../data\
instead of this
../data/

This patch uses U_FILE_SEP_CHAR unless it detects that the dir variable
doesn't use it, and uses U_FILE_ALT_SEP_CHAR instead.

ICU-21144 LocaleMatcher setMaxDistance(), isMatch()

ICU-21142 Hopefully fixing the install script (bash only)

ICU-20869 Fix compiler warning in FixedDecimal::getFractionalDigits().

Fix a clang compiler warning and a potential undefined behavior arising
from casting an out-of-range double to an int. See the Jira ticket for a
more detailed description of the problem.

This PR is to fix the immediate problem. Longer term, the function
may be replaced entirely - see issue ICU-21147.

ICU-21142 Improving Maven handling of CLDR API Jar file for new tools.

ICU-20545 Detect file separator char from dir

If udata_create won't find U_FILE_SEP_CHAR at the end of a dir variable,
then it appends it. The problem starts if the dir variable uses
U_FILE_ALT_SEP_CHAR which is not equal to U_FILE_SEP_CHAR. Then the
resulting path could look like this
../data\mappings/cns-11643-1992.ucm
instead of this
../data/mappings/cns-11643-1992.ucm

This patch uses U_FILE_SEP_CHAR unless it detects that the dir variable
doesn't use it, and uses U_FILE_ALT_SEP_CHAR instead.

ICU-21165 Add LdmlConverter UNITS output, update SUPPLEMENTAL_DATA.

- Produce new supplementalData.txt and units.txt with:

      ant -f build-icu-data.xml -DoutDir=/tmp/new_dir \
          -DcldrVersion=37 -DoutputTypes=UNITS,SUPPLEMENTAL_DATA

ICU-21169 Add SingleUnitImpl::getSimpleUnitID().

Also:
- Use BytesTrie not UCharsTrie.
- Add a nullptr check for a uprv_malloc.

ICU-21161 Mark uloc_getDisplayScriptInContext static

Remove from urename.h

ICU-21137 Adjust VSCode IDE settings and README.

ICU Pull Request #1159.

- Set intltest's Current Working Directory correctly to enable finding
  resources.
- Adds c_cpp_properties.json, primarily for the includePath settings.
- Load average takes a while to respond, specify -j24 to always limit
  parallel jobs to a maximum of 24.
- make's "-l" parameter is system load average, not CPU percentage.
  A load average of 90 makes my laptop unusable, changing to -l20.
- Make running all tests the unit-testing default.
- Document the adjustments that can be made in the README.
- Skip these json files when checking for copyright notices. Pure json
  does not permit comments, so c_cpp_properties.json cannot have
  comments.
- defines += U_DISABLE_RENAMING=1 to simplify reference following.

Rebased from 00a5d6dd5c.

ICU-13565 Break Iteration, remove the dictionary bit from the implementation.

For identifying text that needs to be handled by a word dictionary for Break Iteration,
change from using a bit in the character category to sorting all dictionary categories
together, and recording the boundary between the non-dictionary and dictionary ranges.

This is internal to the implementaion. It does not affect behavior.
It does increase the number of character categories that can be handled using a
compact 8 bit Trie, from 127 to 255.

ICU-21078 Improve instructions and gitignore files for cldr-to-icu.

This also adds .idea/ to the top-level .gitignore, next to .vs/ and
.vscode/.

ICU-21149 Adding a helper to allow simpler debugging of mappers.

ICU-21109 minimum grouping digits in DecimalFormat

See #1152

ICU-21143 Applying non-zero offset to null pointer is undefined behaviour.

The result of pointer end + 1 will not be used if end is nullptr so it
doesn't really matter that the result of this operation is undefined,
but it's therefore also unnecessary to perform the operation at all.

Changing this removes this unnecessary operation and by doing so gives
the undefined behaviour sanitizer one thing less to worry about.