ICU-20470 skip data/rules.mk regen for source tarball

- If icu/source/data/locales/root.txt missing, skip
  python rules.mk generation.
- Also, create build directories properly as needed
- Also includes noise changes to configure
  (configure was probably generated using unreleased
   autoconf 2.70 or 2.69 + patches)
- eac8f4b31ab7395abb3a216aa17bafe7af6314ed did not
  regen configure properly, so BUILDTOOL_OPTS is now
  ICU_DATA_BUILDTOOL_OPTS

ICU-20438 Updating index page of C docs with new APIs and fixing links.

ICU-20438 Further updating readme and instructions for commit-checker.

ICU-20438 Fixes issues found during BRS configuration test task.

ICU-20438 Fixes issues found in the no-data testing of ICU4C (BRS health check)

ICU-20438 Review feedback worked in.

ICU-20460 Adding mechanism to build unicore data into dat file.

ICU-20438 Improving commit report instructions and efficiency.

ICU-20438 ICU 64 C API promotion and API Change Report generation.

ICU-20438 Adds fuzzer directory to testinternalheaders.sh

ICU-20454 Fix comparison of keyPath with stackPack in uresbund.cpp

ICU-10923 Fixing dependency graph and filter logic for collation.

- Fixes filterrb.cpp to check for wildcard when at a leaf.
- Adds additional verbose logging to genrb.
- Fixes filtration to add deps to dep_targets instead of dep_files.
- Separates dep_files to common_dep_files and specific_dep_files.

ICU-20438 Adding additional ICU patches to double-conversion.

ICU-20438 Updating instructions for double-conversion.

ICU-20438 Updating double-conversion from upstream master.

ICU-20438 Removing old logKnownIssue fixed by ICU-13591

ICU-20438 64rc BRS, update U_HIDE_ conditionals

ICU-20438 BRS64RC Update urename.h for ICU 64

ICU-20452 Removing extra semicolons from public header files.

(Produced warnings in V8 build system.)

ICU-20438 ICU 64RC BRS - Update readme files.

ICU-20438 ICU4J API signature/serialization test data files

ICU-20438 Fixed eclipse compiler warnings

ICU-20438 Update LICENSE file

ICU-20438 64rc BRS, integrate CLDR alpha2, update MeasureUnit APIs [& resolve conflicts] (#485)

ICU-20243 Fix exhaustive test CI builds to run cintltst.

ICU-20447 fix uloc_getName(x) same as Locale(x).getName() etc. for ""/"und"/"root"

ICU-20438 API status promotion for ICU4J 64

Also includes API tag fixes. build.properties was updated for producing API change report.

ICU-20438 Use proper version for API change report

ICU-20438 Clean up Java import statements

ICU-20438 BRS64RC Fix Clang compiler warnings in ICU4C samples

ICU-20265 Use noexcept instead of throw() in C++ >= 11.

- Adds note directing users of U_NO_THROW to U_NOEXCEPT.

ICU-20438 BRS64RC Update ICU4J version numbers and jar data files

ICU-20438 BRS64RC Update ICU4C version numbers

ICU-20441 fix uninitialized fHasHanYearChar

ICU-20441 force Gannen use for ja@calendar=japanese non-numeric formats if no override (#474)

ICU-20229 update make dist to use git, not svn

- use git instead of svn for versioning
- update generated file names to match official downloads

Example filenames:
- icu4c-63_1-c5749aaf94-src.tgz (includes git hash or tag)
- icu4c-63_1-src.tgz (hard link to above)
- icu4c-src.tgz (symlink)

- icu4c-63_1-c5749aaf94-src.zip (includes git hash or tag)
- icu4c-63_1-src.zip (hard link to above)
- icu4c-src.zip (symlink)

- icu4c-63_1-c5749aaf94-data.zip (includes git hash or tag)
- icu4c-63_1-data.zip (hard link to above)
- icu4c-data.zip (symlink)

- icu4c-63_1-c5749aaf94-docs.zip (includes git hash or tag)
- icu4c-63_1-docs.zip (hard link to above)
- icu4c-docs.zip (symlink)

ICU-20356 Fix compilation warnings 'dllimport' attribute ignored

Methods implementead as 'inline' but not declared 'inline' cause clang++
to throw compilation warnings on Windows. This adds 'inline' to the
relevant method declarations.

ICU-20408 Integrate jpanyear support and related "ja" format changes [& resolve conflicts] (#465)

ICU-20280 PluralRules::forLocale() ignore locale extensions

ICU-20273 Resolve inconsistent behavior of "root", "und", "" in locales

ICU-20252 Update icu-config with more CLDR locales

ICU-13820 ICU4C should use "Etc/Unknown" zone when host TZ detection fails.
Update API docs comments to clarify what is returned in failure cases.

ICU-20351 A few more MSVC warning cleanups. (Mostly adding static_cast)

ICU-20398 Updated tzdata build script to use the rearguard data. Deleted local override that used to simulate rearguard version from icuzones.

ICU-20326 Added Export-Package OSGi header in charset.jar

ICU-20316 case mapping append unchanged text before calling low-level functions that may immediately append the mapping for a code point

ICU-20390 Removes duplicate and obsolete .cpyskip.txt file
in tools/scripts/cpysearch/ directory. The actual .cpyskip.txt file is
now on top level of the repository. Updated readme.txt accordingly.

ICU-20158 Pass ByteSink all the way to _uloc_(addLikely|minimize)Subtags().

This eliminates the need for scratch buffers in any code path that ends
with these functions and also eliminates the need for counting bytes,
something that ByteSink will now handle correctly when needed.

Existing calls to uloc_addLikelySubtags() and uloc_minimizeSubtags()
throughout ICU4C implementation code are also updated to instead use
either the Locale or ulocimp_* functions with the new API.

None of this should have any externally visible effect, it's all about
cleaning up implementation internals.

ICU-20417 Adding parity between NoUnit and MeasureUnit Percent for short forms.

- Use Percent pattern for MeasureUnit Percent instead of the short or narrow form pattern from CLDR.

ICU-20159 Fixing more GCC warnings.

ICU-20345 Skip ahead some files in searchForTZFile

Change-Id: I61042ca66f86457768e8fc0315137051013d2820
Signed-off-by: Semun Lee <semun.lee@samsung.com>

ICU-13591 Refactoring ICU4C MeasureFormat to call NumberFormatter directly.

- Removes redundant data loading in MeasureFormat

ICU-20197 ICU4C Multithreaded tests cleanup

ICU-20217 Interprets fuzzer data as UCHar* instead of UTF-8. The conversion
from assumed UTF-8 resulted in an extremely large percentage of Unicode
replacement characters in the data passed to the API under test.

ICU-20217 Uses fuzzer generated bytes to make random selection of locales, converters,
etc., replacing the random number generator. This way the fuzzer can control
the selections.

ICU-20217 Minor follow-ups from code review.
Removes fuzzer target break_iterator_utf32_fuzzer which does not perform
anything useful what the regular break iterator fuzzer target already performs.

ICU-20217 Fixes for-loop body.

ICU-20217 Uses am allocated buffer to pass head-truncated fuzzer data to the
API under test. The fuzzer may otherwise not detect buffer underflow.
by

ICU-20217 Typing fix.

ICU-20217 Fixing typing.

ICU-20217 Improve fuzzer targets, move truncated fuzzer data into a
new buffer to prevent that buffer underflow goes undetected.

ICU-20217 Fixes buffer management of fuzzer-provided data.

ICU-20217 Factor in PR review comments.

ICU-12902 make create/getInstanceForSkeleton use correct calendar; don't try to capitalize empty field

ICU-20243 Setup triggers for the Exhaustive Tests to only build on the master branch.

ICU-20078 Add JP_ERA_2019 constants, export enableTentativeEra(), add intervalFmt tests with eras

ICU-20243 Enable the Exhaustive Tests in the CI builds.

Using a separate YML file for the Exhaustive Tests configuration so that the Azure Pipelines build can be run separately.

ICU-20413 ICU4C: OOM not handled in initStaticTimeZones() in timezone.cpp.
-Use static allocated memory and placement new to avoid OOM failures.

ICU-13320 ICU4J DateFormatSymbols, add getNarrowEras/setNarrowEras (#386)

ICU-10923 Adding wildcard resource matching.

ICU-10923 Adding file replacement mechanism to buildtool.

ICU-20419 Export internal StackUResourceBundle helper, so it can be used in the i18n library.
Replace all current usages of ures_initStackObject() in the i18n library with the StackUResourceBundle helper.

ICU-20431 Both und_XX and _XX should fall back to the default locale

ICU-20414 Add internal ures_openDirectFillIn API, use in getTZDataVersion to avoid memory allocation for UResourceBundle.

ICU-20415 uregex_start64() and end64() truncation.

ICU-20210 ICU-20211 Cherry-pick fixes from CLDR to unblock exhaustive tests.

Cherry-pick cldrbug 11492: Bad symbols for NaN in sv, ksh, kl, se locales.
Cherry-pick cldrbug 11491: sd, month name for July uses character not in exemplars.
Updated the various ICU4J *.jar files as well.

ICU-20434 ICU4C AppVeyor CI builds failing on Cygwin 3.0.0. Use Cygwin to 2.11 for now.

Also remove the redundant VS2017 build from AppVeyor, since we have Azure Pipelines.

ICU-20254 Handling OOM in AffixTokenMatcherWarehouse.

ICU-20284 Updating docs on mutability of currency fraction digits.

ICU-13731 Adding test for default currency symbol.

ICU-20144 Implementing numsys-dependent range pattern loading.

ICU-20144 Adding test for range pattern consistency.

ICU-20383 DateTimePatternGen should map 'j' using timeData, not short time cycle (#419)

ICU-20342 Adding FormattedDateInterval in Java.

- Adds first SpanField to ICU4J.

ICU-10675 Documentation wrong on ICU4C ListFormatter

ICU-10923 Configure should fail when Python fails.

ICU-20313 Adding more docs about thread-safety of Number[Range]Formatter.

ICU-20410 Fix grandfathered tag w/ extensions

ICU-20108 Adding new parseLenients from CLDR 34 to ICU.

ICU-20409 Additional refactoring of FormattedValue implementations.

- Migrates Number[Range] formatter to helper macros.
- Adds additional macros.
- Syncs docstrings between subclasses.

ICU-20144 Adding better documentation and behavior testing on NumberingSystem.

ICU-20380 Adding error code to DecimalFormat::toNumberFormatter().

ICU-20407 hy-arevela/hy-arevmda can. into hy / hyw

ICU-20203 Unicode 12 data 20190214

ICU-12584 Fix memory allocation for getFormats.
Also:
  Add a test case for inner message, other small cleanup.
  Style fixes, using better test methods

ICU-20365 if roundingIncrement significance smaller than maxFrac, do not use it

ICU-20138 Adding a tech-preview API, constrainFieldAndValue, and updating matchhesField.

ICU-20121 Adding span field for FormattedList.

ICU-20244 Fix gcc stringop-overflow warning/error in uloc.cpp.

ICU-11725 Promoting tech-previews in DecimalFormat to @draft.

- Changes Java DecimalFormat boolean get* methods to is*.
- Makes the new draft methods non-virtual.
- Removes obsolete template class in header file.
- Adds proper U_HIDE tags in unum.h and decimfmt.h

ICU-20121 Fixing docs tags in FormattedList.

ICU-20138 Adding matchesField as draft and removing getConstraintType.

ICU-10923 Remove unused variable AVAILABLE_FEATURES.

ICU-20187 drop support for long-obsolete locale ID variants

ICU-20111 move text layout properties data into a new ulayout.icu data file

ICU-20328 Implement LocaleBuilder
Design Doc: https://goo.gl/Qf12p3

ICU-20416 Various OOM fixes for calendar.cpp

ICU-20100 Change the name of the TimeZone::getDisplayName daylight parameter.

The TimeZone::getDisplayName "daylight" parameter conflicts with an existing macro in the CRT "time.h" header.

ICU-20362 segfault/leftover files with long lines

If a file with an input line larger than INT32_MAX (i.e. 2 GB) contains
an UTF8 character after that limit, escapesrc crashes on 64 bit systems
or does not remove incomplete files on 32 bit systems.

The issue is that an unchecked cast from size_t to int32_t can turn
negative, which results in negative offsets during array access.

This will eventually lead to an out of boundary read, which most likely
crashes the tool.

This patch sets a fixed limit on 1 GB to make sure that no side effects
occur if the line is exactly INT32_MAX or a few bytes less. It should
still be way more than anyone would really need.

Signed-off-by: Tobias Stoeckmann <tobias@stoeckmann.org>

ICU-20363 Out of boundary write on empty file.

If gencnval encounters an empty input file the function resolveAlias
triggers an out of boundary write due to uniqueAliasArr pointing to
a 0 byte reserved memory address.

This patch protects the code in question with a check for
knownAliasesCount being not 0.

Signed-off-by: Tobias Stoeckmann <tobias@stoeckmann.org>

ICU-11991 Fixed memory leak in parse.cpp

Squashed commits for merge.