ICU-20119 Additional changes to UTF-8 checking script.

ICU-20119 Migrates script that checks for proper UTF-8 encoding in source
files and for absence of BOM in all but text files into the github environment.

ICU-13645 Remove redundant invocations of the Locale copy constructor.

ICU-12973 Enable UWP version of ICU to use Environment variable ICU_ENABLE_TENTATIVE_ERA for testing placeholder names (#124)

- Enable UWP version of ICU to use Environment variable ICU_ENABLE_TENTATIVE_ERA for testing placeholder era names.
- Use LocalArray<int32_t> for the Era Start Dates to simply memory management, so that goto can be removed.
- Also fix some minor typos in header file.

ICU-11276 Adding NumberRangeFormatter (#87)

Formats number ranges, including currencies and measurement units.

ICU-11276 Comment about getParameters() return type.

ICU-11276 Adding more test cases. Fixing minor issues with extended locales.

ICU-11276 Replying to Mark review feedback.

ICU-11276 Replying to Andy review feedback.

ICU-11276 int -> int32_t in number_compact.cpp

ICU-11276 Porting pluralRanges support to Java.

ICU-11276 Fixing pluralRanges data loading and adding more tests.

ICU-11276 ModifierStore wired up in LongNameHandler (C++).

ICU-11276 Plural ranges loaded from data; first implementations of ModifierStore.

ICU-11276 Additional build.xml lines for pluralRanges.

ICU-11276 Adding UChar* method in CharString.

ICU-11276 Adding ModifierStore, groundwork for plural range support.

ICU-11276 Adding pluralRanges.txt data file.

The code was already in NewLdml2IcuConverter, but it was not being called from ICU.

ICU-11276 Fixing ICU4J number range test failures.

ICU-11276 One more attempt at fixing test failure.

ICU-11276 Fixing test failure related to number range.

ICU-11276 Adding Java NumberRangeFormatter implementation.

ICU-11276 Fixing ASAN issue related to number range formatting.

ICU-11276 Deleting impl object in destructor.

ICU-11276 Adding test cases and more API coverage.

ICU-11276 Adding number range spacing heuristic and fixing data loading.

ICU-11276 Wiring SimpleFormatter logic into NumberRangeFormatter.

ICU-11276 Wiring new NumberRangeFormatterImpl code into the API.

ICU-11276 Implementing new methods on Modifier.

Also removes status code from two of the other methods; the status code was used only by MutablePatternModifier for the case of a malformed pattern; this error is better handled directly in the apply() method.

ICU-11276 Initial NumberRangeFormatter implementation.  Needs data loading and implementation of new methods on Modifier.

ICU-11276 Move rounding into preProcess function since the micro generator could have already applied rounding.

ICU-13645 Add C++11 move constructor and assign operator to Locale.

ICU-11276 Rewriring NumberFormatterImpl to expose information needed for NumberRangeFormatter.

ICU-13645 Clean up implementation of Locale::operator=(const Locale&).

Organizing the implementation like this instead will (hopefully) make it
more clear what's being done and make it possible to use analogous
control flow in the copy and move implementations of operator=().

ICU-11276 Replying to code review comments.

ICU-13417 Add the Locale::get(Unicode)?Keywords() functions.

They are C++ template wrappers around Locale::createKeywords() and
Locale::createUnicodeKeywords() respectively, that write to any
container for which an STL style output iterator can be provided.

The simplest imaginable usage would just look like this:

    std::string keys[16];
    l.getKeywords<std::string>(keys, status);

The unit test has a more elaborate invocation, writing to an std::set<>.

ICU-11276 Fixing Javadoc warnings in NumberRangeFormatter.

ICU-13417 Add the Locale::(addLikely|minimize)Subtags() functions.

They are C++ wrappers of uloc_addLikelySubtags() and uloc_minimizeSubtags()
respectively, that take care of dynamic memory management.

ICU-11276 Feedback from ICU-TC. Fixing doxygen warnings.

ICU-13417 Add the Locale::(get|set)(Unicode)?KeywordValue() functions.

ICU-11276 Adding C++ base implementation of NumberRangeFormatter, including unit test.

ICU-13417 Improved error handling in Locale::create(Unicode)?Keywords().

Follow-up from pull request #117:

Specify buffer size in only one place, explicitly check status before
proceeding and set status = U_MEMORY_ALLOCATION_ERROR if new fails.

ICU-11276 Fixing typos in numberformatter.h

ICU-13417 Add the Locale::createUnicodeKeywords() function.

This is a wrapper of Locale::createKeywords() that under the hood calls
uloc_toUnicodeLocaleKey() for each key before returning it, so that the
caller won't have to do this.

ICU-11276 Assorted Java NumberRangeFormatter API improvements.

ICU-20119 Small refactor to ICU4J travis file.

ICU-11276 Adding initial header files for NumberRangeFormatter.

ICU-13801 Clarify Javadoc for BreakIterator.setText() (#69)

ICU-11276 Adding enums and more API docs.

ICU-13417 Add the Locale::(for|to)LanguageTag() functions.

They are C++ wrappers of uloc_forLanguageTag() and uloc_toLanguageTag()
respectively, that take care of dynamic memory management.

ICU-11276 Adding placeholder implementation and more API functions.

ICU-13417 Add the internal helper class CharStringByteSink.

This is an implementation of the public ICU ByteSink interface that
writes to the ICU internal class CharString.

ICU-11276 Adding initial Java NumberRangeFormatter boilerplate.

ICU-20116 remove @deprecated from Edits.Iterator.toString() (#98)

but keep @internal

ICU-12973 CLDR Japanese Era data and tentative Japanese new era support (#111)

* Updated era data format in supplementalData.

* Include tentative era names in data. Implemented Japanese era loaded from CLDR data in ICU4J.

* ICU4C implementation, ICU4C refactoring. WIP.

* VS project updates and some bug fixes

Also added API comments.

* Review feedback and bug fixes

- NULL to nullptr
- use of LocalUResourceBundlePointer
- TYPO "name" to "named"
- env var checking stricmp() == 0

* API comment correction based on feedback

* Duplicate the comment in ucal.h to calendar.h

* Fixed spelling errors in API comment

ICU-13812 Define U_FALLTHROUGH for GCC 7+ for ICU4C. (#100)

Currently U_FALLTHROUGH is not defined for GCC, meaning that any switch case statements with fall-throughs will generate warnings when building ICU4C.

In GCC 7, they added support for: "_attribute_((fallthrough))" which we can now use for U_FALLTHROUGH, which eliminates many warnings when building with GCC.

ICU-13687 ICU4C Enable Windows UWP version to use TZ update/override files. (#31)

Enable the Windows UWP version of ICU4C to use TZ update/override files (.res files) for out-of-band timezone data updates. Also use the *W version of the Windows APIs to avoid code-page conversion.

ICU-20098 Fix BCP47 validity check for extlang and privateuse singleton (#102)

* ICU-20098 Fix the validty check for extlang in uloc_forLanguageTag

BCP 47 has the following for language. extlang subtag can only be
preceded by 2*3ALPHA. Add a check for the length of language subtag
before extlang subtag.

language      = 2*3ALPHA            ; shortest ISO 639 code
                 ["-" extlang]       ; sometimes followed by
                                     ; extended language subtags
               / 4ALPHA              ; or reserved for future use
               / 5*8ALPHA            ; or registered language subtag

 extlang       = 3ALPHA              ; selected ISO 639 codes
                 *2("-" 3ALPHA)      ; permanently reserved}}

With this change, 'hant-cmn-CN' would drop '-cmn-CN' keeping only
'hant'.

* ICU-20098 Fix the validty check for extlang for ICU4J

* ICU-20098 Fix the compiler failure for ICU4J

* ICU-20098 Fix a compile error and test.

* ICU-20098 Add a test for invalid private use  singleton

ICU4C's check for private use singleton subtag ('x') is wrong and
treats invalid language tags as valid.

ICU4J's check is correct and does not require any change.

Fix that and add tests to both ICU4C and ICU4J.

ICU-12979 Fix \Q...\E in UnicodeRegex#transform (#23)

ICU-13754 Add a ListFormatter FieldPositionIterator format method (#109)

ICU-13754 Reapply PR#106 after sffc rewinding master it.

ICU-20103 Using GetLocaleInfoEx to get user default locale instead of using language for UWP app. (#86)

This pull request is to remove COM dependency in ICU, so that ICU does not need to care about if the caller is a UWP or not.

ICU-13834 add pinCapacity() for safer output buffer capacity checking. (#105)

* ICU-13834 add pinCapacity() for safer output buffer capacity checking.

* ICU-13834 pinCapacity, fix typo in comment.

ICU-20086 C++ sets & maps for Unicode properties (#93)

also create ucpmap.h from renamed parts of ucptrie.h

ICU-20017 Fix line endings in Visual Studio *.props files. (#101)

ICU-20022 support quarter in RelativeDateTimeFormatter (#77)

also add UDAT_ABSOLUTE_QUARTER to UDateAbsoluteUnit

ICU-8151 Simplify Finnish Line Break Tailoring, move to root. (#99)

ICU-13754 Move listformatter from common to i18n (#96)

ICU-20027 Support parallel builds with MSYS/MSVC and Cygwin/MSVC (#104)

ICU-13808 Document ArithmeticException thrown by DecimalFormat

- Document the exception in the following methods
setMultiplier, setMathContext, setMathContextICU
- Add test to check the documented behavior

ICU-20110 Adding const to FormattedNumber#appendTo

ICU-8966 ICU-12850 add API/data/code for text layout properties InPC, InSC, vo (#92)

ICU-8966: Indic_Positional_Category & Indic_Syllabic_Category

ICU-12850: Vertical_Orientation

ICU-13712 ICU4C does not report OOM if it fails to memory map the data file(s) (#30)

ICU does not report Out-Of-Memory (OOM) if it fails to memory map the data file(s) when calling the various platform API(s) to do so.

When you are using ICU with memory-mapped data file(s), and ICU fails to map the data file due to being out-of-memory, it does not bubble this failure up to the API that was called. You will instead get back the error U_MISSING_RESOURCE_ERROR, rather than U_MEMORY_ALLOCATION_ERROR, which might be a bit surprising to the caller of the API. This can lead to the application thinking that there are no resources for "en_US" or "en" (or even "root").

This change modifies ICU4C so that it will report back U_MEMORY_ALLOCATION_ERROR if OOM happens when attempting to load the data files.

ICU-20092 Merge pull request #75 from gnrunge/langmatcher

ICU-20092 Integrates new languagematcher enhancements into ICU4J.

ICU-20006 Parameterize the TestSourceTargetSet2 test case.

By extracting this test case into a separate class and separating the
complex and time consuming building of the UnicodeSet disorderedMarks
data structure into an @BeforeClass shared setup method it becomes
possible to test the 18 different transliteration rules as a
parameterized test case.

This will lower the running time per test case and also aid in debugging
as it will make it immediately obvious which transliteration rules cause
test failures (and which don't).

ICU-20092 Integrates new languagematcher enhancements into ICU4J.

ICU-13483 Use a real time zone to make tests work in Android.

When running in Android, java.util.TimeZone.getDefault() will only
return a TimeZone object for a time zone that actually exists, so when
passing a bogus test TimeZone object to setDefault() and afterwards
calling getDefault() it won't return that same time zone.

Changing our tests to instead use a real existing (but otherwise unused)
time zone instead makes the tests work in Android as well.

Neither of these tests was testing the ability to set an arbitrarily
made up time zone as the default, so no test coverage is lost.

ICU-13530 fix doxygen warnings: hide internals, hide struct/enum typedefs, avoid fwd+real struct decl (#84)

ICU-13334 add test for reported word break behavior issue, not reproducable. (#74)

ICU-13530 fix bugs, add tests, clarify docs (#83)

* ICU-13530 test & fix cptrie.getRange() when small null data block matches the start of a non-null fast data block

* ICU-13530 fix test bug

* ICU-13530 test & fix bug calculating worst-case data array capacity at start of compaction

* ICU-13530 docs: clarify buildImmutable() discards upper bits, trie then returns unsigned ints; range iteration slower than if ranges were stored directly

* ICU-13530 accept feedback on docs

ICU-20083 Merge pull request #70 from aheninger/ICU-20083

ICU-20083 Enable Address sanitizer in ICU4C builds.

ICU-13844 Regex unicode properties, add IsXXX forms for Java compatib… (#61)

* ICU-13844 Regex unicode properties, add IsXXX forms for Java compatibility.

* ICU-13844 Regex Property Review fixes from Markus.

ICU-20061 fix 'rm: cannot remove 'current'' warning during build (#65)

need to use force removal in order to not make noise in stderr.

ICU-20083 Enable Address Sanitizer for ICU4C Build.

ICU-13530 add ucptrie.h & umutablecptrie.h to docmain.h (#72)

ICU-20051 fix 'goods=: command not found' warning during build (#64)

a typo 'test/Makefile.in' made noise in stderr.

additionally brought similar code to the common view.

ICU-13530 CodePointMap docs fix s/trie/map/ (#73)

ICU-13696 Parse local currency ISO codes as case-insensitive. (#62)

ICU-11637 Thread sanitizer added to Travis build. (#81)

ICU-20079 integer overflow & divide by zero sanitizer fixes. (#67)

ICU-13664 Merge pull request #80 from aheninger/ICU-13664

ICU-13664 RBBI, add regression test for reported problem. #80

ICU-20001 Adding alignas to static-allocated memory.

Should fix possible crashes on ARM platforms. (#63)

ICU-20043 Compile warning fix with improved portability. (#78)

ICU-13664 RBBI, add regression test for reported problem (already fixed.)

ICU-20000 Workaround for BigDecimal.stripTrailingZeros() differences. (#57)

Different implementations of BigDecimal.stripTrailingZeros(), in
different versions of the JDK (and different versions of Android), have
differences in their handling of zero. To avoid this, ICU4J can return
BigDecimal.ZERO for any value that is equal to zero, instead of calling
BigDecimal.stripTrailingZeros() in this problematic case.

ICU-20079 int overflow in Gregorian Calendar. (#66)

ICU-13530 Use LocalPointer instead of raw new in umutablecptrie.cpp (#59)

Use LocalPointer instead of raw new in umutablecptrie.cpp so that an ErrorCode will be set in the case of out-of-memory (OOM) failures.

ICU-13413 Java 7 for Javadoc build. (#68)

ICU-20054 Revert "ICU-20054 Adding depstest *.pyc to gitignore"

This reverts commit b3629170a80489a94a8f93d0008beb72584c6540.

Made obsolete by commit bfc0093b7f776f0137ddd7bc9ef98f118842dd6e.

ICU-13842 Use GetDynamicTimeZoneInformation instead of Windows registry access in wintz.cpp (#55)

Use GetDynamicTimeZoneInformation instead of accessing the Windows registries so that it does not rely on COM in wintz. So that UWP apps could also use this code.

ICU-13776 Use OpenType.DIRECT for loading the keyTypeData resources.