Merge branch 'feature/nvs_util_decryption' into 'master'

nvs_util: Add NVS decryption feature + Optimisations

See merge request idf/esp-idf!5003

Merge branch 'feature/add_limitation_for_max_tx_power' into 'master'

esp_wifi: add limitation for setting maximum WiFi TX power

See merge request idf/esp-idf!5331

Merge branch 'bugfix/i2s_apll_clock_fix' into 'master'

driver/i2s: fix apll_clock_rate for different sample rates

See merge request idf/esp-idf!5159

Merge branch 'feature/refactor_etherent_driver' into 'master'

add esp_eth component

Closes IDF-324, IDF-637, and IDFGH-1139

See merge request idf/esp-idf!5111

Merge branch 'feature/esp_flash_init_functions' into 'master'

esp_flash: add initialization interface for SPI devices

See merge request idf/esp-idf!5306

Merge branch 'bugfix/bootloader_header_cxx_guards' into 'master'

bootloader_support: Add C++ header guards

See merge request idf/esp-idf!5349

esp_wifi: add limitation for setting maximum WiFi TX power

Limit the WiFi TX power range to 10dBm ~ 20.5 dBm

Merge branch 'bugfix/pc_ble_prep_buf_memcpy' into 'master'

protocomm_ble : Bugfix for unbound memcpy on prepare write buffer

Closes IDFGH-1350

See merge request idf/esp-idf!5284

Merge branch 'bugfix/btdm_fail_to_config_url_in_eir' into 'master'

components/bt: Fix fail to config URL in EIR

See merge request idf/esp-idf!5352

nvs_util: Add NVS decryption feature

esp_flash: add initialization interface for SPI devices

spi_common: add interface to get whether the bus is on IOMUX

spi_common: deprecate some public APIs

spi_master: move the spi_bus_init function into common header

Merge branch 'feature/ringbuffer_static_allocation' into 'master'

Ringbuffers: Add static allocation, refactor, and update API reference

Closes IDFGH-639 and IDFGH-902

See merge request idf/esp-idf!4426

Merge branch 'feature/remove_mbedtls_cmake_workarounds' into 'master'

mbedtls: remove component CMake file workarounds

Closes #78

See merge request idf/esp-idf!5341

Merge branch 'feature/idf_py_add_positional_args_to_subcommands' into 'master'

idf.py: Make subcommand arguments more flexible

See merge request idf/esp-idf!5198

Merge branch 'bugfix/cmake_esptool_args_path' into 'master'

esptool+cmake: Fix path generation for args.in2 file

Closes IDFGH-1409

See merge request idf/esp-idf!5353

esptool+cmake: Fix path generation for args.in2 file

Path was accidentally generated as build/<absolute path to input file> which creates unexpected path structure on Linux/macOS and breaks Windows (as can't have a directory named "C:".

Regression in e8582e9aa441c3b2d988c73b582b2985f41042ac

Closes https://github.com/espressif/esp-idf/issues/3687
Closes IDFGH-1409

Merge branch 'bugfix/bt_typo' into 'master'

Fix typo from the commit "Reduce the size of DRAM"

See merge request idf/esp-idf!5347

Fix typo from the commit "Reduce the size of DRAM"

Merge branch 'doc/add_Chinese_translation_for_power_management_in_api_references' into 'master'

Add Chinese translation to api-reference/system/power-management.rst

See merge request idf/esp-idf!5265

Add Chinese translation to api-reference/system/power-management.rst

1. Add translation to docs/zh_CN/api-reference/system/power_management.rst
2. Add a link to docs/en/api-reference/system/power_management.rst

Merge branch 'doc/add_Chinese_translation_for_external-ram_in_api-guides' into 'master'

Add Chinese translation for exteral-ram.rst in api-guides:

See merge request idf/esp-idf!5078

Add Chinese translation for exteral-ram.rst in api-guides:

- The draft should be first reviewed by Technical Reviewers;
- Then by Language Reviewer.

Merge branch 'bugfix/btdm_fix_hci_enhance_conn_complete_evt_unpack_error' into 'master'

component/bt: fix hci enhance connection complete event unpack error

See merge request idf/esp-idf!4889

mbedtls: remove component CMake file workarounds

esp_ringbuf: Add static allocation, refactor, and update API reference

This commit updates does the following:
    - xRingbufferCreateStatic() added to allow ringbuffers via to be statically
      allocated. Docs and unit tests update accordingly. Closes #3064

    - Fix doc typos, closes #3248. Updated API reference regarding to mention
      item size limits of no-split buffers when calling
      xRingbufferGetCurFreeSize() or xRingbufferGetMaxItemSize(), closes #3117.

    - Remove the following deprecated types/functions for v4.0
        - xRingbufferIsNextItemWrapped()
        - xRingbufferAddToQueueSetWrite()
        - xRingbufferRemoveFromQueueSetWrite()

Merge branch 'bugfix/btdm_add_readme_for_BLE_demos' into 'master'

Component/bt: add readme doc for BLE demos

See merge request idf/esp-idf!4890

Add subcomand options that become global

idf.py: Add positional arguments to subcommands

Merge branch 'feature/sntp_update_delay' into 'master'

sntp/l_ip: Add SNTP_UPDATE_DELAY option in Kconfig

Closes IDFGH-337

See merge request idf/esp-idf!5271

Merge branch 'feature/btdm_add_ble_ancs_demo' into 'master'

Component/bt: add ble ancs demo

See merge request idf/esp-idf!4688

Merge branch 'feature/fatfs_r013cp4' into 'master'

FatFS: update to R0.13c patch 4

Closes IDF-698, IDFGH-1012, and IDFGH-1017

See merge request idf/esp-idf!5297

Merge branch 'feature/prov_wifi_scan_list' into 'master'

Wi-Fi Provisioning  : Feature Wi-Fi Scan List

See merge request idf/esp-idf!4855

Merge branch 'bugfix/btdm_intr_wdt_after_controller_disable_then_enable' into 'master'

bugfix/btdm_intr_wdt_after_controller_disable_then_enable

See merge request idf/esp-idf!5301

wifi_provisioning : Added Wi-Fi Scan list feature to Provisioning Manager

List of changes in components/wifi_provisioning:
* Manager version is now v1.1
* .proto files and protocomm handler added for sending Wi-Fi scan command and receiving scan results
* Implemented handlers for wifi_scan protocomm endpoint
* Update manager context data structure to hold scan state and results
* scheme_softap now runs Wi-Fi in APSTA mode
* Wi-Fi is started in AP mode when provisioning is started. This is necessary for scan list to work
* Docs updates with information about new wifi_scan endpoint

List of changes in tools/esp_prov:
* Added functions for sending and receiving protobuf messages compatible with wifi_scan protocomm endpoint
* Added feature to display/refresh scan results and accept user selection at runtime
* New functions:
  * get_version() : only returns the protocol version string
  * has_capability() : check is a capability is present according to proto-ver response
* wifi_scan feature is provided only if the `wifi_scan` capability is present

Other changes:
* Replace recursive mutex with plain mutex
* assert on return value of mutex give / take calls
* replace all calls with macros ACQUIRE_LOCK and RELEASE_LOCK
* some checks added in scanning related private APIs
* free and nullify scanning context and state if service is stopped while ongoing scan

components/bt: Fix fail to config URL in EIR

add esp_eth component

Merge branch 'bugfix/stdoutflush' into 'master'

Stdoutflush: Flushing stdout to avoid issues with 64k char limits

See merge request idf/esp-idf!4698

bootloader_support: Add C++ header guards

As reported on forum https://esp32.com/viewtopic.php?f=13&t=11173&p=45470

Merge branch 'feature/flash_encryption' into 'master'

Change flash encryption workflow to development / release

See merge request idf/esp-idf!4125

Merge branch 'bugfix/esp_https_ota_heap_failure' into 'master'

HTTPS OTA: Removed unnecessary free()

See merge request idf/esp-idf!5048

Merge branch 'feature/esp_tls_server' into 'master'

esp_tls: Add support for server side SSL/TLS connection

See merge request idf/esp-idf!5091

Addressing PR comments

Stdoutflush: Flushing stdout to avoid issues with 64k char limits

Merge branch 'feature/upgrade_mbedtls_to_v2.16.1' into 'master'

mbedtls: upgrade to v2.16.2 release

Closes IDF-664

See merge request idf/esp-idf!5130

Merge branch 'feature/ci_relative_submodules' into 'master'

ci: Use relative submodules and a new cleaning working tree feature

See merge request idf/esp-idf!4877

example/https_server: Add default sdkconfig

esp_https_server: Add support for esp-tls server APIs

esp_tls: Add support for server side SSL/TLS connection

Currently, esp-tls supports creation of SSL/TLS connection on the client side.

This commit includes support for creating SSL/TLS connection on the server side.

example/simple_ota_example: Fix python formatting and KConfig

example/simple_ota_example: Add support for skipping OTA server certificate CN field

esp_http_client: Add support to disable validation of certificate's CN field

tcp_transport: Add API to allow skipping of certificate CN validation

example/simple_ota_example: Add example test

esp_https_ota: Removed unnecessary free()

Closes https://github.com/espressif/esp-idf/issues/3504

Merges https://github.com/espressif/esp-idf/pull/3513

Signed-off-by: Jitin George <jitin@espressif.com>

Improve flash encryption documentation and add Development & Release modes

This MR improves existing flash encryption document to provide simplified steps
Adds two new modes for user: Development & Release
Adds a simple example
Supports encrypted write through make command

protocomm_ble : Bugfix for unbound memcpy on prepare write buffer

Closes https://github.com/espressif/esp-idf/issues/3633

ci: Use relative submodule URLs over IDF. Correct CI accordindly

    Clean up `before_script`s

    Update `check_submodule_sync`

    Remove tools/ci/mirror* stuff

ci: Remove unused IS_PRIVATE and IS_PUBLIC environment

Merge branch 'feature/add_nimble_ssc' into 'master'

test: modify test cases for bluedroid

See merge request idf/esp-idf!5208

test: modify test cases for bluedroid

fatfs: reduce rawflash tests run time

Don't flash fatfs.img on every test run. Comparing the content is
faster than flashing.

fatfs: create separate ffsystem.c for host side testing

fatfs: update diskio and vfs for FatFS changes

- do to not rely on integer.h types
- ffsystem.c does not define ff_memcalloc, replace with ff_memalloc +
  memset.

fatfs: update to R0.13c patch 4

Breaking change: integer.h does not exist in FatFS anymore

fatfs: separate IDF-specific files from the original FatFS code

This is a breaking change: applications which used diskio.h to
call ff_diskio_register, will now need to include diskio_impl.h.
Including diskio.h will include the original diskio.h header from
FatFS library.

Merge branch 'bugfix/fix_ble_examples_build' into 'master'

Fix build issues

See merge request idf/esp-idf!5343

ci: sort list of flake8 submodule excludes

ci: exclude nimble submodule from python style check

bt: fix build issue

Source files and include directories were appended to variables
used by the previous component registration command.

Merge branch 'fix/update_curr_page_state' into 'master'

nvs_util: Set previous page state to full before creating new page

See merge request idf/esp-idf!5325

Merge branch 'feature/gcc_8_msys_update_simple' into 'master'

update MSYS package for esp32-2019r1 toolchain

See merge request idf/esp-idf!5199

Merge branch 'bugfix/idfpy_print_filter' into 'master'

tools: Port the filtering option of IDF Monitor to the idf.py toolchain

Closes IDF-543

See merge request idf/esp-idf!4416

Merge branch 'feature/use_new_component_registration_apis' into 'master'

Use new component registration API

See merge request idf/esp-idf!4898

Merge branch 'bugfix/legacy_header_bootloader_build' into 'master'

bootloader: pass legacy header config variable to subproject

See merge request idf/esp-idf!4966

Merge branch 'bugfix/kconfig_source_comment' into 'master'

tools: Fix Kconfig checker for comments and source after help

See merge request idf/esp-idf!5275

Merge branch 'feature/nimble' into 'master'

Port NimBLE Host Stack on ESP-IDF

See merge request idf/esp-idf!5182

Port NimBLE Host Stack on ESP-IDF

nvs_util: Set previous page state to full before creating new page

Merge branch 'doc/review_api-ref_periph-sdmmc-host' into 'master'

Review the file api-reference/peripherals/sdmmc_host.rst

See merge request idf/esp-idf!5261

Review the file api-reference/peripherals/sdmmc_host.rst

Merge branch 'feature/idf_size_json' into 'master'

idf_size: Support JSON output

Closes IDF-264

See merge request idf/esp-idf!4987

Merge branch 'feature/add_doc_about_app_desc_t' into 'master'

docs: Add description about the app image

Closes IDF-597

See merge request idf/esp-idf!4912

component/bt: fix unpack hci enhance connection complete event error

Merge branch 'feature/ble_mesh_feature' into 'master'

component/ble_mesh: Add BLE Mesh Stack onto ESP-IDF

See merge request idf/esp-idf!4079

mbedtls: upgrade to v2.16.2 release

For detailed release notes please refer to:
https://github.com/ARMmbed/mbedtls/releases/tag/mbedtls-2.16.2

docs: Add description

component/ble_mesh: ESP BLE Mesh release

1. BLE Mesh Core

* Provisioning: Node Role
    * Advertising and GATT bearer
    * Authentication OOB

* Provisioning: Provisioner Role
    * Advertising and GATT bearer
    * Authentication OOB

* Networking
    * Relay
    * Segmentation and Reassembly
    * Key Refresh
    * IV Update

* Proxy Support

* Multiple Client Models Run Simultaneously
    * Support multiple client models send packets to different nodes simultaneously
    * No blocking between client model and server

* NVS Storage
    * Store Provisioning Data of BLE Mesh Nodes in Flash

2. BLE Mesh Applications

* BLE Mesh Node & Provisioner
    * Node Example
    * Provisioner Example
    * Node + Generic OnOff Client Example

* Fast Provisioning
    * Vendor Fast Prov Server Model
    * Vendor Fast Prov Client Model
    * Examples

* Wi-Fi & BLE Mesh Coexistence
    * Example

* BLE Mesh Console Commands
    * Example

3. BLE Mesh Models

* Foundation Models
    * Configuration Server Model
    * Configuration Client Model
    * Health Server Model
    * Health Client Model

* Generic Client Models
    * Generic OnOff Client
    * Generic Level Client
    * Generic Location Client
    * Generic Default Transition Timer Client
    * Generic Power OnOff Client
    * Generic Power Level Client
    * Generic Battery Client
    * Generic Property Client

* Generic Server Models
    * Generic OnOff Server (Example)

* Lighting Client Models
    * Light Lightness Client
    * Light CTL Client
    * Light HSL Client
    * Light xyL Client
    * Light LC Client

* Sensor Client Model
    * Sensor Client

* Time and Scenes Client Models
    * Time Client
    * Scene Client
    * Scheduler Client

Merge branch 'feature/btdm_add_gattc_gatts_coex_example' into 'master'

Component/bt: add gattc and gatts coex example

See merge request idf/esp-idf!5087

Merge branch 'refactor/bluedroid' into 'master'

Refactor/bluedroid

See merge request idf/esp-idf!4027

Merge branch 'doc/review_ext_ram' into 'master'

Review the file api-guides/external-ram.rst

See merge request idf/esp-idf!5156

Review the file api-guides/external-ram.rst

Merge branch 'doc/review_modules-and-boards' into 'master'

Review the file hw-reference/modules-and-boards.rst

See merge request idf/esp-idf!5157

Review the file hw-reference/modules-and-boards.rst

Merge branch 'doc/review_api-ref_periph-touchpad' into 'master'

Review the file api-reference/peripherals/touch_pad.rst

See merge request idf/esp-idf!5259

Review the file api-reference/peripherals/touch_pad.rst

cmake: some formatting fixes

Do not include bootloader in flash target when secure boot is enabled.
Emit signing warning on all cases where signed apps are enabled (secure
boot and signed images)
Follow convention of capital letters for SECURE_BOOT_SIGNING_KEY
variable, since it is
relevant to other components, not just bootloader.
Pass signing key and verification key via config, not requiring
bootloader to know parent app dir.
Misc. variables name corrections

tools: update make converter to use new component registration api