protocomm_ble : Bugfix for unbound memcpy on prepare write buffer

Closes https://github.com/espressif/esp-idf/issues/3633

Protocomm : Minor fixes

List of changes:
* protocomm_httpd : Reset session_id static variable on start and stop
* security1 : Typo in checking failed dynamic allocation

Provisioning Examples : Bugfix in copying Wi-Fi SSID and Passphrase

Wi-Fi Provisioning : Bugfix in copying SSID and Passphrase

These changes guarantee that the SSID and Passphrase received via protocomm are NULL terminated and size limited to their standard lengths.

List of changes:
* Corrected length of passphrase field in wifi_prov_config_set_data_t structure
* Performing length checks on SSID, passphrase and bssid, when populating wifi_prov_config_set_data_t structure with received credentials

Merge branch 'bugfix/btdm_fix_rxwinsz_assert_in_wifi_ble_coex_v3.3' into 'release/v3.3'

component/bt: fix rxwinsz assert in ble and wifi coex(backport v3.3)

See merge request espressif/esp-idf!5447

component/bt: fix rxwinsz assert in ble and wifi coex

Merge branch 'bugfix/improve_flash_dio_read_timing_v3.3' into 'release/v3.3'

bugfix(flash): fix flash dio read mode configuration error on SPI0 (backport v3.3)

See merge request espressif/esp-idf!5289

Merge branch 'feature/prov_mgr_backport_v3.3' into 'release/v3.3'

Wi-Fi Provisioning Manager (backport v3.3)

See merge request idf/esp-idf!5371

bugfix(flash): improve flash dio read timing

When flash work in DIO Mode, in order to ensure the fast read mode of flash
is a fixed value, we merged the mode bits into address part, and the fast
read mode value is 0 (the default value).

Merge branch 'feature/upgrade_mbedtls_to_v2.16.1_v3.3' into 'release/v3.3'

mbedtls: upgrade to v2.16.2 release (v3.3)

See merge request idf/esp-idf!5377

Merge branch 'bugfix/httpd_open_fn_backport_v3.3' into 'release/v3.3'

HTTP Server : Close new session immediately if open_fn fails (Backport v3.3)

See merge request idf/esp-idf!5370

HTTP Server : Close new session immediately if open_fn fails

open_fn() was introduced in the context of HTTPS server, as a configurable callback function that is called by the HTTP server, on every newly created socket. It is responsible of allocating resources for per session transport security.

Earlier, if open_fn were to fail, the newly created socket would be closed by the server but the corresponding entry, for the now invalid socket, will remain in the internal socket database until that invalid socket is detected due to error when calling select(). Because of this delayed closing of sockets, the HTTPS server would quickly face shortage of available sessions when a lot of SSL handshake errors are happening (this typically occurs when a browser finds that the server certificate is self signed). This changes in this MR fix this issue by clearing up the socket from internal database, right after open_fn fails.

Closes https://github.com/espressif/esp-idf/issues/3479

wifi_prov_mgr : Free memory allocated by cJSON_Print

wifi_provisioning : Added Wi-Fi Scan list feature to Provisioning Manager

List of changes in components/wifi_provisioning:
* Manager version is now v1.1
* .proto files and protocomm handler added for sending Wi-Fi scan command and receiving scan results
* Implemented handlers for wifi_scan protocomm endpoint
* Update manager context data structure to hold scan state and results
* scheme_softap now runs Wi-Fi in APSTA mode
* Wi-Fi is started in AP mode when provisioning is started. This is necessary for scan list to work
* Docs updates with information about new wifi_scan endpoint

List of changes in tools/esp_prov:
* Added functions for sending and receiving protobuf messages compatible with wifi_scan protocomm endpoint
* Added feature to display/refresh scan results and accept user selection at runtime
* New functions:
  * get_version() : only returns the protocol version string
  * has_capability() : check is a capability is present according to proto-ver response
* wifi_scan feature is provided only if the `wifi_scan` capability is present

Other changes:
* Replace recursive mutex with plain mutex
* assert on return value of mutex give / take calls
* replace all calls with macros ACQUIRE_LOCK and RELEASE_LOCK
* some checks added in scanning related private APIs
* free and nullify scanning context and state if service is stopped while ongoing scan

esp_prov : Support new JSON format of version string while maintaining backward compatibility

Other changes:
* Version check only happens if command line argument is specified
* Minor bugfix in processing apply_config response

Provisioning : Added Wi-Fi Provisioning Manager example and test script

wifi_provisioning : Docs updated with information about new provisioning manager

wifi_provisioning : Wi-Fi Provisioning Manager added

Merge branch 'bugfix/error_on_unknown_component' into 'release/v3.3'

cmake: error out when component is not found (v3.3)

See merge request idf/esp-idf!5299

Merge branch 'bugfix/mbedtls_mpi_exp_mod_v3.3' into 'release/v3.3'

mbedtls: Fix mbedtls_mpi_exp_mod() set n and s values (v3.3)

See merge request idf/esp-idf!5354

mbedtls: upgrade to v2.16.2 release

For detailed release notes please refer to:
https://github.com/ARMmbed/mbedtls/releases/tag/mbedtls-2.16.2

Merge branch 'refactor/power_management_v3.3' into 'release/v3.3'

power_management: Using port*_CRITICAL_ISR to be consistent with FreeRTOS (backport v3.3)

See merge request idf/esp-idf!5079

mbedtls: Add UTs for modexp

mbedtls: Fix Z->s in mbedtls_mpi_exp_mod()

Z->s should never be zero, only 1 or -1.
Added additional checks for X, Y and M args to correctly set Z->s.

Closes: https://github.com/espressif/esp-idf/issues/1681
Closes: https://github.com/espressif/esp-idf/issues/3603
Closes: IDFGH-1313

Merge branch 'feature/add_nimble_ssc_backport_for_3.3' into 'release/v3.3'

test: modify test cases for bluedroid (backport v3.3)

See merge request idf/esp-idf!5212

test: modify test cases for bluedroid (backport v3.3)

unit-test-app: freertos_compliance config added

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

ref_clock: port*_CRITICAL vanilla FreeRTOS compliance

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

power_management: port*_CRITICAL vanilla FreeRTOS compliance

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

intr_alloc:  port*_CRITICAL vanilla FreeRTOS compliance

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

crosscore_init: port*_CRITICAL vanilla FreeRTOS compliance

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

timer: port*_CRITICAL vanilla FreeRTOS compliance

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

rtc_module: port*_CRITICAL vanilla FreeRTOS compliance

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

rmt: port*_CRITICAL vanilla FreeRTOS compliance

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

periph_ctrl: port*_CRITICAL vanilla FreeRTOS compliance

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

freertos: port*_CRITICAL_SAFE API added

port*_CRITICAL_SAFE API calls port*_CRITICAL or port*_CRITICAL_ISR
depending on the context (Non-ISR or ISR respectively).

FREERTOS_CHECK_PORT_CRITICAL_COMPLIANCE Kconfig option added

Signed-off-by: Sachin Parekh <sachin.parekh@espressif.com>

Merge branch 'bugfix/docs_rtd_failure_on_missing_submodule_v3_3_bis' into 'release/v3.3'

docs: Remove space from RTD project configuration filename to be recognized by the RTD build system (v3.3)

See merge request idf/esp-idf!5311

Merge branch 'bugfix/spi_concurrency_3.3' into 'release/v3.3'

spi: fix a possible concurrency issue (port to v3.3)

See merge request idf/esp-idf!5279

docs: Remove space from RTD project configuration filename to be recognized by the RTD build system

Merge branch 'test/fix_some_error_wifi_cases_v3.3' into 'release/v3.3'

test: fix some wifi case issues (backport v3.3)

See merge request idf/esp-idf!5255

Merge branch 'bugfix/pyparsing_v3.3' into 'release/v3.3'

Temporarily fix incompatibility with pyparsing 2.4.0 (v3.3)

See merge request idf/esp-idf!5197

cmake: error out when component is not found

Closes https://github.com/espressif/esp-idf/issues/3637

Merge branch 'bugfix/docs_rtd_failure_on_missing_submodule_v3_3' into 'release/v3.3'

docs: Add mqtt submodule to RTD build configuration. Now any submodule...

See merge request idf/esp-idf!5285

docs: Add mqtt submodule to RTD build configuration. Now any submodule included in documentation build by Doxygen should be included in this file

Merge branch 'feature/btdm_add_ble_link_timeout_config_v3.3' into 'release/v3.3'

Component/bt: add ble link timeout config in menuconfig(backport v3.3)

See merge request idf/esp-idf!4825

spi: fix a possible concurrency issue

Temporarily fix incompatibility with pyparsing 2.4.0

Merge branch 'bugfix/remove_secure_boot_test_mode_bp3.3' into 'release/v3.3'

remove secure boot test mode (Backport v3.3)

See merge request idf/esp-idf!5258

remove secure boot test mode

Merge branch 'bugfix/spiflash_kconfig_v3.3' into 'release/v3.3'

spi_flash: Fix Kconfig indentation (v3.3)

See merge request idf/esp-idf!5232

test: fix some wifi case issues:

* remove heap size check cases as we have bg tasks allocate memory
* fix wifi connect to open ap issue

Merge branch 'bugfix/dns_bug_3.3' into 'release/v3.3'

DNS: fix the crash  under static IP address(backport3.3)

See merge request idf/esp-idf!5210

lwip:fix dns bug for 3.3

Merge branch 'bugfix/btdm_coex_assert_in_lc_lmppdu_v3.3' into 'release/v3.3'

components/bt: Fix assert due to alloc LMP TX buffer failed

See merge request idf/esp-idf!5216

spi_flash: Fix Kconfig indentation

Closes https://github.com/espressif/esp-idf/issues/3598

Merge branch 'bugfix/idf_py_windows_relpath_v3.3' into 'release/v3.3'

idf.py: Fix Windows issue if project and IDF are on different drives (v3.3)

See merge request idf/esp-idf!4731

components/bt: Fix assert due to alloc LMP TX buffer failed

Merge branch 'bugfix/fix_some_wps_bugs_v3.3' into 'release/v3.3'

wps: add overlap event (backport v3.3)

See merge request idf/esp-idf!5112

Merge branch 'fix/mfg_util_3.3' into 'release/v3.3'

mfg_util: Fix unnecessary csv files creation for values with REPEAT tags (backport 3.3)

See merge request idf/esp-idf!5045

Merge branch 'bugfix/fix_build_cmake_example_failing_v3.3' into 'release/v3.3'

Fix false positive errors with CMake example builds (backport v3.3)

See merge request idf/esp-idf!4984

Merge branch 'bugfix/restore_ccache_use' into 'release/v3.3'

CMake : Restore ccache use (backport v3.3)

See merge request idf/esp-idf!4985

Merge branch 'bugfix/win_fullclean_symlink_v3.3' into 'release/v3.3'

idf.py: Detect symlinks on Windows during fullclean (v3.3)

See merge request idf/esp-idf!4924

Merge branch 'protocomm_ble_128bit_uuid_v3.3' into 'release/v3.3'

protocomm_ble : Fix support for custom service UUIDs (backport v3.3)

See merge request idf/esp-idf!5017

Merge branch 'feature/confserver_v2_v3.3' into 'release/v3.3'

confserver: Add v2 confserver protocol with separate visibility info  (backport v3.3)

See merge request idf/esp-idf!4513

Merge branch 'bugfix/reset_log_uart_port_v3.3' into 'release/v3.3'

esp32: Add reset CONSOLE_UART port (v3.3)

See merge request idf/esp-idf!5120

idf.py: Fix Windows issue if project and IDF are on different drives

Closes https://github.com/espressif/esp-idf/issues/2753

wps: add overlap event (backport v3.3)
     modify some header files to be consistent with vnc

Merge branch 'bugfix/support_tcp_window_scale_v3.3' into 'release/v3.3'

esp_wifi/lsupport TCP window scale (backport v3.3)

See merge request idf/esp-idf!5113

ci: check that build uses ccache when present

cmake: restore ccache use when present

Closes https://github.com/espressif/esp-idf/issues/3116

esp32: Add reset uart

Fixed the case when the first part of log was missed
this was happened when:
 * CONFIG_CONSOLE_UART_CUSTOM option is selected (UART1)
 * The selected CONSOLE_UART port is used also for the console component
 * in code esp_restart() or abort() functions were called.

esp_wifi/lwip: support TCP window scale

Support enable/disable TCP Window scale feature via menuconfig

Merge branch 'bugfix/httpd_log_purge_v3.3' into 'release/v3.3'

esp_http_server : Logging of purged data to monitor made configurable (backport v3.3)

See merge request idf/esp-idf!5015

Merge branch 'bugfix/https_doc_api_v3.3' into 'release/v3.3'

esp_http_server : Minor clarification in httpd_req_get_url_query_str() API documentation (backport v3.3)

See merge request idf/esp-idf!5013

Merge branch 'bugfix/wpa2_ent_vulnerability_v3.3' into 'release/v3.3'

esp32: fix wpa2 enterprise vulnerability issues (backport v3.3)

See merge request idf/esp-idf!5107

esp_http_server : Minor clarification in httpd_req_get_url_query_str() API documentation

Closes https://github.com/espressif/esp-idf/issues/3374

protocomm_ble : Example updated to use custom 128bit service UUID

Also removed old hardcoded UUIDs from README of esp_prov

esp_prov : Runtime discovery of Service UUID and endpoint name mapping

List of changes:
* Retrieve UUID property from Bluez device object before connecting to retrieve UUID contained in advertisement
* Read Characteristic User Descriptions attribute of each UUID for mapping endpoint names
* To support older implementations with hardcoded Name-UUID map, revert to fallback mode in order if advertisement data has no UUID field

protocomm_ble : Fixed custom service UUID support

List of changes:
* Use 128 bit characteristic UUIDs when creating GATT table entries
* Change primary service attribute value to 128 bit custom service UUID
* Use raw advertisement data to convey flags and 128 bit primary service UUID
* Use raw scan response to send device name as complete local name
* Increase maximum device name length in relation to maximum scan response length
* Set Characteristic User Description attributes for each characteristic to convey protocomm endpoint names

Merge branch 'bugfix/custom_log_uart_rx_pin_v3.3' into 'release/v3.3'

bootloader_support: Fix UART RXD pin for console output (CUSTOM option) (v3.3)

See merge request idf/esp-idf!5031

esp_http_server : Logging of purged data to monitor made configurable

List of changes:
* Kconfig option HTTPD_LOG_PURGE_DATA enables logging of purged data
* Kconfig option HTTPD_PURGE_BUF_LEN sets purge buffer length
* Purged data is logged in hex

Closes https://github.com/espressif/esp-idf/issues/3359

Merge branch 'bugfix/custom_bootloader_subproject_build_v3.3' into 'release/v3.3'

CMake: Fix custom bootloader does not override original (v3.3)

See merge request idf/esp-idf!5081

mfg_util: Fix unnecessary csv files creation for values with REPEAT tags

(cherry picked from commit 8b96668c9123fbbf8c78b347479215f471b102ed)

esp32: fix wpa2 enterprise vulnerability issues

Fix following wpa2 enterprise vulnerability issues:
1. The station can complete 4-way handshake after EAP-FAIL is received
2. The station crashes if EAP-SUCCESS is received before PMK is setup

soc: Add some headers into gpio_periph.h

bootloader_support: Fix UART RXD pin for console output (CUSTOM option)

The RXD pin is assigned as input (fix for custom uart option).

Closes: https://github.com/espressif/esp-idf/issues/2843
Closes: IDFGH-505

ci: check that custom bootloader overrides original

cmake: fix custom bootloader issue

Issue is that when users creates a custom bootloader from
$IDF_PATH/components/bootloader. Parent project build uses the copy but
bootloader subproject build uses the original still. The issue is solved
by passing the custom bootloader as extra component directory so
bootloader build knows to use the new copy (itself) in the build.

Merge branch 'bugfix/fix_no_disconnect_event_when_rx_disassoc_after_send_auth_v3.3' into 'release/v3.3'

wifi: fix the bug no disconnect event when STA recv disassoc after sending auth (backport v3.3)

See merge request idf/esp-idf!5066

wifi bugfixs:

1. fix the bug no disconnect event when STA recv disassoc after sending auth
2. fix the bug full scan send multi events when recv deauth/disassoc

Merge branch 'bugfix/docs_build_failure_on_rtd' into 'release/v3.3'

Fix Breathe version to avoid docs build failure on ReadTheDocs server. Provide...

See merge request idf/esp-idf!5041

Merge branch 'bugfix/fix_some_wifi_bugs_0508_v3.3' into 'release/v3.3'

esp32: fix some WiFi bugs 0508 (backport v3.3)

See merge request idf/esp-idf!4965

Merge branch 'feature/add_promiscuous_control_for_ethernet_v3.3' into 'release/v3.3'

add promiscuous mode control for Ethernet (v3.3)

See merge request idf/esp-idf!4975

esp32: fix some WiFi bugs

Fix following WiFi bugs:
1. Make smartconfig thread-safe
2. Fix WiFi stop/deinit memory leak
3. Refactor for WiFi init/deinit/ioctl etc
4. Add declaration for esp_wifi_internal_ioctl()
5. Fix the bug that WiFi stop leads to task watchdog

Merge branch 'bugfix/fix_softap_crash_when_sta_reset_v3.3' into 'release/v3.3'

wifi: fix softap crash when sta reset (backport v3.3)

See merge request idf/esp-idf!5039

Fix Breathe version to avoid docs build failure on ReadTheDocs server. Provide RTD project configuration file to be able to select python version for specific to esp-idf release. (backport v3.3)

wifi: fix softap crash when sta reset (backport v3.3)

Merge branch 'feature/allow_multiple_fragment_definitions_for_library' into 'release/v3.3'

Combine definitions of multiple mapping fragments referring to the same library

See merge request idf/esp-idf!4243

Merge branch 'bugfix/esp_efuse_fields_unused_variable_v3.3' into 'release/v3.3'

efuse: Fix unused variable warning when NDEBUG (v3.3)

See merge request idf/esp-idf!4956

Merge branch 'bugfix/adjtime_ut_v3.3' into 'release/v3.3'

newlib: Fix adjtime (v3.3)

See merge request idf/esp-idf!4870