Merge branch 'bugfix/supplicant_security_fixes' into 'master'

wpa_supplicant: Fix sprintf security bugs.

Closes WIFI-624

See merge request espressif/esp-idf!5295

Merge branch 'bugfix/improve_spi_timing_for_flash' into 'master'

bugfix(flash): improve spi cs timing settings for flash

See merge request espressif/esp-idf!4964

Merge branch 'bugfix/gcov_example_report_cmake_target' into 'master'

gcov_example: Adds cmake target to generate report

Closes IDF-727

See merge request espressif/esp-idf!5403

Merge branch 'bugfix/confgen_break' into 'master'

tools: Fix indentation in confgen.py

See merge request espressif/esp-idf!5460

Merge branch 'feature/tcp_transport_pass_errors_stage1' into 'master'

esp-tls: capturing specific errors to be available in tcp_transport and then in application code

See merge request espressif/esp-idf!4782

Merge branch 'feature/prov_mgr_event_loop' into 'master'

Wi-Fi Provisioning : Add support for esp_event

See merge request espressif/esp-idf!4857

Merge branch 'feature/lwip_2.1.2_idf' into 'master'

lwip_2.1.2 for idf_4.0

See merge request espressif/esp-idf!5374

lwip_2.1.2 for idf_4.0

Merge branch 'mesh/use_event_library' into 'master'

Mesh/use event library

See merge request espressif/esp-idf!4800

tools: Fix indentation in confgen.py

wpa_supplicant: Fix sprintf security bugs.

Revert back to using os_snprintf instead of sprintf.

Closes WIFI-624

bugfix(flash): improve spi cs timing settings for flash

cs setup time is recomemded to be 1.5T, and cs hold time is recommended to be 2.5T.
(cs_setup = 1, cs_setup_time = 0; cs_hold = 1, cs_hold_time = 1)

mesh: update mesh events demonstration

mesh: use new event library

Merge branch 'cleanup/remove_redundant_tags_file' into 'master'

wpa_supplicant: Remove tags file which was added by mistake

See merge request espressif/esp-idf!5457

Merge branch 'doc/power_management_update_with_bt_changes' into 'master'

doc/power_management_update_with_bt_changes

See merge request espressif/esp-idf!5170

Merge branch 'doc/add_ble_mesh_doxyfile' into 'master'

ble_mesh: add Doxyfile for core apis & model apis

See merge request espressif/esp-idf!5401

Merge branch 'mesh/bugfix_0628_master' into 'master'

mesh: bugfix

Closes WIFI-628, WIFI-638, WIFI-635, WIFI-582, WIFI-130, WIFI-622, WIFI-579, WIFI-428, and WIFI-451

See merge request espressif/esp-idf!5437

gcov_example: Adds cmake target to generate report

Closes IDF-727

Merge branch 'bugfix/btdm_fix_rxwinsz_assert_in_wifi_ble_coex' into 'master'

component/bt: fix rxwinsz assert in ble and wifi coex

See merge request espressif/esp-idf!5434

Merge branch 'bugfix/prov_tool_desc_readme' into 'master'

esp_prov : Minor refactoring in argument dependent logic and other changes

See merge request espressif/esp-idf!5430

wpa_supplicant: Remove tags file which was added by mistake

Merge request idf/esp-idf!5219 added a ctags 'tags' file to
the repository by mistake. Remove it.

wifi_prov_mgr : Updated the set of WIFI_REASON_ codes used for setting WIFI_PROV_STA_AUTH_ERROR

wifi_prov_mgr : Free memory allocated by cJSON_Print

Provisioning : Manager example updated to use esp_event_loop feature

Wi-Fi Provisioning : Manager docs updated with information about esp_event_loop support

Wi-Fi Provisioning : Manager now uses esp_event to catch system events and emit provisioning events to the default event loop

List of changes:
* Deprecated public API wifi_prov_mgr_event_handler() and added private function wifi_prov_mgr_event_handler_internal(), registered with the default event loop for catching WIFI and IP system events

Merge branch 'feature/tools_script_to_switch_submodules' into 'master'

tools: Fix up relative submodule URLs for forks

See merge request espressif/esp-idf!5421

Merge branch 'bugfix/efuse_secure_version_emulate' into 'master'

efuse: Fix mode EFUSE_SECURE_VERSION_EMULATE

See merge request espressif/esp-idf!5446

Merge branch 'feature/gdbstub_multi_target' into 'master'

gdbstub multi-target support

Closes IDF-466

See merge request espressif/esp-idf!5246

mesh: bugfix

1. resend eb which are pending in g_ic.tx_buf due to channel switch.
2. add lock for mgmg/xon/bcast to protect send from user flush.
3. softap: add check if secondary offset is correct when start softap.
4. softap: in inactive timer handler, add check if child bss is removed to avoid removing it again.
5. disable A-MPDU for non-root.
6. fix reusing a freed eb.
7. fix when node becomes root, it does not record assoc value to nvs.
8. discard unnecessary forwarded group packets.
9. fix toDS state is not updated in time.
10. fix s_sta_cnx_times is not cleared when deinit causes root sends ADD annoucement.
11. root: increase beacon timeout time from 6 seconds to 15 seconds to delay initiation of reconnection.
12. add esp_mesh_get_tsf_time to return TSF time.
13. send the whole routing table multi-times.
14. clear candidate settings if not receive candidate beacon within 8 seconds.

tools: Add a script for switching to real submodules in forks

Avoid 'redirecting to' warnings when cloning

Make submodules work in forks

Merges https://github.com/espressif/esp-idf/pull/3721

Merge branch 'fix/nvs_util_key_len' into 'master'

nvs_util: Add check for key len in input csv file

See merge request espressif/esp-idf!5392

Merge branch 'feature/mfg_util_optimise' into 'master'

mfg_util: Optimise by adding subparser changes w.r.t similar changes in nvs util changes

See merge request espressif/esp-idf!5336

mfg_util: Optimise by adding subparser changes w.r.t similar changes in nvs util changes

nvs_util: Add check for key len in input csv file

Closes https://github.com/espressif/esp-idf/issues/3113

Merge branch 'bugfix/tcp_transport_use_without_list' into 'master'

tcp transport: fix minor memory leak when ssl transport used separately

See merge request espressif/esp-idf!5206

Merge branch 'feature/nimble_example_tests' into 'master'

Add NimBLE bleprph,blecent,blehr example tests

See merge request espressif/esp-idf!4420

Add NimBLE bleprph,blecent,blehr example tests

ws_client: removed dependency on internal tcp_transport header

esp_http_client: added example test case to verify error code received when connecting to non-existent url

http_client: disconnect event to read last occurred error in esp-tls

esp-tls: extending error handle to contain error descriptors with last mbedtls failure and latest certificate verification result flags, reworked tcp_transport to use this error handle

esp-tls: capturing specific errors to be available in tcp_transport and then in application code

Merge branch 'bugfix/confgen_avoid_write_to_conf' into 'master'

tools: avoid using directly _write_to_conf from Kconfiglib

Closes IDFGH-1246

See merge request espressif/esp-idf!5423

Merge branch 'bugfix/confgen_hex_value' into 'master'

tools: Fix hex parsing in confgen.py

Closes IDFGH-1273

See merge request espressif/esp-idf!5439

Merge branch 'bugfix/fix_tools_idf_tools_exception_with_python3' into 'master'

CI: fix CI tools exception with python3

Closes IDF-769

See merge request espressif/esp-idf!5443

efuse: Fix mode EFUSE_SECURE_VERSION_EMULATE

Merge branch 'feature/support_spi_ethernet' into 'master'

ethernet: support dm9051

Closes IDFGH-1443 and IDFGH-1439

See merge request espressif/esp-idf!5345

Merge branch 'feature/wifi_refactor_smartconfig_to_esp_event' into 'master'

esp_wifi: refactor smartconfig callback to use esp event

Closes IDF-268

See merge request espressif/esp-idf!4806

component/bt: fix rxwinsz assert in ble and wifi coex

ethernet: support dm9051

1. move resource allocation from xxx_init to xxx_new
2. fix enabling tx checksum insertion by mistake
3. iperf example: enlarge max arguments
4. add examples for spi-ethernet

Closes https://github.com/espressif/esp-idf/issues/3715
Closes https://github.com/espressif/esp-idf/issues/3711

Merge branch 'bugfix/btdm_conn_fail_with_some_speaker' into 'master'

components/bt: Fix connect fail with some speakers

See merge request espressif/esp-idf!5358

esp_wifi: refactor smartconfig callback to use esp event

esp_prov : Minor refactoring in argument dependent logic

Other changes:
* Command line argument name and descriptions updated and formatted
* Some exception messages updated for clarity
* READMEs updated for tool and all provisioning examples
* Minor update in example test scripts due to change in esp_prov.get_transport() API
* Transport_HTTP now forces connect on initialization

esp_transport_destroy: Fix memory leak

if tcp_transport component was used separately (e.g. using tranpsort_ssl.h directly without building list of transport) then it leaks memory on unitialization

Merges https://github.com/espressif/esp-idf/pull/3541
Closes https://github.com/espressif/esp-idf/issues/3531

Signed-off-by: David Cermak <cermak@espressif.com>

tcp_transport: added basic unit tests for init/destroy transports in lists or when used separately

tools: avoid using directly _write_to_conf from kconfiglib

Closes https://github.com/espressif/esp-idf/issues/3543

tools: Fix hex parsing in confgen.py

Closes https://github.com/espressif/esp-idf/issues/3568

tools: fix exception in checkout ref script:

decode bytes before searching with RegEx

update pm document with changes in bluetooth that supports automatic light sleep in case that external 32.768KHz crystal is used as the sleep clock

If bluetooth modem sleep is enabled and "External 32kHz crystal" is used as bluetooth sleep clock, the power management lock "ESP_PM_NO_LIGHT_SLEEP" in bluetooth is released for the periods of time when Bluetooth enters modem sleep. In this case automatic light sleep is allowed.

tools: fix idf_tools.py exception with python3

use `subprocess.Popen` when catch TypeError:

```
Traceback (most recent call last):
  File "tools/idf_tools.py", line 1249, in <module>
    main(sys.argv[1:])
  File "tools/idf_tools.py", line 1245, in main
    action_func(args)
  File "tools/idf_tools.py", line 1038, in action_install
    tool_obj.find_installed_versions()
  File "tools/idf_tools.py", line 468, in find_installed_versions
    ver_str = self.check_version()
  File "tools/idf_tools.py", line 426, in check_version
    version_cmd_result = run_cmd_check_output(cmd, None, extra_paths)
  File "tools/idf_tools.py", line 176, in run_cmd_check_output
    result = subprocess.run(cmd, capture_output=True, check=True, input=input_text)
  File "/opt/pyenv/pyenv-1.2.6/versions/3.5.5/lib/python3.5/subprocess.py", line 383, in run
    with Popen(*popenargs, **kwargs) as process:
TypeError: __init__() got an unexpected keyword argument 'capture_output'
```

Merge branch 'doc/fatal_errors_zh_CN' into 'master'

zh_CN translation of fatal-errors

See merge request espressif/esp-idf!4418

zh_CN translation of fatal_error

Merge branch 'bugfix/cmake_mconf_build' into 'master'

cmake: Fix some bugs building mconf-idf from scratch

See merge request espressif/esp-idf!5413

Merge branch 'doc/merge_make-related_documents' into 'master'

Merge make-related documents:

See merge request espressif/esp-idf!5304

Merge make-related documents:

1. Moved get-started files, 7 documents in total, from get-started-cmake folder to hw-reference folder;
2. Deleted get-started files, 7 documents in total, in get-started folder;
3. Updated links in get-started-cmake/index.rst and in get-started/index.rst;
4. Modified descriptions for build system in these files.

Merge branch 'feature/optimize_ci_config_file' into 'master'

CI: use features from latest Gitlab in CI config file

See merge request idf/esp-idf!4896

Merge branch 'feature/local_ctrl_no_sec' into 'master'

ESP Local Ctrl Feature Added

See merge request idf/esp-idf!5348

ESP Local Control Feature Added

List of changes:
* New component esp_local_ctrl added
* Example added under examples/protocols/esp_local_ctrl
* Documentation added under protocols/esp_local_ctrl
* Demo client side app esp_local_ctrl.py added under examples/protocols/esp_local_ctrl/scripts
* protocomm_ble : protocomm_ble_config_t given struct name for allowing forward declaration
* esp_prov/transport_softap renamed to transport_http
* transport_http module supports verification of server certificate
* transport_http module performs name resolution before connection

ble_mesh: add Doxyfile for core apis & model apis

Merge branch 'bugfix/vfs_kconfig' into 'master'

VFS: Fix Kconfig prefix

See merge request idf/esp-idf!5431

Merge branch 'bugfix/bt_config_option_test' into 'master'

Fix the irrelevant characters added to test the config options

See merge request idf/esp-idf!5436

Fix the irrelevant characters added to test the config options

CI: use `include` to split large CI config file

CI: try to use the correct branch of other projects used in CI:

1. revision defined in bot message
2. branch name (or tag name) of current IDF
3. CI_MERGE_REQUEST_TARGET_BRANCH_NAME
4. branch name parsed from `git describe`
5. default branch

CI: use parallel attribute in CI config file

Merge branch 'bugfix/idf_py_reconfigure_for_ccache_flag' into 'master'

idf.py: Run reconfigure on ccache option change.make --no-ccache default

See merge request idf/esp-idf!5429

Merge branch 'bugfix/uuid_value' into 'master'

Correct UUID value for ESP_GATT_UUID_ENVIRONMENTAL_SENSING_SVC

See merge request idf/esp-idf!5409

Correct UUID value for ESP_GATT_UUID_ENVIRONMENTAL_SENSING_SVC

cmake: Fix some bugs building mconf-idf from scratch

- Makefile didn't quite work with out-of-tree build unless there was already an in-tree build done.
- CMake needs to delete some of the in-tree build artifacts or they're used instead of the correct
 files.

Merge branch 'bugfix/from_github' into 'master'

docs: PRs from GitHub containing documentation bug fixes and corrections

See merge request idf/esp-idf!5367

Merge branch 'bugfix/btdm_wrong_bt_lib' into 'master'

components/bt: Fix Wrong bt lib from commit "Bluetooth component refactoring"

See merge request idf/esp-idf!5420

components/bt: Fix Wrong bt lib from commit "Bluetooth component refactoring"

Merge branch 'fix/sdio_slave_reset_infloop_leak' into 'master'

sdio_slave: fix the send_flush infinite loop issue

See merge request idf/esp-idf!5365

VFS: Fix Kconfig prefix

Merge branch 'feature/ext_flash_partition' into 'master'

Support for partitions in external flash

See merge request idf/esp-idf!5277

ci: add unit test job

Replace hardcoded links with link roles

Fix broken link to components/wifi_provisioning/proto

Merges https://github.com/espressif/esp-idf/pull/3668

idf.py Run reconfigure on ccache option change.make --no-ccache default

Correct links

Closes https://github.com/espressif/esp-idf/issues/3723

Implement review comments

Fix reference in jtag debugging section

Merges https://github.com/espressif/esp-idf/pull/3617

Signed-off-by: Stefan Venz <stefan.venz@protonmail.com>

example/wifi/scan: fix README grammar

Merges https://github.com/espressif/esp-idf/pull/3678

Typo correction

Merges https://github.com/espressif/esp-idf/pull/3604

gdbstub: move to a separate component, support multiple targets

nvs: minor host test fixes

Fixes the tests to pass when some files already exist.
Fixes clean target.
Moves CONFIG_NVS_ENCRYPTION definition into sdkconfig.h.