ethernet: add iperf example to test real bandwidth

1. Add command for Ethernet based on console component.
2. Make cmd_system and iperf a component that can be referenced by other examples
3. Add "version" command to cmd_system.c
4. Clean up the README.md in all ethernet examples[TW#26525]

Merge branch 'feature_add_path_tools_pr2410' into 'master'

add_path.sh: cmake: add tools folder to the path

See merge request idf/esp-idf!3344

Merge branch 'test/enhanced_unit_test_config_dependency' into 'master'

test: enhanced config dependency support for CI

See merge request idf/esp-idf!3383

Merge branch 'bugfix/windows_msys2_updates' into 'master'

Windows: Update MSYS2 environment, catch some MSYS2 Python quirks

See merge request idf/esp-idf!3417

Merge branch 'feature/transpost_methods_renamed_no_collision' into 'master'

Renamed transport header files to esp_ prefixed

See merge request idf/esp-idf!3359

Merge branch 'bugfix/esp_error_check_silent' into 'master'

esp_err: Don't compile in error message strings in "silent assertions" mode

See merge request idf/esp-idf!3418

Merge branch 'feature/sigmadelta-example-update-readme' into 'master'

Updated sigma-delta example description to the latest template

See merge request idf/esp-idf!3388

tcp_transport: transport set handle refactoring, web socket client name updated

tcp_transport: renamed possibly generic function names to be esp_ prefixed and not to colide with user namespace

tcp_transport: Use getrandom() instead of rand() in the entire esp-mqtt

Signed-off-by: David Cermak <cermak@espressif.com>

tcp_transport: Fix warning, put in order the nearest code, replace sprintf with snprintf

Signed-off-by: David Cermak <cermak@espressif.com>

tcp_transport: renamed transport related header files to esp_ prefixed to avoid collisions

tcp_transport component used public header files such as 'transport.h', etc. which are too generic and might collide with user or user libraries headers
This change closes #2417

esp_err: Don't compile in error message strings in "silent assertions" mode

Reported on forum https://esp32.com/viewtopic.php?f=13&t=7396&p=31419#p31419

Merge branch 'bugfix/bootloader_gen_secure_boot_digest' into 'master'

bootloader: Fix secure boot digest generation for image length where (len%128 < 32)

See merge request idf/esp-idf!3410

bootloader: Fix secure boot digest generation for image length where (len%128 < 32)

Merge branch 'bugfix/disable_coding_scheme_security_features' into 'master'

bootloader: Don't enable secure boot or flash encryption for 3/4 Coding Scheme

See merge request idf/esp-idf!3369

Merge branch 'bugfix/rtc_fastmem_data_init' into 'master'

esp32: fixes related to CONFIG_ESP32_RTCDATA_IN_FAST_MEM

See merge request idf/esp-idf!3403

windows: Special check for some MSYS2 Python packages

MSYS2 MINGW requires some particular MSYS2-specific packages.

Closes https://github.com/espressif/esp-idf/issues/2480
Closes https://github.com/espressif/esp-idf/issues/2474
Closes https://github.com/espressif/esp-idf/issues/2486

windows: Update MSYS2 environment, add Python requirements to setup script

Merge branch 'bugfix/win_toolchain_version' into 'master'

build: Fix checking the toolchain version on Windows

See merge request idf/esp-idf!3356

Merge branch 'bugfix/workaround_free_peripherals_isr_when_using_dual_core' into 'master'

driver(interrupt): fix the issue that interrupt might be allocated and freed on different cores.

See merge request idf/esp-idf!3152

Merge branch 'bugfix/btdm_watchdog_timeout_after_pair_with_iphone' into 'master'

component/bt: Fix BTU task watchdog timeout after pair with iphone

See merge request idf/esp-idf!3366

Merge branch 'bugfix/btdm_controller_stuck_on_waking_up' into 'master'

bugfix/btdm_controller_stuck_on_waking_up

See merge request idf/esp-idf!3395

Merge branch 'bugfix/btdm_add_sequential_check_when_add_include_service' into 'master'

component/bt: add sequential check when add include service

See merge request idf/esp-idf!3277

component/bt: add sequential check when add include service

Merge branch 'bugfix/btdm_add_ESP_BLE_SM_ONLY_ACCEPT_SPECIFIED_SEC_AUTH_in_set_security_param_API' into 'master'

Component/bt: add only accept sepecified authentication function for SMP

See merge request idf/esp-idf!3385

Merge branch 'docs/wifi_correct_mistake_in_csi_doc' into 'master'

esp32: correct a mistake about secondary channel of CSI in wifi.rst

See merge request idf/esp-idf!3405

Merge branch 'doc/can_remove_disclaimer' into 'master'

can: remove license disclaimer

See merge request idf/esp-idf!3381

Component/bt: add only accept sepecified Authentication

Merge branch 'bugfix/btdm_add_service_source_param_for_ESP_GATTC_SEARCH_CMPL_EVT' into 'master'

Component/bt: add “service from” param for ESP_GATTC_SEARCH_CMPL_EVT

See merge request idf/esp-idf!3399

Merge branch 'bugfix/btdm_fix_service_change_cannot_read_write_and_no_descr' into 'master'

Component/bt: fix service change char can’t read and write and no descr

See merge request idf/esp-idf!3402

esp32: correct a mistake about secondary channel of CSI in wifi.rst

sleep: fix checking length of RTC data sections

_rtc_data_{start,end} can now describe data placed into RTC_FAST
segment, if CONFIG_ESP32_RTCDATA_IN_FAST_MEM is enabled.
Use new _rtc_slow_length symbol instead.

esp32: fix placement of .rtc_noinit

When CONFIG_ESP32_RTCDATA_IN_FAST_MEM is enabled, .rtc_noinit should
be in RTC_FAST memory, same as .rtc.data

esp32/test: split rtc_fast test cases

Move runtime behaviour test cases into test_reset_reason.c, move
placement test cases into test_rtc_fast.c

bootloader: don’t reload RTC_FAST DRAM after deep sleep

When CONFIG_ESP32_RTCDATA_IN_FAST_MEM is enabled, RTC data is placed
into RTC_FAST memory region, viewed from the data bus. However the
bootloader was missing a check that this region should not be
overwritten after deep sleep, which caused .rtc.bss segment to loose
its contents after wakeup.

Merge branch 'ci/adjust_expire_time_for_artifacts' into 'master'

ci: adjust expire time for CI artifacts:

See merge request idf/esp-idf!3327

ci: adjust expire time for CI artifacts:

set shorter time to save some space on server. For those artifacts need
to be stored for long time, we can manually press "keep" button in job page.

Also add a CI job to check if all artifacts have set expire time.

Component/bt: add “service from” param for ESP_GATTC_SEARCH_CMPL_EVT

Component/bt: fix service change char can’t read and write and no descr

Implemented the first round of review comments

Updated sigma-delta example description to the latest template

component/bt: bugfix that hci down stream datapath is unblocked too early on waking up from sleep

This issue can cause the controller to stuck after sleep interrupt happens and clock interrupt enabled

Merge branch 'bugfix/regression_in_light_sleep_mode' into 'master'

esp32: fix regression introduced in automatic light sleep pm

See merge request idf/esp-idf!3371

Merge branch 'fix/sdio_slave_reset_ret_queue' into 'master'

sdio_slave: fix the ret_queue crash issue when being reset by the master

See merge request idf/esp-idf!3360

test: enhanced config dependency support for CI:

allow define complex conditions for the dependency of each tag.

docs, scripts: Correct the priority of the PATH setting

add_path.sh: cmake: add tools folder to the path

Merges https://github.com/espressif/esp-idf/pull/2410

Merge branch 'feature/mbedtls_2_13_1' into 'master'

mbedtls: update to 2.13.1

See merge request idf/esp-idf!3301

can: remove license disclaimer

Merge branch 'feature/move_rtc_data_rtc_rodata_to_RTC_FAST_seg' into 'master'

esp32: Add option to place .rtc_data and .rtc_rodata into the RTC_FAST segment

See merge request idf/esp-idf!2128

Merge branch 'bugfix/ci_example_test' into 'master'

tools: Make Utility.console_log accept Unicode and byte strings as well

See merge request idf/esp-idf!3367

Merge branch 'feature/py23_kconfig_new' into 'master'

tools: Make kconfig_new Python3-compatible and enable Python3 in idf.py

See merge request idf/esp-idf!3304

Merge branch 'bugfix/sysview_enable_cmake' into 'master'

cmake: add app_trace as FreeRTOS dependency

See merge request idf/esp-idf!3335

Merge branch 'bugfix/lwip_compat_headers' into 'master'

lwip: add compatibility headers for sntp.h and esp_ping.h

See merge request idf/esp-idf!3231

Merge branch 'bugfix/idf_ver_out_of_tree' into 'master'

cmake: pass repository path to git when doing git describe

See merge request idf/esp-idf!3328

Merge branch 'bugfix/btdm_coex_hw_blocking' into 'master'

component/bt : fix coexist hardware blocking bug

See merge request idf/esp-idf!3362

esptool: Update to v2.5.1

Release notes: https://github.com/espressif/esptool/releases/tag/v2.5.1

Needed to no longer burn keys if 3/4 Coding Scheme is enabled.

component/bt : fix coexist hardware blocking bug

fix the bug following:
1. after disable bluetooth controller, wifi cannot TX/RX any packets.
2. when software coexist working, there's a little ratio cause wifi task watchdog timeout
3. when software coexist working, there's a little ratio cause bluetooth cannot receive anything.

feature:
1. add libbtdm_app.a git commit local and remote checking

Known issues:
1. there's still a bug occurs with a very very low ratio cause bluetooth
   cannot receive anything. The reproduce interval may great than 3days ~ 1week via
   7x24 hours heavy testing.

Merge branch 'feature/mesh_decoupling' into 'master'

mesh: decoupling

See merge request idf/esp-idf!3261

tools: Make Utility.console_log accept Unicode and byte strings as well

Merge branch 'bugfix/btdm_fix_get_bond_list_error_sometimes' into 'master'

Component/bt: fix get bond list error sometimes

See merge request idf/esp-idf!3288

Merge branch 'feature/btdm_add_send_service_change_indication_API' into 'master'

Component/bt: add gatts send service change indication API

See merge request idf/esp-idf!3302

bootloader: Fix crash enabling flash encryption

Regression in 9c715d7946a9595bad53307cf0a141d4226d0a5a

bootloader: Don't enable secure boot or flash encryption for 3/4 Coding Scheme

build system: Fix checking the toolchain version on Windows

component/bt: Fix BTU task watchdog timeout after pair with iphone

Create a new pending queue, then re-submit pending requests in old pending queue,preventing new events being inserted into it.

Closes https://github.com/espressif/esp-idf/issues/2191

esp32: fix regression introduced in automatic light sleep pm

Closes: https://github.com/espressif/esp-idf/issues/2459
Signed-off-by: Mahavir Jain <mahavir@espressif.com>

driver(interrupt): fix the issue that interrupt might be allocated and freed on different cores

closes https://github.com/espressif/esp-idf/issues/2211

Merge branch 'feature/py23_examples' into 'master'

Examples: Add Python 2&3 support

See merge request idf/esp-idf!3237

Merge branch 'docs/general_notes_zh_CN' into 'master'

docs: translate the general-notes document into Chinese

See merge request idf/esp-idf!2867

mesh: decoupling

Remove dependencies which cause mesh code to be linked even if mesh is not used.

sdio_slave: fix the ret_queue crash issue when being reset by the master

Merge branch 'feature/wifi_esptouch_support_both_multicast_and_broadcast_packet' into 'master'

esp32: esp-touch supports both multicast and broadcast packets

See merge request idf/esp-idf!3291

Merge branch 'doc/fix_config_links' into 'master'

doc: Fix config links, add navigation lists to config items page

See merge request idf/esp-idf!3310

Component/bt: add gatts send service change indication API

examples: Use flushed print to see logs on the CI server

Examples: Add Python 2&3 support

doc/general_notes:translate from en to zh_CN

translate the document [general-notes] into Chinese

esp32: esp-touch supports both multicast and broadcast packets

    Previously, esp-touch only supports multicast packets which are
    transmitted from cellphone. But for most dual frequency routers
    whose SSIDs of 5G and 2.4G are the same, broadcast packets are
    forwarded from 5G interface to 2.4G interface while multicast
    packets are not. In order to make esp-touch work when cellphone
    connects to 5G interface of these routers, esp-touch is improved
    to support both multicast and broadcast packets. Meanwhile, new
    APP which is compiled with Andriod or IOS library(>= v0.3.6.2)
    must be used in this situation. Note that for some routers,
    broadcast and multicast packets are forwarded from 5G interface
    to 2.4G interface only when another WiFi device is connected to
    2.4G interface of the router. Old APP which is compiled with
    Android or IOS library(< v0.3.6.2) also works with this improvement
    when cellphone connects to 2.4G interface of the router.

    The Android and IOS library of new esp-touch APP is now available
    on Github.
    Android: https://github.com/EspressifApp/EsptouchForAndroid
    IOS: https://github.com/EspressifApp/EsptouchForIOS

Merge branch 'feature/mbedtls_mem_alloc_options' into 'master'

mbedtls: configurable options for controlling dynamic memory allocations

See merge request idf/esp-idf!3343

Merge branch 'bugfix/python_gen_empty_partition' into 'master'

app_update: Make gen_empty_partition.py Python 2 & 3 compatible

See merge request idf/esp-idf!3347

Merge branch 'feature/async_esp_http_client' into 'master'

Non Blocking `esp_http_perform()` API in esp_http_client

See merge request idf/esp-idf!3049

Merge branch 'feature/nvs_encryption' into 'master'

nvs_flash: Add support for nvs encryption

See merge request idf/esp-idf!2700

Merge branch 'bug_fix/multipage_blob_support' into 'master'

nvs_util: Fix generation of multipage blob data format

See merge request idf/esp-idf!3349

Merge branch 'mesh/bugfix' into 'master'

mesh: bugfix

See merge request idf/esp-idf!3286

app_update: Make gen_empty_partition.py Python 2 & 3 compatible

Closes https://github.com/espressif/esp-idf/issues/2457

nvs_util: Fix multipage blob data format generate

nvs_flash: Add support for nvs encryption

aws_iot: optimize dynamic memory by tweaking tls out buf content length

mbedtls: configurable options for controlling dynamic memory allocations

Modifies https://github.com/espressif/esp-idf/pull/2237

examples/protocols/esp_http_client: Add example for asynchronous HTTP request

esp_http_client: Add support for non-blocking feature in esp_http_client_perform() API

Four internal APIs `esp_http_client_connect()`, `http_client_prepare_first_line()`, `esp_http_client_request_send()` and
`esp_http_client_send_post_data()` API have been added for perfoming connection establishment (sync as well as async),
preparing first line, sending request and sending post data respectively.

In `transport_ssl`, `ssl_connect_async()` API has been added for establishing asynchronous connection.

esp-tls: Add support for non blocking connect

Merge branch 'feature/nvs_util_backport' into 'master'

nvs_util: Add changes for utility to support old and new multipage blob

See merge request idf/esp-idf!3270

Merge branch 'feature/pthread_attributes' into 'master'

pthread : Add support for attributes

See merge request idf/esp-idf!2980

mesh: bugfix

1. suppport mesh type, mesh ID, router and IE crypt func&key at any time after mesh is initalized.
2. support modify parent at any time after mesh is configured.
3. modify manual networking example.
4. update header file.
5. fix issues in root conflicts handling.
6. add max length of beacon to menuconfig.
7. fix issue when received a beacon without DSSS.

Merge branch 'bugfix/two_scenario_may_cause_no_disconnect_event_report' into 'master'

Wifi: bugfix of two sceanrio may cause no disconnect event report

See merge request idf/esp-idf!3322

Merge branch 'bugfix/IPv6_TCP_connection_fail' into 'master'

lwip: fix the bug that IPv6 TCP connection fail

See merge request idf/esp-idf!3331

pthread : Add support for attributes and few APIs
This introduces the following changes :
    * Implmentation added for pthread attribute related functions :
        * pthread_attr_init
        * pthread_attr_destroy
        * pthread_attr_setdetachstate
        * pthread_attr_getdetachstate
        * pthread_attr_getstacksize
        * pthread_attr_setstacksize
    * pthread_create now supports passing attributes/configs through pthread_attr_t structure
    * pthread_mutex_timedlock added
    * pthread_exit added
    * memory for joinable thread is freed before returning from pthread_join