Merge branch 'feature/mbedtls_2_12_0_v3.1' into 'release/v3.1'

mbedtls: update to 2.12.0 (backport v3.1)

See merge request idf/esp-idf!2932

Merge branch 'bugfix/fix_uart_tx_bug_when_using_ringbuffer_for_v3.1' into 'release/v3.1'

driver(uart): Fixed uart tx_empty interrupt wdt timeout bug for release/v3.1

See merge request idf/esp-idf!2934

Merge branch 'bugfix/btdm_fix_sc_mitm_bond_failed_in_smp_for_iphones_v3.1' into 'release/v3.1'

Component/bt:  fix SC_MITM_BOND failed in smp for iphones for v3.1

See merge request idf/esp-idf!2923

mbedtls: update to 2.12.0

Merge branch 'bugfix/ampdu_duplicate_v3.1' into 'release/v3.1'

Wifi: fix ampdu duplicate issue (backport v3.1)

See merge request idf/esp-idf!2797

Merge branch 'bugfix/btdm_a2dp_disconnect_reason_for_v3.1' into 'release/v3.1'

bugfix/btdm_a2dp_disconnect_reason(backport v3.1)

See merge request idf/esp-idf!2927

wifi: fix ampdu duplicate issue

fix ampdu duplicate issue

Merge branch 'bugfix/btdm_fix_ble_HIDD_demo_error_for_v3.1' into 'release/v3.1'

Component/bt: fix ble HID demo error for v3.1

See merge request idf/esp-idf!2922

Merge branch 'bugfix/btdm_lmp_trans_coll_state_uncleared_for_v3.1' into 'release/v3.1'

bugfix/btdm_lmp_trans_coll_state_uncleared(backport v3.1)

See merge request idf/esp-idf!2929

Component/bt:  fix SC_MITM_BOND failed in smp for iphones

component/bt: bugfix for uncleared LMP transaction collision state after rejecting sniff request from slave

component/bt: retrieve disconnection reason in AVDT when ACL-U link is disconnected

Merge branch 'bugfix/btdm_controller_deinit_v3.1' into 'release/v3.1'

bt : fix bug that bluetooth controller init/disable/enable/disable may cause exception(backport v3.1)

See merge request idf/esp-idf!2865

Component/bt: fix ble HID demo error

Merge branch 'bugfix/btdm_fix_queue_block_when_scanning_for_v3.1' into 'release/v3.1'

Component/bt: fix queue blocking when scanning for v3.1

See merge request idf/esp-idf!2893

driver(uart): Fixed uart tx_empty interrupt wdt timeout bug for release/v3.1

bt : fix bug that bluetooth controller init/disable/enable/disable may cause exception

1. when one task do deinit/init/disable/enable, especially different cpu
core, it may cause controller crash in ISR handler
2. fix while BLE is scanning, bluetooth controller is disabled cause BLE
scan is not abort.

Merge branch 'bugfix/spiffs_readdir_recursion_v3.1' into 'release/v3.1'

SPIFFS: fix stack overflow in readdir_r due to recursion (backport v3.1)

See merge request idf/esp-idf!2876

Merge branch 'bugfix/remove_bt_dependency_on_lwip_header_v3.1' into 'release/v3.1'

Bugfix/remove bt dependency on lwip header (backport v3.1)

See merge request idf/esp-idf!2907

Component/bt: fix hci_hal_env.rx_q and xHciH4Queue blocking when scanning

Merge branch 'bugfix/btdm_fix_gattc_count_invalid_for_v3.1' into 'release/v3.1'

Component/bt: fix gattc get count invalid and discover included service error for v3.1

See merge request idf/esp-idf!2894

Merge branch 'doc/wifi_update_channel_state_information_document_v3.1' into 'release/v3.1'

docs: update channel state information document (backport v3.1)

See merge request idf/esp-idf!2796

wpa_supplicant: removed unrequired header dir include from component.mk

- Also fixed license header in rtc driver

Signed-off-by: Mahavir Jain <mahavir@espressif.com>

bluedroid: remove dependency on `arpa/inet.h` include

Signed-off-by: Mahavir Jain <mahavir@espressif.com>

Merge branch 'bugfix/ulp_example_fix_v3.1' into 'release/v3.1'

ULP example fixes (backport v3.1)

See merge request idf/esp-idf!2818

Merge branch 'bugfix/sdmmc_auto_stop_cmd_v3.1' into 'release/v3.1'

sdmmc: enable host auto_stop only for certain commands (backport for v3.1)

See merge request idf/esp-idf!2817

Merge branch 'bugfix/btdm_sco_end_crash_on_supv_to_for_v3.1' into 'release/v3.1'

bugfix/btdm_sco_end_crash_on_supv_to_for_v3.1(backport v3.1)

See merge request idf/esp-idf!2896

Merge branch 'feat/sdio_pullup_v3.1' into 'release/v3.1'

backport v3.1: fix(sdio_slave): fix the intr_recv issue that trigger receiving too fast cause assertion failed.

See merge request idf/esp-idf!2795

fix(sdio_slave): fix the intr_recv issue that trigger receiving too fast cause assertion failed.

also fix a race risk issue when recycle receiving buffers.

Component/bt: fix gattc get count invalid

component/bt: bugfix on the crash during end of sco link resulted from link supervision timeout

Merge branch 'bugfix/unit_test_thread_local_storage_v3_1' into 'release/v3.1'

ci/esp32: Fix race in "TLS Test" where s_task can go out of scope before cleanup finishes (v3.1 backport)

See merge request idf/esp-idf!2844

spiffs: add test case for readdir_r with large number of files

Ref. https://esp32.com/viewtopic.php?f=13&t=6486

Fix stackoverflow due to recursion in vfs_spiffs_readdir_r

Merge branch 'test/backport_ci_changes_to_v3.1' into 'release/v3.1'

test: backport ci changes (backport v3.1)

See merge request idf/esp-idf!2869

CI: support test one case multiple times by @bot

ci: temp disable http client tests:

connection is not stable. need to replace with local test servers.

tiny-test-fw: support ignore test cases in CI assign test stage

tiny-test-fw: fix exception during print debug info:

DUT log is unicode, might not be able to encode

CI: erase nvs partition before test:

Latest NVS partition bin can't be parsed by old IDF revision. Need to erase before test.

esp32/test: set 60s timeout for one deep sleep case

tiny-test-fw: save DUT log in different thread:

We found some SD card on Raspberry Pi could have very bad performance.
It could take seconds to save small amount of data.
If the DUT receives data and save it as log, then it stops receiving data until log is saved.
This could lead to expect timeout. As an workaround to this issue,
``BaseDUT`` class will create a thread to save logs.
Then data will be passed to ``expect`` as soon as received.

tiny-test-fw: fix incorrect wait timeout in expect

tiny-test-fw: filter examples with test level

tiny-test-fw: print expect failure when test fails

CI: add stage `host_test`:

1. Add `host_test` stage for test jobs running on host.
2. Rename stage `test` to `integration_test`.

CI: minor optimize of CI config file:

1. set shorter expire time for artifacts
2. set dependency for example test jobs, to limit the artifacts it downloads

CI: remove test report stage:

Test report is not used as expected:

1. we rarely download and use test report
2. current test report method doesn't handle large amount data well,
   need to be replaced by other methods

Test report also make test jobs allow to fail. It breaks the
original flow of Gitlab CI and make user confused.

test: add mesh basic function test cases

Merge branch 'feature/wifi_check_wifi_lib_git_commit_id_v3.1' into 'release/v3.1'

check WiFi library git commit id in unit test (backport v3.1)

See merge request idf/esp-idf!2785

Merge branch 'bugfix/fix_pcnt_isr_service_register_bug_for_v3.1' into 'release/v3.1'

driver(pcnt):  Add some comments in pcnt.h for v3.1

See merge request idf/esp-idf!2845

Merge branch 'bugfix/fix_touchpad_wakeup_status_v3.1' into 'release/v3.1'

fix(sleep): swap touchpad num in wakeup status v3.1

See merge request idf/esp-idf!2848

Merge branch 'bugfix/ledc_duty_and_freq_for_v3.1' into 'release/v3.1'

driver(ledc):  fix bugs reported from unit-test and github for v3.1

See merge request idf/esp-idf!2843

Merge branch 'bugfix/secure_boot_padding_v3_1' into 'release/v3.1'

secure boot: Fix padding issue (backport v3.1)

See merge request idf/esp-idf!2833

Merge branch 'bugfix/bootloader_dev_zero_app_count_v3.1' into 'release/v3.1'

bootloader: Fix issue - bs->app_count is zero but ota_data have valid entry (backport  v3.1)

See merge request idf/esp-idf!2847

fix(sleep): swap touchpad num in wakeup status

Merge branch 'bugfix/fix_uart_timeout_bug_when_enable_reftick_v3.1' into 'release/v3.1'

driver(uart): Fix uart time_out bug when using ref_tick for releasev3.1

See merge request idf/esp-idf!2810

bootloader: Fix issue - bs->app_count is zero but ota_data have valid entry

If we have the partition table without any ota_apps but in ota_data have
valide entry, in this case we get an error(hang). This commit fix this
case. If bs->app_count is zero when selecting the factory app.

Closes https://github.com/espressif/esp-idf/issues/2218

Merge branch 'bugfix/deep_sleep_flush_uart_v3.1' into 'release/v3.1'

sleep: fix flushing UARTs when entering deep sleep (backport v3.1)

See merge request idf/esp-idf!2816

esp32 tests: TLS test: use same size stack for static & non-static task

Use constant instead of magic number of task priorities.

esp32: Fix race in "TLS Test" where s_task can go out of scope before cleanup finishes

Probable cause for CI failures of "LoadStoreError" after this task finishes running.

bugfix(ledc): fix bugs reported from unit-test and github.

1. In ledc_set_duty_and_update, return if duty updated. Close https://github.com/espressif/esp-idf/issues/2082
2. fix ledc_set_freq function for low speed mode.

Add some comments in pcnt.h.

driver(uart): Fix uart time_out bug when using ref_tick for releasev3.1

check WiFi library git commit id in unit test

Merge branch 'bugfix/beacon_info_do_not_update_after_user_scan_v3.1' into 'release/v3.1'

Wifi: bugfix of beacon info don't update after user scan (backport v3.1)

See merge request idf/esp-idf!2780

Merge branch 'feature/nvs_part_gen_improvements_backportv3.1' into 'release/v3.1'

Feature/nvs part gen improvements (backport v3.1)

See merge request idf/esp-idf!2799

app_update: Don't double-verify secure boot signature during OTA

esp_image_load() already verifies the signature

secure boot: Pad to avoid data after the signature mapping into the address space

Because address space is mapped in 64KB pages, it was possible for unauthenticated data after the
app .bin to become mapped into the flash cache address space.

This problem is solved by 2 changes:

* "esptool elf2image --secure-pad" will pad the image so that the signature block ends close to the
  64KB boundary. Due to alignment constraints it will be 12 bytes too short after signing (but
  with flash encryption, these 12 bytes are still encrypted as part of the last block and can't be
  arbitrarily changed).
* By default, secure boot now requires all app partitions to be a multiple of 64KB in size.

Wifi: bugfix of beacon info don't update after user scan

Merge branch 'bugfix/clear_intr_status_when_enable_intr_v3.1' into 'release/v3.1'

driver(gpio): fix the gpio interrupt false triggering issue(backport v3.1)

See merge request idf/esp-idf!2806

Merge branch 'bugfix/rmt_mem_num_maximum_limit_is_not_accurate_v3.1' into 'release/v3.1'

bugfix(rmt): Modify the rmt_mem_num maximum limit value from 15 to 8.(backport v3.1)

See merge request idf/esp-idf!2808

Merge branch 'bugfix/secure_boot_regression_partitions_v3_1' into 'release/v3.1'

Fix secure boot & flash encryption regression, don't verify partitions as part of secure boot (backport)

See merge request idf/esp-idf!2779

Fix errors in rtc_gpio_desc values

ulp example: fix for RTC IOs

- call rtc_gpio_init for pins which aren't configured as RTC by default
- for RTC IOs 16 and 17, read higher part of the input register
- automatically convert GPIO number into RTC IO number
- use ulp_set_wakeup_period instead of writing to register

sdmmc: enable host auto_stop only for certain commands

Perviously host send_auto_stop flag would be set for every data
transfer over 1 block long. This caused stop commands to be sent
after CMD53, which shouldn't be done. Fix by adding an explicit list
of commands for which send_auto_stop should be set.

sleep: fix flushing UARTs when entering deep sleep

Since 94250e42a0, UART output is suspended when entering sleep mode
(deep or light sleep). This makes sense for light sleep, where sleep
normally takes small amount of time, and flushing the UART would add
a lot of latency. But this breaks existing behaviour for deep sleep,
where UART output was previously sent out before entering sleep mode.

Closes https://github.com/espressif/esp-idf/issues/2145

Modify the rmt_mem_num maximum limit value from 15 to 8.

driver(gpio) : Fixed the gpio related bug for release v3.1.

nvs_partition_generator: Add support for base64 representation of Binary data

nvs_partition_generator: Modifications to enable using the utility as a Python library

And also use directly as an executable

Merge branch 'bugfix/mdns_remove_backport' into 'release/v3.1'

mdns: Minor fix for mdns_service_remove (backport v3.1)

See merge request idf/esp-idf!2784

Merge branch 'bugfix/autoip_compilation_backportv3.1' into 'release/v3.1'

LWIP AutoIP Compilation Fixed by defining IP_IS_V4_VAL(backport v3.1)

See merge request idf/esp-idf!2787

Merge branch 'bugfix/bt_os_abstraction_layer_v3.1' into 'release/v3.1'

bt: fix OS abstraction layer for correct critical section API usage (backport v3.1)

See merge request idf/esp-idf!2713

docs: update channel state information document

    1. Move channel to the first row of the table.

    2. Remove the condition of HT20/HT40 for they are determined by
    secondary channel.

    3. Clean up the CSI table.

Merge branch 'bugfix/gcc8_complation_errors_v3.1' into 'release/v3.1'

gcc8_newlib3: Compilation warnings and errors not specific to newlib v3 (backport v3.1)

See merge request idf/esp-idf!2777

Merge branch 'bugfix/minor_fix_about_ip_route' into 'release/v3.1'

lwip: minor fix about ip route

See merge request idf/esp-idf!2782

LWIP AutoIP Compilation Fixed by defining IP_IS_V4_VAL()

mdns: Minor fix for mdns_service_remove()

Send the Goodbye packet while removing an mDNS service as an "Authoritative" packet so
that the listeners remove the service from their records immediately.

lwip: minor fix about ip route

Minor fix about ip4_route_src_hook()

Merge branch 'bugfix/tw23835_add_source_ip_route_for_unicast_v3.1' into 'release/v3.1'

lwip: add source ip based route for unicast packet (backport v3.1)

See merge request idf/esp-idf!2773

bootloader: Fix warning building reflashable Secure Boot image

bootloader: Don't verify Partition Table as part of Secure Boot

Partition Tables are still signed for backwards compatibility, but signature is no longer checked as
part of bootloader.

Closes https://github.com/espressif/esp-idf/issues/1641

bootloader: Fix secure boot & flash encryption functionality

Fixes regression in 3e0ac4db79.

gcc8_newlib3: Compilation warnings and errors not specific to newlib v3

lwip: add source ip based route for unicast packet

Add source IP based route for unicast packets forwarding.

Merge branch 'bugfix/btdm_err_data_report_for_v3.1' into 'release/v3.1'

bugfix/btdm_err_data_report_for_v3.1(backport v3.1)

See merge request idf/esp-idf!2751

bt: fix OS abstraction layer for correct critical section API usage

Signed-off-by: Mahavir Jain <mahavir@espressif.com>

Merge branch 'bugfix/xthal_get_interrupt_volatile_v3.1' into 'release/v3.1'

xtensa: make XTHAL_GET_INTERRUPT, XTHAL_GET_CCOUNT volatile (backport v3.1)

See merge request idf/esp-idf!2712

component/bt: bugfix for erroneous data reporting always enabled