VFS: select() on UART should return immediately when data is buffered

Merge branch 'bugfix/freertos_idle_tick_count_v3.1' into 'release/v3.1'

freertos: use xTaskQueueMutex to protect tick count (backport v3.1)

See merge request idf/esp-idf!3728

Merge branch 'bugfix/aes_sha_mpi_shared_regs_v3.1' into 'release/v3.1'

aes/sha/mpi: Bugfix a use of shared registers.  (backport v3.1)

See merge request idf/esp-idf!3637

aes/sha/mpi: Bugfix a use of shared registers.

This commit resolves a blocking in esp_aes_block function.

Introduce:
The problem was in the fact that AES is switched off at the moment when he should give out the processed data. But because of the disabled, the operation can not be completed successfully, there is an infinite hang. The reason for this behavior is that the registers for controlling the inclusion of AES, SHA, MPI have shared registers and they were not protected from sharing.

Fix some related issue with shared using of AES SHA RSA accelerators.

Closes: https://github.com/espressif/esp-idf/issues/2295#issuecomment-432898137

Merge branch 'bugfix/btdm_add_check_peer_addr_type_in_set_adv_params_v3.1' into 'release/v3.1'

Component/bt: add check peer addr type in set adv params (backport v3.1)

See merge request idf/esp-idf!3735

Merge branch 'bugfix/fix_some_wifi_bugs_1121_v3.1' into 'release/v3.1'

esp32: fix some wifi bugs (backport v3.1)

See merge request idf/esp-idf!3761

esp32: fix some wifi bugs

Fix some wifi bugs
1. Enable RX BAR
2. Fix the bug that ESP32 AP negotiates with iphone to 11g
3. Fix the bug that ESP32 STA has ap_loss because CMCC AP contains two SSID

Merge branch 'bugfix/btdm_controller_disable_v3.1' into 'release/v3.1'

Fix two bugs when disable bluetooth controller(backport v3.1)

See merge request idf/esp-idf!3693

Merge branch 'bugfix/btdm_errors_in_comment_v3.1' into 'release/v3.1'

components/bt: Some errors in comment(backport 3.1)

See merge request idf/esp-idf!3714

Merge branch 'bugfix/wifi_sta_sniffer_phy_config_bug_v3.1' into 'release/v3.1'

wifi: fix wifi sta and sniffer phy config bug (backport v3.1)

See merge request idf/esp-idf!3723

Component/bt: add check peer addr type in set adv params

freertos: use xTaskQueueMutex to protect tick count

Having two different spinlocks is problematic due to possibly
different order in which the locks will be taken. Changing the order
would require significant restructuring of kernel code which is
undesirable.

An additional place where taking xTickCountMutex was needed was in
vApplicationSleep function. Not taking xTickCountMutex resulted in
other CPU sometimes possibly advancing tick count while light sleep
entry/exit was happening. Taking xTickCountMutex in addition to
xTaskQueueMutex has shown a problem that in different code paths,
these two spinlocks could be taken in different order, leading to
(unlikely, but possible) deadlocks.

wifi: fix the bug that if station (sleep is enabled) and sniffer are enabled at the same time,
when disable sniffer, station will never enable phy and rf againi. (backport v3.1)

components/bt: Some errors in comment

Merge branch 'bugfix/app_template_build_v3.1' into 'release/v3.1'

esp-idf-template app: some fixes for the updated template app (backport v3.1)

See merge request idf/esp-idf!3701

Merge branch 'bugfix/tw27096_fix_lwip_mbox_free_crash_v3.1' into 'release/v3.1'

fix the crash caused by sys_mbox_free (backport v3.1)

See merge request idf/esp-idf!3620

tools: fix cmake build script for sdkconfig test

cmake: fix the creation dummy main to avoid rebuilding

ci: If there is no sdkconfig, we have to generate one

Merge branch 'bugfix/ethernetif_memory_leak_v3.1' into 'release/v3.1'

fix potential ethernet memory leak(backport v3.1)

See merge request idf/esp-idf!3688

Fix two bugs when disable bluetooth controller

1. Fix the bug that disable controller suddenly cause crash when ble is working
2. Fix the bug that when disable controller, it will cause wifi cannot RX, TX timeout, buffer lack and etc.

ethernetif: fix potential memory leak

1. If L2_TO_L3_RX_BUF_MODE is not selected, we must assign l2_owner explictly before we call pbuf_free.

Merge branch 'test/fix_bug_of_scan_interval_and_windows_for_v3.1' into 'release/v3.1'

test: fix bug of scan interval and window (backport v3.1)

See merge request idf/esp-idf!3668

Merge branch 'bugfix/wifi_do_not_load_phy_data_if_fail_to_open_nvs_v3.1' into 'release/v3.1'

esp32: do not try to load PHY data if fail to open NVS (backport v3.1)

See merge request idf/esp-idf!3649

Merge branch 'bugfix/mdns_crash_on_network_change_backport3.1' into 'release/v3.1'

Fixed mdns crashes on network changes (backport v3.1)

See merge request idf/esp-idf!3579

Merge branch 'bugfix/iperf_bt_error_when_wifi_connect_v3.1' into 'release/v3.1'

components/bt: Point ACL RX buffer ptr to ACL RX buffer if ACL RX buffer ptr is null(backport 3.1)

See merge request idf/esp-idf!3643

esp32: do not try to load PHY data if fail to open NVS

Merge branch 'test/change_iperf_test_env_v3.1' into 'release/v3.1'

test: use simplified env to test iperf cases (backport v3.1)

See merge request idf/esp-idf!3568

lwip: fix crash caused by sys_mbox_free

Fix lwip crashed bug caused by sys_mbox_free()

test: fix bug of scan interval and window

components/bt: Point ACL RX buffer ptr to ACL RX buffer if ACL RX buffer ptr is null(backprot 3.1)

1. When WIFI task or other high priority task blocks the Bluetooth task, ACL RX buffer will use up, ACL RX buffer ptr will point to null and will never point to a valid adress. Causing errors in Bluetooth.
2. hcimsgs.h used whether flow control is on or off

Merge branch 'test/fixbug_create_service_check_message_change_v3.1' into 'release/v3.1'

test: bugfix create service check message change for v3.1

See merge request idf/esp-idf!3664

Merge branch 'bugfix/btdm_add_profile_descriptor_list_for_spp_v3.1' into 'release/v3.1'

component/bt: Add profile descriptor list for SPP(backport 3.1)

See merge request idf/esp-idf!3602

Merge branch 'bugfix/btdm_name_buffer_allocation_size_differs_v3.1' into 'release/v3.1'

components/bt: Fix the different size of name buffer allocation size(backport 3.1)

See merge request idf/esp-idf!3588

test: bugfix create service check message change for v3.1

Merge branch 'bugfix/btdm_sniff_anchor_point_calculation_error_for_v3.1' into 'release/v3.1'

bugfix/btdm_sniff_anchor_point_calculation_error_for_v3.1(backport v3.1)

See merge request idf/esp-idf!3614

component/bt: bugfix of two issues of sniff mode in classic bluetooth

1. resolve the error in calculating sniff anchor point that result in connection supervision timeout
2. resolve the issue of user case that requires sniff attempt is larger than 0xff

Merge branch 'bugfix/btdm_allow_a2dp_codec_dynamic_alloc_for_v3.1' into 'release/v3.1'

bugfix/btdm_allow_a2dp_codec_dynamic_alloc_for_v3.1(backport v3.1)

See merge request idf/esp-idf!3600

Merge branch 'bugfix/btdm_add_static_passkey_and_accept_specified_sec_aut' into 'release/v3.1'

component/bt:  add static passkey and accept specified sec auth (backport v3.1)

See merge request idf/esp-idf!3559

Merge branch 'bugfix/fix_some_wifi_bugs_1022_v3.1' into 'release/v3.1'

esp32: fix some wifi bugs (backport v3.1)

See merge request idf/esp-idf!3540

Merge branch 'docs/wifi_correct_mistake_in_csi_doc_v3.1' into 'release/v3.1'

esp32: correct a mistake about secondary channel of CSI in wifi.rst (backport v3.1)

See merge request idf/esp-idf!3406

Merge branch 'bugfix/fix_psram_eid_v3.1' into 'release/v3.1'

psram: fix psram eid (backport v3.1)

See merge request idf/esp-idf!3467

Merge branch 'bugfix/workaround_free_peripherals_isr_when_using_dual_core_v3.1' into 'release/v3.1'

driver(interrupt): fix the issue that interrupt might be allocated and freed on different core for release/v3.1

See merge request idf/esp-idf!3436

Merge branch 'bugfix/bootloader_iram_overlap_check_v3.1' into 'release/v3.1'

bootloader: verify that loaded image does not overlap bootloader code (backport v3.1)

See merge request idf/esp-idf!3526

bootloader: Fix crash enabling flash encryption

Regression in 9c715d7946a9595bad53307cf0a141d4226d0a5a

bootloader: keep bootloader_common code to retention region

It is possible to utilize some of the routines related to otadata
partition validation, after firmware image is downloaded to RAM. Hence
these routines should be part of app cpu cache, so that they do not
get overwritten by firmware.

Signed-off-by: Mahavir Jain <mahavir@espressif.com>

component/bt: Add profile descriptor list for SPP(backport 3.1)

A cherry-pick of MR !2691

component/bt: allow dynamic allocation of SBC encoder/decoder buffer used in A2DP to save internal DRAM

Merge branch 'bugfix/ci_cmake_examples_v31' into 'release/v3.1'

Fix cmake example build failures, gcov (backport 3.1)

See merge request idf/esp-idf!3326

components/bt: Fix the different size of name buffer allocation size(backport 3.1)

A cherry-pick of MR !3587
Close https://github.com/espressif/esp-idf/issues/2615

mdns: fixed crashes on network change (not properly locked sending packets to queue from timer task), backport 3.1

examples: Copy ca_cert.pem into both example project dirs

Keeps projects all-in-one under a single directory.

cmake: Fix some failing example builds, fix gcov

ci: Split build_examples jobs into make & cmake

Fix problem where failures in make were being ignored.

Merge branch 'doc/nvs_encr_doc_v3.1' into 'release/v3.1'

nvs_flash: Update documentation at different places to indicate NVS encryotion is supported

See merge request idf/esp-idf!3479

nvs_flash: Update documentation at different places to indicate NVS encryption is supported

Merge branch 'ci/only_create_required_jobs_in_pipeline_v3.1' into 'release/v3.1'

CI: only create required jobs in pipeline (backport v3.1)

See merge request idf/esp-idf!3565

test: use simplified env to test iperf cases

CI: only create required jobs when use bot to trigger test:

Gitlab CI now allow us to define if a job need to be created by
varialbes. This commit add label to CI jobs, so we can make some jobs
not created in certain scenarios when we trigger pipeline with @bot.

Component/bt: add ble disconnect when ACCEPT_SPECIFIED_SEC_AUTH failed

bootloader: verify that loaded image does not overlap bootloader code

Fixes CVE-2018-18558

Component/bt: add only accept sepecified Authentication

Component/bt: add set default passkey function

Merge branch 'feature/34_coding_scheme_v3.1' into 'release/v3.1'

Secure Boot & Flash encryption: Support 3/4 Coding Scheme

See merge request idf/esp-idf!3510

Merge branch 'bugfix/btdm_fix_remove_bond_list_failed_v3.1' into 'release/v3.1'

component/bt: fix remove bond list failed (backport v3.1)

See merge request idf/esp-idf!3516

component/bt: fix remove bond list failed

esp32: fix some wifi bugs

Fix following WiFi bugs:
1. Fix the bug that MIC verification fails on soft-AP mode
2. Modify mesh root to have same behavior as normal WiFi STA in state change
3. Fix the bug that sniffer can't catch control packets
4. Fix crash bug in soft-AP mode
5. Fix ACM(Admission Control Management) bug

Secure Boot & Flash encryption: Support 3/4 Coding Scheme

Includes esptool update to v2.6-beta1

Merge branch 'feature/ci_multi_python_v3.1' into 'release/v3.1'

CI: Support switching between various versions of Python (backport v3.1)

See merge request idf/esp-idf!3534

Merge branch 'bugfix/tw26711_fix_wifi_memory_v3.1' into 'release/v3.1'

esp32: fix wifi memory leak (backport v3.1)

See merge request idf/esp-idf!3524

CI: Support switching between various versions of Python

esp32: fix wifi memory leak

Fix a WiFi memory leak bug

esp32: correct a mistake about secondary channel of CSI in wifi.rst

Merge branch 'bugfix/coex_hw_blocking_2nd_v3.1' into 'release/v3.1'

coexist : fix coexist bugs related to coex hw blocking

See merge request idf/esp-idf!3415

coexist : fix coexist bugs related to coex hw blocking

1. fix some bugs by previous coex hw blocking bugfix,
   such like, rwble.c (64, 0) line 222
2. fix bug that ble scan performance is very low when software coexist
   is working.
3. update libcoexist version to v1.1.0

Merge branch 'bugfix/tw26696_fix_wifi_timer_v3.1' into 'release/v3.1'

Bugfix/tw26696 fix wifi timer v3.1 (backport v3.1)

See merge request idf/esp-idf!3494

Bugfix/tw26696 fix wifi timer v3.1 (backport v3.1)

Merge branch 'bugfix/fix_random_failure_with_ota_updates_v3.1' into 'release/v3.1'

app_update: fix intermittent failure with firmware updates (backport v3.1)

See merge request idf/esp-idf!3419

heap: Fix heap metadata test to account for background memory allocations

bugfix(psram): fix psram driver

1. remove use EID to distinguish psram voltage
2. 1V8 64Mbit psram and 3V3 64Mbit psram use the same psram driver(standard spi interface)
3. set cs hold time register as 1

feature(psram): add support for 64MBit psram of 1.8v and 3.3v.

1. Add reading psram EID.
2. Configure different clock mode for different EID.
3. add API to get psram size and voltage.
4. Remove unnecessary VSPI claim.

For 32MBit@1.8V and 64MBit@3.3V psram, there should be 2 extra clock cycles after CS get high level.
For 64MBit@1.8 psram, we can just use standard SPI protocol to drive the psram. We also need to increase the HOLD time for CS in this case.

EID for psram:
32MBit 1.8v: 0x20
64MBit 1.8v: 0x26
64MBit 3.3v: 0x46

Merge branch 'bugfix/several_bugfix_about_ba_session_setup_v3.1' into 'release/v3.1'

esp32: several fixes about BA session setup (backport v3.1)

See merge request idf/esp-idf!3456

driver(interrupt): fix the issue that interrupt might be allocated and freed on different cores for release/v3.1

Merge branch 'bugfix/misc_v3_1_backports' into 'release/v3.1'

Multiple v3.1 backports

See merge request idf/esp-idf!3378

esp32: several fixes about BA session setup

1. Fix the bug that ESP32 will reject the retry AddBA request frame
   if AddBA response frame is failed to sent by WiFi LMAC
2. Fix the bug that AddBA request retrys too frequently
3. Forbid BA session setup for VO queue related TID

Merge branch 'fix/spi_master_cmd_addr_lsbfirst_v3.1' into 'release/v3.1'

spi_master: fix the command and address field when LSB_FIRST enabled (Backport v3.1)

See merge request idf/esp-idf!3446

Merge branch 'bugfix/no_disconnect_event_report_if_no_correct_status_code_report_v3.1' into 'release/v3.1'

Bugfix of no disconnect event report if no correct status code report( Backport v3.1)

See merge request idf/esp-idf!3386

test: modify the command/address test a bit to test the LSBFIRST feature

spi: move gpio direction config to common func for coinsistence

(MINOR CHANGE)

spi_master: fix the command and address field when LSB_FIRST enabled

Resolves https://github.com/espressif/esp-idf/issues/2444.

Merge branch 'feature/nvs_encr_v3.1' into 'release/v3.1'

nvs_flash: Add support for nvs encryption

See merge request idf/esp-idf!3434

app_update: remove unrequired static attribute from mmap handle

app_update: fix intermittent failure with firmware updates

Routine `spi_flash_cache2phys` sometimes return incorrect value,
resulting in failure in getting currently running ota partition.
This in turn aborts firmware update process.This issue was more
prominent with SPIRAM enabled cases.

Fix ensures proper cache guards during `spi_flash_cache2phys`, and
also for few other similar APIs.

In addition, `esp_ota_get_running_partition` has also been optimized
to save currently running partition for subsequent invocations.

Fixes https://github.com/espressif/esp-idf/issues/2451

Merge branch 'bugfix/disable_coding_scheme_security_features_v3.1' into 'release/v3.1'

bootloader: Don't enable secure boot or flash encryption for 3/4 Coding Scheme (v3.1)

See merge request idf/esp-idf!3421

nvs_flash: Add support for nvs encryption

esptool: Update to v2.5.1

Release notes: https://github.com/espressif/esptool/releases/tag/v2.5.1

Needed to no longer burn keys if 3/4 Coding Scheme is enabled.

bootloader: Don't enable secure boot or flash encryption for 3/4 Coding Scheme

Merge branch 'bugfix/bootloader_gen_secure_boot_digest_v3.1' into 'release/v3.1'

bootloader: Fix secure boot digest generation for image length where (len%128 < 32) (backport v3.1)

See merge request idf/esp-idf!3411

Merge branch 'fix/sdio_slave_reset_ret_queue_v3.1' into 'release/v3.1'

sdio_slave: fix the ret_queue crash issue when being reset by the master (Backport v3.1)

See merge request idf/esp-idf!3394

Merge branch 'bugfix/btdm_watchdog_timeout_after_pair_with_iphone_v3.1' into 'release/v3.1'

component/bt: Fix BTU task watchdog timeout after pair with iphone (backport 3.1)

See merge request idf/esp-idf!3396