Merge branch 'feature/esp_http_client_global_ca_store' into 'master'

esp_http_client: add support for using certs from global ca store

See merge request idf/esp-idf!4302

Merge branch 'doc/crc_apis_usage' into 'master'

Add CRC APIs usage

See merge request idf/esp-idf!4351

Merge branch 'test/spi_param_wiring_doc' into 'master'

spi test: describe the wiring of param test in the comments

See merge request idf/esp-idf!4394

spi test: describe the wiring of param test in the comments

Merge branch 'bugfix/wifi_modify_wifi_kconfig' into 'master'

esp32: modify WiFi Kconfig in order to achieve better compatility and performance

See merge request idf/esp-idf!4164

Merge branch 'feature/efuse_manager' into 'master'

Feature/efuse manager

See merge request idf/esp-idf!2819

esp32: modify WiFi Kconfig in order to achieve better compatility
and performance

efuse: Fix to pass CI tests

efuse: Reduce the size of esp_efuse_desc_t to 4 bytes

efuse: Add MAX_BLK_LEN define for changing len of field

Added docs, improved efuse_table_gen.py, and minor fixes

Checking the generated files for compliance with the coding scheme.

efuse: Fix docs and script

efuse: Fix python coding style

Set python's scripts attribute chmod
Add compatibility with Python3 for efuse_table_gen.py

CI: Add host tests

efuse: Add a write/read protection

efuse: Fix make/cmake build systems and docs

efuse: Add support coding scheme to script

Added support using BLK1 and BLK2 in custom table.
Added change size key in BLK1 and BLK2 if coding scheme was changed.

efuse: Add API efuse

Added support 3/4 coding scheme

build_system: Add support efuse

docs: Add efuse

soc: Add support efuse

esp32: Add using efuse component

bootloader: Add support efuse component

Merge branch 'bugfix/fix_scan_bugs_and_alloc_eb_fail' into 'master'

wifi: fix scan bugs and alloc eb fail

See merge request idf/esp-idf!4373

Merge branch 'bugfix/pthread_thread_size' into 'master'

pthread: Transform the units of the stack size to the FreeRTOS domain

Closes IDFGH-603

See merge request idf/esp-idf!4375

Merge branch 'feature/sniffer_app_trace' into 'master'

capture WiFi packets to host via JTAG

See merge request idf/esp-idf!4203

Merge branch 'esp_http_server/lru_counter_for_timestamp' into 'master'

esp_http_server/lru_counter_for_timestamp:Added LRU counter for timer

See merge request idf/esp-idf!4205

pthread: Transform the units of the stack size to the FreeRTOS domain

Closes https://github.com/espressif/esp-idf/issues/3015

wifi:
1. make menuconfig can set the WiFi mgmt short buffer num
2. fix several scan bugs

Merge branch 'bugfix/make_get_coreid_volatile' into 'master'

freertos: Make xPortGetCoreID() volatile

See merge request idf/esp-idf!4359

Merge branch 'bugfix/btdm_fix_remove_bonded_device_warnning' into 'master'

Component/bt: fix remove bonded device warnning

See merge request idf/esp-idf!3704

Merge branch 'bugfix/ble_reconn_rescan_readv_crash' into 'master'

component/bt : fix bug that there's low ratio crash when BLE do re-connect/re-scan/re-adv

See merge request idf/esp-idf!4324

esp_http_client: add support for using certs from global ca store

Closes https://github.com/espressif/esp-idf/issues/3062

Merge branch 'bugfix/lack_of_break_in_tcp_client' into 'master'

fix the bug in tcp_client

See merge request idf/esp-idf!4330

Merge branch 'bugfix/tw28146_make_wifi_iram_optimization_configurable' into 'master'

esp32: make WiFi IRAM optimization configurable

See merge request idf/esp-idf!4037

Merge branch 'feature/embed_elf_sha256' into 'master'

build system: include SHA256 hash of ELF file into app_desc structure

See merge request idf/esp-idf!4093

sniffer: capture packets to host via JTAG

Based on app-trace component, it's able to send sniffer packets to host via JTAG interface.

esp32: print ELF file SHA256 in panic handler

build system: include SHA256 hash of ELF file into app_desc structure

Merge branch 'example/freertos_real_time_stats' into 'master'

freertos: Add real time stats example

See merge request idf/esp-idf!4334

Merge branch 'bugfix/bootloader_freq_check_runtime' into 'master'

bootloader: check previously used clock frequency at run time

See merge request idf/esp-idf!3827

Merge branch 'bugfix/cmake_psram_fix_flag' into 'master'

cmake: Fix psram workaround compiler flag application

See merge request idf/esp-idf!4335

Merge branch 'bugfix/esp_timer_monotonic_test' into 'master'

esp_timer: fix occasional failures in "esp_timer_get_time returns monotonic values" test

See merge request idf/esp-idf!4340

freertos: Make xPortGetCoreID() volatile

When xPortGetCoreID() is called twice within a function,
it might only be called once after compilation. This
commit makes the inline assembly of the function volatile.

Closes #3093

esp32: make WiFi IRAM optimization configurable

With this feature, the WiFi IRAM optimization can be disabled/enabled via menuconfig.

Add CRC APIs usage

fix the bug in tcp_client

Closes https://github.com/espressif/esp-idf/issues/3058

soc: define named constants for DPORT_CPUPERIOD_SEL values

bootloader: check previously used clock frequency at run time

In the situation when bootloader was compiled for 240MHz, and app was
compiled for 160MHz, and the chip is a revision 0 chip, the
bootloader will assume that the application has also been running at
240MHz. This will cause the chip to lock up later. Modify this to use
a run time check of DPORT_CPUPERIOD_SEL, which indicates which of the
PLL frequencies was used.

Closes https://github.com/espressif/esp-idf/issues/2731.

soc/rtc_clk: don’t clear DPORT_CPUPERIOD_SEL when switching to XTAL

This is not necessary since RTC_CNTL_SOC_CLK_SEL is set before this.

freertos: Add real time stats example

The following commit adds a real time stats example demonstrating how to
obtain task CPU usage statistics over a period of time, as opposed to the current
run time stats in FreeRTOS which measures task CPU usage as a percentage of
total system run time.

Merge branch 'bugfix/nvs_hash_blocks_eager_cleanup' into 'master'

nvs: do eager cleanup of HashListBlocks

See merge request idf/esp-idf!4337

cmake: Fix psram workaround compiler flag application

Previously, this compiler flag was not being applied
regardless of CONFIG_SPIRAM_CACHE_WORKAROUND setting.

Explanation: add_compile_options() only applies to
source files added after the function is run, or in
subdirectories added after the function is run. In
this case, no new source files were being added after
this function was run.

Merge branch 'feature/add_api_get_rmt_idle_level' into 'master'

feature(rmt):  fixed some RMT related issues.

See merge request idf/esp-idf!3864

Merge branch 'bugfix/fix_dig_gpio_unable_hold_bug' into 'master'

bugfix(gpio):  fixed digital gpio unable hold bug during deep-sleep.

See merge request idf/esp-idf!3877

Merge branch 'bugfix/i2s_pdm_adc_use_apll' into 'master'

bugfix(i2s): allow to use apll in pdm/adc/dac mode

See merge request idf/esp-idf!3800

Merge branch 'bugfix/update_ledc_register_and_fix_fade_scale' into 'master'

Bugfix (ledc):  Fixed ledc fade scale  bug

See merge request idf/esp-idf!4109

Merge branch 'bugfix/btdm_fix_comment_error' into 'master'

Component/bt: fix comment error

See merge request idf/esp-idf!3769

Merge branch 'bugfix/idf_monitor_test' into 'master'

CI: Test IDF Monitor after it is ready to receive data

See merge request idf/esp-idf!4055

Merge branch 'feature/http_server_err_handling' into 'master'

http_server : Add feature for invoking user configurable handlers during server errors

See merge request idf/esp-idf!4229

esp_timer: fix occasional failures in "monotonic values" test

1. ref_clock used in unit tests occasionally produces time off by ~100
microseconds shortly after being started. Add a delay to let
ref_clock stabilise, until the cause is found.

2. Reduce roundoff error accumulation which would occasionally cause
the test to fail, by choosing an overflow value which can be divided
by APB frequency.

3. Move time sampling part of the test into an IRAM function to
reduce variations due to cache behavior.

4. Remove calculation of "standard deviation" in the test, as what was
calculated was not actually standard deviation, and it did not add any
useful information.

nvs: add a blob fragmentation test case

Ref. TW12937

nvs: do eager cleanup of HashListBlocks

Previously when HashList was removing items, HashListBlocks were
removed lazily. This resulted in empty HashListBlocks dangling around
in full pages, even when all items have been erased. These blocks
would only be deleted when NVS was re-initialized
(nvs_flash_deinit/nvs_flash_init).

This change does eager cleanup instead, based on the code from
@negativekelvin offered in
https://github.com/espressif/esp-idf/issues/1642#issuecomment-367227994.

Closes https://github.com/espressif/esp-idf/issues/1642.

Merge branch 'feature/poll' into 'master'

VFS: Implement poll() based on select()

See merge request idf/esp-idf!4315

esp_http_server/lru_counter_for_timestamp:Added LRU counter for timer

Replaced the os timer in http server by LRU counter. The timestamp is
unnecessary for LRU.

tools: Test IDF Monitor after it is ready to receive data

VFS: Implement poll() based on select()

Closes https://github.com/espressif/esp-idf/issues/2945

https_server : Missing uri_match_fn paramater added to default config

http_server examples : Updated tests and examples to demonstrate usage of `httpd_register_err_handler()` and accommodate for changes in default error handler behavior

http_server : Added feature for invoking user configurable handlers during server errors

Added APIs :
  * httpd_resp_send_err()        : for sending HTTP error responses for error codes given by httpd_err_code_t. It uses TCP_NODELAY option to ensure that HTTP error responses reach the client before socket is closed.
  * httpd_register_err_handler() : for registering HTTP error handler functions of type httpd_err_handler_func_t.

The default behavior, on encountering errors during processing of HTTP requests, is now to send HTTP error response (if possible) and close the underlying socket. User configurable handlers can be used to override this behavior for each error individually (except for 500 Internal Server Error).

Also fixed some typos.

Closes https://github.com/espressif/esp-idf/issues/3005

Merge branch 'bugfix/multiple_can_bugs' into 'master'

CAN: Add functions to clear queues and fix multiple bugs

See merge request idf/esp-idf!4279

Merge branch 'ci/retry_submodule_sync' into 'master'

ci: Retry submodule sync 2 more times before failing

See merge request idf/esp-idf!4323

ci: Only use "github_sync" tagged runners to talk to GitHub

ci: Retry submodule sync 2 more times before failing

Merge branch 'bugfix/make_extra_component_dirs' into 'master'

make: fix issues related to EXTRA_COMPONENT_DIRS

See merge request idf/esp-idf!4253

Merge branch 'bugfix/kconfig_flex_arg' into 'master'

kconfig: fix compatibility with very old versions of flex

See merge request idf/esp-idf!4263

component/bt : fix bug that there's low ratio crash when BLE do re-connect/re-scan/re-adv

fix 3 bugs:
1. do BLE connect (both of slave and master), it mgiht cause crash due to there's much interrupts happens effect ble code running, for example, wifi run on the same core as bluetooth controller and wifi run throughtput test.
2. do BLE scan stop or adv stop or connection stop, it might cause ASSERT or crash due to memory corrupted in controller memory poll.
3. minor bug fix, not really effect bluetooth.

Merge branch 'bugfix/psram_move_qsort_setlocale_flash' into 'master'

psram: Move qsort and setlocale to flash

See merge request idf/esp-idf!4321

newlib: When using psram, link setlocale() to flash not IRAM

newlib: When using psram, link qsort to flash not IRAM

Merge branch 'bugfix/remove_lddeps_resolution' into 'master'

Remove lddeps resolution for linker script generator template

See merge request idf/esp-idf!4326

ldgen: remove resolution of template includes

Merge branch 'feature/coredump_improvements_refactoring' into 'master'

coredump: improvements, refactoring (separate FLASH and UART functionality)

See merge request idf/esp-idf!4207

Merge branch 'bugfix/mdns_service_memory_leak' into 'master'

mdns: fix memory leak when query for service plus various other fixes

See merge request idf/esp-idf!4270

Merge branch 'feature/anti_rollback_efuse' into 'master'

Support anti-rollback

See merge request idf/esp-idf!3682

Merge branch 'revert-23a03cf6' into 'master'

Revert "Merge branch 'bugfix/external_rtc_start_fail' into 'master'"

See merge request idf/esp-idf!4292

Merge branch 'bugfix/btdm_fix_connection_params_update_issues' into 'master'

component/bt: fix connection params issues

See merge request idf/esp-idf!4276

Merge branch 'bugfix/doc_master_branch_clone_note' into 'master'

doc: Fix invalid 'This command will clone master' note in docs

See merge request idf/esp-idf!4240

Merge branch 'bugfix/coex_lc_protect' into 'master'

component/esp32 : fix coexist lc protect cause memory corrupted

See merge request idf/esp-idf!4265

Reduce part of IRAM consumption in wifi libnet80211.a

It might be a little effect of WIFI max TX throughput if the limitation is cache hit rate

Merge branch 'bugfix/spiram_linker_wildcards' into 'master'

newlib: Provide library name for ROM libc object files linked as PSRAM workarounds

See merge request idf/esp-idf!4152

Revert "Merge branch 'bugfix/external_rtc_start_fail' into 'master'"

This reverts merge request !2441

doc: Fix invalid 'This command will clone master' note in docs

Was accidentally considering the extra_note text as a tuple, resulted in
corrupt ..note section.

component/esp32 : fix coexist lc protect cause memory corrupted

The bug will cause memory corrupted (the largest range is from 0x3ffc0000 ~ 0x3ffc8000),
some strange error will happen, like IllegalInstruction, LoadProhibited and .etc.

Merge branch 'bugfix/freertos_unused_xSize' into 'master'

freertos: Fix unused variable warning

See merge request idf/esp-idf!4281

Merge branch 'bugfix/wdt_compability_app_with_old_bootloader' into 'master'

esp32: Fix wdt settings in esp_restart_noos

See merge request idf/esp-idf!4098

Merge branch 'bugfix/nvs_key_part_check_err' into 'master'

nvs_flash: Detect key partition as uninitialised even if encrypted by bootloader

See merge request idf/esp-idf!4224

Merge branch 'feature/docs_add-ons_and_extensions' into 'master'

docs: This is a quick reference of more than a dozen and-ons and extensions prepared over the last two years to add contents, improve look & feel and cut on maintenance of the ESP-IDF documentation.

See merge request idf/esp-idf!4244

Merge branch 'feature/get_started_steps' into 'master'

Introduced installation steps to improve navigation through the installation…

See merge request idf/esp-idf!4234

CAN: Add functions to clear queues and fix multiple bugs

This commits adds the functions can_clear_transmit_queue() and
can_clear_receive_queue(). Closes #2906

The following bug are fixed:

- CAN_IO_UNUSED is now explicitly cast to enum type. Closes #2825
- Fix multiple documentation errors. Closes #2898, Closes #2794
- can_reconfigure_alerts() returns incorrect current_alerts. Closes #3028
- Add missing header file. Closes #3065

component/bt: fix connection params update issues