heap: Fix heap metadata test to account for background memory allocations

Merge branch 'bugfix/tw23404_dhcp_NAK_issue_3' into 'master'

modify the timers

See merge request idf/esp-idf!2798

Merge branch 'bugfix/spiffs_readdir_recursion' into 'master'

SPIFFS: fix stack overflow in readdir_r due to recursion

See merge request idf/esp-idf!2839

Merge branch 'bugfix/btdm_controller_deinit' into 'master'

bt : fix bug that bluetooth controller init/disable/enable/disable may cause exception

See merge request idf/esp-idf!2800

Merge branch 'bugfix/heap_test_alloc_iram' into 'master'

heap/tests: make IRAM allocation size divisible by 4

See merge request idf/esp-idf!2853

heap/tests: make IRAM allocation size divisible by 4

heap_caps_malloc will fail to poison a block in IRAM with size not
divisible by 4. The proper fix will be to make poisoning code
smarter, or to disallow allocations from IRAM with size not aligned
by 4.

Merge branch 'feature/idf-fs-profile-modifications' into 'master'

IDF fs profiling tool modifications

See merge request idf/esp-idf!2705

Merge branch 'bugfix/host_tools_warnings' into 'master'

Fix host tools warnings

See merge request idf/esp-idf!2729

Merge branch 'bugfix/src_encoding' into 'master'

Correct source code encoding

See merge request idf/esp-idf!2820

Merge branch 'bugfix/unit-test-build-fix' into 'master'

unit-test-app: don’t include project.mk for ut- targets

See merge request idf/esp-idf!2619

test/uart: fix compilation warning

heap: move get_all_caps to IRAM, used in unit test

freertos: bump limit for spinlock performance test to 300 cycles

newlib: fix unit test for psram config

heap: fix unit test for the case when less than 10k of IRAM is available

spi_master, ulp: fix aliasing errors in unit tests

unit-test-app: don’t include project.mk for ut- targets

If project.mk is included twice in recursive invocation of Make, some
variables defined on the first pass will not be redefined on the
second pass. Rather than cleaning up these variables before calling
Make recursively, don’t include IDF project.mk at all, if one of the
ut- targets is requested.

Merge branch 'bugfix/bootloader_dev_zero_app_count' into 'master'

bootloader: Fix issue - bs->app_count is zero but ota_data have valid entry

See merge request idf/esp-idf!2842

console: Suppress unused warning asprintf result

console: Ignore var cloberred warning for argtable

spiffs: Explicitly indicate unused value

Merge branch 'bugfix/fix_pcnt_isr_service_register_bug' into 'master'

driver(pcnt): fix the  pcnt isr service can not be re registered bug.

See merge request idf/esp-idf!2439

Merge branch 'bugfix/unit_test_thread_local_storage' into 'master'

ci/esp32: Fix race in "TLS Test" where s_task can go out of scope before cleanup finishes

See merge request idf/esp-idf!2794

bootloader: Fix issue - bs->app_count is zero but ota_data have valid entry

If we have the partition table without any ota_apps but in ota_data have
valide entry, in this case we get an error(hang). This commit fix this
case. If bs->app_count is zero when selecting the factory app.

Closes https://github.com/espressif/esp-idf/issues/2218

Merge branch 'bugfix/ci_use_mirror_for_public' into 'master'

ci: Use local mirrors on the public branches too

See merge request idf/esp-idf!2836

Merge branch 'bugfix/udp_multicast_example_leak' into 'master'

udp multicast example: Fix leak, change default port (and log UDP port in use)

See merge request idf/esp-idf!2834

Add some comments in pcnt.h.

Merge branch 'bugfix/fix_touchpad_wakeup_status' into 'master'

fix(sleep): swap touchpad num in wakeup status

See merge request idf/esp-idf!2708

spiffs: add test case for readdir_r with large number of files

Ref. https://esp32.com/viewtopic.php?f=13&t=6486

Merge branch 'bugfix/bootloader_include_priv' into 'master'

bootloader_support: Rename include_priv directory to include_bootloader

See merge request idf/esp-idf!2686

Merge branch 'bugfix/http_client_enhanced' into 'master'

esp_http_client: Resolve some bugs from the github community

See merge request idf/esp-idf!2831

ci: Use local mirrors on the public branches (master, release-) too

    Use DONT_USE_MIRROR=1 to force using the original repositories if you need

udp_multicast example: Change port to 3333 to match README, log port from example

udp_multicast example: Fix memory leak from getaddrinfo() calls

Closes https://github.com/espressif/esp-idf/issues/2201

bootloader_support: Rename include_priv directory to include_bootloader

Old rationale for "priv" no longer applies.

As reported here: https://esp32.com/viewtopic.php?f=13&t=6155&p=27151#p26601

Modifications for fs profiling tool

esp_http_client: Resolve some bugs from the github community
- Closes https://github.com/espressif/esp-idf/issues/2135
- Closes https://github.com/espressif/esp-idf/issues/2208
- Closes https://github.com/espressif/esp-idf/issues/2213

Merge branch 'feature/http_server_finalize' into 'master'

Feature add HTTP Web Server component

See merge request idf/esp-idf!2606

Merge branch 'feature/tools_mass_mfg' into 'master'

Add files for mass manufacturing tool

See merge request idf/esp-idf!2716

Merge branch 'bugfix/reclaim_bt_ble_bss' into 'master'

components/bt: Reclaim BT/BTDM BSS in bluetooth memory release function

See merge request idf/esp-idf!2750

Merge branch 'bugfix/bootloader_noreturn_always' into 'master'

bootloader: Ensure bootloader never returns to caller

See merge request idf/esp-idf!2815

esp32 tests: TLS test: use same size stack for static & non-static task

Use constant instead of magic number of task priorities.

esp32: Fix race in "TLS Test" where s_task can go out of scope before cleanup finishes

Probable cause for CI failures of "LoadStoreError" after this task finishes running.

Merge branch 'bugfix/secure_boot_padding' into 'master'

secure boot: Fix padding issue allowing unverified data to be mapped into the address space

See merge request idf/esp-idf!2778

Merge branch 'cermak_fuzzer_ci_job' into 'master'

added CI job for AFL fuzzer tests

See merge request idf/esp-idf!2537

Merge branch 'bugfix/coex_pause' into 'master'

fix coex pause cause bluetooth performance decrease

See merge request idf/esp-idf!2741

Fix stackoverflow due to recursion in vfs_spiffs_readdir_r

Merge branch 'feature/test_exclude_components' into 'master'

build: Add TEST_EXCLUDE_COMPONENTS

See merge request idf/esp-idf!2648

Merge branch 'feature/freertos_vtasklist_xcoreid' into 'master'

freertos: Add option to display xCoreID in vTaskList

See merge request idf/esp-idf!2728

Http Server : Add a simple light weight HTTP Server Component.
Also add examples, docs and test apps for the HTTP Server.

added CI job for AFL fuzzer tests

bt : fix bug that bluetooth controller init/disable/enable/disable may cause exception

1. when one task do deinit/init/disable/enable, especially different cpu
core, it may cause controller crash in ISR handler
2. fix while BLE is scanning, bluetooth controller is disabled cause BLE
scan is not abort.

Reclaim BT/BTDM BSS and Data in bluetooth memory release function

1. Modify esp_bt_controller_mem_release() to release BTDM BSS and Data to heap if
ESP_BT_MODE_BTDM mode is passed to it
2. Add a new API esp_bt_mem_release() which internally calls
esp_bt_controller_mem_release() with the provided mode and then if mode
is ESP_BT_MODE_BTDM, releases BT BSS and Data to heap.

Background:
For Wi-Fi and BT/BLE applications, for e.g. the usecase is like when
Bluetooth is used for provisioning and once the device is connected to the Wi-Fi
AP, we can turn off Bluetooth completely. In such scenarios, it should be possible to
reclaim all the memory of Bluetooth. Although, currently this does not
happen.

Experiment:
Made the following modifications to examples/bluetooth/gatt_server :
1. Added support of simple_wifi to it
2. Moved all the bluetooth related code under CONFIG_BT_ENABLED config
option
3. Calculated the free heap in 2 similar scenarios:
   i. Disabled BT (CONFIG_BT_ENABLED undefined) and checked the free
heap after STA connected
   ii. Kept BT enabled and disabled it after STA connected and checked
the free heap
Ideally, the numbers for i., ii. above should have been similar. But
there was a delta of almost 30-31K. (i. > ii.)
4. Through make size-components checked the common BSS for libbta.a and libbtdm_app.a
and found it to be almost 30K. Data is around 1K

Solution:
1. Modified the linker script to mark the BSS and Data for these libraries and
free it when ESP_BT_MODE_BTDM mode is passed to mem release APIs.
2. Verified that the free heap is comparable for i. and ii. above.

Note: It is known that once this is done, Bluetooth can only be used
again post reboot.

Signed-off-by: Hrishikesh Dhayagude <hrishi@espressif.com>

Add files and docs for mass mfg

Merge branch 'bugfix/btdm_bt_remove_device_fail_when_ble_connected' into 'master'

component/bt: Fix bug of remove bond device fail when BLE and BT are connectd at the same time

See merge request idf/esp-idf!2767

Merge branch 'feature/nvs_multipage_blob' into 'master'

nvs-flash: Support for blobs larger than half of SPI Flash sector size

See merge request idf/esp-idf!2182

nvs-flash: Support for blobs larger than half of SPI Flash sector size

This change removes the earlier limitation of 1984 bytes for storing data-blobs.
Blobs larger than the sector size are split and stored on multiple sectors.
For this purpose, two new datatypes (multi-page index and multi-page data) are
added for entries stored in the sectors. The underlying read, write, erase and find
operations are modified to support these large blobs. The change is transparent
to users of the library and no special APIs need to be used to store these large
blobs.

Correct source code encoding

Merge branch 'bugfix/rtc_io_hold_regs' into 'master'

Fix errors in rtc_gpio_desc values

See merge request idf/esp-idf!2765

Merge branch 'bugfix/ulp_example_fix' into 'master'

ulp example: fix for RTC IOs

See merge request idf/esp-idf!2768

bootloader: Ensure bootloader never returns to caller

* Fixes some "noreturn" functions in bootloader utils which did return (causing fatal CPU
  exceptions).
* Marks bootloader entry as "noreturn", preventing "user code done" from stalling boot
  Partial fix for https://github.com/espressif/esp-idf/issues/1814 TW20016
  (Comprehensive fix for this issue will be enabling WDT during bootloader, coming shortly.)

Merge branch 'feature/esp32-pico-kit_v4.1' into 'master'

Added description of ESP32-PICO-KIT V4.1 board

See merge request idf/esp-idf!2762

Added description of ESP32-PICO-KIT V4.1 board

Merge branch 'bugfix/rmt_mem_num_maximum_limit_is_not_accurate' into 'master'

bugfix(rmt): Modify the rmt_mem_num maximum limit value from 15 to 8.

See merge request idf/esp-idf!2734

Merge branch 'bugfix/sdmmc_auto_stop_cmd' into 'master'

sdmmc: enable host auto_stop only for certain commands

See merge request idf/esp-idf!2710

Merge branch 'bugfix/deep_sleep_flush_uart' into 'master'

sleep: fix flushing UARTs when entering deep sleep

See merge request idf/esp-idf!2698

Merge branch 'bugfix/btdm_using_osi_malloc_instead_of_malloc' into 'master'

component/bt: Using osi_malloc instead of malloc

See merge request idf/esp-idf!2748

Merge branch 'bugfix/esp_err_ignore_dirs' into 'master'

esp32: Do not document error codes defined in examples

See merge request idf/esp-idf!2732

fix coex pause cause bluetooth performance decrease

1. it may cause BLE connection unstable
2. it may cause Classic BT connection unstable
3. it may cause BLE/BREDR scan performance decrease

Merge branch 'bugfix/btdm_some_misspell' into 'master'

component/bt: Fix some misspell

See merge request idf/esp-idf!2783

Merge branch 'bugfix/ampdu_duplicate' into 'master'

wifi: fix ampdu duplicate issue

See merge request idf/esp-idf!2742

fix(sleep): swap touchpad num in wakeup status

Merge branch 'bugfix/range_CONFIG_ESP32_RTC_CLK_CAL_CYCLES' into 'master'

soc/clk: Fix range CONFIG_ESP32_RTC_CLK_CAL_CYCLES

See merge request idf/esp-idf!2719

freertos: add configTASKLIST_INCLUDE_COREID

Added: display xCoreID in vTaskList

Merges https://github.com/espressif/esp-idf/pull/2064

Merge branch 'bugfix/time_ut_wakeup_from_deep_sleep' into 'master'

esp32/test: Reduces a unit test execution time

See merge request idf/esp-idf!2776

changes for timers

Merge branch 'bugfix/clear_intr_status_when_enable_intr' into 'master'

driver(gpio): fix the gpio interrupt false triggering issue

See merge request idf/esp-idf!2498

Merge branch 'bugfix/fix_uart_timeout_bug_when_enable_reftick' into 'master'

driver(uart):  Fix uart time_out bug when using ref_tick

See merge request idf/esp-idf!2775

app_update: Don't double-verify secure boot signature during OTA

esp_image_load() already verifies the signature

secure boot: Pad to avoid data after the signature mapping into the address space

Because address space is mapped in 64KB pages, it was possible for unauthenticated data after the
app .bin to become mapped into the flash cache address space.

This problem is solved by 2 changes:

* "esptool elf2image --secure-pad" will pad the image so that the signature block ends close to the
  64KB boundary. Due to alignment constraints it will be 12 bytes too short after signing (but
  with flash encryption, these 12 bytes are still encrypted as part of the last block and can't be
  arbitrarily changed).
* By default, secure boot now requires all app partitions to be a multiple of 64KB in size.

component/bt: Fix some misspell

Using CONFIG_BT_SSP_ENABLE instead if BT_SPP_INCLUDED

Modify the rmt_mem_num maximum limit value from 15 to 8.

esp32/test: Reduces a unit test execution time

wifi: fix ampdu duplicate issue

fix ampdu duplicate issue

Merge branch 'bugfix/tw23835_add_source_ip_route_for_unicast' into 'master'

lwip: add source ip based route for unicast packet

See merge request idf/esp-idf!2757

driver(uart): Fix uart time_out bug when using ref_tick

Merge branch 'bugfix/spi_cs_setup_fulldup' into 'master'

fix(spi_master): allow to use cs_ena_pretrans in full duplex mode without…

See merge request idf/esp-idf!2576

Merge branch 'bugfix/mdns_remove' into 'master'

mdns: Minor fix for mdns_service_remove()

See merge request idf/esp-idf!2760

Merge branch 'bugfix/sh2lib_send_bug' into 'master'

sh2lib: Fix a bug in send

See merge request idf/esp-idf!2656

Merge branch 'bugfix/add_queueset_critical_sections' into 'master'

freertos: Add critical sections to queue sets.

See merge request idf/esp-idf!2761

component/bt: Fix bug of remove bond device fail when BLE and BT are connectd at the same time

Merge branch 'feature/support_for_XM25QU64A' into 'master'

feature(flash): set QIO mode for XM25QU64A(1V8_64M_flash)

See merge request idf/esp-idf!2753

Merge branch 'bugfix/ledc_duty_and_freq' into 'master'

bugfix(ledc): fix bugs reported from unit-test and github.

See merge request idf/esp-idf!2735

Merge branch 'bugfix/secure_boot_regression_partitions' into 'master'

Fix secure boot & flash encryption regression, don't verify partitions as part of secure boot

See merge request idf/esp-idf!2764

Merge branch 'feature/wifi_check_wifi_lib_git_commit_id' into 'master'

check WiFi library git commit id in unit test

See merge request idf/esp-idf!2621

docs: Add more ReST-isms in secure boot & flash encryption docs

(Original version of these docs were in Markdown.)

docs: Add note about bootloader size for flash encryption & secure boot

Merge branch 'bugfix/spi_sdio_sdkconfig_include' into 'master'

sdio_example/spi: fix sdkconfig include issue

See merge request idf/esp-idf!2756

Merge branch 'docs/btdm_refactor_ble_spp_readme' into 'master'

component/bt_refactor_ble_spp_readme

See merge request idf/esp-idf!2717