Merge branch 'bugfix/btdm_hfp_invalid_hci_sync_pkt_len' into 'master'

bugfix/btdm_hfp_invalid_hci_sync_pkt_len

See merge request idf/esp-idf!3186

Merge branch 'feature/sync_lwip_as_submodule' into 'master'

Feature/sync lwip as submodule

See merge request idf/esp-idf!2685

Feature/sync lwip as submodule

Merge branch 'bugfix/http_server_example_tests_regex' into 'master'

HTTP Server Example Tests : Fix various issues

See merge request idf/esp-idf!3162

Merge branch 'feature/pyenv_multiple_run' into 'master'

CI: Simplify running commands with several versions of Python

See merge request idf/esp-idf!3123

CI: Simplify running commands with several versions of Python

Merge branch 'feature/disable_rom_logging' into 'master'

esp32/sleep: Add a function to disable logging from ROM code

See merge request idf/esp-idf!3182

Merge branch 'bugfix/btdm_discovery_ble' into 'master'

component/bt : fix bug that set discovery mode will stop ble adv

See merge request idf/esp-idf!3183

Merge branch 'test/split_test_env_for_integration_test' into 'master'

test: split CI test environment

See merge request idf/esp-idf!3099

HTTP Server Example Tests : Fix various issues
* Fixed regex constraints for parsing IP and other parameters from monitor log.
* httplib connection timeouts set
* Redundent tests (commented out earlier) have been removed from advanced_tests. These tests are already run during unit testing.

Merge branch 'bugfix/eclipse_compiler_command_cpp' into 'master'

docs/eclipse: update command to get compiler specs

See merge request idf/esp-idf!3167

Merge branch 'bugfix/ci_github_deploy' into 'master'

ci: Fix spurious pipeline failure when deploying a tag to GitHub

See merge request idf/esp-idf!3021

Merge branch 'bugfix/tw25969_esp_derive_local_mac_missing' into 'master'

defination: fix the bug that esp_derive_local_mac() defination missing

See merge request idf/esp-idf!3198

defination: fix the bug that esp_derive_local_mac() defination missing

Closes: https://github.com/espressif/esp-idf/issues/2352

docs: update command to get compiler specs in a few more places

Merge branch 'doc/get_started_override_options' into 'master'

doc: Add environent variable overriding to get started

See merge request idf/esp-idf!3160

Merge branch 'bugfix/nvs_doc' into 'master'

nvs_flash: Minor changes to NVS documentation

See merge request idf/esp-idf!3192

test: split CI test environment:

Currently CI test environment is complicated, usually includes NIC, AP.
These devices are not used for a lot test cases. Therefore we split the
test environment, remove unnecessary devices. Then it will be easier to
create CI runners.

doc: Add environemt variable overriding to get started

This comit adds details about the overriding of environment variables such as
ESPPORT and ESPBAUD to the get started guide.

nvs_flash: Minor changes to NVS documentation

1) Change API doc to reflect new limits on string and blob length.
2) Add "version" field to Page Header structure in README.

Fixes: https://github.com/espressif/esp-idf/issues/2321

Merge branch 'feature/termios' into 'master'

Add basic support for termios.h

See merge request idf/esp-idf!3085

Merge branch 'bugfix/can_driver_multiple_bugs' into 'master'

CAN: Add pm_lock, fix gpio bug, update docs

See merge request idf/esp-idf!3138

Merge branch 'bugfix/check_python_order_only_prereq' into 'master'

Use check_python_dependencies everywhere as order-only-prerequisite

See merge request idf/esp-idf!3174

Merge branch 'bugfix/monitor_win_encoding' into 'master'

idf_monitor: Fix Unicode decoding on Windows

See merge request idf/esp-idf!3157

component/bt: bugfix for incorrect length of HCI SCO packet size in HFP resulted from uninitialized data buffer length

Merge branch 'doc/btdm_a2dp_sink_example_improvement' into 'master'

component/bt: fix the format and add more content to A2DP sink example

See merge request idf/esp-idf!2995

Merge branch 'doc/btdm_a2dp_source_example_improvement' into 'master'

component/bt: fix the format and add more content to A2DP source example

See merge request idf/esp-idf!2996

Merge branch 'feature/modify_simple_wifi' into 'master'

modify simple wifi example to getting_started example

See merge request idf/esp-idf!3143

Merge branch 'feature/signature_verify_updates' into 'master'

secure boot: Support signed app verification without hardware secure boot

See merge request idf/esp-idf!2814

examples/ulp: Add using esp_deep_sleep_disable_rom_logging

component/bt : fix bug that set discovery mode will stop ble adv

As the bluedroid original implmentation of BR/EDR and BLE dual mode about discovery mode,
when set discovery mode for BR/EDR, it will stop ble advertising.

Reference to https://github.com/espressif/esp-idf/issues/2306

esp32/sleep: Add a function to disable logging from ROM code

1. modify simple wifi example
2. add README file

Merge branch 'bugfix/esp_bt_mem_release' into 'master'

components/bt: Fix broken API esp_bt_mem_release() for parameter ESP_BT_MODE_BTDM

See merge request idf/esp-idf!3121

Merge branch 'feature/modify_espnow' into 'master'

modify espnow example

See merge request idf/esp-idf!3144

Merge branch 'bugfix/bootloader_random_in_app' into 'master'

esp32: Allow bootloader_random.h use in app, add esp_fill_random() function

See merge request idf/esp-idf!3124

Merge branch 'bugfix/lock_up_if_supply_is_varying' into 'master'

bootloader_support: Fix enable wdt for resolve issue with varying supply

See merge request idf/esp-idf!2769

Use check_python_dependencies everywhere as order-only-prerequisite

Merge branch 'bugfix/make_mconf_deps' into 'master'

kconfig: Don't include system headers in dependency files

See merge request idf/esp-idf!3163

Merge branch 'bugfix/heap_dma_pool_fixes' into 'master'

heap: Fixes around DMA reserved pool

See merge request idf/esp-idf!3034

Merge branch 'bugfix/add_core_id_to_idle_task_name' into 'master'

freertos: Add core ID to idle task names

See merge request idf/esp-idf!3159

freertos: Add core ID to idle task names

This commit adds the core number to the name of each idle task.

bootloader_support: Fix enable rtc_wdt for resolve issue with varying supply

Eliminates the issue with the lock up in the bootloader due to a power drawdown during its operation.

Closes https://github.com/espressif/esp-idf/issues/1814

esp32: Add esp_fill_random() function

Convenience function to fill a buffer with random bytes.

Add some unit tests (only sanity checks, really.)

bootloader_support: Move bootloader_random.h to public header directory

mconf: Don't include system headers in dependency files

Fixes issue where build gets stuck because of .d files in the
tools/kconfig directory.

Closes https://github.com/espressif/esp-idf/issues/712

Merge branch 'bugfix/heap_poison_swap_check' into 'master'

heap: When verifying & swapping a fill pattern, stop swapping if verification fails

See merge request idf/esp-idf!2890

Merge branch 'feature/bootloader_minor_enhancements' into 'master'

Feature/bootloader minor enhancements

See merge request idf/esp-idf!3111

Merge branch 'mesh/rewrite_docs' into 'master'

docs/rewrite_mesh_docs

See merge request idf/esp-idf!2990

docs/rewrite_mesh_docs

The following commit rewrites the ESP-MESH docs. This commit includes
new diagrams and a structure approach to the mesh docs. Some mesh api references
have also been modified.

CAN: Add pm_lock, fix gpio bug, update docs

This commit does the following

- Add power management lock to CAN driver so that APB frequency does not change
whilst CAN driver is in use
- Fix incorrect flag in can_transmit()
- Refactor can_driver_install() and can_driver_uninstall() so that critical sections
are shorter
- Fix CAN gpio configuration bug on RX pin. Closes #2302
- Add docs about multiple ID configuration and fix example links

components/bt: Fix broken API esp_bt_mem_release() for parameter ESP_BT_MODE_BTDM

Problem:
The new API esp_bt_mem_release() that was added freed BTDM data to heap from esp_bt_controller_mem_release().
Now with the BT memory optimization commit ee787085f937a582c3b70692f0d19b58cdb2de7d,
the BTDM data is optimized and reduced to only 32 bytes which is not sufficient amount to be added to heap.
So, using the API leads to assert saying that the region is too small.

Solution:
Modify heap_caps_add_region_with_caps to return ESP_ERR_INVALID_SIZE in case the range is too small to create a new heap.
Do not assert if return value is ESP_ERR_INVALID_SIZE

This also fixes using API esp_bt_controller_mem_release() with ESP_BT_MODE_BTDM

Signed-off-by: Hrishikesh Dhayagude <hrishi@espressif.com>

Merge branch 'bugfix/fix_bt_hdr_files' into 'master'

components/bt: Make a pass through Bluetooth header files

See merge request idf/esp-idf!3093

Merge branch 'bugfix/btdm_update_private_address' into 'master'

component/bt: Update BLE private address after it's private address interval

See merge request idf/esp-idf!2987

Merge branch 'bugfix/btdm_rfcomm_test_command_cause_crash' into 'master'

component/bt: Fix bug rfcomm test command cause crash

See merge request idf/esp-idf!3080

Merge branch 'bugfix/btdm_find_remote_service_by_uuid_always_return_success' into 'master'

component/bt: Fix bug of SDP find services by uuid always return success

See merge request idf/esp-idf!3036

Merge branch 'feature/modify_smart_config' into 'master'

modify smart config example

See merge request idf/esp-idf!3142

Merge branch 'bugfix/esp_wifi_disconnect_fail' into 'master'

update wifi lib to fix two bugs

See merge request idf/esp-idf!3125

Merge branch 'bugfix/tw23350_fix_brownout_reset' into 'master'

when brownout reset occurs, set the phy TX Power to the lowest

See merge request idf/esp-idf!2854

modify espnow example

idf_monitor: Fix Unicode decoding on Windows

Closes https://github.com/espressif/esp-idf/issues/2348

fix the esp_wifi_disconnect() err when wifi is not started or inited

Closes: https://github.com/espressif/esp-idf/issues/2336

Merge branch 'ci/add_check_stage' into 'master'

ci: Add 'check' stage, move all check-related jobs to this stage

See merge request idf/esp-idf!2986

Updated command to get compiler specs.

Eclipse was unable to resolve the std::mutex type eventhough the mutex header file was succesfully included. By adding this modification, the issues was resolved.

Merge branch 'bugfix/btdm_security_vulnerability' into 'master'

fix bluetooth security vulnerability of ECDH public key checking

See merge request idf/esp-idf!3089

Merge branch 'bugfix/wifi_reorder_mpdu_as_ampdu' into 'master'

esp32: reorder MPDU as AMPDU

See merge request idf/esp-idf!3108

esp32: reorder MPDU as AMPDU

    Some APs transmit AMPDU and MPDU by turns. Moreover, the sequence
    numbers of AMPDU and MPDU are out of order, e.g. MPDU(1253) -
    AMPDU(1251, 1252) - MPDU(1254) - AMPDU(1255, 1256). In order to
    receive both AMPDU and MPDU in order, MPDU must be reordered with
    AMPDU.

Add basic support for termios.h

Closes https://github.com/espressif/esp-idf/issues/2063

Merge branch 'bugfix/py3_error_code_generator_from_docs' into 'master'

Docs: Check Python packages

See merge request idf/esp-idf!3135

modify static variables and README file

Docs: Check Python packages

Merge branch 'feature/emmc_ddr' into 'master'

sdmmc: eMMC support, command layer refactoring

See merge request idf/esp-idf!3062

Merge branch 'feature/py3_idf_size' into 'master'

tools: Support Python 3 in idf_size.py

See merge request idf/esp-idf!2849

when brownout reset occurs，set the phy TX Power to the lowest

heap: Drop priority of DMA reserved memory pool

Ensures that non-reserved memory should be used up first, before allocating from this pool.

heap: When adding a new heap, allocate its metadata block from internal memory only

ci: Add 'check' stage, move all check-related jobs to this stage

Allows us to prevent pushing to GitHub if a check fails on master/release branch.

sdmmc: document eMMC support, host features

sdmmc: update unit tests for ESP_eMMC_TestBoard_V1

1. New tests for SD card on slot 0. Currently frequency for 4-bit mode
has to be reduced in the test.

2. Change pin for CD/WP tests, re-enable CD tests.

sdmmc: implement partial DDR support

Works for 3.3V eMMC in 4 line mode.
Not implemented:
- DDR mode for SD cards (UHS-I) also need voltage to be switched to 1.8V.
- 8-line DDR mode for eMMC to be implemented later.

sdmmc: command layer refactoring

Merge branch 'bugfix/http_server_example_tests' into 'master'

http_server : Fix and enable example tests

See merge request idf/esp-idf!2960

fix bluetooth security vulnerability of ECDH publick key checking

eMMC/MMC support for ESP32

Merges https://github.com/espressif/esp-idf/pull/1941
Previous work in https://github.com/espressif/esp-idf/pull/590

sdmmc host: minor cleanup

Code style, comments

Merge branch 'fix/spi_example_wait_gpio' into 'master'

spi: fix the misleading example, letting the master wait until slave is ready

See merge request idf/esp-idf!3136

Merge branch 'test/bugfix_BTSTK_GATT_25007' into 'master'

test: fix bug of BTSTK_GATT_25007

See merge request idf/esp-idf!3096

Merge branch 'bugfix/btdm_get_acl_num' into 'master'

component/bt : fix get acl number incorrect due to memory release

See merge request idf/esp-idf!3090

Merge branch 'doc/python_sphinx_build' into 'master'

docs: Call 'python -m sphinx' instead of sphinx-build

See merge request idf/esp-idf!3127

Merge branch 'bugfix/hwcrypto_mpi_ecp' into 'master'

mbedtls: Don't unnecessarily grow the result of a hardware bignum operation

See merge request idf/esp-idf!3041

Temporary : Disable leak tests

http_server : Fix and enable example tests
This introduces the following changes in the example test scripts :
* Dependency on python requests library removed in favor of httplib
* Bug fixed in the logic responsible for receiving and processing http chunked responses
* Default timeouts increased Note : Due to connectivity issues (between runner host and DUT) in the runner environment, some of the advanced_tests are being ignored. These tests are intended for verifying the expected limits of the http_server capabilities, and implement sending and receiving of large HTTP packets and malformed requests, running multiple parallel sessions, etc. It is advised that all these tests be run locally, when making changes or adding new features to this component.

Merge branch 'bugfix/mesh_fix_hard_to_find_parent' into 'master'

mesh: bugfix and add two APIs

See merge request idf/esp-idf!3107

spi_flash: fix erase_range for block erase check

Erase in block (64k) as much as possible, before falling back
to sector (4k) erase.

Signed-off-by: Mahavir Jain <mahavir@espressif.com>

bootloader: add API for erasing flash region

Signed-off-by: Mahavir Jain <mahavir@espressif.com>

bootloader: keep bootloader_common code to retention region

It is possible to utilize some of the routines related to otadata
partition validation, after firmware image is downloaded to RAM. Hence
these routines should be part of app cpu cache, so that they do not
get overwritten by firmware.

Signed-off-by: Mahavir Jain <mahavir@espressif.com>

spi: fix the misleading example, letting the master wait until slave is ready

docs/en/security: Add documentation for signed apps without hardware secure boot feature

secure boot: Support secure boot signatures without hardware secure boot

Allows OTA updates to be secured via signature checks, without requiring the overhead or complexity
of a full secure boot implementation.

Uses same signing mechanisms (build system and/or espsecure.py as Secure Boot).

Requires:
* [ ] More testing
* [ ] Documentation

Merge branch 'bugfix/gcc8_warnings' into 'master'

Fix or silence warnings found by GCC 8

See merge request idf/esp-idf!3130