Component/bt: fix get error adv packet sometimes

Merge branch 'feature/python_future' into 'master'

Add python-future by using python requirements file

See merge request idf/esp-idf!2973

Merge branch 'fix/spi_dma_config_in_iram' into 'master'

SPI: put dma config and slave functions into IRAM

See merge request idf/esp-idf!3038

Merge branch 'test/add_mesh_recreate_network_case_to_known_issue' into 'master'

test: add mesh recreate network case as known issue

See merge request idf/esp-idf!3066

test: disable mesh recreate network test:

We have fixed a bug in test script. Before that, we didn't do strict check when generate the mesh tree, which makes the test pass.

Temp disable these cases, to let CI pass before bug fixed.

docs: make the use of pip install clear

bootloader: Don't use check_python_dependencies in the bootloader command

make: Don't invoke check_python_dependencies in bootloader subproject

make: Use order-only prereq to check python dependencies

translated some parts in get-started section to zh_CN

1. "install required python packages" in docs/zh_CN/get-started/index.rst
2. docs/zh_CN/get-started/linux-setup-scratch.rst
3. docs/zh_CN/get-started/linux-setup.rst
4. docs/zh_CN/get-started/macos-setup-scratch.rst
5. docs/zh_CN/get-started/macos-setup.rst

Add python-future by using python requirements file

spi_slave: add new menuconfig item to decide whether spi slave should be put into IRAM

spi: fix the issue that spi cannot be used when flash is disabled

The dma configuration function called in the ISR should be put into the IRAM.

Fixes https://github.com/espressif/esp-idf/issues/2307.

Merge branch 'feature/rtc_slowclk_extra_options' into 'master'

Add more RTC_SLOW_CLK options

See merge request idf/esp-idf!2984

Merge branch 'bugfix/esp_bt_controller_mem_release' into 'master'

BT/BTDM memory release might fail if any of the memory regions is empty

See merge request idf/esp-idf!3031

Merge branch 'bugfix/timer_oneshot_timeout_twice' into 'master'

component/bt: Some timer oneshot will timeout twice

See merge request idf/esp-idf!2979

Merge branch 'bugfix/nvs_set_blob_bug' into 'master'

nvs_flash: Fix nvs_set_blob hang when partition is near to FULL

See merge request idf/esp-idf!3051

Merge branch 'bugfix/wrover-kit-camera-socket-pinout' into 'master'

Corrected pinout of the Camera / J4 connector

See merge request idf/esp-idf!3054

Merge branch 'bugfix/freertos_task_delete' into 'master'

freertos: Expose TCB & Stack memory capabilities as macro, fix task delete test

See merge request idf/esp-idf!3040

Merge branch 'bugfix/trace_mem_layout_pro_cpu' into 'master'

soc: fix trace memory region for single core mode

See merge request idf/esp-idf!3029

Merge branch 'feature/make-otadata' into 'master'

make dump_otadata: Displays app ota_seq and crc on console

See merge request idf/esp-idf!2901

make dump_otadata: Displays app ota_seq and crc on console

Merge branch 'bugfix/http_write_data' into 'master'

esp_http_client: Fix minor bugs in `esp_http_client_write` and `esp_http_client_open` APIs

See merge request idf/esp-idf!2924

Merge branch 'feature/esp_http_client_add_esp_tls' into 'master'

esp_http_client: Add esp-tls in esp_http_client

See merge request idf/esp-idf!2740

esp32: add support for 8MD256 and external 32k as slow clock options

soc/rtc: Force power on 8M clock if it is used to derive RTC slow clock

soc/rtc: add support for external 32k oscillator

Compared to external 32k XTAL, when active oscillator is used as input,
some parameters need to be set differently.

esp32/clk: remove unused code

When 32k XTAL was selected as clock source, if the first calibration
attempt failed, the code would fall back to 150kHz internal clock.
Calibration with the internal clock will always succeed.
Therefore `wait` would always be either 0 or 1. Based on this, some
code in this routine can be eliminated.

Merge branch 'feature/rtc_cpu_freq_config' into 'master'

soc/rtc: Refactoring, support CPU frequencies lower than XTAL

See merge request idf/esp-idf!2856

Corrected pinout of the Camera / J4 connector

nvs_flash: Fix nvs_set_blob hang when partition is near to FULL

Marking a page full does not skip it from page selection process and the
same page might get returned if there is no other page with more unused
entries. Added a check for the same while storing blobs.

Fixes: https://github.com/espressif/esp-idf/issues/2313

esp_http_client: Add esp-tls APIs in SSL transport of esp_http_client

esp-tls APIs and SSL transport layer of esp_http_client try to
achieve similar things, so this is an effort to remove code redundancy.

esp-tls: Add support for network timeout

Merge branch 'feature/spi_burst_desc' into 'master'

spi_master: change to DMA burst mode when access descriptors

See merge request idf/esp-idf!2824

Merge branch 'feat/spi_non_dma_64byte' into 'master'

spi_master: change high part config to allow transactions of 64 bytes

See merge request idf/esp-idf!3025

docs: update power management section on esp_pm_configure

soc/rtc_clk: reduce data size by disabling CSWTCH generation

Saves about 200 bytes of DRAM at the expense of 4 bytes in IRAM.

soc/rtc_clk: split rtc_clk_init into separate object file

rtc_clk_init and related functions don’t need to be in IRAM/DRAM.

examples/power_save: set CPU frequencies in sdkconfig

tests: use new CPU frequency setting API

bootloader: use new CPU frequency setting API

esp32: use new CPU frequency setting API

soc/rtc: CPU frequency settings refactoring

Previous APIs used to set CPU frequency used CPU frequencies listed in
rtc_cpu_freq_t enumeration. This was problematic for two reasons.
First, supporting many possible frequency values obtained by dividing
XTAL frequency was hard, as every value would have to be listed in
the enumeration. Since different base XTAL frequencies are supported,
this further complicated things, since not all of these divided
frequencies would be valid for any given XTAL frequency. Second,
having to deal with enumeration values often involved switch
statements to convert between enumeration and MHz values, handle
PLL/XTAL frequencies separately, etc.

This change introduces rtc_cpu_freq_config_t structure, which contains
CPU frequency (in MHz) and information on how this frequency has to
be generated: clock source (XTAL/PLL), source frequency, clock
divider value. More fields can be added to this structure in the
future. This structure simplifies many parts of the code, since both
frequency value and frequency generation settings can be accessed in
any place in code without the need for conversions.

Additionally, this change adds setting of REF_TICK dividers to support
frequencies lower then XTAL with DFS.

esp_clk.h: add esp_clk_xtal_freq

This adds a user API for getting the XTAL frequency

Merge branch 'feature/move_CONFIG_TCPIP_LWIP_to_menuconfig' into 'master'

tcpip_adapter: optimise tcpip_adapter and fix a bug in emac_dev.c

See merge request idf/esp-idf!3017

Merge branch 'feature/reset_reason' into 'master'

Add API to get reset reason

See merge request idf/esp-idf!2871

freertos: Expose TCB & Stack memory capabilities as macro, fix task delete test

Test was failing if task was allocating TCB & Stack memory from DMA only pool
which is not MALLOC_CAP_DEFAULT.

Merge branch 'bugfix/bluetooth_demo_sdkconfig' into 'master'

Fix bluetooth example sdkconfig.defaults

See merge request idf/esp-idf!3032

emac:optimise tcpip_adapter and fix emac_dev.c

1. move CONFIG_xx macros to Kconfig
2. fix a bug that make EMAC_DMAOPERATION_MODE_ERG mess

esp_http_client: Fix minor bugs in esp_http_client_write and esp_http_client_open APIs

`esp_http_client_write` API puts a constraint on the maximum length of the data that can be
written, which is equal to client handle buffer size, but the data to be sent can be more
than that, so in this case, this API has to be called multiple times.

In `esp_http_client_open` API, the return value of `transport_write` API, used to send HTTP
request, is not checked, and in rare cases, data written will be less than expected which will
cause a problem. So there are fixes for these minor issues in this MR.

docs: add API reference section for esp_system.h

esp32/test: add tests for reset reasons

esp32: add API to get reset reason

tiny-test-fw: invoke expect callbacks in order of appearance

Previously the callbacks were invoked in the same order as the list of
patterns to be matched.

unit test: fix regex for detecting abort

Merge branch 'feature/docs_new_logo_typeface' into 'master'

Replaced Espressif logo with a new, consistent, modern and neutral typeface design.

See merge request idf/esp-idf!2988

Merge branch 'bugfix/err_variable_issue' into 'master'

Fix small parameter issue in bt_a2dp_sink example. Merges…

See merge request idf/esp-idf!3012

Fix bluetooth example sdkconfig.defaults

1. a2dp_gatts_coex
2. blufi BT_RESERVE_DRAM

prevent heap_caps_add_region exception if region is empty

Calling `esp_bt_controller_mem_release` or `esp_bt_mem_release` might result in exception if any of the regions returned to heap are empty. This happens usually if BT/BLE is enabled, but not used/linked in the final firmware.

Merge branch 'feature/bootloader_unit_tests' into 'master'

app_update: Add unit tests for ota, factory, test partitions

See merge request idf/esp-idf!2565

Merge branch 'bugfix/ut_bt_build_fix' into 'master'

bt: build unit tests only when CONFIG_BT_ENABLED=1

See merge request idf/esp-idf!3000

Merge branch 'docs/security' into 'master'

docs: Added more wordings to capture secure boot and flash encryption dependency.

See merge request idf/esp-idf!2947

Merge branch 'feature/decrease_bt_contrller_memory_with_new_mem_reserved' into 'master'

decrease bt contrller memory with new mem reserved

See merge request idf/esp-idf!2791

spi_master: change high part config to allow transactions of 64 bytes

Merge branch 'feature/nvs_multi_page_util' into 'master'

Bugfix: multi page blob creation was failing if only one entry was left in page

See merge request idf/esp-idf!2971

Merge branch 'feature/nvs_part_gen_util_file_size' into 'master'

Add support for input custom partition size

See merge request idf/esp-idf!2828

Add support for input custom partition size

Add nvs part gen utility multi page blob support update

app_update: Add unit tt pests for ota, factory, test partitions

Merge branch 'bugfix/spiram_malloc_reserve_internal_fragments' into 'master'

esp32: Allow SPIRAM_MALLOC_RESERVE_INTERNAL to span multiple regions of memory

See merge request idf/esp-idf!2891

tools: fix ci example build report reassign warnning

Merge branch 'feature/rtc_wdt_api' into 'master'

soc/rtc_wdt: Add API functions for rtc_wdt

See merge request idf/esp-idf!2837

Merge branch 'feature/what_driver_for_my_board' into 'master'

Provided a table with development boards by Espressif together with USB-to-serial driver names

See merge request idf/esp-idf!2792

Provided a table with development boards by Espressif together with USB-to-serial driver names

Merge branch 'docs/simplified_rtd_theme_configuration' into 'master'

Removed redundant code to configure 'sphinx-rtd-theme' for documentation

See merge request idf/esp-idf!2921

soc: fix trace memory region for single core mode

Signed-off-by: Mahavir Jain <mahavir@espressif.com>

Merge branch 'bugfix/tw24588_Android_get_IP_fail' into 'master'

fix the bug for Android phone getting IP fail when STA+AP mode

See merge request idf/esp-idf!3006

Merge branch 'doc/unit_test_zh_CN' into 'master'

doc: translate the unit-tests.rst into Chinese

See merge request idf/esp-idf!2998

Fix small parameter issue in bt_a2dp_sink example. Merges https://github.com/espressif/esp-idf/pull/2261

The wrong parameter was used to print the error if something failed during the bt init.

Merge branch 'bugfix/mdns_any_type_share' into 'master'

mdns: Fix a portion of the queries are issued with the wildcard query type

See merge request idf/esp-idf!2886

soc/rtc_wdt: Add API functions for rtc_wdt

Added functions:
rtc_wdt_protect_off/on
rtc_wdt_set_length_of_reset_signal
rtc_wdt_set_stage
rtc_wdt_set_time
rtc_wdt_feed
rtc_wdt_disable/enable

doc/unit-tests:translate the unit-tests into zh_CN

mdns: Fix a portion of the queries are issued with the wildcard query type

fix the bug for Android phone getting IP fail when STA+AP mode

Merge branch 'bugfix/bt_fix_incorrect_handle_print' into 'master'

examples/bluetooth: Fix incorrect end handle print in the GATT client applications

See merge request idf/esp-idf!2880

docs: Added more wordings to capture secure boot and flash encryption dependency.

Merge branch 'feature/ota_get_sha-256_of_partition' into 'master'

bootloader_support: Add API for getting sha256_of_partition

See merge request idf/esp-idf!2479

component/bt : decrease memory consumption by conn number

1. BLE only with 9(max) connection will decrease 3K DRAM
2. BR/EDR only with 7(max) connection will decrease 16K DRAM
3. Any of BLE or BR/EDR connection number decrease will also decrease DRAM consumption
4. Decrease one BLE connection will save about 1KB DRAM
5. Decrease one BR/EDR ACL connection will save about 1.2KB DRAM
6. Decrease one BR/EDR SCO/eSCO will save 2KB DRAM.
7. fix some definition and kconfig
8. remove 1.2k of vhci tx cache and make .bss & .data to heap about 1.4K
9. modify BT Reserved Memory size and modify example to support new bt kconfig

Merge branch 'bugfix/ulp_jumps_flags' into 'master'

ULP: document JUMPS instruction flags, add tests

See merge request idf/esp-idf!2949

ci: only apply BOT_DOCKER_IMAGE_TAG to esp32-ci-env

docs: update esp32ulp-binutils download link

ulp: add documentation for JUMPS instruction conditions

Hardware implements conditions LE, LT, GE, and conditions EQ and GT
are implemented in the assembler by emitting two JUMPS instructions
with other conditions.

ulp: add tests for jumps instruction

bt: build unit tests only when CONFIG_BT_ENABLED=1

app_update: Add API for getting sha256_of_partition

Added bootloader_common_get_sha256_of_partition() and esp_partition_get_sha256() - get or calculate SHA-256
digest for app and data partitions.
Added bootloader_sha256_hex_to_str() - helps to print SHA-256 digest
Added esp_partition_check_identity() - compares two partitions by SHA-256 digest

Refactoring a function esp_image_load() in bootloader space to esp_image_verify() and
bootloader_load_image(). Old name function esp_image_load is deprecated
and will remove in V4.0 version.

spi_flash/sim: Fix error test_host. Add stub for bootloader_common_get_sha256_of_partition in sim/stubs

Merge branch 'bugfix/btdm_ecdh_public_key_not_check' into 'master'

component/bt: Fixed the vulnerability released by Bluetooth org when using…

See merge request idf/esp-idf!2933

component/bt: Fixed the vulnerability released by Bluetooth org when using public key not check in the process of ECDH encryption.

1. Add the 100 times test when the private key is generated by the random number;
2. Add the bt components to the unit-test-app/config directory.
3. Added the bt unit test case to CI.

component/bt: Some timer oneshot will timeout twice

Find when BQB

Merge branch 'bugfix/doc_generated_sections' into 'master'

docs: Move version-related includes to run in sphinx-build not make

See merge request idf/esp-idf!2985

Replaced Espressif logo with a new, consistent, modern and neutral typeface design.