components/bt: Improve the Bluetooth debug messaging scheme

As of now, when Bluetooth debugs are enabled, all the messages are
mapped to BT_PRINTF which is mapped to ESP_LOGE. Hence, make monitor
shows all logs in red color which might lead to missing the actual
errors

This patch maps the Bluetooth messages to appropriate ESP_LOG* messages
and improves readability.

Also, make the BT trace level be configurable in menuconfig, so that
each layer of bt trace can be enabled/disabled.

Finally, add debug log control for BTC, OSI, BLUFI and clear up
Bluetooth debug logs.

So, with this the method of enabling Bluetooth logs is as follows:
1. make menuconfig -> Component config -> Bluetooth -> Bluedroid Enable
-> BT DEBUG LOG LEVEL -> set trace level for every layer of BT

Signed-off-by: Hrishikesh Dhayagude <hrishi@espressif.com>

Merge branch 'bugfix/bluedroid_const_char' into 'master'

Bluedroid: remove warnings about discarding "const" for "const char*"

See merge request idf/esp-idf!2387

Merge branch 'test/add_unit_test_jobs' into 'master'

ci: increase number of unit test jobs, temporarily disable light sleep test for short durations

See merge request idf/esp-idf!2386

Merge branch 'bugfix/ledc_error' into 'master'

ledc driver: Clarify logging of function argument errors

See merge request idf/esp-idf!2380

Merge branch 'feature/mbedtls_2_9_0' into 'master'

Re-add mbedTLS as a submodule, update to 2.9.0

See merge request idf/esp-idf!2367

Merge branch 'bugfix/add_comments_for_adc' into 'master'

driver(adc): Add descriptions that starting ADC can trigger interrupt of GPIO36…

See merge request idf/esp-idf!1910

esp32/test: temporarily disable test for light sleep duration

Until the issue in CI is debugged

Merge branch 'bugfix/vfs_append' into 'master'

VFS: use O_APPEND flag of open() correctly

See merge request idf/esp-idf!2382

Bluedroid: remove warnings about discarding "const" for "const char*"

driver(adc): add descriptions for the issue that starting ADC can trigger interrupt of GPIO36 and GPIO39.

ci: increase number of unit test jobs

Merge branch 'feature/wifi_refactor_smartconfig' into 'master'

refactor smartconfig

See merge request idf/esp-idf!2205

Merge branch 'bugfix/i2s_dma_buf_alloc' into 'master'

i2s: fix issue in dma descriptor allocation if SPIRAM is enabled

See merge request idf/esp-idf!2383

Merge branch 'bugfix/upate_ble_a2dsink_example' into 'master'

example(ble):  Update ble a2d_sink example

See merge request idf/esp-idf!2105

Merge branch 'bugfix/dhcp_server_max_limit' into 'master'

dhcp/dhcpserver Fix max station limit check in dhcp server

See merge request idf/esp-idf!2298

Merge branch 'bugfix/btdm_conn_fail_after_deinit_and_init_spp' into 'master'

component/bt: Fix can't be connected if init SPP again after SPP deinit

See merge request idf/esp-idf!2369

Merge branch 'bugfix/btdm_fix_service_change_write_busy' into 'master'

Component/bt: fix service change write busy

See merge request idf/esp-idf!2359

Merge branch 'bugfix/btdm_a2dp_disconn_state_when_connecting_with_iphone' into 'master'

component/bt: Fix bug a2dp have disconnect state when connecting with iphone 7

See merge request idf/esp-idf!2288

Merge branch 'bugfix/light_sleep_wdt_fix' into 'master'

Fix occasional WDT reset in light sleep test

See merge request idf/esp-idf!2374

refactor smartconfig

    move wifi part to wifi lib and lwip part to idf

VFS: use O_APPEND flag of open() correctly

Closes https://github.com/espressif/esp-idf/pull/1455

Merge branch 'bugfix/tw18980_fix_some_potential_thread_safe_issue' into 'master'

wifi: fix some potential thread safe issue

See merge request idf/esp-idf!2366

i2s: fix issue in dma descriptor allocation if SPIRAM is enabled

It has been observed that, if external SPIRAM is enabled, then under
certain scenarios (e.g. internal memory being too much fragmented),
I2S tx/rx descriptors can land in external SPIRAM and hence resulting
in failure in DMA. Adding explicit capability to allocate in only DMA
capable memory.

Signed-off-by: Mahavir Jain <mahavir@espressif.com>

ledc driver: Clarify logging of function argument errors

Some parameter errors did not specify which parameter was invalid.

Adds a new macro to name the invalid param.

wifi: fix some potential thread safe issue

change some API function to throw event:

esp_wifi_deauth_sta
esp_wifi_get_country
esp_wifi_ap_get_sta_list
esp_wifi_sta_get_ap_info
esp_wifi_stop
esp_wifi_get_channel
esp_wifi_get_protocol
esp_wifi_get_bandwidth

component/bt: Fix can't be connected if init SPP again after SPP deinit

Merge branch 'feature/vfs_small_fds' into 'master'

Use smaller numbers as file descriptors

See merge request idf/esp-idf!2300

ci: add extra UT test job

mbedtls: enable deprecation warnings when building unit tests

mbedtls: update usage of mbedtls_aes_encrypt/decrypt

mbedtls/port: don’t re-declare mbedtls_shaX functions

ALT header files for sha1, sha256, sha512 are only supposed to declare
mbedtls_sha1_context data structure. Function prototypes should come
from original header files.

mbedtls: update usage of deprecated mbedtls_shaX APIs

The following mbedTLS APIs have been deprecated and replaced with the
new ones which return error codes:

mbedtls_shaX_starts -> mbedtls_shaX_starts_ret
mbedtls_shaX_update -> mbedtls_shaX_update_ret
mbedtls_shaX_finish -> mbedtls_shaX_finish_ret
mbedtls_shaX_process -> mbedtls_shaX_internal_process

Update hardware implementations of SHA functions, and other IDF
components which used above functions, to use new versions.

mbedtls: re-add version 2.9.0 as a submodule

sleep: fix deadlock in esp_timer_impl_advance after light sleep

When light sleep is started, the other CPU gets halted using DPORT
stall mechanism. This can happen while it is inside an esp_timer
critical section, which may lead to a deadlock. This change adds
functions to take and release esp_timer lock before entering
DPORT critical section, preventing the deadlock.

esp_timer: fix esp_timer_impl_advance not triggering expired timers

Component/bt: fix service change write busy

Merge branch 'feature/put_supplicant_source_code_from_VNC_to_IDF' into 'master'

wpa_supplicant: move part of codes to IDF

See merge request idf/esp-idf!2272

wpa_supplicant:move part of codes to IDF

Merge branch 'bugfix/uart_fix_get_baudrate_error_bug' into 'master'

driver(uart):   Fix uart_get_baudrate incorrect return value when using ref_tick

See merge request idf/esp-idf!2295

Merge branch 'feature/psram_configure_in_runtime' into 'master'

feature(psram): update psram and flash SPI frequency in runtime

See merge request idf/esp-idf!1776

Merge branch 'bugfix/optimize_coexist_performance' into 'master'

component/esp32 : improve wifi and bluetooth coexistence performance

See merge request idf/esp-idf!2349

component/esp32 : improve wifi and bluetooth coexistence performance

1. update coexistence and wifi libraries. Coexist version update to
v0.9.2
2. Cancel the restriction of use AMPDU when SW_COEXIST_ENABLE is y.

Merge branch 'bugfix/docs_nvs_example_link' into 'master'

docs: Fix broken link in nvs examples

See merge request idf/esp-idf!2360

Merge branch 'bugfix/update_emac_h' into 'master'

update emac_reg_v2.h

See merge request idf/esp-idf!2050

docs: Fix broken link in nvs and jtag example

- Closes https://github.com/espressif/esp-idf/issues/1922

bluedroid: use the new socket registering API

VFS: Use smaller numbers as file descriptors

Merge branch 'doc/spi_master_thread_safety' into 'master'

driver: Add notes to SPI driver docs about thread safety

See merge request idf/esp-idf!2354

Merge branch 'bugfix/fix_two_wifi_bugs' into 'master'

esp32: fix two wifi bugs

See merge request idf/esp-idf!2352

Merge branch 'bugfix/mdns_print_results' into 'master'

mdns: fix potential NULL pointer dereference in mdns_print_results

See merge request idf/esp-idf!2353

Merge branch 'bugfix/nvs_page_compaction' into 'master'

nvs: Fix recovery from power-off while page is being freed

See merge request idf/esp-idf!2327

Merge branch 'bugfix/docs_conf_py3_compat' into 'master'

docs: make conf.py python3 compatible

See merge request idf/esp-idf!2344

driver: Add notes to SPI driver docs about thread safety

esp32: fix two wifi bugs

1. Fix the bug that WiFi receives duplicate MPDU
2. Deauth the station if soft-AP already has max WiFi connections

component/bt: Fix bug a2dp have disconnect state when connecting with iphone 7

Merge branch 'feature/btdm_get_end_handle_when_get_include_service' into 'master'

Component/bt: get end_handle when get include services

See merge request idf/esp-idf!2319

Merge branch 'bugfix/btdm_fix_version_excahnge_issue' into 'master'

Component/bt: fix version exchange issue

See merge request idf/esp-idf!2329

Merge branch 'bugfix/tw12351_wifi_lock_op' into 'master'

esp32: optimize wifi lock

See merge request idf/esp-idf!2345

Merge branch 'bugfix/modify_default_flash_freq_to_40M_for_iperf_example' into 'master'

example: set default SPI flash mode to 40Mhz for iperf example

See merge request idf/esp-idf!1928

Merge branch 'bugfix/tw20575_fix_potential_phy_calibration_bug' into 'master'

esp32: fix potential PHY calibration bug

See merge request idf/esp-idf!2339

esp32: optimize wifi lock

Replace portENTER_CRITICAL/portEXIT_CRITICAL with semaphore lock if
the protected resource is only accessed by different tasks

driver(uart): Fix uart_get_baudrate incorrect return value when using ref_tick

Merge branch 'bugfix/fix_typos_in_docs' into 'master'

Fix few typos in the docs

See merge request idf/esp-idf!2343

docs: make conf.py python3 compatible

Merge branch 'feature/btdm_get_and_remove_bond_device' into 'master'

component/bt: Add APIs of get and remove bond device

See merge request idf/esp-idf!2323

Fix few typos in the docs

Signed-off-by: Hrishikesh Dhayagude <hrishi@espressif.com>

component/bt: Add APIs of get and remove bond device

1. Add APIs of get and remove bond device
2. Add ESP_BT_GAP_AUTH_CMPL_EVT

esp32: fix potential PHY calibration bug

1. Add error log if failed to store calibration version/mac/data
2. Change the NVS calibration version/mac/data store sequence
3. Pass the init_data instead of NULL to esp_phy_rf_init() in esp_phy_load_cal_and_init()

Merge branch 'example/spi_ili_document' into 'master'

example(spi_master): add documentation for LCD commands

See merge request idf/esp-idf!2269

example(spi_master): add descriptions about LCD example

example: set default SPI flash mode to 40Mhz for iperf example

Set default SPI flash frequency to 40Mhz for iperf example to avoid random crash for ESP32-WROVER-KIT (v3).

Merge branch 'bugfix/mark_auto_connect_api_as_obsolete' into 'master'

esp32: mark WiFi auto connect API as deprecated

See merge request idf/esp-idf!1970

Merge branch 'bugfix/wifi_log_level' into 'master'

wifi: Set default wifi library log level based on sdkconfig

See merge request idf/esp-idf!2334

Merge branch 'bugfix/light_sleep_fixes' into 'master'

light sleep fixes

See merge request idf/esp-idf!2242

Merge branch 'bugfix/free_mem_console' into 'master'

Free allocations in command.c after error conditions

See merge request idf/esp-idf!2332

Merge branch 'feature/aws_iot_mqtt_on_443' into 'master'

aws_iot: add support for MQTT TLS over port 443

See merge request idf/esp-idf!2292

Merge branch 'bugfix/cjson_include_objs' into 'master'

cJSON : Include only source file objects

See merge request idf/esp-idf!2326

nvs: Fix recovery from power-off while page is being freed

Currently when page is being freed, items are individually moved from
FREEING page to ACTIVE page and erased. If power-off happens during the
process, the remaining entries are moved to ACTIVE page during recovery.
The problem with this approach is there may not be enough space on
ACTIVE page for all items if an item was partially written before
power-off and erased during recovery. This change moves all the items
from FREEING to ACTIVE page and then erased the FREEING page, If
power-off happens during the process, then ACTIVE page is erased and the
process is restarted.

wifi: Set default wifi library log level based on sdkconfig

Has to be set at runtime, due to precompiled wifi libraries.

Prompted by discussion on forum: https://esp32.com/viewtopic.php?f=2&t=5570&p=24216#p24216

Merge branch 'feature/mfg_bin_create_utility' into 'master'

nvs_flash: Add external binary creation support for NVS partition.

See merge request idf/esp-idf!2031

esp32: mark WiFi auto connect API as obsolete

Mark esp_wifi_set/get_auto_connect as obsolete

Merge branch 'bugfix/gap_appearance_fixes' into 'master'

components/bt: Make modifications to the support of GAP appearance/icon characteristic

See merge request idf/esp-idf!2249

Merge branch 'bugfix/btdm_prepare_write_status_correct' into 'master'

component/bt: Check the value received from the peer device when sent the data used prepare write.

See merge request idf/esp-idf!2320

Merge branch 'feature/btdm_read_bredr_rssi' into 'master'

component/bt : add class bt read RSSI delta (golden range)

See merge request idf/esp-idf!2325

console: Fix formatting

console: Free alloc'd memory after error conditions

Closes https://github.com/espressif/esp-idf/issues/1901

cJSON : Include only source file objects

- test.c can cause issues if there is another main function
- Closes https://github.com/espressif/esp-idf/issues/1883

Fix potential NULL pointer dereference crash.

Merge branch 'bugfix/btdm_genrate_hash_key_by_bluedroid' into 'master'

component/bt: Added the hash key generated directly in the bluedroid module.

See merge request idf/esp-idf!2321

Component/bt: fix version exchange issue
- Android 7.0 version issue
- version exchange late in some phones
- can not get version in smp

components/bt: Make modifications to the support of GAP appearance/icon
characateristic

1. In addition to mentioning in the documentation, use the standard appearance
   values already present and return appropriate error in case an incorrect
   value is passed
2. Add ESP_BLE_APPEARANCE* macros corresponding to BTM_BLE_APPEARANCE*
and use them from the API instead
3. Add the missing appearance parameter values from
https://www.bluetooth.com/specifications/gatt/viewer?attributeXmlFile=org.bluetooth.characteristic.gap.appearance.xml
4. Fix some minor typos

Signed-off-by: Hrishikesh Dhayagude <hrishi@espressif.com>

Component/bt: get end_handle when get include services

component/bt: Added the hash key generated directly in the bluedroid module.

1. Change all the hash used from the coap module to generated by the bluedroid module directly.

component/bt: Added the <string.h> include file to the gattc_co module to avoid compile error.

Merge branch 'feature/btdm_bt_spp_vfs' into 'master'

component/bt: Add SPP profile with VFS

See merge request idf/esp-idf!1883

Merge branch 'feature/btdm_ble_throughput_optimiz' into 'master'

Feature/btdm ble throughput optimiz

See merge request idf/esp-idf!2265

component/bt: Add SPP profile with VFS

component/bt: Added the server test for the bit rate test.

component/bt: optimiz the code
component/bt: optimiz the code.
component/bt: added the l2c change.
component/bt: Added the modified.
component/bt: change the indicate callback function.

component/bt: added the BLE throughput test gattc & gatts example.

component/bt: Change the sdkconfig.default CONFIG_GATTS_NOTIFY_THROUGHPUT setting.

component/bt: Change the throughput_client_task delay method.

component/bt: change the btu task size from 4096 to 5096

comonent/bt: close the print when congest.

component/bt: Added the CPU frequency set method to the readme file.

component/bt: Change the gatts_demo_char1_val to gl_profile_tab[PROFILE_A_APP_ID].char_handle to avoid make error.

example/ble_throughput: Added the Readme explanation.

component/bt: Added the bt lib change.

component/bt: Update the bt lib & Change the LOG level from ERROR to DEBUG when congest.

component/bt: Fixed the bug of timer start assign error.

component/bt: Change back the gattc & gatts demo with same as the master.

example/ble_throughput: Fixed the bug when prepare write of the ble throughput.

component/bt: Update the check_sum algorithm.

component/bt: Change Added the path when used the include file of "l2cdefs.h" & "l2c_api.h".

example/throughput_client: Added the Freertos related header files to ble throughput client demo to avoid compile error.

Merge branch 'bugfix/tw19728_support_static_allocation_of_freertos_queue_used_by_isr_v3.1' into 'master'

esp32/bt/driver: support static allocation of FreeRTOS queues used by ISR routine (merged from v3.0)

See merge request idf/esp-idf!2317

component/bt: Check the value received from the peer device when sent the data used prepare write.

component/bt: Fix misspellings of "corret" in comments in bta_gattc_write_cmpl function.

esp32/bt/driver: support static allocation of FreeRTOS queues used by ISR routine

Support static allocation of FreeRTOS queues used by ISR routine in WiFi/BT/esp_timer/driver etc