Build system: Fix a bug with embedding binaries in object files

Sometimes paths were generated absolute, need to keep those as-is

Merge branch 'feature/save_logs_to_test_report' into 'master'

save logs as test_report artifacts

save all logs as test report artifacts.

Testers only need to download artifacts for test report to analysis test result.

See merge request !217

Merge branch 'feature/phy_init' into 'master'

PHY init support

This change set adds PHY init support and fixes NVS initialization.

Some configuration options for PHY init process are added to menuconfig.

See merge request !206

docs: update partition tables documentation

nvs, spi_flash: handle case when source data is in DROM

phy_init: reduce the amount of hardwired logic, add coexist init

phy init data: Read PHY init data partition offset from menuconfig

add PHY init support

partition_table: update layouts, remove unused subtypes, sync with header file

nvs: allow nvs_flash_init to be called more than once

Also don’t assert in nvs_* functions if nvs_flash_init wasn’t called,
and make nvs_flash_init_custom an internal API for unit tests.

nvs: initialize using layout from partition table

Merge branch 'feature/openssl' into 'master'

OpenSSL API examples

add openssl demo

See merge request !198

components/openssl_demo: remove the apache license header and add cc license head

Merge branch 'bugfix/taskwdt' into 'master'

taskwdt fixes: better handling of empty/emptying wdt task list, lock task struct while feeding

As in description.

See merge request !212

Merge with master; merge Doxygen config

Merge branch 'feature/docs_general_notes' into 'master'

Docs: new documentation and warnings cleanup

This change set

- adds a high-level description of application startup flow. Some parts are missing, but hopefully we can use this description as a base to expand on.
- adds a few notes about memory regions and their use in ESP-IDF.
- add SPI flash and partition APIs page
- fixes all Doxygen warnings in header files
- enables build failures on new Doxygen warnings

See merge request !201

Make sure task wdt also does the right thing when triggered when flash is disabled

Merge branch 'bugfix/secure_boot_fixes' into 'master'

Secure boot related fixes

Fix some issues (mostly build system) from the secure boot implementation

Also refactor the way submodule checks are applied to make them more reliable.

See merge request !207

save logs as test_report artifacts

Merge branch 'bugfix/tw8706_softap_join_ap_return_wrong' into 'master'

esp32: tw8706 softap join ap return wrong code

In softap/null mode, esp_wifi_connect will return ESP_ERR_WIFI_MODE

See merge request !216

Add docs build artifacts to gitignore

Add documentation

esp32: tw8706 softap join ap return wrong code

In softap/null mode, esp_wifi_connect will return ESP_ERR_WIFI_MODE

Merge branch 'bugfix/tw8746_restore_cause_load_fail' into 'master'

nvs_flash: adjust the nvs_flash start sector number

Modify the nvs flash start sector from 6 to 9 because the partition table bin burn address is modified from 0x4000 to 0x8000

See merge request !215

Merge branch 'feature/tw8743_menuconfig_add_L2toL3_copy_option' into 'master'

lwip: add option to memcopy packet from L2 to L3

Menuconfig add an option to copy the packet from layer2 (WIFI driver) to layer3 (LWIP), default not copy

See merge request !211

docs/nvs_flash: update the nvs flash offset comment according review

Merge branch 'doc/pr65_openocd_clone' into 'master'

Simplified "Installing OpenOCD" with git clone --recursive

Github pull request #65

See merge request !213

build system: Use correct objcopy arguments for object format

Avoid ambiguous argument error on some platforms

Ref internal discussion !198

squash! build system: Use correct objcopy --input-target argument not --input

nvs_flash: adjust the nvs_flash start sector number

Modify the nvs flash start sector from 6 to 9

lwip: default ESP_L2_TO_L3_COPY to 0

lwip:refractor to the description about this menuconfig option

Simplified "Installing OpenOCD" with git clone --recursive

build system: When embedding binary files, fix re-generating on partial builds

When embedding a generated file (ie secure boot public key data), the
file was being re-generated each time.

micro-ecc: Add submodule dependency

Closes github #100

build system: Refactor SubmoduleCheck to work project-wide

Required at project level because some components use header files in
other components' submodules, and one component with a
submodule (esptool.py) doesn't have or need a component.mk.

build system: Fix embedding files which are themselves generated by the
build system

Used by secure boot, which generates the secure boot signing key inside build/.

Merge branch 'bugfix/example_warning_cleanup' into 'master'

Example cleanup, raise warning level

See merge request !209

Merge branch 'master' into bugfix/example_warning_cleanup

docs: fix Doxygen warnings, fail CI build on Doxygen warnings

docs: fix broken links, formatting, add SPI flash and partition APIs

docs: add description of ESP-IDF application startup flow and memory layout

lwip: modify menuconfig comments according to review

taskwdt fixes: better handling of empty/emptying wdt task list, lock task struct while feeding

Merge branch 'bugfix/uart_isr_switch_context' into 'master'

bugfix/uart_isr_switch_context: add switching context in uart ISR.

1. add switching context in uart ISR
2. remove duplicated #include in uart.c
3. modify example in uart.h(will later add examples to idf/examples)

See merge request !203

Merge branch 'master' into bugfix/uart_isr_switch_context

lwip: add option to memcopy packet from L2 to L3

Menuconfig add an option to copy the packet from layer2 (WIFI driver) to layer3 (LWIP), default not copy

ringbuf: Fix case where xTaskGetTickCount() overflows but task timeout point doesn't

Merge branch 'feature/tw8427_softap_support_bridge' into 'master'

esp32: softap supports bridge

Softap supports bridge, then the stations associated with esp32 softap can send/receive traffic from each other

See merge request !210

Merge branch 'master' into bugfix/uart_isr_switch_context

driver: bugfix/fix uart parity and frame error bug

1. modify definition for uart_parity_t
2. fix bugs in uart interrupt handler for parity err and frame err.

esp32: softap supports bridge

Softap supports bridge, then the stations associated with esp32 softap can send/receive traffic from each other

Build system: Raise warning level

Default esp-idf builds now show -Wextra warnings (except for a few:
signed/unsigned comparison, unused parameters, old-style C declarations.)

CI building of examples runs with that level raised to -Werror, to catch
those changes going into the main repo.

examples: Update component.mk for new conventions

feature/openssl: fixup the file and code style

feature/openssl: fixup some insufficient

driver: fix header file warnings for Doxygen.

Merge branch 'master' into feature/openssl

feature/openssl: add the openssl server demo

feature/openssl: add openssl server demo and remove some check function

Merge branch 'feature/better_idle_tick_hook_mechanism' into 'master'

Add more scalable  tick/idle hook handlers.

Like it says in the title. Also adds WAITI to the idle loop, which suspends the CPU until an interrupt comes in. Seems we did not have that yet... :x

See merge request !196

bugfix/uart_isr_switch_context: add switching context in uart ISR.

1. add switching context in uart ISR
2. remove duplicated #include in uart.c
3. modify example in uart.h(will later add examples to idf/examples)

Merge remote-tracking branch 'origin/master' into feature/better_idle_tick_hook_mechanism

Merge branch 'feature/change_default_hostname' into 'master'

tcpip_adapter: add set hostname interface

Add the function for change the network interface's hostname

See merge request !170

Merge branch 'bugfix/workaround_gpio_pullupdown_bug' into 'master'

Work around the GPIO pullup/pulldown SoC bug

Some GPIO pins need to have their pullups/pulldowns set in the RTC peripheral instead of in the GPIO peripheral because of a silicon bug.

This merge:
- Declares PIN_PULLUP_EN and friends as deprecated; they can't really be changed to work around the issue because they get passed an iomux register instead of an io pin number
- Adds gpio_pullup_en and friends to the GPIO driver. These functions do have the workaround (as well as all the other functions in the gpio driver) and are meant to easily replace the PIN_PULLUP_EN routines
- Fixes some comments in the gpio headers

See merge request !200

Add comments/headers according to merge request comments

Merge remote-tracking branch 'origin/master' into bugfix/workaround_gpio_pullupdown_bug

tcpip_adapter: add set hostname interface

Merge branch 'feature/wps' into 'master'

Add wps API

See merge request !181

wps: update wifi lib -- add wps lib

feature/openssl: add openssl client demo

Amend gpio driver to work around SoC bug with some pullups/pulldowns in the GPIO peripheral; mark existing function that does not always work as deprecated

Merge branch 'feature/cleanup_examples' into 'master'

Minor example cleanup

Remove deprecated system_init, fix app_main prototype

See merge request !197

Merge branch 'master' into feature/wps

components/openssl: add client and server demo

add comments for system_event_sta_wps_er_pin_t

ble_adv example: Remove int return value from app_main()

Examples: Remove deprecated system_init() call

Merge branch 'feature/build_component_project_vars' into 'master'

build system: General refactoring

The original goal here was to support setting different COMPONENT_INCLUDEDIRS/COMPONENT_LDFLAGS based on sdkconfig. It's turned into a general refactor.

* The `get_variable` target & associated macros have been replaced with a target that generates a makefile snippet for each component (inside the build directory), and includes these in the project make pass. This improves build speed ( "no-op" `make all` on my system is down from 1.43s  (wall) / 0.55s (CPU) to 0.49s (wall) / 0.23s (CPU) due to not forking as many processes) and also makes the builds more debuggable, as you can go and look at the component_project_vars.mk files in the build directory to see what paths are being added where.
* Including component_common.mk from component.mk is no longer necessary (and prints a deprecation warning). Instead, component.mk is included from inside a wrapper makefile. This allows default variables and project configuration to be loaded before component.mk begins, and removes the need to split makefile statements arbitrarily between "before including component_common" and "after including component_common", with which goes where depending on internals of the build system. Part-fix for TW#8017.
* Rewrote build system docs to reflect these details and also clarify some other points, add more ReST structure. Fixes other issues raised in TW#8017.
* Should be backwards compatible with existing components. The only difference I know is the deprecation warning when including component_common.mk.

Adds one new failure case: because some paths are encoded in the generated component_project_vars.mk files then reorganising the component directory structure (but not modifying any other files or menuconfig) may cause a partial build to fail and require a `make clean`. Moving the whole project directory, whole build directory, or whole ESP-IDF directory will not trigger this. This failure case should only ever cause a build error, not incorrect build output.

See merge request !188

build examples: Only build verbose on failure, save on log output

Merge branch 'master' into feature/build_component_project_vars

Merge branch 'feature/esptool_secure_boot' into 'master'

Secure boot support

Also includes a lot of esptool.py changes (two new command line tools, espefuse.py and espsecure.py)
https://github.com/themadinventor/esptool/compare/feature/esp32_v20_refactor...feature/esp32_secure_boot?expand=1

See merge request !163

bootloader: Fix unused variable errors when secure boot is disabled

secure boot: Add warnings this feature is not finished yet

Secure boot: Documentation tweaks

Fix wdt idle hook

Merge branch 'feature/doc_update' into 'master'

ReadTheDocs documentation update

https://github.com/espressif/esp-idf/pull/89

See merge request !195

components/openssl: sync the code form esp8266 sdk

secure boot: Rename efuse option for UART bootloader to option for ROM interpreter

Build system: Don't shell-quote SEPARATOR variable or it evaluates as a bunch of wildcards!

Bump esptool revision (espefuse.py fixes)

secure boot: Functional partition table & app signature verification

secure boot: Enable based on sdkconfig, remove "secure boot flag" from binary image

partition_table: Pad generated table to 0xC00 length, for easier signing

partition_table: Move from 0x4000 to 0x8000

Also fix a bug with correctly padding bootloader image when length is
already a multiple of 16.

secure boot: Derive secure bootloader key from private key

Means only one key needs to be managed.

Secure boot: initial image signature support

Build system: Change deprecation message to include component path, easier to fix

build system: Remove make 3.81 "component_project_vars.mk: No such file or directory" messages

Also add an explicit make version check & warning.

Add a more scalable mechanism for the FreeRTOS tick- and idle hooks; idle handler now uses WAITI to reduce power

Merge branch 'feature/per_cpu_interrupt_handlers' into 'master'

Per-CPU interrupt handlers and args

Up to now, the interrupt handlers and args were shared between CPUs, that is, if you set an interrupt handler on CPU0, CPU1 would invoke the same interrupt handler on that interrupt. This code gives every CPU its own space for interrupt handlers.

See merge request !192