build system: Fix null-terminating of text files for embedding on OS X

Ref github #112

Merge branch 'driver_merge_tmp/merge_rmt' into 'master'

RMT driver code and example

* add RMT simple driver code.
* add RMT module in periph_ctrl.c/.h
* add infrared RMT example. Will add readme later.

See merge request !190

rmt: add documentation

add RMT driver and example

Merge branch 'feature/ipv6_api' into 'master'

Ipv6 interface:add branch for ipv6 interface

See merge request !199

Merge branch 'feature/bignum_rsa' into 'master'

hwcryto bignum support for RSA operations

Supporting RSA with hardware bignum directives.

Configurable via menuconfig to enable/disable, and to choose between busywaiting and interrupt driven completion.

May still be some performance tweaks possible.

TW7111

See merge request !92

mbedtls hardware bignum: Use memcpy instead of REG_WRITE/REG_READ in a loop

Removes memory barriers for better performance, thanks Ivan for pointing
this out.

Manually unrolling the loop further seemed like diminishing returns.

ipv6 interface: add branch for ipv6 interface

Merge branch 'feature/support_build_multiple_bin' into 'master'

support build multiple bin for SSC

We need to build multiple SSC bin with different feature configs to do test.

For example, we need different SSC bins to test socket API blocking/non-blocking usage with same test cases.

SSC has a same branch to support build all pre-configured bins using `./gen_misc_ng.sh`. It will copy all bins to `./SSC/ssc_bin/`.

This MR will change the artifacts path for `build_ssc` job and the `BIN_PATH` for test jobs using SSC.

See merge request !219

Merge branch 'feature/tw8798_add_phy_printf_into_libcore' into 'master'

esp32: add phy_printf

1. add phy_printf into libcore
2. update libphy.a which has important optimization for ht40 traffic

See merge request !222

esp32: add phy_printf

1. add phy_printf into libcore
2. update libphy.a which has important optimization for ht40 traffic

Merge branch 'feature/save_logs_to_test_report' into 'master'

save logs as test_report artifacts

save all logs as test report artifacts.

Testers only need to download artifacts for test report to analysis test result.

See merge request !217

Merge branch 'feature/phy_init' into 'master'

PHY init support

This change set adds PHY init support and fixes NVS initialization.

Some configuration options for PHY init process are added to menuconfig.

See merge request !206

docs: update partition tables documentation

nvs, spi_flash: handle case when source data is in DROM

phy_init: reduce the amount of hardwired logic, add coexist init

phy init data: Read PHY init data partition offset from menuconfig

add PHY init support

partition_table: update layouts, remove unused subtypes, sync with header file

nvs: allow nvs_flash_init to be called more than once

Also don’t assert in nvs_* functions if nvs_flash_init wasn’t called,
and make nvs_flash_init_custom an internal API for unit tests.

nvs: initialize using layout from partition table

Merge branch 'feature/openssl' into 'master'

OpenSSL API examples

add openssl demo

See merge request !198

mbedtls hardware bignum: Expose ESP-only bignum API in wrapper mbedtls/bignum.h

mbedtls hardware bignum: Support "RSA" interrupt for end of operation

Allows CPU to do other things which bignum operation is in
progress.

mbedtls hardware RSA: Put into menuconfig, squash warnings

All combinations of enabling/disabling hardware acceleration no longer
show unused warnings.

mbedtls hardware RSA: Combine methods for calculating M' & r inverse

Remove redundant gcd calculation, use consistent terminology.
Also remove leftover debugging code

mbedtls hardware RSA: Fix "mbedtls_mpi_exp_mod" hardware calculations

components/openssl_demo: remove the apache license header and add cc license head

Merge branch 'bugfix/taskwdt' into 'master'

taskwdt fixes: better handling of empty/emptying wdt task list, lock task struct while feeding

As in description.

See merge request !212

Merge with master; merge Doxygen config

Merge branch 'feature/docs_general_notes' into 'master'

Docs: new documentation and warnings cleanup

This change set

- adds a high-level description of application startup flow. Some parts are missing, but hopefully we can use this description as a base to expand on.
- adds a few notes about memory regions and their use in ESP-IDF.
- add SPI flash and partition APIs page
- fixes all Doxygen warnings in header files
- enables build failures on new Doxygen warnings

See merge request !201

Make sure task wdt also does the right thing when triggered when flash is disabled

Merge branch 'bugfix/secure_boot_fixes' into 'master'

Secure boot related fixes

Fix some issues (mostly build system) from the secure boot implementation

Also refactor the way submodule checks are applied to make them more reliable.

See merge request !207

support build multiple bin for SSC

save logs as test_report artifacts

Merge branch 'bugfix/tw8706_softap_join_ap_return_wrong' into 'master'

esp32: tw8706 softap join ap return wrong code

In softap/null mode, esp_wifi_connect will return ESP_ERR_WIFI_MODE

See merge request !216

Add docs build artifacts to gitignore

Add documentation

esp32: tw8706 softap join ap return wrong code

In softap/null mode, esp_wifi_connect will return ESP_ERR_WIFI_MODE

Merge branch 'bugfix/tw8746_restore_cause_load_fail' into 'master'

nvs_flash: adjust the nvs_flash start sector number

Modify the nvs flash start sector from 6 to 9 because the partition table bin burn address is modified from 0x4000 to 0x8000

See merge request !215

Merge branch 'feature/tw8743_menuconfig_add_L2toL3_copy_option' into 'master'

lwip: add option to memcopy packet from L2 to L3

Menuconfig add an option to copy the packet from layer2 (WIFI driver) to layer3 (LWIP), default not copy

See merge request !211

docs/nvs_flash: update the nvs flash offset comment according review

Merge branch 'doc/pr65_openocd_clone' into 'master'

Simplified "Installing OpenOCD" with git clone --recursive

Github pull request #65

See merge request !213

build system: Use correct objcopy arguments for object format

Avoid ambiguous argument error on some platforms

Ref internal discussion !198

squash! build system: Use correct objcopy --input-target argument not --input

nvs_flash: adjust the nvs_flash start sector number

Modify the nvs flash start sector from 6 to 9

lwip: default ESP_L2_TO_L3_COPY to 0

lwip:refractor to the description about this menuconfig option

Simplified "Installing OpenOCD" with git clone --recursive

build system: When embedding binary files, fix re-generating on partial builds

When embedding a generated file (ie secure boot public key data), the
file was being re-generated each time.

micro-ecc: Add submodule dependency

Closes github #100

build system: Refactor SubmoduleCheck to work project-wide

Required at project level because some components use header files in
other components' submodules, and one component with a
submodule (esptool.py) doesn't have or need a component.mk.

build system: Fix embedding files which are themselves generated by the
build system

Used by secure boot, which generates the secure boot signing key inside build/.

Merge branch 'bugfix/example_warning_cleanup' into 'master'

Example cleanup, raise warning level

See merge request !209

Merge branch 'master' into bugfix/example_warning_cleanup

docs: fix Doxygen warnings, fail CI build on Doxygen warnings

docs: fix broken links, formatting, add SPI flash and partition APIs

docs: add description of ESP-IDF application startup flow and memory layout

lwip: modify menuconfig comments according to review

taskwdt fixes: better handling of empty/emptying wdt task list, lock task struct while feeding

Merge branch 'bugfix/uart_isr_switch_context' into 'master'

bugfix/uart_isr_switch_context: add switching context in uart ISR.

1. add switching context in uart ISR
2. remove duplicated #include in uart.c
3. modify example in uart.h(will later add examples to idf/examples)

See merge request !203

Merge branch 'master' into bugfix/uart_isr_switch_context

lwip: add option to memcopy packet from L2 to L3

Menuconfig add an option to copy the packet from layer2 (WIFI driver) to layer3 (LWIP), default not copy

ringbuf: Fix case where xTaskGetTickCount() overflows but task timeout point doesn't

Merge branch 'feature/tw8427_softap_support_bridge' into 'master'

esp32: softap supports bridge

Softap supports bridge, then the stations associated with esp32 softap can send/receive traffic from each other

See merge request !210

Merge branch 'master' into bugfix/uart_isr_switch_context

driver: bugfix/fix uart parity and frame error bug

1. modify definition for uart_parity_t
2. fix bugs in uart interrupt handler for parity err and frame err.

esp32: softap supports bridge

Softap supports bridge, then the stations associated with esp32 softap can send/receive traffic from each other

Build system: Raise warning level

Default esp-idf builds now show -Wextra warnings (except for a few:
signed/unsigned comparison, unused parameters, old-style C declarations.)

CI building of examples runs with that level raised to -Werror, to catch
those changes going into the main repo.

examples: Update component.mk for new conventions

feature/openssl: fixup the file and code style

feature/openssl: fixup some insufficient

driver: fix header file warnings for Doxygen.

Merge branch 'master' into feature/bignum_rsa

Merge branch 'master' into feature/openssl

feature/openssl: add the openssl server demo

feature/openssl: add openssl server demo and remove some check function

Merge branch 'feature/better_idle_tick_hook_mechanism' into 'master'

Add more scalable  tick/idle hook handlers.

Like it says in the title. Also adds WAITI to the idle loop, which suspends the CPU until an interrupt comes in. Seems we did not have that yet... :x

See merge request !196

bugfix/uart_isr_switch_context: add switching context in uart ISR.

1. add switching context in uart ISR
2. remove duplicated #include in uart.c
3. modify example in uart.h(will later add examples to idf/examples)

Merge remote-tracking branch 'origin/master' into feature/better_idle_tick_hook_mechanism

Merge branch 'feature/change_default_hostname' into 'master'

tcpip_adapter: add set hostname interface

Add the function for change the network interface's hostname

See merge request !170

Merge branch 'bugfix/workaround_gpio_pullupdown_bug' into 'master'

Work around the GPIO pullup/pulldown SoC bug

Some GPIO pins need to have their pullups/pulldowns set in the RTC peripheral instead of in the GPIO peripheral because of a silicon bug.

This merge:
- Declares PIN_PULLUP_EN and friends as deprecated; they can't really be changed to work around the issue because they get passed an iomux register instead of an io pin number
- Adds gpio_pullup_en and friends to the GPIO driver. These functions do have the workaround (as well as all the other functions in the gpio driver) and are meant to easily replace the PIN_PULLUP_EN routines
- Fixes some comments in the gpio headers

See merge request !200

Add comments/headers according to merge request comments

Merge remote-tracking branch 'origin/master' into bugfix/workaround_gpio_pullupdown_bug

tcpip_adapter: add set hostname interface

Merge branch 'feature/wps' into 'master'

Add wps API

See merge request !181

wps: update wifi lib -- add wps lib

feature/openssl: add openssl client demo

Amend gpio driver to work around SoC bug with some pullups/pulldowns in the GPIO peripheral; mark existing function that does not always work as deprecated

Merge branch 'feature/cleanup_examples' into 'master'

Minor example cleanup

Remove deprecated system_init, fix app_main prototype

See merge request !197

Merge branch 'master' into feature/wps

components/openssl: add client and server demo

add comments for system_event_sta_wps_er_pin_t

ble_adv example: Remove int return value from app_main()

Examples: Remove deprecated system_init() call

Merge branch 'feature/build_component_project_vars' into 'master'

build system: General refactoring

The original goal here was to support setting different COMPONENT_INCLUDEDIRS/COMPONENT_LDFLAGS based on sdkconfig. It's turned into a general refactor.

* The `get_variable` target & associated macros have been replaced with a target that generates a makefile snippet for each component (inside the build directory), and includes these in the project make pass. This improves build speed ( "no-op" `make all` on my system is down from 1.43s  (wall) / 0.55s (CPU) to 0.49s (wall) / 0.23s (CPU) due to not forking as many processes) and also makes the builds more debuggable, as you can go and look at the component_project_vars.mk files in the build directory to see what paths are being added where.
* Including component_common.mk from component.mk is no longer necessary (and prints a deprecation warning). Instead, component.mk is included from inside a wrapper makefile. This allows default variables and project configuration to be loaded before component.mk begins, and removes the need to split makefile statements arbitrarily between "before including component_common" and "after including component_common", with which goes where depending on internals of the build system. Part-fix for TW#8017.
* Rewrote build system docs to reflect these details and also clarify some other points, add more ReST structure. Fixes other issues raised in TW#8017.
* Should be backwards compatible with existing components. The only difference I know is the deprecation warning when including component_common.mk.

Adds one new failure case: because some paths are encoded in the generated component_project_vars.mk files then reorganising the component directory structure (but not modifying any other files or menuconfig) may cause a partial build to fail and require a `make clean`. Moving the whole project directory, whole build directory, or whole ESP-IDF directory will not trigger this. This failure case should only ever cause a build error, not incorrect build output.

See merge request !188

build examples: Only build verbose on failure, save on log output

Merge branch 'master' into feature/build_component_project_vars

Merge branch 'feature/esptool_secure_boot' into 'master'

Secure boot support

Also includes a lot of esptool.py changes (two new command line tools, espefuse.py and espsecure.py)
https://github.com/themadinventor/esptool/compare/feature/esp32_v20_refactor...feature/esp32_secure_boot?expand=1

See merge request !163

bootloader: Fix unused variable errors when secure boot is disabled

secure boot: Add warnings this feature is not finished yet