]> begriffs open source - cmsis-driver-validation/blob - Doxygen/DriverValidation.txt
Minor update to USART driver validation
[cmsis-driver-validation] / Doxygen / DriverValidation.txt
1 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
2 /**
3 \mainpage Introduction
4
5 This manual explains the scope and the usage of the Software Pack for <b>CMSIS-Driver Validation</b>.<br>
6 <a href="http://www.keil.com/pack/doc/CMSIS/Driver/html/index.html" target="_blank">CMSIS-Driver</a> specifies the 
7 software API for peripheral driver interfaces that connect microcontroller peripherals with middleware or the user application. 
8
9 The CMSIS-Driver Validation is used to validate the driver implementation compliance to the CMSIS-Driver specification.
10
11 The CMSIS-Driver Validation provides:
12   - Configurable validation tests for various CMSIS-Driver interfaces
13   - Example projects that show the usage of the CMSIS-Driver Validation
14   - Various Servers used for testing
15
16 The CMSIS-Driver Validation tests and verifies:
17   - <b>API interface</b> using the driver capabilities as well as valid and invalid parameters
18   - <b>Data communication</b> with various transfer sizes and communication parameters:
19     - <b>Loopback testing</b> (for some interfaces) for testing of the underlying hardware with usage of a local loopback
20     - <b>Server testing</b> (for some interfaces) for extensive testing of the underlying hardware with usage of a dedicated Server
21   - <b>Transfer speed</b> of the data communication with time measurement of data transfer duration
22   - <b>Event</b> signaling
23
24 The CMSIS-Driver Validation requires
25 <a href="http://www.keil.com/pack/doc/CMSIS/RTOS2/html/index.html" target="_blank">CMSIS-RTOS2</a> functionality and can be
26 used to verify the setup and configuration of the CMSIS-Driver interfaces in a user system.<br>
27
28 The diagram below shows an overview of the CMSIS-Driver Validation configuration.
29
30 \image html cmsis_dv.png
31
32 This manual contains the following chapters:
33   - \ref setup                 - Describes the general setup of the CMSIS-Driver Validation test and how to generate test report.
34   - \ref report                - Describes the reports produced by the CMSIS-Driver Validation.
35   - \ref debugging             - Describes procedure for debugging of the interface drivers using the CMSIS-Driver Validation.
36   - \ref resource_requirements - Lists memory and CMSIS-RTOS2 requirements.
37   - \ref examples              - Contains information about several example projects including the required hardware setup.
38   - <a class="el" href="./modules.html">Reference</a> - Explains the configuration and tests for the various CMSIS-Driver interfaces.
39
40 The CMSIS-Driver Validation provides validation for the following interfaces:
41   - \ref dv_can   "CAN"        - Controller Area Network (CAN) interface driver.
42   - \ref dv_eth   "Ethernet"   - Ethernet MAC and PHY peripheral interface driver.
43   - \ref dv_i2c   "I2C"        - Inter-Integrated Circuit (I2C) multi-master serial single-ended bus interface driver.
44   - \ref dv_mci   "MCI"        - Memory Card Interface driver for SD/MMC memory.
45   - \ref dv_spi   "SPI"        - Serial Peripheral Interface (SPI) driver.
46   - \ref dv_usart "USART"      - Universal Synchronous and Asynchronous Receiver/Transmitter (USART) interface driver.
47   - \ref dv_usbd  "USB Device" - Universal Serial Bus (USB) Device interface driver.
48   - \ref dv_usbh  "USB Host"   - Universal Serial Bus (USB) Host interface driver.
49   - \ref dv_wifi  "WiFi"       - WiFi (Wireless Fidelity Interface) module/shield driver.
50
51 \note Extensive testing using dedicated Server is available for SPI and USART drivers.
52
53 This manual assumes that you are familiar with MDK. Refer to
54 <a href="http://www2.keil.com/mdk5/install" target="_blank">MDK Version 5 - Getting Started</a> for additional information.
55
56 <hr>
57
58 Revision History
59 ----------------
60
61 <table class="cmtable" summary="Revision History">
62     <tr>
63       <th>Version</th>
64       <th>Description</th>
65     </tr>
66
67     <tr>
68       <td>V3.0.0-dev4</td>
69       <td>
70         - Minor update to USART driver validation (USART_TxBreak test documentation)
71       </td>
72     </tr>
73     <tr>
74       <td>V3.0.0-dev3</td>
75       <td>
76         - Update validation examples for Espressif ESP32, ESP8266 and WizNet WizFi360
77         - Add SockServer application for IMXRT1050-EVKB
78       </td>
79     </tr>
80     <tr>
81       <td>V3.0.0-dev2</td>
82       <td>
83         - Minor update of WiFi Driver non-blocking mode tests
84         - Update examples
85       </td>
86     </tr>
87     <tr>
88       <td>V3.0.0-dev1</td>
89       <td>
90         - Add WiFi Driver tests (socket functions in non-blocking mode)
91         - Update examples (WiFi Driver related)
92       </td>
93     </tr>
94     <tr>
95       <td>V3.0.0-dev0</td>
96       <td>
97         - Rework USART driver validation (introduced USART_Server)
98         - Add USART_Server application for Keil MCBSTM32F400 evaluation board
99         - Update examples
100         - Update documentation
101       </td>
102     </tr>
103     <tr>
104       <td>V2.0.1-dev2</td>
105       <td>
106         - Minor update to SPI driver validation documentation
107         - Minor update to SPI_Server
108       </td>
109     </tr>
110     <tr>
111       <td>V2.0.1-dev1</td>
112       <td>
113         - Improved robustness of SPI Driver testing
114         - Improved robustness of SPI Server
115       </td>
116     </tr>
117     <tr>
118       <td>V2.0.1-dev0</td>
119       <td>
120         - Minor update to SPI Driver testing
121       </td>
122     </tr>
123     <tr>
124       <td>V2.0.0</td>
125       <td>
126         - Remove bundle from components
127         - Change configuration from single file to a file per component
128         - Rework SPI Driver testing (introduced SPI_Server)
129         - Add SPI_Server application for Keil MCBSTM32F400 evaluation board
130         - Update WiFi Driver tests (support for WiFi Driver API V1.1.0)
131         - Update all examples
132         - Deprecate CMSIS-RTOS1
133       </td>
134     </tr>
135     <tr>
136       <td>V1.4.0</td>
137       <td>
138         - Updated conditions to support all Cortex-M devices
139         - Introduced test groups (each driver is organized in a group)
140         - Improved XSL for XML display
141         - Updated all examples
142         - Removed example for Atmel board
143         - WiFi Driver Testing: Added SockServer application for PC running Microsoft Windows
144         - WiFi Driver Testing: Added upstream and downstream bandwidth testing
145         - WiFi Driver Testing: Added example for Inventek ISM43362 WiFi Driver testing on STMicroelectronics B-L475E-IOT01A1 board
146         - WiFi Driver Testing: Added example for Inventek ISM43362 WiFi Driver testing using ISMART43362-E WiFi shield mounted on NXP LPCXpresso55S69 board
147         - WiFi Driver Testing: Added examples for Espressif ESP8266 and ESP32 WiFi Driver testing with NXP MIMXRT1064-EVK board
148         - WiFi Driver Testing: Added example for WIZnet WizFi360 WiFi Driver testing with NXP MIMXRT1064-EVK board
149       </td>
150     </tr>
151     <tr>
152       <td>V1.3.0</td>
153       <td>
154         - Added WiFi tests
155       </td>
156     </tr>
157     <tr>
158       <td>V1.2.0</td>
159       <td>
160         - Added CMSIS-RTOS2 and Arm Compiler 6 compatibility
161       </td>
162     </tr>
163     <tr>
164       <td>V1.1.0</td>
165       <td>
166         - Added USB Host, CAN and Ethernet Precision Time Protocol tests
167       </td>
168     </tr>
169     <tr>
170       <td>V1.0.0</td>
171       <td>
172         - Initial release for CMSIS-Driver API V2.0
173       </td>
174     </tr>
175  </table>
176
177
178 */
179 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
180 /**
181 \page setup Setup
182
183 \section step1 Step 1: Create an MDK project for your target microcontroller device
184
185
186 \section step2 Step 2: Add the required software components
187
188 For proper operation, add the following software components in the <b>Manage Run-Time Environment</b> window:
189 - <b>CMSIS Driver Validation: Framework</b>
190 - <b>CMSIS Driver Validation: driver</b>, driver interfaces to be tested
191 - <b>CMSIS Driver: driver</b>, driver implementations to be tested
192 - <b>CMSIS: RTOS2 (API): Keil RTX5</b>
193 - <b>Compiler: I/O: STDOUT</b>, variant \b ITM (if your hardware does not support ITM select \b EVR to use Event Recorder instead of ITM)
194 - Resolve any unresolved component dependencies
195
196
197 \section step3 Step 3: Add the application's main file (main.c)
198
199 Right-click <b>Source Group 1...</b> and select <b>Add New Item to Group</b>, select <b>User Code Template</b> and choose the
200 <b>CMSIS-RTOS2 'main' function</b> file from <b>CMSIS: RTOS2:Keil RTX5</b>.
201
202 Add this include:
203 \code
204 #include "cmsis_dv.h"
205 \endcode
206
207 In the <c>app_main</c> function, create the \c cmsis_dv thread, before endless <c>for</c> loop:
208 \code
209 osThreadNew(cmsis_dv, NULL, NULL);
210 \endcode
211 to run all the tests that you have chosen in the next step.
212
213
214 \section step4 Step 4: Configure the CMSIS-Driver Validation framework in DV_Config.h file
215
216 Open <b>DV_Config.h</b> under the <b>CMSIS Driver Validation</b> group in the Project window.
217
218 In the configuration file <b>DV_Config.h</b> select <b>Plain Text</b> as the <b>Report Format</b>.
219
220 \section step5 Step 5: Configure the interface settings and tests in related DV_interface_Config.h files
221
222 Each interface has a related <b>DV_<i>interface</i>_Config.h</b> file, where <i>interface</i> represents interface's acronym or abbreviation.<br>
223 For example for Serial Peripheral Interface (SPI) related config file name is DV_SPI_Config.h.
224
225 For details on interface specific configuration and test selection please check the Configuration section in the 
226 <a class="el" href="./modules.html">Reference</a> of the related interface.
227
228
229 \section step6 Step 6: Configure the Heap memory
230
231 Depending on the buffer sizes used for data transfer tests the heap size has to be adjusted to provide enough memory for these 
232 buffers to be allocated.<br>
233 Depending on how heap is configured in your system, open your <b>startup_<i>device</i>.s</b> file from the \b Device group in the \b Project window 
234 or use a <b>linker script</b> to adjust the heap size.<br>
235 Set the <b>heap size</b> to minimum of <b>16384</b> bytes.
236
237 For details on heap requirements please refer to the \ref heap_req "Heap Memory requirements" documentation.
238
239
240 \section step7 Step 7: Configure the CMSIS-RTOS2 (Keil RTX5)
241
242 Open <b>RTX_Config.h</b> and set:
243 - <b>System Configuration: Global Dynamic Memory size [bytes]</b> to \a 16384
244 - <b>Thread configuration: Default Thread stack size [bytes]</b> to \a 3072
245
246 For details on CMSIS-RTOS2 requirements please refer to the \ref rtos2_req "CMSIS-RTOS2 requirements" documentation.
247
248 \section step8 Step 8: Configure the Device
249
250 Depending on your device, you might have different pin/hardware configuration options. Usually, you can configure the device
251 using the \c RTE_Device.h file from the \b Device group or with a vendor provided pin configuration tool. 
252 Enable all interfaces you wish to test and make all necessary pin-out changes required by your actual board layout (consult the board schematics).<br> 
253 You can check the provided \ref examples "examples" as a reference point.
254
255 For a robust test with good coverage, implement various targets with different settings:
256 - Use <b>non-DMA (IRQ)</b> and <b>DMA</b> configurations if they are available on the driver
257 - Use different compiler <b>optimization levels</b> in the
258   <a href="http://www.keil.com/support/man/docs/uv4/uv4_dg_adscc.htm" target="_blank">C/C++ tab</a> of the
259   <b>Options for Target</b> dialog
260
261
262 \section step9 Step 9: Setup the required hardware
263
264 For the interfaces that support loopback testing: \ref dv_eth "Ethernet", \ref dv_usart "USART" and \ref dv_spi "SPI", 
265 connect the following pins on your target hardware together (refer to the hardware schematics):
266
267 - Ethernet: RX+ and TX+, RX- and TX-
268 - USART:    RX and TX
269 - SPI:      MOSI and MISO
270
271 For the interfaces that support testing with dedicated server: \ref dv_wifi "WiFi" and \ref dv_spi "SPI", 
272 connect the related hardware as required by the related server:
273
274 - WiFi: WiFi module has to be in close proximity to the Access Point which is in the same network as the required \ref wifi_sock_setup
275 - SPI:  MOSI, MISO, SCLK, SS, GND to the same lines on the \ref spi_server
276
277
278 \section step10 Step 10: Download and Run the Project
279
280 In the <b>Options for Target</b> dialog, under debug settings, if you use ITM as standard output channel ensure that 
281 \b Trace and <b>ITM port 0</b> are enabled and that the correct <b>Core Clock</b> frequency is set:
282
283 \image html target_dialog.png "ITM Channel setting"
284
285 Build, load and run the project. The output is displayed in the <b>Debug (printf) Viewer</b> window.<br>
286 Example below shows output result of an SPI driver testing:
287 \verbatim
288 CMSIS-Driver SPI Test Report   May  4 2020   14:06:23 
289
290 TEST 01: SPI_GetVersion                   
291   DV_SPI.c (1023): [INFO] Driver API version 2.3, Driver version 2.15
292                                           PASSED
293 TEST 02: SPI_GetCapabilities              PASSED
294 TEST 03: SPI_Initialize_Uninitialize      PASSED
295 TEST 04: SPI_PowerControl                 
296   DV_SPI.c (1314): [WARNING] PowerControl (ARM_POWER_LOW) is not supported
297                                           PASSED
298 TEST 05: SPI_Mode_Master_SS_Unused        PASSED
299 TEST 06: SPI_Mode_Master_SS_Sw_Ctrl       PASSED
300 TEST 07: SPI_Mode_Master_SS_Hw_Ctrl_Out   PASSED
301 TEST 08: SPI_Mode_Master_SS_Hw_Mon_In     PASSED
302 TEST 09: SPI_Mode_Slave_SS_Hw_Mon         PASSED
303 TEST 10: SPI_Mode_Slave_SS_Sw_Ctrl        PASSED
304 TEST 11: SPI_Format_Clock_Pol0_Pha0       PASSED
305 TEST 12: SPI_Format_Clock_Pol0_Pha1       PASSED
306 TEST 13: SPI_Format_Clock_Pol1_Pha0       PASSED
307 TEST 14: SPI_Format_Clock_Pol1_Pha1       PASSED
308 TEST 15: SPI_Format_Frame_TI              PASSED
309 TEST 16: SPI_Format_Clock_Microwire       NOT EXECUTED
310 TEST 17: SPI_Data_Bits_1                  NOT EXECUTED
311 TEST 18: SPI_Data_Bits_2                  NOT EXECUTED
312 TEST 19: SPI_Data_Bits_3                  NOT EXECUTED
313 TEST 20: SPI_Data_Bits_4                  NOT EXECUTED
314 TEST 21: SPI_Data_Bits_5                  NOT EXECUTED
315 TEST 22: SPI_Data_Bits_6                  NOT EXECUTED
316 TEST 23: SPI_Data_Bits_7                  NOT EXECUTED
317 TEST 24: SPI_Data_Bits_8                  PASSED
318 TEST 25: SPI_Data_Bits_9                  NOT EXECUTED
319 TEST 26: SPI_Data_Bits_10                 NOT EXECUTED
320 TEST 27: SPI_Data_Bits_11                 NOT EXECUTED
321 TEST 28: SPI_Data_Bits_12                 NOT EXECUTED
322 TEST 29: SPI_Data_Bits_13                 NOT EXECUTED
323 TEST 30: SPI_Data_Bits_14                 NOT EXECUTED
324 TEST 31: SPI_Data_Bits_15                 NOT EXECUTED
325 TEST 32: SPI_Data_Bits_16                 PASSED
326 TEST 33: SPI_Data_Bits_17                 NOT EXECUTED
327 TEST 34: SPI_Data_Bits_18                 NOT EXECUTED
328 TEST 35: SPI_Data_Bits_19                 NOT EXECUTED
329 TEST 36: SPI_Data_Bits_20                 NOT EXECUTED
330 TEST 37: SPI_Data_Bits_21                 NOT EXECUTED
331 TEST 38: SPI_Data_Bits_22                 NOT EXECUTED
332 TEST 39: SPI_Data_Bits_23                 NOT EXECUTED
333 TEST 40: SPI_Data_Bits_24                 NOT EXECUTED
334 TEST 41: SPI_Data_Bits_25                 NOT EXECUTED
335 TEST 42: SPI_Data_Bits_26                 NOT EXECUTED
336 TEST 43: SPI_Data_Bits_27                 NOT EXECUTED
337 TEST 44: SPI_Data_Bits_28                 NOT EXECUTED
338 TEST 45: SPI_Data_Bits_29                 NOT EXECUTED
339 TEST 46: SPI_Data_Bits_30                 NOT EXECUTED
340 TEST 47: SPI_Data_Bits_31                 NOT EXECUTED
341 TEST 48: SPI_Data_Bits_32                 NOT EXECUTED
342 TEST 49: SPI_Bit_Order_MSB_LSB            PASSED
343 TEST 50: SPI_Bit_Order_LSB_MSB            PASSED
344 TEST 51: SPI_Bus_Speed_Min                PASSED
345 TEST 52: SPI_Bus_Speed_Max                
346   DV_SPI.c (3524): [WARNING] At requested bus speed of 10000000 bps, effective bus speed is 6477809 bps
347                                           PASSED
348 TEST 53: SPI_Number_Of_Items              PASSED
349 TEST 54: SPI_Abort                        PASSED
350 TEST 55: SPI_DataLost                     PASSED
351 TEST 56: SPI_ModeFault                    PASSED
352
353 Test Summary: 56 Tests, 25 Passed, 0 Failed.
354 Test Result: PASSED
355 \endverbatim
356
357 */
358 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
359 /**
360 \page report Report
361
362 The CMSIS-Driver Validation can output the test report in a <b>Plain Text</b> format or as an <b>XML</b> formatted file.<br>
363 Selection of the output report type is done in the <b>DV_Config.h</b> configuration file.
364
365 \image html dv_config_h.png "Configuration file DV_Config.h in Configuration Wizard view mode"
366
367 The <b>Plain Text</b> selection instructs the CMSIS-Driver Validation framework to generate a plain text report 
368 which can be seen in the <b>Debug (printf) Viewer</b> window and is mostly used for driver debugging purposes 
369 but can also be used as a final report.
370
371 The <b>XML</b> selection instructs the CMSIS-Driver Validation framework to generate an XML formatted report 
372 which is meant to be used as a final report and can be viewed nicely in any Web browser.<br>
373
374 The report file can be written into a <b>TestReport.xml</b> file directly by the uVision with an additional debugger script 
375 called <b>SaveXML.ini</b> which needs to be specified as <b>Initialization File:</b> for the <b>Debugger</b> in the 
376 <b>Options for target</b> dialog, or it can be copy-pasted manually from the <b>Debug (printf) Viewer</b> window to 
377 the TestReport.xml file.<br>
378 The SaveXML.ini script can be found in <c>\<pack root directory\></c><b>\\Scripts</b> directory.
379
380 To view <b>TestReport.xml</b> file in a Web browser an additional style sheet <b>TR_Style.xsl</b> file needs to be 
381 in the same directory as the TestReport.xml file.<br>
382 The TR_Style.xsl file contains the description of formatting for the Web browser to display the TestReport.xml report and 
383 can be found in <c>\<pack root directory\></c><b>\\Scripts</b> directory.
384
385
386 The XML file uses coloring to differentiate the results in the following way:
387  - <span style="font-weight:bold; color:Green">Passed</span> status means that test function has passed successfully.
388  - <span style="font-weight:bold; color:DarkOrange">Passed</span> status means that test function has passed but there were some warnings 
389      (<c>More details</c> can be used to see the details about warnings).
390  - <span style="font-weight:bold; color:Blue">Not executed</span> status means that test function did not check any assertions.
391  - <span style="font-weight:bold; color:Red">Failed</span> status means that test function has failed 
392      (<c>More details</c> can be used to see the details on reasons of failure).
393
394 */
395 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
396 /**
397 \page debugging Debugging
398
399 After running the CMSIS-Driver Validation output report is used to see if the driver is compliant to the CMSIS-Driver specification.
400
401 If the result of the driver testing under <c>Test Summary</c> contains any <c>Failed</c> tests then the driver needs to be corrected.
402
403 Example of report in the Plain Text format of a non-compliant SPI driver:
404 \verbatim
405 CMSIS-Driver SPI Test Report   May  6 2020   10:47:11 
406
407 TEST 01: SPI_GetVersion                   
408   DV_SPI.c (1023): [INFO] Driver API version 2.3, Driver version 2.15
409                                           PASSED
410 TEST 02: SPI_GetCapabilities              PASSED
411 TEST 03: SPI_Initialize_Uninitialize      
412   DV_SPI.c (1106): [FAILED]
413   DV_SPI.c (1109): [FAILED]
414   DV_SPI.c (1112): [FAILED]
415                                           FAILED
416 TEST 04: SPI_PowerControl                 
417   DV_SPI.c (1314): [WARNING] PowerControl (ARM_POWER_LOW) is not supported
418                                           PASSED
419 ...
420
421 Test Summary: 56 Tests, 24 Passed, 1 Failed.
422 Test Result: FAILED
423 \endverbatim
424
425 From previous report it is clear that one test function has failed.<br>
426 By Inspecting the details in previous report it is clear that <c>TEST 03: SPI_Initialize_Uninitialize</c> has failed 
427 on multiple assertions.<br>
428 Each failed assertion is recorded as a single  line in the test report.<br>
429 The failed assert information in the output report contains additional information about the <b>source module</b> and <b>line</b> 
430 in that module where the assertion is located with additional debugging info if available.
431
432 The documentation can be consulted regarding the failed function, for example in previous case 
433 documentation on the \ref SPI_Initialize_Uninitialize can be consulted.
434
435 Main way of fixing the driver consists of opening reported file mentioned as failed and inspecting the 
436 line in which failure was reported.
437
438 If there are many failures, it is recommended to deselect all tests except first failing one 
439 so it is easier to focus on just that failure.
440 Also, selecting only first failing test removes potential clutter from following failing tests that 
441 are all failing due to same cause.
442
443 In the previous report, opening <b>DV_SPI.c</b> module (available in the project) and inspecting the <b>1106</b> line 
444 which states:
445 \verbatim
446   // Driver is uninitialized and peripheral is powered-off:
447   // Call PowerControl(ARM_POWER_FULL) function and assert that it returned ARM_DRIVER_ERROR status
448   TEST_ASSERT(drv->PowerControl (ARM_POWER_FULL) == ARM_DRIVER_ERROR);
449 \endverbatim
450
451 informs us that call to <c>PowerControl (ARM_POWER_FULL)</c>, when driver is not initialized, is expected to 
452 return <c>ARM_DRIVER_ERROR</c> status code but it has returned a different status code instead.
453
454 We should put a breakpoint to this line and start the debug session.<br>
455 When the breakpoint is hit we can see that a call to <c>PowerControl (ARM_POWER_FULL)</c> has returned <c>ARM_DRIVER_OK</c> 
456 instead of expected <c>ARM_DRIVER_ERROR</c> status code.
457
458 We can now go into source code of the driver and fix this.
459
460 After we have fixed the driver, the report now looks like below:
461
462 \verbatim
463 CMSIS-Driver SPI Test Report   May  6 2020   11:15:30 
464
465 TEST 01: SPI_GetVersion                   
466   DV_SPI.c (1023): [INFO] Driver API version 2.3, Driver version 2.15
467                                           PASSED
468 TEST 02: SPI_GetCapabilities              PASSED
469 TEST 03: SPI_Initialize_Uninitialize      PASSED
470 TEST 04: SPI_PowerControl                 
471   DV_SPI.c (1314): [WARNING] PowerControl (ARM_POWER_LOW) is not supported
472                                           PASSED
473 ...
474
475 Test Summary: 56 Tests, 25 Passed, 0 Failed.
476 Test Result: PASSED
477 \endverbatim
478
479 The fix for the assertion failing in line 1106 has also fixed subsequent assertions 
480 in lines 1109 and 1112 thus the driver now reports no failed tests and reports that all 
481 of the 25 executed tests have passed.
482
483 This report could be used as an insurance that the SPI Driver on this device is compliant to the CMSIS-Driver specification.
484
485 The TestReport.xml report created instead of Plain Text opened in a Web browser looks similar to the the picture below:
486
487 \image html xml_report.png "XML test report"
488
489 */
490 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
491 /**
492 \page resource_requirements Resource Requirements
493
494 \section heap_req Heap Memory
495 Heap memory is used by the memory allocation functions.<br>
496 It is usually configured in the <a class="el" href="http://www.keil.com/support/man/docs/gsac/gsac_startupcodecortex.htm" target="_blank">startup_device.s</a>
497 file located under the \b Device component class but it can also, in some cases,  be configured by a <b>linker script</b> instead.
498
499 Some interface test functions allocate additional buffers from the heap memory.
500
501 The CMSIS-Driver Validation framework does not impose heap requirements because it does not use heap memory.
502
503 Each interface test module has specific requirements for the heap memory, default requirements are listed below:
504
505 | Interface test module   | Heap memory requirement (in bytes) |
506 | :---------------------: | :--------------------------------: |
507 | CAN                     | 128                                |
508 | Ethernet                | 1024                               |
509 | SPI                     | 12288                              |
510 | USART                   | 8192                               |
511
512 Interface test modules that are not listed in the previous table do not use heap memory.
513
514 The system heap memory size must support the largest heap requirement of any used interface test module.<br>
515 For example, if SPI driver testing is selected heap memory size should be set to at least 12 kB.
516
517 Suggested value for heap memory size is <b>16384</b> bytes.
518
519 \note Each module contains additional settings in related configuration file which are not exposed through 
520       Configuration Wizard and impact the heap memory requirement.<br>
521       If these values are changed please adjust heap memory size accordingly.
522
523 \section rtos2_req CMSIS-RTOS2
524
525 The thread requirements need to be reflected in the CMSIS-RTOS2 configuration. Refer to the
526 <a class="el" href="http://www.keil.com/pack/doc/cmsis/RTOS2/html/index.html" target="_blank">CMSIS-RTOS2 Reference</a> for further details.
527
528 For <a class="el" href="http://www.keil.com/pack/doc/cmsis/RTOS2/html/rtx5_impl.html" target="_blank">CMSIS-RTOS2 RTX5</a>, thread
529 requirements are configured in the
530 <a class=el href="http://www.keil.com/pack/doc/cmsis/RTOS2/html/config_rtx5.html" target="_blank">RTX_Config.h</a> file located
531 under the \b CMSIS component class:
532
533 | Option                                                            | Value                              |
534 | :---------------------------------------------------------------- | :--------------------------------: |
535 | System Configuration: Global Dynamic Memory size [bytes] (Note 1) | 16384                              |
536 | Thread Configuration: Default Thread Stack size [bytes]           | 3072                               |
537
538 \note Note 1: This setting is only necessary for WiFi driver testing, for other driver testing value of 4096 bytes is sufficient.
539
540 */
541 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
542 /**
543 \page examples Examples
544
545 The CMSIS-Driver Validation Software Pack contains a set of examples that show how to use the CMSIS-Driver Validation on 
546 a real hardware.<br>
547 Use <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> to copy them to your machine.
548
549 The following example projects are available:
550
551 - \subpage examples_xmc4500_relax
552 - \subpage examples_mcbstm32f200
553 - \subpage examples_mcbstm32f400
554 - \subpage examples_b_l475e_iot01a1
555 - \subpage examples_stm32f746g
556 - \subpage examples_ismart43362_e
557 - \subpage examples_esp8266
558 - \subpage examples_esp32
559 - \subpage examples_wizfi360
560
561 \anchor example_targets
562 Targets
563 -------
564
565 Example projects contain some of the following targets:
566 - <b>Create Report</b>: Test results and statistics are printed to the <b>TestReport\TestReport.xml</b> file. Open the file in a Web browser of your choice.
567 - \b Debug: Results and statistics are printed to the <b>Debug (printf) Viewer</b> window or to the <b>Virtual COM Port</b> through the on-board debugger.
568 - \b Release: Same as the Debug target but with higher level of code optimization selected.
569 */
570
571
572 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
573 /**
574 \page examples_xmc4500_relax Infineon XMC4500 Relax Kit
575
576 Software Setup
577 --------------
578
579 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
580 <b>Infineon::XMC4000_DFP</b> pack and copy the example project
581 <b>CMSIS-Driver Validation (XMC4500 Relax Lite Kit)</b> to your machine.
582
583 -# Choose one of the available \ref example_targets "Targets" and build the project.
584 -# If you wish to test the loopback mode for some of the interfaces, refer to the next section for proper board
585    configuration.
586 -# Run the validation on the target hardware using the on-board JLink-Lite debugger.
587
588 Hardware Setup
589 --------------
590
591 The following picture shows the necessary external loopback connections for the Infineon XMC4500 Relax Kit evaluation board:
592  - <b>UART2</b>: \b P0.4 (UART2_RX)  and \b P0.5 (UART2_TX)  (Header X2)
593  - <b>SPI0</b>:  \b P5.0 (SPI0_MOSI) and \b P5.1 (SPI0_MISO) (Header X2)
594  - For <b>Ethernet</b> use a loopback plug as described in \ref eth_loopback "Loopback Communication Setup". 
595
596 \image html xmc4500.png  "Connections for Loopback Communication Tests on the Infineon XMC4500 Relax Kit"
597
598 */
599 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
600 /**
601 \page examples_mcbstm32f200 Keil MCBSTM32F200
602
603 Software Setup
604 --------------
605
606 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
607 <b>Keil::STM32F2xx_DFP</b> pack and copy the example project
608 <b>CMSIS-Driver Validation (MCBSTM32F200)</b> to your machine.
609
610 -# Choose one of the available \ref example_targets "Targets" and build the project.
611 -# If you wish to test the loopback mode for some of the interfaces, refer to the next section for proper board
612    configuration.
613 -# Run the validation on the target hardware.
614
615 \note The example is preconfigured to use an 
616 <a href="http://www2.keil.com/mdk5/ulink/ulinkplus/" target="_blank">ULINKplus</a> debug adapter.
617
618
619 Hardware Setup
620 --------------
621
622 The following picture shows the necessary external loopback connections for the Keil MCBSTM32F200 evaluation board:
623  - <b>SPI2</b>: \b PB14 (SPI2_MISO) and \b PB15 (SPI2_MOSI) (for Loopback Test Mode)
624  - <b>USART1</b>: \b PB6 (USART1_TX) and \b PB7 (USART1_RX)
625  - For <b>Ethernet</b> use a loopback plug as described in \ref eth_loopback "Loopback Communication Setup". 
626
627 \image html mcbstm32f400.png  "Connections for Loopback Communication Tests on the Keil MCBSTM32F200"
628
629 */
630 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
631 /**
632 \page examples_mcbstm32f400 Keil MCBSTM32F400
633
634 Software Setup
635 --------------
636
637 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
638 <b>Keil::STM32F4xx_DFP</b> pack and copy the example project
639 <b>CMSIS-Driver Validation (MCBSTM32F400)</b> to your machine.
640
641 -# Choose one of the available \ref example_targets "Targets" and build the project.
642 -# If you wish to test the loopback mode for some of the interfaces, refer to the next section for proper board
643    configuration.
644 -# Run the validation on the target hardware.
645
646 \note The example is preconfigured to use an 
647 <a href="http://www2.keil.com/mdk5/ulink/ulinkplus/" target="_blank">ULINKplus</a> debug adapter.
648
649
650 Hardware Setup
651 --------------
652
653 The following picture shows the necessary external loopback connections for the Keil MCBSTM32F400 evaluation board:
654  - <b>SPI2</b>: \b PB14 (SPI2_MISO) and \b PB15 (SPI2_MOSI) (for Loopback Test Mode)
655  - <b>USART1</b>: \b PB6 (USART1_TX) and \b PB7 (USART1_RX)
656  - For <b>Ethernet</b> use a loopback plug as described in \ref eth_loopback "Loopback Communication Setup". 
657
658 \image html mcbstm32f400.png  "Connections for Loopback Communication Tests on the Keil MCBSTM32F400"
659
660 */
661 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
662 /**
663 \page examples_b_l475e_iot01a1 STMicroelectronics B-L475E-IOT01A1
664
665 Software Setup
666 --------------
667
668 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
669 <b>Keil::STM32L4xx_DFP</b> pack and copy the example project
670 <b>CMSIS-Driver WiFi Inventek ISM43362 Validation (B-L475E-IOT01A1)</b> to your machine.
671
672 -# Choose one of the available \ref example_targets "Targets" and build the project.
673 -# Run the validation on the target hardware using the on-board ST-Link/V2 debugger.
674
675 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi requirements", 
676 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
677
678 For details on WiFi driver validation please refer to \ref dv_wifi.
679
680 \image html b-l475e-iot01a.png  "STMicroelectronics B-L475E-IOT01A1 board"
681
682 */
683 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
684 /**
685 \page examples_ismart43362_e Inventek ISMART43362-E WiFi Shield with NXP LPCXpresso55S69
686
687 Software Setup
688 --------------
689
690 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
691 <b>NXP::LPC55S69_DFP</b> and <b>NXP::LPCXpresso55S69_EVK</b> packs and copy the example project
692 <b>CMSIS-Driver WiFi Inventek ISM43362 Validation (LPCXpresso55S69)</b> to your machine.
693
694 -# Choose one of the available \ref example_targets "Targets" and build the project.
695 -# Run the validation on the target hardware.
696
697 \note The example is preconfigured to use an 
698 <a href="http://www2.keil.com/mdk5/ulink/ulinkplus/" target="_blank">ULINKplus</a> debug adapter.
699
700 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi requirements", 
701 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
702
703 For details on WiFi driver tests please refer to \ref dv_wifi.
704
705 Hardware Setup
706 --------------
707
708 This example uses the ISMART module with SPI communication.<br>
709 By default, the shield is loaded with a UART firmware.<br>
710 Instructions on how to flash the SPI firmware can be found in the
711 [CMSIS-Driver documentation](https://arm-software.github.io/CMSIS-Driver/General/html/driver_WiFi.html#driver_ISM43362).
712
713 For proper operation of the Inventek ISMART43362-E WiFi Shield please connect the jumper between 5V_BOARD and 5V_MOD pins 
714 on the WiFi Shield.
715
716 \note Before running the validation on this hardware the WiFi Shield has to be reset by pressing SW2 push-button 
717 on the WiFi Shield and the debug session has to be started in less than 5 seconds after the reset push-button was released.
718
719 \image html lpcxpresso55s69.png  "NXP LPCXpresso55S69 with Inventek ISMART43362-E WiFi Shield attached"
720
721 */
722 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
723 /**
724 \page examples_esp8266 Espressif ESP8266 SparkFun WiFi Shield with NXP MIMXRT1064-EVK
725
726 Software Setup
727 --------------
728
729 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
730 <b>NXP::MIMXRT1064_DFP</b> and <b>NXP::EVK-MIMXRT1064_BSP</b> packs and copy the example project
731 <b>CMSIS-Driver WiFi Espressif ESP8266 Validation (EVK-MIMXRT1064)</b> to your machine.
732
733 -# Choose one of the available \ref example_targets "Targets" and build the project.
734 -# Run the validation on the target hardware using the on-board CMSIS-DAP Debugger.
735
736 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi equirements", 
737 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
738
739 For details on WiFi driver tests please refer to \ref dv_wifi.
740
741 \image html mimxrt1064evk.png    "NXP MIMXRT1064-EVK with"
742 \image html esp8266_sparkfun.png "Espressif ESP8266 SparkFun WiFi Shield"
743
744 */
745 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
746 /**
747 \page examples_esp32 Espressif ESP32 WROOM SparkFun Thing Plus WiFi Shield with NXP MIMXRT1064-EVK
748
749 Software Setup
750 --------------
751
752 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
753 <b>NXP::MIMXRT1064_DFP</b> and <b>NXP::EVK-MIMXRT1064_BSP</b> packs and copy the example project
754 <b>CMSIS-Driver WiFi Espressif ESP32 Validation (EVK-MIMXRT1064)</b> to your machine.
755
756 -# Choose one of the available \ref example_targets "Targets" and build the project.
757 -# Run the validation on the target hardware using the on-board CMSIS-DAP Debugger.
758
759 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi equirements", 
760 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
761
762 For details on WiFi driver tests please refer to \ref dv_wifi.
763
764 \image html mimxrt1064evk.png        "NXP MIMXRT1064-EVK with"
765 \image html esp32_wroom_sparkfun.png "Espressif ESP32 WROOM SparkFun Thing Plus WiFi Shield"
766
767 */
768 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
769 /**
770 \page examples_wizfi360 WIZnet WizFi360-EVB WiFi Shield with NXP MIMXRT1064-EVK
771
772 Software Setup
773 --------------
774
775 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
776 <b>NXP::MIMXRT1064_DFP</b> and <b>NXP::EVK-MIMXRT1064_BSP</b> packs and copy the example project
777 <b>CMSIS-Driver WiFi WIZnet WizFi360 Validation (EVK-MIMXRT1064)</b> to your machine.
778
779 -# Choose one of the available \ref example_targets "Targets" and build the project.
780 -# Run the validation on the target hardware using the on-board CMSIS-DAP Debugger.
781
782 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi equirements", 
783 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
784
785 For details on WiFi driver tests please refer to \ref dv_wifi.
786
787 \image html mimxrt1064evk.png "NXP MIMXRT1064-EVK with"
788 \image html wizfi360-evb.png  "WIZnet WizFi360-EVB WiFi Shield"
789
790 */
791 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
792 /**
793 \page examples_stm32f746g STMicroelectronics STM32F746G-Discovery
794
795 Software Setup
796 --------------
797
798 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
799 <b>Keil::STM32F7xx_DFP</b> pack and copy the example project
800 <b>CMSIS-Driver Validation (STM32F746G-Discovery)</b> to your machine.
801
802 -# Choose one of the available \ref example_targets "Targets" and build the project.
803 -# If you wish to test the loopback mode for some of the interfaces, refer to the next section for proper board
804    configuration.
805 -# Run the validation on the target hardware using the on-board ST-Link/V2 debugger.
806
807
808 Hardware Setup
809 --------------
810
811 The following picture shows the necessary external loopback connections for the STMicroelectronics STM32F746G-Discovery evaluation board:
812  - <b>SPI2</b>: \b D12 (SPI2_MISO) and \b D11 (SPI2_MOSI)
813  - <b>USART6</b>: \b D1 (USART6_TX) and \b D0 (USART6_RX)
814  - For <b>Ethernet</b> use a loopback plug as described in \ref eth_loopback "Loopback Communication Setup". 
815
816 \image html stm32f746g-disco.png  "Connections for Loopback Communication Tests on STM32F746G-Discovery"
817
818 */