]> begriffs open source - cmsis-driver-validation/blob - Doxygen/DriverValidation.txt
Update validation examples for Espressif ESP32, ESP8266 and WizNet WizFi360 and add...
[cmsis-driver-validation] / Doxygen / DriverValidation.txt
1 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
2 /**
3 \mainpage Introduction
4
5 This manual explains the scope and the usage of the Software Pack for <b>CMSIS-Driver Validation</b>.<br>
6 <a href="http://www.keil.com/pack/doc/CMSIS/Driver/html/index.html" target="_blank">CMSIS-Driver</a> specifies the 
7 software API for peripheral driver interfaces that connect microcontroller peripherals with middleware or the user application. 
8
9 The CMSIS-Driver Validation is used to validate the driver implementation compliance to the CMSIS-Driver specification.
10
11 The CMSIS-Driver Validation provides:
12   - Configurable validation tests for various CMSIS-Driver interfaces
13   - Example projects that show the usage of the CMSIS-Driver Validation
14   - Various Servers used for testing
15
16 The CMSIS-Driver Validation tests and verifies:
17   - <b>API interface</b> using the driver capabilities as well as valid and invalid parameters
18   - <b>Data communication</b> with various transfer sizes and communication parameters:
19     - <b>Loopback testing</b> (for some interfaces) for testing of the underlying hardware with usage of a local loopback
20     - <b>Server testing</b> (for some interfaces) for extensive testing of the underlying hardware with usage of a dedicated Server
21   - <b>Transfer speed</b> of the data communication with time measurement of data transfer duration
22   - <b>Event</b> signaling
23
24 The CMSIS-Driver Validation requires
25 <a href="http://www.keil.com/pack/doc/CMSIS/RTOS2/html/index.html" target="_blank">CMSIS-RTOS2</a> functionality and can be
26 used to verify the setup and configuration of the CMSIS-Driver interfaces in a user system.<br>
27
28 The diagram below shows an overview of the CMSIS-Driver Validation configuration.
29
30 \image html cmsis_dv.png
31
32 This manual contains the following chapters:
33   - \ref setup                 - Describes the general setup of the CMSIS-Driver Validation test and how to generate test report.
34   - \ref report                - Describes the reports produced by the CMSIS-Driver Validation.
35   - \ref debugging             - Describes procedure for debugging of the interface drivers using the CMSIS-Driver Validation.
36   - \ref resource_requirements - Lists memory and CMSIS-RTOS2 requirements.
37   - \ref examples              - Contains information about several example projects including the required hardware setup.
38   - <a class="el" href="./modules.html">Reference</a> - Explains the configuration and tests for the various CMSIS-Driver interfaces.
39
40 The CMSIS-Driver Validation provides validation for the following interfaces:
41   - \ref dv_can   "CAN"        - Controller Area Network (CAN) interface driver.
42   - \ref dv_eth   "Ethernet"   - Ethernet MAC and PHY peripheral interface driver.
43   - \ref dv_i2c   "I2C"        - Inter-Integrated Circuit (I2C) multi-master serial single-ended bus interface driver.
44   - \ref dv_mci   "MCI"        - Memory Card Interface driver for SD/MMC memory.
45   - \ref dv_spi   "SPI"        - Serial Peripheral Interface (SPI) driver.
46   - \ref dv_usart "USART"      - Universal Synchronous and Asynchronous Receiver/Transmitter (USART) interface driver.
47   - \ref dv_usbd  "USB Device" - Universal Serial Bus (USB) Device interface driver.
48   - \ref dv_usbh  "USB Host"   - Universal Serial Bus (USB) Host interface driver.
49   - \ref dv_wifi  "WiFi"       - WiFi (Wireless Fidelity Interface) module/shield driver.
50
51 \note Extensive testing using dedicated Server is available for SPI and USART drivers.
52
53 This manual assumes that you are familiar with MDK. Refer to
54 <a href="http://www2.keil.com/mdk5/install" target="_blank">MDK Version 5 - Getting Started</a> for additional information.
55
56 <hr>
57
58 Revision History
59 ----------------
60
61 <table class="cmtable" summary="Revision History">
62     <tr>
63       <th>Version</th>
64       <th>Description</th>
65     </tr>
66
67     <tr>
68       <td>V3.0.0-dev3</td>
69       <td>
70         - Update validation examples for Espressif ESP32, ESP8266 and WizNet WizFi360
71         - Add SockServer application for IMXRT1050-EVKB
72       </td>
73     </tr>
74     <tr>
75       <td>V3.0.0-dev2</td>
76       <td>
77         - Minor update of WiFi Driver non-blocking mode tests
78         - Update examples
79       </td>
80     </tr>
81     <tr>
82       <td>V3.0.0-dev1</td>
83       <td>
84         - Add WiFi Driver tests (socket functions in non-blocking mode)
85         - Update examples (WiFi Driver related)
86       </td>
87     </tr>
88     <tr>
89       <td>V3.0.0-dev0</td>
90       <td>
91         - Rework USART driver validation (introduced USART_Server)
92         - Add USART_Server application for Keil MCBSTM32F400 evaluation board
93         - Update examples
94         - Update documentation
95       </td>
96     </tr>
97     <tr>
98       <td>V2.0.1-dev2</td>
99       <td>
100         - Minor update to SPI driver validation documentation
101         - Minor update to SPI_Server
102       </td>
103     </tr>
104     <tr>
105       <td>V2.0.1-dev1</td>
106       <td>
107         - Improved robustness of SPI Driver testing
108         - Improved robustness of SPI Server
109       </td>
110     </tr>
111     <tr>
112       <td>V2.0.1-dev0</td>
113       <td>
114         - Minor update to SPI Driver testing
115       </td>
116     </tr>
117     <tr>
118       <td>V2.0.0</td>
119       <td>
120         - Remove bundle from components
121         - Change configuration from single file to a file per component
122         - Rework SPI Driver testing (introduced SPI_Server)
123         - Add SPI_Server application for Keil MCBSTM32F400 evaluation board
124         - Update WiFi Driver tests (support for WiFi Driver API V1.1.0)
125         - Update all examples
126         - Deprecate CMSIS-RTOS1
127       </td>
128     </tr>
129     <tr>
130       <td>V1.4.0</td>
131       <td>
132         - Updated conditions to support all Cortex-M devices
133         - Introduced test groups (each driver is organized in a group)
134         - Improved XSL for XML display
135         - Updated all examples
136         - Removed example for Atmel board
137         - WiFi Driver Testing: Added SockServer application for PC running Microsoft Windows
138         - WiFi Driver Testing: Added upstream and downstream bandwidth testing
139         - WiFi Driver Testing: Added example for Inventek ISM43362 WiFi Driver testing on STMicroelectronics B-L475E-IOT01A1 board
140         - WiFi Driver Testing: Added example for Inventek ISM43362 WiFi Driver testing using ISMART43362-E WiFi shield mounted on NXP LPCXpresso55S69 board
141         - WiFi Driver Testing: Added examples for Espressif ESP8266 and ESP32 WiFi Driver testing with NXP MIMXRT1064-EVK board
142         - WiFi Driver Testing: Added example for WIZnet WizFi360 WiFi Driver testing with NXP MIMXRT1064-EVK board
143       </td>
144     </tr>
145     <tr>
146       <td>V1.3.0</td>
147       <td>
148         - Added WiFi tests
149       </td>
150     </tr>
151     <tr>
152       <td>V1.2.0</td>
153       <td>
154         - Added CMSIS-RTOS2 and Arm Compiler 6 compatibility
155       </td>
156     </tr>
157     <tr>
158       <td>V1.1.0</td>
159       <td>
160         - Added USB Host, CAN and Ethernet Precision Time Protocol tests
161       </td>
162     </tr>
163     <tr>
164       <td>V1.0.0</td>
165       <td>
166         - Initial release for CMSIS-Driver API V2.0
167       </td>
168     </tr>
169  </table>
170
171
172 */
173 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
174 /**
175 \page setup Setup
176
177 \section step1 Step 1: Create an MDK project for your target microcontroller device
178
179
180 \section step2 Step 2: Add the required software components
181
182 For proper operation, add the following software components in the <b>Manage Run-Time Environment</b> window:
183 - <b>CMSIS Driver Validation: Framework</b>
184 - <b>CMSIS Driver Validation: driver</b>, driver interfaces to be tested
185 - <b>CMSIS Driver: driver</b>, driver implementations to be tested
186 - <b>CMSIS: RTOS2 (API): Keil RTX5</b>
187 - <b>Compiler: I/O: STDOUT</b>, variant \b ITM (if your hardware does not support ITM select \b EVR to use Event Recorder instead of ITM)
188 - Resolve any unresolved component dependencies
189
190
191 \section step3 Step 3: Add the application's main file (main.c)
192
193 Right-click <b>Source Group 1...</b> and select <b>Add New Item to Group</b>, select <b>User Code Template</b> and choose the
194 <b>CMSIS-RTOS2 'main' function</b> file from <b>CMSIS: RTOS2:Keil RTX5</b>.
195
196 Add this include:
197 \code
198 #include "cmsis_dv.h"
199 \endcode
200
201 In the <c>app_main</c> function, create the \c cmsis_dv thread, before endless <c>for</c> loop:
202 \code
203 osThreadNew(cmsis_dv, NULL, NULL);
204 \endcode
205 to run all the tests that you have chosen in the next step.
206
207
208 \section step4 Step 4: Configure the CMSIS-Driver Validation framework in DV_Config.h file
209
210 Open <b>DV_Config.h</b> under the <b>CMSIS Driver Validation</b> group in the Project window.
211
212 In the configuration file <b>DV_Config.h</b> select <b>Plain Text</b> as the <b>Report Format</b>.
213
214 \section step5 Step 5: Configure the interface settings and tests in related DV_interface_Config.h files
215
216 Each interface has a related <b>DV_<i>interface</i>_Config.h</b> file, where <i>interface</i> represents interface's acronym or abbreviation.<br>
217 For example for Serial Peripheral Interface (SPI) related config file name is DV_SPI_Config.h.
218
219 For details on interface specific configuration and test selection please check the Configuration section in the 
220 <a class="el" href="./modules.html">Reference</a> of the related interface.
221
222
223 \section step6 Step 6: Configure the Heap memory
224
225 Depending on the buffer sizes used for data transfer tests the heap size has to be adjusted to provide enough memory for these 
226 buffers to be allocated.<br>
227 Depending on how heap is configured in your system, open your <b>startup_<i>device</i>.s</b> file from the \b Device group in the \b Project window 
228 or use a <b>linker script</b> to adjust the heap size.<br>
229 Set the <b>heap size</b> to minimum of <b>16384</b> bytes.
230
231 For details on heap requirements please refer to the \ref heap_req "Heap Memory requirements" documentation.
232
233
234 \section step7 Step 7: Configure the CMSIS-RTOS2 (Keil RTX5)
235
236 Open <b>RTX_Config.h</b> and set:
237 - <b>System Configuration: Global Dynamic Memory size [bytes]</b> to \a 16384
238 - <b>Thread configuration: Default Thread stack size [bytes]</b> to \a 3072
239
240 For details on CMSIS-RTOS2 requirements please refer to the \ref rtos2_req "CMSIS-RTOS2 requirements" documentation.
241
242 \section step8 Step 8: Configure the Device
243
244 Depending on your device, you might have different pin/hardware configuration options. Usually, you can configure the device
245 using the \c RTE_Device.h file from the \b Device group or with a vendor provided pin configuration tool. 
246 Enable all interfaces you wish to test and make all necessary pin-out changes required by your actual board layout (consult the board schematics).<br> 
247 You can check the provided \ref examples "examples" as a reference point.
248
249 For a robust test with good coverage, implement various targets with different settings:
250 - Use <b>non-DMA (IRQ)</b> and <b>DMA</b> configurations if they are available on the driver
251 - Use different compiler <b>optimization levels</b> in the
252   <a href="http://www.keil.com/support/man/docs/uv4/uv4_dg_adscc.htm" target="_blank">C/C++ tab</a> of the
253   <b>Options for Target</b> dialog
254
255
256 \section step9 Step 9: Setup the required hardware
257
258 For the interfaces that support loopback testing: \ref dv_eth "Ethernet", \ref dv_usart "USART" and \ref dv_spi "SPI", 
259 connect the following pins on your target hardware together (refer to the hardware schematics):
260
261 - Ethernet: RX+ and TX+, RX- and TX-
262 - USART:    RX and TX
263 - SPI:      MOSI and MISO
264
265 For the interfaces that support testing with dedicated server: \ref dv_wifi "WiFi" and \ref dv_spi "SPI", 
266 connect the related hardware as required by the related server:
267
268 - WiFi: WiFi module has to be in close proximity to the Access Point which is in the same network as the required \ref wifi_sock_setup
269 - SPI:  MOSI, MISO, SCLK, SS, GND to the same lines on the \ref spi_server
270
271
272 \section step10 Step 10: Download and Run the Project
273
274 In the <b>Options for Target</b> dialog, under debug settings, if you use ITM as standard output channel ensure that 
275 \b Trace and <b>ITM port 0</b> are enabled and that the correct <b>Core Clock</b> frequency is set:
276
277 \image html target_dialog.png "ITM Channel setting"
278
279 Build, load and run the project. The output is displayed in the <b>Debug (printf) Viewer</b> window.<br>
280 Example below shows output result of an SPI driver testing:
281 \verbatim
282 CMSIS-Driver SPI Test Report   May  4 2020   14:06:23 
283
284 TEST 01: SPI_GetVersion                   
285   DV_SPI.c (1023): [INFO] Driver API version 2.3, Driver version 2.15
286                                           PASSED
287 TEST 02: SPI_GetCapabilities              PASSED
288 TEST 03: SPI_Initialize_Uninitialize      PASSED
289 TEST 04: SPI_PowerControl                 
290   DV_SPI.c (1314): [WARNING] PowerControl (ARM_POWER_LOW) is not supported
291                                           PASSED
292 TEST 05: SPI_Mode_Master_SS_Unused        PASSED
293 TEST 06: SPI_Mode_Master_SS_Sw_Ctrl       PASSED
294 TEST 07: SPI_Mode_Master_SS_Hw_Ctrl_Out   PASSED
295 TEST 08: SPI_Mode_Master_SS_Hw_Mon_In     PASSED
296 TEST 09: SPI_Mode_Slave_SS_Hw_Mon         PASSED
297 TEST 10: SPI_Mode_Slave_SS_Sw_Ctrl        PASSED
298 TEST 11: SPI_Format_Clock_Pol0_Pha0       PASSED
299 TEST 12: SPI_Format_Clock_Pol0_Pha1       PASSED
300 TEST 13: SPI_Format_Clock_Pol1_Pha0       PASSED
301 TEST 14: SPI_Format_Clock_Pol1_Pha1       PASSED
302 TEST 15: SPI_Format_Frame_TI              PASSED
303 TEST 16: SPI_Format_Clock_Microwire       NOT EXECUTED
304 TEST 17: SPI_Data_Bits_1                  NOT EXECUTED
305 TEST 18: SPI_Data_Bits_2                  NOT EXECUTED
306 TEST 19: SPI_Data_Bits_3                  NOT EXECUTED
307 TEST 20: SPI_Data_Bits_4                  NOT EXECUTED
308 TEST 21: SPI_Data_Bits_5                  NOT EXECUTED
309 TEST 22: SPI_Data_Bits_6                  NOT EXECUTED
310 TEST 23: SPI_Data_Bits_7                  NOT EXECUTED
311 TEST 24: SPI_Data_Bits_8                  PASSED
312 TEST 25: SPI_Data_Bits_9                  NOT EXECUTED
313 TEST 26: SPI_Data_Bits_10                 NOT EXECUTED
314 TEST 27: SPI_Data_Bits_11                 NOT EXECUTED
315 TEST 28: SPI_Data_Bits_12                 NOT EXECUTED
316 TEST 29: SPI_Data_Bits_13                 NOT EXECUTED
317 TEST 30: SPI_Data_Bits_14                 NOT EXECUTED
318 TEST 31: SPI_Data_Bits_15                 NOT EXECUTED
319 TEST 32: SPI_Data_Bits_16                 PASSED
320 TEST 33: SPI_Data_Bits_17                 NOT EXECUTED
321 TEST 34: SPI_Data_Bits_18                 NOT EXECUTED
322 TEST 35: SPI_Data_Bits_19                 NOT EXECUTED
323 TEST 36: SPI_Data_Bits_20                 NOT EXECUTED
324 TEST 37: SPI_Data_Bits_21                 NOT EXECUTED
325 TEST 38: SPI_Data_Bits_22                 NOT EXECUTED
326 TEST 39: SPI_Data_Bits_23                 NOT EXECUTED
327 TEST 40: SPI_Data_Bits_24                 NOT EXECUTED
328 TEST 41: SPI_Data_Bits_25                 NOT EXECUTED
329 TEST 42: SPI_Data_Bits_26                 NOT EXECUTED
330 TEST 43: SPI_Data_Bits_27                 NOT EXECUTED
331 TEST 44: SPI_Data_Bits_28                 NOT EXECUTED
332 TEST 45: SPI_Data_Bits_29                 NOT EXECUTED
333 TEST 46: SPI_Data_Bits_30                 NOT EXECUTED
334 TEST 47: SPI_Data_Bits_31                 NOT EXECUTED
335 TEST 48: SPI_Data_Bits_32                 NOT EXECUTED
336 TEST 49: SPI_Bit_Order_MSB_LSB            PASSED
337 TEST 50: SPI_Bit_Order_LSB_MSB            PASSED
338 TEST 51: SPI_Bus_Speed_Min                PASSED
339 TEST 52: SPI_Bus_Speed_Max                
340   DV_SPI.c (3524): [WARNING] At requested bus speed of 10000000 bps, effective bus speed is 6477809 bps
341                                           PASSED
342 TEST 53: SPI_Number_Of_Items              PASSED
343 TEST 54: SPI_Abort                        PASSED
344 TEST 55: SPI_DataLost                     PASSED
345 TEST 56: SPI_ModeFault                    PASSED
346
347 Test Summary: 56 Tests, 25 Passed, 0 Failed.
348 Test Result: PASSED
349 \endverbatim
350
351 */
352 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
353 /**
354 \page report Report
355
356 The CMSIS-Driver Validation can output the test report in a <b>Plain Text</b> format or as an <b>XML</b> formatted file.<br>
357 Selection of the output report type is done in the <b>DV_Config.h</b> configuration file.
358
359 \image html dv_config_h.png "Configuration file DV_Config.h in Configuration Wizard view mode"
360
361 The <b>Plain Text</b> selection instructs the CMSIS-Driver Validation framework to generate a plain text report 
362 which can be seen in the <b>Debug (printf) Viewer</b> window and is mostly used for driver debugging purposes 
363 but can also be used as a final report.
364
365 The <b>XML</b> selection instructs the CMSIS-Driver Validation framework to generate an XML formatted report 
366 which is meant to be used as a final report and can be viewed nicely in any Web browser.<br>
367
368 The report file can be written into a <b>TestReport.xml</b> file directly by the uVision with an additional debugger script 
369 called <b>SaveXML.ini</b> which needs to be specified as <b>Initialization File:</b> for the <b>Debugger</b> in the 
370 <b>Options for target</b> dialog, or it can be copy-pasted manually from the <b>Debug (printf) Viewer</b> window to 
371 the TestReport.xml file.<br>
372 The SaveXML.ini script can be found in <c>\<pack root directory\></c><b>\\Scripts</b> directory.
373
374 To view <b>TestReport.xml</b> file in a Web browser an additional style sheet <b>TR_Style.xsl</b> file needs to be 
375 in the same directory as the TestReport.xml file.<br>
376 The TR_Style.xsl file contains the description of formatting for the Web browser to display the TestReport.xml report and 
377 can be found in <c>\<pack root directory\></c><b>\\Scripts</b> directory.
378
379
380 The XML file uses coloring to differentiate the results in the following way:
381  - <span style="font-weight:bold; color:Green">Passed</span> status means that test function has passed successfully.
382  - <span style="font-weight:bold; color:DarkOrange">Passed</span> status means that test function has passed but there were some warnings 
383      (<c>More details</c> can be used to see the details about warnings).
384  - <span style="font-weight:bold; color:Blue">Not executed</span> status means that test function did not check any assertions.
385  - <span style="font-weight:bold; color:Red">Failed</span> status means that test function has failed 
386      (<c>More details</c> can be used to see the details on reasons of failure).
387
388 */
389 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
390 /**
391 \page debugging Debugging
392
393 After running the CMSIS-Driver Validation output report is used to see if the driver is compliant to the CMSIS-Driver specification.
394
395 If the result of the driver testing under <c>Test Summary</c> contains any <c>Failed</c> tests then the driver needs to be corrected.
396
397 Example of report in the Plain Text format of a non-compliant SPI driver:
398 \verbatim
399 CMSIS-Driver SPI Test Report   May  6 2020   10:47:11 
400
401 TEST 01: SPI_GetVersion                   
402   DV_SPI.c (1023): [INFO] Driver API version 2.3, Driver version 2.15
403                                           PASSED
404 TEST 02: SPI_GetCapabilities              PASSED
405 TEST 03: SPI_Initialize_Uninitialize      
406   DV_SPI.c (1106): [FAILED]
407   DV_SPI.c (1109): [FAILED]
408   DV_SPI.c (1112): [FAILED]
409                                           FAILED
410 TEST 04: SPI_PowerControl                 
411   DV_SPI.c (1314): [WARNING] PowerControl (ARM_POWER_LOW) is not supported
412                                           PASSED
413 ...
414
415 Test Summary: 56 Tests, 24 Passed, 1 Failed.
416 Test Result: FAILED
417 \endverbatim
418
419 From previous report it is clear that one test function has failed.<br>
420 By Inspecting the details in previous report it is clear that <c>TEST 03: SPI_Initialize_Uninitialize</c> has failed 
421 on multiple assertions.<br>
422 Each failed assertion is recorded as a single  line in the test report.<br>
423 The failed assert information in the output report contains additional information about the <b>source module</b> and <b>line</b> 
424 in that module where the assertion is located with additional debugging info if available.
425
426 The documentation can be consulted regarding the failed function, for example in previous case 
427 documentation on the \ref SPI_Initialize_Uninitialize can be consulted.
428
429 Main way of fixing the driver consists of opening reported file mentioned as failed and inspecting the 
430 line in which failure was reported.
431
432 If there are many failures, it is recommended to deselect all tests except first failing one 
433 so it is easier to focus on just that failure.
434 Also, selecting only first failing test removes potential clutter from following failing tests that 
435 are all failing due to same cause.
436
437 In the previous report, opening <b>DV_SPI.c</b> module (available in the project) and inspecting the <b>1106</b> line 
438 which states:
439 \verbatim
440   // Driver is uninitialized and peripheral is powered-off:
441   // Call PowerControl(ARM_POWER_FULL) function and assert that it returned ARM_DRIVER_ERROR status
442   TEST_ASSERT(drv->PowerControl (ARM_POWER_FULL) == ARM_DRIVER_ERROR);
443 \endverbatim
444
445 informs us that call to <c>PowerControl (ARM_POWER_FULL)</c>, when driver is not initialized, is expected to 
446 return <c>ARM_DRIVER_ERROR</c> status code but it has returned a different status code instead.
447
448 We should put a breakpoint to this line and start the debug session.<br>
449 When the breakpoint is hit we can see that a call to <c>PowerControl (ARM_POWER_FULL)</c> has returned <c>ARM_DRIVER_OK</c> 
450 instead of expected <c>ARM_DRIVER_ERROR</c> status code.
451
452 We can now go into source code of the driver and fix this.
453
454 After we have fixed the driver, the report now looks like below:
455
456 \verbatim
457 CMSIS-Driver SPI Test Report   May  6 2020   11:15:30 
458
459 TEST 01: SPI_GetVersion                   
460   DV_SPI.c (1023): [INFO] Driver API version 2.3, Driver version 2.15
461                                           PASSED
462 TEST 02: SPI_GetCapabilities              PASSED
463 TEST 03: SPI_Initialize_Uninitialize      PASSED
464 TEST 04: SPI_PowerControl                 
465   DV_SPI.c (1314): [WARNING] PowerControl (ARM_POWER_LOW) is not supported
466                                           PASSED
467 ...
468
469 Test Summary: 56 Tests, 25 Passed, 0 Failed.
470 Test Result: PASSED
471 \endverbatim
472
473 The fix for the assertion failing in line 1106 has also fixed subsequent assertions 
474 in lines 1109 and 1112 thus the driver now reports no failed tests and reports that all 
475 of the 25 executed tests have passed.
476
477 This report could be used as an insurance that the SPI Driver on this device is compliant to the CMSIS-Driver specification.
478
479 The TestReport.xml report created instead of Plain Text opened in a Web browser looks similar to the the picture below:
480
481 \image html xml_report.png "XML test report"
482
483 */
484 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
485 /**
486 \page resource_requirements Resource Requirements
487
488 \section heap_req Heap Memory
489 Heap memory is used by the memory allocation functions.<br>
490 It is usually configured in the <a class="el" href="http://www.keil.com/support/man/docs/gsac/gsac_startupcodecortex.htm" target="_blank">startup_device.s</a>
491 file located under the \b Device component class but it can also, in some cases,  be configured by a <b>linker script</b> instead.
492
493 Some interface test functions allocate additional buffers from the heap memory.
494
495 The CMSIS-Driver Validation framework does not impose heap requirements because it does not use heap memory.
496
497 Each interface test module has specific requirements for the heap memory, default requirements are listed below:
498
499 | Interface test module   | Heap memory requirement (in bytes) |
500 | :---------------------: | :--------------------------------: |
501 | CAN                     | 128                                |
502 | Ethernet                | 1024                               |
503 | SPI                     | 12288                              |
504 | USART                   | 8192                               |
505
506 Interface test modules that are not listed in the previous table do not use heap memory.
507
508 The system heap memory size must support the largest heap requirement of any used interface test module.<br>
509 For example, if SPI driver testing is selected heap memory size should be set to at least 12 kB.
510
511 Suggested value for heap memory size is <b>16384</b> bytes.
512
513 \note Each module contains additional settings in related configuration file which are not exposed through 
514       Configuration Wizard and impact the heap memory requirement.<br>
515       If these values are changed please adjust heap memory size accordingly.
516
517 \section rtos2_req CMSIS-RTOS2
518
519 The thread requirements need to be reflected in the CMSIS-RTOS2 configuration. Refer to the
520 <a class="el" href="http://www.keil.com/pack/doc/cmsis/RTOS2/html/index.html" target="_blank">CMSIS-RTOS2 Reference</a> for further details.
521
522 For <a class="el" href="http://www.keil.com/pack/doc/cmsis/RTOS2/html/rtx5_impl.html" target="_blank">CMSIS-RTOS2 RTX5</a>, thread
523 requirements are configured in the
524 <a class=el href="http://www.keil.com/pack/doc/cmsis/RTOS2/html/config_rtx5.html" target="_blank">RTX_Config.h</a> file located
525 under the \b CMSIS component class:
526
527 | Option                                                            | Value                              |
528 | :---------------------------------------------------------------- | :--------------------------------: |
529 | System Configuration: Global Dynamic Memory size [bytes] (Note 1) | 16384                              |
530 | Thread Configuration: Default Thread Stack size [bytes]           | 3072                               |
531
532 \note Note 1: This setting is only necessary for WiFi driver testing, for other driver testing value of 4096 bytes is sufficient.
533
534 */
535 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
536 /**
537 \page examples Examples
538
539 The CMSIS-Driver Validation Software Pack contains a set of examples that show how to use the CMSIS-Driver Validation on 
540 a real hardware.<br>
541 Use <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> to copy them to your machine.
542
543 The following example projects are available:
544
545 - \subpage examples_xmc4500_relax
546 - \subpage examples_mcbstm32f200
547 - \subpage examples_mcbstm32f400
548 - \subpage examples_b_l475e_iot01a1
549 - \subpage examples_stm32f746g
550 - \subpage examples_ismart43362_e
551 - \subpage examples_esp8266
552 - \subpage examples_esp32
553 - \subpage examples_wizfi360
554
555 \anchor example_targets
556 Targets
557 -------
558
559 Example projects contain some of the following targets:
560 - <b>Create Report</b>: Test results and statistics are printed to the <b>TestReport\TestReport.xml</b> file. Open the file in a Web browser of your choice.
561 - \b Debug: Results and statistics are printed to the <b>Debug (printf) Viewer</b> window or to the <b>Virtual COM Port</b> through the on-board debugger.
562 - \b Release: Same as the Debug target but with higher level of code optimization selected.
563 */
564
565
566 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
567 /**
568 \page examples_xmc4500_relax Infineon XMC4500 Relax Kit
569
570 Software Setup
571 --------------
572
573 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
574 <b>Infineon::XMC4000_DFP</b> pack and copy the example project
575 <b>CMSIS-Driver Validation (XMC4500 Relax Lite Kit)</b> to your machine.
576
577 -# Choose one of the available \ref example_targets "Targets" and build the project.
578 -# If you wish to test the loopback mode for some of the interfaces, refer to the next section for proper board
579    configuration.
580 -# Run the validation on the target hardware using the on-board JLink-Lite debugger.
581
582 Hardware Setup
583 --------------
584
585 The following picture shows the necessary external loopback connections for the Infineon XMC4500 Relax Kit evaluation board:
586  - <b>UART2</b>: \b P0.4 (UART2_RX)  and \b P0.5 (UART2_TX)  (Header X2)
587  - <b>SPI0</b>:  \b P5.0 (SPI0_MOSI) and \b P5.1 (SPI0_MISO) (Header X2)
588  - For <b>Ethernet</b> use a loopback plug as described in \ref eth_loopback "Loopback Communication Setup". 
589
590 \image html xmc4500.png  "Connections for Loopback Communication Tests on the Infineon XMC4500 Relax Kit"
591
592 */
593 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
594 /**
595 \page examples_mcbstm32f200 Keil MCBSTM32F200
596
597 Software Setup
598 --------------
599
600 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
601 <b>Keil::STM32F2xx_DFP</b> pack and copy the example project
602 <b>CMSIS-Driver Validation (MCBSTM32F200)</b> to your machine.
603
604 -# Choose one of the available \ref example_targets "Targets" and build the project.
605 -# If you wish to test the loopback mode for some of the interfaces, refer to the next section for proper board
606    configuration.
607 -# Run the validation on the target hardware.
608
609 \note The example is preconfigured to use an 
610 <a href="http://www2.keil.com/mdk5/ulink/ulinkplus/" target="_blank">ULINKplus</a> debug adapter.
611
612
613 Hardware Setup
614 --------------
615
616 The following picture shows the necessary external loopback connections for the Keil MCBSTM32F200 evaluation board:
617  - <b>SPI2</b>: \b PB14 (SPI2_MISO) and \b PB15 (SPI2_MOSI) (for Loopback Test Mode)
618  - <b>USART1</b>: \b PB6 (USART1_TX) and \b PB7 (USART1_RX)
619  - For <b>Ethernet</b> use a loopback plug as described in \ref eth_loopback "Loopback Communication Setup". 
620
621 \image html mcbstm32f400.png  "Connections for Loopback Communication Tests on the Keil MCBSTM32F200"
622
623 */
624 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
625 /**
626 \page examples_mcbstm32f400 Keil MCBSTM32F400
627
628 Software Setup
629 --------------
630
631 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
632 <b>Keil::STM32F4xx_DFP</b> pack and copy the example project
633 <b>CMSIS-Driver Validation (MCBSTM32F400)</b> to your machine.
634
635 -# Choose one of the available \ref example_targets "Targets" and build the project.
636 -# If you wish to test the loopback mode for some of the interfaces, refer to the next section for proper board
637    configuration.
638 -# Run the validation on the target hardware.
639
640 \note The example is preconfigured to use an 
641 <a href="http://www2.keil.com/mdk5/ulink/ulinkplus/" target="_blank">ULINKplus</a> debug adapter.
642
643
644 Hardware Setup
645 --------------
646
647 The following picture shows the necessary external loopback connections for the Keil MCBSTM32F400 evaluation board:
648  - <b>SPI2</b>: \b PB14 (SPI2_MISO) and \b PB15 (SPI2_MOSI) (for Loopback Test Mode)
649  - <b>USART1</b>: \b PB6 (USART1_TX) and \b PB7 (USART1_RX)
650  - For <b>Ethernet</b> use a loopback plug as described in \ref eth_loopback "Loopback Communication Setup". 
651
652 \image html mcbstm32f400.png  "Connections for Loopback Communication Tests on the Keil MCBSTM32F400"
653
654 */
655 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
656 /**
657 \page examples_b_l475e_iot01a1 STMicroelectronics B-L475E-IOT01A1
658
659 Software Setup
660 --------------
661
662 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
663 <b>Keil::STM32L4xx_DFP</b> pack and copy the example project
664 <b>CMSIS-Driver WiFi Inventek ISM43362 Validation (B-L475E-IOT01A1)</b> to your machine.
665
666 -# Choose one of the available \ref example_targets "Targets" and build the project.
667 -# Run the validation on the target hardware using the on-board ST-Link/V2 debugger.
668
669 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi requirements", 
670 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
671
672 For details on WiFi driver validation please refer to \ref dv_wifi.
673
674 \image html b-l475e-iot01a.png  "STMicroelectronics B-L475E-IOT01A1 board"
675
676 */
677 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
678 /**
679 \page examples_ismart43362_e Inventek ISMART43362-E WiFi Shield with NXP LPCXpresso55S69
680
681 Software Setup
682 --------------
683
684 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
685 <b>NXP::LPC55S69_DFP</b> and <b>NXP::LPCXpresso55S69_EVK</b> packs and copy the example project
686 <b>CMSIS-Driver WiFi Inventek ISM43362 Validation (LPCXpresso55S69)</b> to your machine.
687
688 -# Choose one of the available \ref example_targets "Targets" and build the project.
689 -# Run the validation on the target hardware.
690
691 \note The example is preconfigured to use an 
692 <a href="http://www2.keil.com/mdk5/ulink/ulinkplus/" target="_blank">ULINKplus</a> debug adapter.
693
694 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi requirements", 
695 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
696
697 For details on WiFi driver tests please refer to \ref dv_wifi.
698
699 Hardware Setup
700 --------------
701
702 This example uses the ISMART module with SPI communication.<br>
703 By default, the shield is loaded with a UART firmware.<br>
704 Instructions on how to flash the SPI firmware can be found in the
705 [CMSIS-Driver documentation](https://arm-software.github.io/CMSIS-Driver/General/html/driver_WiFi.html#driver_ISM43362).
706
707 For proper operation of the Inventek ISMART43362-E WiFi Shield please connect the jumper between 5V_BOARD and 5V_MOD pins 
708 on the WiFi Shield.
709
710 \note Before running the validation on this hardware the WiFi Shield has to be reset by pressing SW2 push-button 
711 on the WiFi Shield and the debug session has to be started in less than 5 seconds after the reset push-button was released.
712
713 \image html lpcxpresso55s69.png  "NXP LPCXpresso55S69 with Inventek ISMART43362-E WiFi Shield attached"
714
715 */
716 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
717 /**
718 \page examples_esp8266 Espressif ESP8266 SparkFun WiFi Shield with NXP MIMXRT1064-EVK
719
720 Software Setup
721 --------------
722
723 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
724 <b>NXP::MIMXRT1064_DFP</b> and <b>NXP::EVK-MIMXRT1064_BSP</b> packs and copy the example project
725 <b>CMSIS-Driver WiFi Espressif ESP8266 Validation (EVK-MIMXRT1064)</b> to your machine.
726
727 -# Choose one of the available \ref example_targets "Targets" and build the project.
728 -# Run the validation on the target hardware using the on-board CMSIS-DAP Debugger.
729
730 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi equirements", 
731 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
732
733 For details on WiFi driver tests please refer to \ref dv_wifi.
734
735 \image html mimxrt1064evk.png    "NXP MIMXRT1064-EVK with"
736 \image html esp8266_sparkfun.png "Espressif ESP8266 SparkFun WiFi Shield"
737
738 */
739 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
740 /**
741 \page examples_esp32 Espressif ESP32 WROOM SparkFun Thing Plus WiFi Shield with NXP MIMXRT1064-EVK
742
743 Software Setup
744 --------------
745
746 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
747 <b>NXP::MIMXRT1064_DFP</b> and <b>NXP::EVK-MIMXRT1064_BSP</b> packs and copy the example project
748 <b>CMSIS-Driver WiFi Espressif ESP32 Validation (EVK-MIMXRT1064)</b> to your machine.
749
750 -# Choose one of the available \ref example_targets "Targets" and build the project.
751 -# Run the validation on the target hardware using the on-board CMSIS-DAP Debugger.
752
753 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi equirements", 
754 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
755
756 For details on WiFi driver tests please refer to \ref dv_wifi.
757
758 \image html mimxrt1064evk.png        "NXP MIMXRT1064-EVK with"
759 \image html esp32_wroom_sparkfun.png "Espressif ESP32 WROOM SparkFun Thing Plus WiFi Shield"
760
761 */
762 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
763 /**
764 \page examples_wizfi360 WIZnet WizFi360-EVB WiFi Shield with NXP MIMXRT1064-EVK
765
766 Software Setup
767 --------------
768
769 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
770 <b>NXP::MIMXRT1064_DFP</b> and <b>NXP::EVK-MIMXRT1064_BSP</b> packs and copy the example project
771 <b>CMSIS-Driver WiFi WIZnet WizFi360 Validation (EVK-MIMXRT1064)</b> to your machine.
772
773 -# Choose one of the available \ref example_targets "Targets" and build the project.
774 -# Run the validation on the target hardware using the on-board CMSIS-DAP Debugger.
775
776 This example is prepared for verification of the WiFi driver and it requires \ref wifi_requirements "WiFi equirements", 
777 as well as, proper configuration described in \ref wifi_config "WiFi Configuration".
778
779 For details on WiFi driver tests please refer to \ref dv_wifi.
780
781 \image html mimxrt1064evk.png "NXP MIMXRT1064-EVK with"
782 \image html wizfi360-evb.png  "WIZnet WizFi360-EVB WiFi Shield"
783
784 */
785 /*=======0=========1=========2=========3=========4=========5=========6=========7=========8=========9=========0=========1====*/
786 /**
787 \page examples_stm32f746g STMicroelectronics STM32F746G-Discovery
788
789 Software Setup
790 --------------
791
792 Using the <a href="http://www2.keil.com/mdk5/packinstaller" target="_blank">Pack Installer</a> install the latest 
793 <b>Keil::STM32F7xx_DFP</b> pack and copy the example project
794 <b>CMSIS-Driver Validation (STM32F746G-Discovery)</b> to your machine.
795
796 -# Choose one of the available \ref example_targets "Targets" and build the project.
797 -# If you wish to test the loopback mode for some of the interfaces, refer to the next section for proper board
798    configuration.
799 -# Run the validation on the target hardware using the on-board ST-Link/V2 debugger.
800
801
802 Hardware Setup
803 --------------
804
805 The following picture shows the necessary external loopback connections for the STMicroelectronics STM32F746G-Discovery evaluation board:
806  - <b>SPI2</b>: \b D12 (SPI2_MISO) and \b D11 (SPI2_MOSI)
807  - <b>USART6</b>: \b D1 (USART6_TX) and \b D0 (USART6_RX)
808  - For <b>Ethernet</b> use a loopback plug as described in \ref eth_loopback "Loopback Communication Setup". 
809
810 \image html stm32f746g-disco.png  "Connections for Loopback Communication Tests on STM32F746G-Discovery"
811
812 */