Big rework of the report modes
[kconfig-hardened-check.git] / .github / workflows / main.yml
1 name: functional test
2
3 on:
4   push:
5     branches: [ master ]
6   pull_request:
7     branches: [ master ]
8
9 jobs:
10   check_all_configs:
11
12     runs-on: ubuntu-latest
13
14     strategy:
15       max-parallel: 4
16       fail-fast: false
17       matrix:
18         python-version: [3.6, 3.7, 3.8]
19         # github runner with python 3.5 currently fails to install this package
20
21     steps:
22
23     - name: Set up Python ${{ matrix.python-version }}
24       uses: actions/setup-python@v1
25       with:
26         python-version: ${{ matrix.python-version }}
27
28     - name: Install package
29       run: |
30         python -m pip install --upgrade pip
31         pip install coverage
32         pip --verbose install git+https://github.com/a13xp0p0v/kconfig-hardened-check
33         kconfig-hardened-check
34
35     - name: Check all configs
36       run: |
37         echo ">>>>> check all configs <<<<<"
38         CONFIG_DIR=`find /opt/hostedtoolcache/Python/ -name config_files`
39         CONFIGS=`find $CONFIG_DIR -type f|grep "\.config"`
40         COUNT=0
41         for C in $CONFIGS
42         do
43                 COUNT=$(expr $COUNT + 1)
44                 echo -e "\n>>>>> checking config number $COUNT <<<<<"
45                 kconfig-hardened-check -c $C
46         done
47         echo -e "\n>>>>> checking $COUNT configs is done <<<<<"
48
49     - name: Get source code
50       uses: actions/checkout@v2
51
52     - name: Collect coverage
53       run: |
54         coverage run -a --branch bin/kconfig-hardened-check
55
56         coverage run -a --branch bin/kconfig-hardened-check -p X86_64
57         coverage run -a --branch bin/kconfig-hardened-check -p X86_64 -m verbose
58         coverage run -a --branch bin/kconfig-hardened-check -p X86_64 -m json
59
60         coverage run -a --branch bin/kconfig-hardened-check -p X86_32
61         coverage run -a --branch bin/kconfig-hardened-check -p X86_32 -m verbose
62         coverage run -a --branch bin/kconfig-hardened-check -p X86_32 -m json
63
64         coverage run -a --branch bin/kconfig-hardened-check -p ARM64
65         coverage run -a --branch bin/kconfig-hardened-check -p ARM64 -m verbose
66         coverage run -a --branch bin/kconfig-hardened-check -p ARM64 -m json
67
68         coverage run -a --branch bin/kconfig-hardened-check -p ARM
69         coverage run -a --branch bin/kconfig-hardened-check -p ARM -m verbose
70         coverage run -a --branch bin/kconfig-hardened-check -p ARM -m json
71
72         CONFIG_DIR=`find /opt/hostedtoolcache/Python/ -name config_files`
73         CONFIGS=`find $CONFIG_DIR -type f|grep "\.config"`
74         for C in $CONFIGS
75         do
76                 coverage run -a --branch bin/kconfig-hardened-check -c $C
77                 coverage run -a --branch bin/kconfig-hardened-check -c $C -m verbose
78                 coverage run -a --branch bin/kconfig-hardened-check -c $C -m json
79         done
80         coverage xml -i -o coverage.xml
81
82     - name: Handle coverage
83       uses: codecov/codecov-action@v1
84       with:
85         file: ./coverage.xml
86         flags: functional_test
87         name: codecov-umbrella
88         fail_ci_if_error: true
89
90