app/test/autotest_data.py

   1 #!/usr/bin/python
   2
   3 #   BSD LICENSE
   4 #
   5 #   Copyright(c) 2010-2014 Intel Corporation. All rights reserved.
   6 #   All rights reserved.
   7 #
   8 #   Redistribution and use in source and binary forms, with or without
   9 #   modification, are permitted provided that the following conditions
  10 #   are met:
  11 #
  12 #     * Redistributions of source code must retain the above copyright
  13 #       notice, this list of conditions and the following disclaimer.
  14 #     * Redistributions in binary form must reproduce the above copyright
  15 #       notice, this list of conditions and the following disclaimer in
  16 #       the documentation and/or other materials provided with the
  17 #       distribution.
  18 #     * Neither the name of Intel Corporation nor the names of its
  19 #       contributors may be used to endorse or promote products derived
  20 #       from this software without specific prior written permission.
  21 #
  22 #   THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
  23 #   "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
  24 #   LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
  25 #   A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
  26 #   OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
  27 #   SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
  28 #   LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
  29 #   DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
  30 #   THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
  31 #   (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
  32 #   OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
  33
  34 # Test data for autotests
  35
  36 from glob import glob
  37 from autotest_test_funcs import *
  38
  39 # quick and dirty function to find out number of sockets
  40 def num_sockets():
  41         result = len(glob("/sys/devices/system/node/node*"))
  42         if result == 0:
  43                 return 1
  44         return result
  45
  46 # spread given number for all sockets
  47 # e.g. 32 becomes 16,16 or 8,8,8,8 etc.
  48 def all_sockets(num):
  49         mem_per_socket = num / num_sockets()
  50         return ",".join([str(mem_per_socket)] * num_sockets())
  51
  52 # groups of tests that can be run in parallel
  53 # the grouping has been found largely empirically
  54 parallel_test_group_list = [
  55
  56 {
  57         "Prefix":       "group_1",
  58         "Memory" :      all_sockets(8),
  59         "Tests" :
  60         [
  61                 {
  62                  "Name" :       "Timer autotest",
  63                  "Command" :    "timer_autotest",
  64                  "Func" :       timer_autotest,
  65                  "Report" :     None,
  66                 },
  67                 {
  68                  "Name" :       "Debug autotest",
  69                  "Command" :    "debug_autotest",
  70                  "Func" :       default_autotest,
  71                  "Report" :     None,
  72                 },
  73                 {
  74                  "Name" :       "Errno autotest",
  75                  "Command" :    "errno_autotest",
  76                  "Func" :       default_autotest,
  77                  "Report" :     None,
  78                 },
  79                 {
  80                  "Name" :       "Meter autotest",
  81                  "Command" :    "meter_autotest",
  82                  "Func" :       default_autotest,
  83                  "Report" :     None,
  84                 },
  85                 {
  86                  "Name" :       "Common autotest",
  87                  "Command" :    "common_autotest",
  88                  "Func" :       default_autotest,
  89                  "Report" :     None,
  90                 },
  91                 {
  92                  "Name" :       "Dump log history",
  93                  "Command" :    "dump_log_history",
  94                  "Func" :       dump_autotest,
  95                  "Report" :     None,
  96                 },
  97                 {
  98                  "Name" :       "Dump rings",
  99                  "Command" :    "dump_ring",
 100                  "Func" :       dump_autotest,
 101                  "Report" :     None,
 102                 },
 103                 {
 104                  "Name" :       "Dump mempools",
 105                  "Command" :    "dump_mempool",
 106                  "Func" :       dump_autotest,
 107                  "Report" :     None,
 108                 },
 109         ]
 110 },
 111 {
 112         "Prefix":       "group_2",
 113         "Memory" :      "32",
 114         "Tests" :
 115         [
 116                 {
 117                  "Name" :       "Memory autotest",
 118                  "Command" :    "memory_autotest",
 119                  "Func" :       memory_autotest,
 120                  "Report" :     None,
 121                 },
 122                 {
 123                  "Name" :       "Read/write lock autotest",
 124                  "Command" :    "rwlock_autotest",
 125                  "Func" :       rwlock_autotest,
 126                  "Report" :     None,
 127                 },
 128                 {
 129                  "Name" :       "Logs autotest",
 130                  "Command" :    "logs_autotest",
 131                  "Func" :       logs_autotest,
 132                  "Report" :     None,
 133                 },
 134                 {
 135                  "Name" :       "CPU flags autotest",
 136                  "Command" :    "cpuflags_autotest",
 137                  "Func" :       default_autotest,
 138                  "Report" :     None,
 139                 },
 140                 {
 141                  "Name" :       "Version autotest",
 142                  "Command" :    "version_autotest",
 143                  "Func" :       default_autotest,
 144                  "Report" :     None,
 145                 },
 146                 {
 147                  "Name" :       "EAL filesystem autotest",
 148                  "Command" :    "eal_fs_autotest",
 149                  "Func" :       default_autotest,
 150                  "Report" :     None,
 151                 },
 152                 {
 153                  "Name" :       "EAL flags autotest",
 154                  "Command" :    "eal_flags_autotest",
 155                  "Func" :       default_autotest,
 156                  "Report" :     None,
 157                 },
 158                 {
 159                  "Name" :       "Hash autotest",
 160                  "Command" :    "hash_autotest",
 161                  "Func" :       default_autotest,
 162                  "Report" :     None,
 163                 },
 164         ],
 165 },
 166 {
 167         "Prefix":       "group_3",
 168         "Memory" :      all_sockets(1024),
 169         "Tests" :
 170         [
 171                 {
 172                  "Name" :       "LPM autotest",
 173                  "Command" :    "lpm_autotest",
 174                  "Func" :       default_autotest,
 175                  "Report" :     None,
 176                 },
 177                 {
 178                  "Name" :       "IVSHMEM autotest",
 179                  "Command" :    "ivshmem_autotest",
 180                  "Func" :       default_autotest,
 181                  "Report" :     None,
 182                 },
 183                 {
 184                  "Name" :       "Memcpy autotest",
 185                  "Command" :    "memcpy_autotest",
 186                  "Func" :       default_autotest,
 187                  "Report" :     None,
 188                 },
 189                 {
 190                  "Name" :       "Memzone autotest",
 191                  "Command" :    "memzone_autotest",
 192                  "Func" :       default_autotest,
 193                  "Report" :     None,
 194                 },
 195                 {
 196                  "Name" :       "String autotest",
 197                  "Command" :    "string_autotest",
 198                  "Func" :       default_autotest,
 199                  "Report" :     None,
 200                 },
 201                 {
 202                  "Name" :       "Alarm autotest",
 203                  "Command" :    "alarm_autotest",
 204                  "Func" :       default_autotest,
 205                  "Report" :     None,
 206                 },
 207         ]
 208 },
 209 {
 210         "Prefix":       "group_4",
 211         "Memory" :      all_sockets(128),
 212         "Tests" :
 213         [
 214                 {
 215                  "Name" :       "PCI autotest",
 216                  "Command" :    "pci_autotest",
 217                  "Func" :       default_autotest,
 218                  "Report" :     None,
 219                 },
 220                 {
 221                  "Name" :       "Malloc autotest",
 222                  "Command" :    "malloc_autotest",
 223                  "Func" :       default_autotest,
 224                  "Report" :     None,
 225                 },
 226                 {
 227                  "Name" :       "Multi-process autotest",
 228                  "Command" :    "multiprocess_autotest",
 229                  "Func" :       default_autotest,
 230                  "Report" :     None,
 231                 },
 232                 {
 233                  "Name" :       "Mbuf autotest",
 234                  "Command" :    "mbuf_autotest",
 235                  "Func" :       default_autotest,
 236                  "Report" :     None,
 237                 },
 238                 {
 239                  "Name" :       "Per-lcore autotest",
 240                  "Command" :    "per_lcore_autotest",
 241                  "Func" :       default_autotest,
 242                  "Report" :     None,
 243                 },
 244                 {
 245                  "Name" :       "Ring autotest",
 246                  "Command" :    "ring_autotest",
 247                  "Func" :       default_autotest,
 248                  "Report" :     None,
 249                 },
 250         ]
 251 },
 252 {
 253         "Prefix":       "group_5",
 254         "Memory" :      "16",
 255         "Tests" :
 256         [
 257                 {
 258                  "Name" :       "Spinlock autotest",
 259                  "Command" :    "spinlock_autotest",
 260                  "Func" :       spinlock_autotest,
 261                  "Report" :     None,
 262                 },
 263                 {
 264                  "Name" :       "Byte order autotest",
 265                  "Command" :    "byteorder_autotest",
 266                  "Func" :       default_autotest,
 267                  "Report" :     None,
 268                 },
 269                 {
 270                  "Name" :       "TAILQ autotest",
 271                  "Command" :    "tailq_autotest",
 272                  "Func" :       default_autotest,
 273                  "Report" :     None,
 274                 },
 275                 {
 276                  "Name" :       "Command-line autotest",
 277                  "Command" :    "cmdline_autotest",
 278                  "Func" :       default_autotest,
 279                  "Report" :     None,
 280                 },
 281                 {
 282                  "Name" :       "Interrupts autotest",
 283                  "Command" :    "interrupt_autotest",
 284                  "Func" :       default_autotest,
 285                  "Report" :     None,
 286                 },
 287         ]
 288 },
 289 {
 290         "Prefix":       "group_6",
 291         "Memory" :      all_sockets(620),
 292         "Tests" :
 293         [
 294                 {
 295                  "Name" :       "Function reentrancy autotest",
 296                  "Command" :    "func_reentrancy_autotest",
 297                  "Func" :       default_autotest,
 298                  "Report" :     None,
 299                 },
 300                 {
 301                  "Name" :       "Mempool autotest",
 302                  "Command" :    "mempool_autotest",
 303                  "Func" :       default_autotest,
 304                  "Report" :     None,
 305                 },
 306                 {
 307                  "Name" :       "Atomics autotest",
 308                  "Command" :    "atomic_autotest",
 309                  "Func" :       default_autotest,
 310                  "Report" :     None,
 311                 },
 312                 {
 313                  "Name" :       "Prefetch autotest",
 314                  "Command" :    "prefetch_autotest",
 315                  "Func" :       default_autotest,
 316                  "Report" :     None,
 317                  },
 318                 {
 319                  "Name" :"Red autotest",
 320                  "Command" : "red_autotest",
 321                  "Func" :default_autotest,
 322                  "Report" :None,
 323                  },
 324         ]
 325 },
 326 {
 327         "Prefix" :      "group_7",
 328         "Memory" :      "400",
 329         "Tests" :
 330         [
 331                 {
 332                  "Name" :       "PMD ring autotest",
 333                  "Command" :    "ring_pmd_autotest",
 334                  "Func" :       default_autotest,
 335                  "Report" :     None,
 336                 },
 337                 {
 338                  "Name" :       "Access list control autotest",
 339                  "Command" :    "acl_autotest",
 340                  "Func" :       default_autotest,
 341                  "Report" :     None,
 342                 },
 343                  {
 344                  "Name" :"Sched autotest",
 345                  "Command" : "sched_autotest",
 346                  "Func" :default_autotest,
 347                  "Report" :None,
 348                  },
 349         ]
 350 },
 351 ]
 352
 353 # tests that should not be run when any other tests are running
 354 non_parallel_test_group_list = [
 355
 356 {
 357         "Prefix" :      "kni",
 358         "Memory" :      "512",
 359         "Tests" :
 360         [
 361                 {
 362                  "Name" :       "KNI autotest",
 363                  "Command" :    "kni_autotest",
 364                  "Func" :       default_autotest,
 365                  "Report" :     None,
 366                 },
 367         ]
 368 },
 369 {
 370         "Prefix":       "mempool_perf",
 371         "Memory" :      all_sockets(256),
 372         "Tests" :
 373         [
 374                 {
 375                  "Name" :       "Cycles autotest",
 376                  "Command" :    "cycles_autotest",
 377                  "Func" :       default_autotest,
 378                  "Report" :     None,
 379                 },
 380                 {
 381                  "Name" :       "Mempool performance autotest",
 382                  "Command" :    "mempool_perf_autotest",
 383                  "Func" :       default_autotest,
 384                  "Report" :     None,
 385                 },
 386         ]
 387 },
 388 {
 389         "Prefix":       "memcpy_perf",
 390         "Memory" :      all_sockets(512),
 391         "Tests" :
 392         [
 393                 {
 394                  "Name" :       "Memcpy performance autotest",
 395                  "Command" :    "memcpy_perf_autotest",
 396                  "Func" :       default_autotest,
 397                  "Report" :     None,
 398                 },
 399         ]
 400 },
 401 {
 402         "Prefix":       "hash_perf",
 403         "Memory" :      all_sockets(512),
 404         "Tests" :
 405         [
 406                 {
 407                  "Name" :       "Hash performance autotest",
 408                  "Command" :    "hash_perf_autotest",
 409                  "Func" :       default_autotest,
 410                  "Report" :     None,
 411                 },
 412         ]
 413 },
 414 {
 415         "Prefix" :      "power",
 416         "Memory" :      all_sockets(512),
 417         "Tests" :
 418         [
 419                 {
 420                  "Name" :       "Power autotest",
 421                  "Command" :    "power_autotest",
 422                  "Func" :       default_autotest,
 423                  "Report" :     None,
 424                 },
 425         ]
 426 },
 427 {
 428         "Prefix" :      "power_acpi_cpufreq",
 429         "Memory" :      all_sockets(512),
 430         "Tests" :
 431         [
 432                 {
 433                  "Name" :       "Power ACPI cpufreq autotest",
 434                  "Command" :    "power_acpi_cpufreq_autotest",
 435                  "Func" :       default_autotest,
 436                  "Report" :     None,
 437                 },
 438         ]
 439 },
 440 {
 441         "Prefix" :      "power_kvm_vm",
 442         "Memory" :      "512",
 443         "Tests" :
 444         [
 445                 {
 446                  "Name" :       "Power KVM VM  autotest",
 447                  "Command" :    "power_kvm_vm_autotest",
 448                  "Func" :       default_autotest,
 449                  "Report" :     None,
 450                 },
 451         ]
 452 },
 453 {
 454         "Prefix" :      "lpm6",
 455         "Memory" :      "512",
 456         "Tests" :
 457         [
 458                 {
 459                  "Name" :       "LPM6 autotest",
 460                  "Command" :    "lpm6_autotest",
 461                  "Func" :       default_autotest,
 462                  "Report" :     None,
 463                 },
 464         ]
 465 },
 466 {
 467         "Prefix":       "timer_perf",
 468         "Memory" :      all_sockets(512),
 469         "Tests" :
 470         [
 471                 {
 472                  "Name" :       "Timer performance autotest",
 473                  "Command" :    "timer_perf_autotest",
 474                  "Func" :       default_autotest,
 475                  "Report" :     None,
 476                 },
 477         ]
 478 },
 479
 480 #
 481 # Please always make sure that ring_perf is the last test!
 482 #
 483 {
 484         "Prefix":       "ring_perf",
 485         "Memory" :      all_sockets(512),
 486         "Tests" :
 487         [
 488                 {
 489                  "Name" :       "Ring performance autotest",
 490                  "Command" :    "ring_perf_autotest",
 491                  "Func" :       default_autotest,
 492                  "Report" :     None,
 493                 },
 494         ]
 495 },
 496 ]