development/autotests/unreliableTests

   1 # Regular expressions for tests that should not be executed with
   2 # ctest -L export or ctest -L inverted because they are inapt
   3 # (either unreliable or invalid).
   4 #
   5 # Patterns will be automatically enclosed with '^' and '$'.
   6 # Matching tests get the label "unreliable".
   7
   8 Sublabel: nonstandard
   9 # Documents with additional requirements,
  10 # e.g. a class or package file not on CTAN.
  11 # TODO: rename to "extra"?
  12
  13 export/templates/IUCr-article_(dvi|pdf).*
  14 export/templates/ja_beamer-conference-ornate-20min_(pdf2|pdf[45]_(texF|systemF))
  15 export/templates/es_beamer-conference-ornate-20min_(pdf2|pdf[45]_(texF|systemF))
  16 export/templates/kluwer_pdf[45]_systemF
  17 export/examples/modernCV_pdf4_(tex|system)F
  18 export/templates/ectaart_(dvi3|pdf5)_(tex|system)F
  19
  20 # 1.) missing farsi package with lfeenc.def
  21 # 2.) LuaTeX does not support Farsi yet. See:
  22 #     https://github.com/reutenauer/polyglossia/commit/ccb0e9e2c6411170ad779b05ff5076f1193cc323
  23 export/examples/fa/splash_(dvi|pdf|pdf[23]|(dvi3|pdf4|pdf5)_(texF|systemF))
  24
  25
  26 Sublabel: erratic
  27 # Tests depending on local configuration, OS, TeX distribution,
  28 # package versions, or the phase of the moon.
  29 # TODO: use *erratic* only for the phase-of-moon dependency.
  30
  31 # for unknonwn reasons, seminar fails at some places:
  32 export/examples/(|fr/)seminar_.*
  33
  34 # Export fails the first time but works the second time. (Why?)
  35 export/doc/es/Customization_pdf4_texF
  36
  37
  38 Sublabel: 1wrong 2output
  39 # Export does not fail but the resulting document has errors.
  40 #
  41 # These tests are actually not "unreliable" (different result for different
  42 # runs) but *invalid* (not measuring what they should measure).
  43
  44 # seminar.sty uses Postscript specials
  45 # -> wrong output with pdflatex/LuaTeX and DVI (missing landscape slides).
  46 export/examples/(|fr/)seminar_pdf[25].*
  47 export/examples/(|fr/)seminar_dvi.*
  48
  49 # Babel-Spanish uses Babel's "strings" feature to define
  50 # separate auto-strings using UTF-8 literals.
  51 # Babel uses the "unicode" strings if it detects XeTeX or LuaTeX.
  52 # This is wrong for Xe/Lua with 8-bit TeX-fonts.
  53 # set inputenc to utf8?
  54 # (Changing the default in lib/languages requires more tests for utf8 first.)
  55 export/examples/es/linguistics_pdf4_texF
  56 export/doc/es/.*_(pdf[45]|dvi3)_texF