]> git.lyx.org Git - lyx.git/blob - development/autotests/ignoredTests
ctests-costs-benefits: define false positive
[lyx.git] / development / autotests / ignoredTests
1 # Regular expressions for test combinations known to fail permanently
2 # or to be irrelevant
3 #
4 # Patterns will be automatically enclosed with '^' and '$'.
5 # Combinations matching these patterns will be skipped
6 # by the cmake test configuration.
7
8
9 # ================================================
10 Sublabel: problematic
11 # Documents that cause problems for the test suite
12 # ================================================
13
14 # problems exporting to lyx16x
15 export/examples/Modules/Noweb_lyx16
16 export/examples/Modules/Noweb2LyX_lyx16
17
18 # Ignore MergedManuals_xhtml because the test is very time-consuming
19 # and the underlying subdocuments are already tested
20 # Ignore MergedManuals_lyx2[2-9] too
21 # due to following xhtml export of converted file
22 export/doc/(ja/|)MergedManuals_(xhtml|lyx2[2-9])
23
24 # Legacy encoding cp858 only supported by some iconv variants.
25 # (Gnu iconv only supports it, if configured with "--enable-extra-encodings"
26 #  see https://www.gnu.org/software/libiconv/)
27 export/export/latex/inputenc-cp858_pdf2
28
29 # Korean legacy encoding fails (missing fonts)
30 # 2019-05-17: This is a minor issue since we default to utf8 now. 
31 export/export/latex/CJK/ko_default_pdf2
32
33
34 # ================================================
35 Sublabel: lyx_wontfix
36 # Tests that would fail because of LyX bugs or missing features. Not worth it
37 # to invert because would take up testing time for issues that are not likely
38 # to be fixed.
39 # ================================================
40
41 # lyx2lyx roundtrip does not converge in these cases because ERT is added on
42 # each backwards export. The exports still compile; it is just that there is
43 # no convergence.
44 # Simplified example: \textbf{hello} -> \textbf{\textbf{hello}} -> ...
45 #
46 # https://www.mail-archive.com/search?l=mid&q=20210125200655.e27xaaoy2belyxhw%40tallinn
47 export/doc/es/Additional_lyx(16|20|21|22|23)
48 export/doc/(fr|ru)/UserGuide_lyx(16|20|21|22|23)
49
50
51 # ===========================================
52 Sublabel: special
53 # Documents that do not work with all exports
54 # ===========================================
55
56 # XeTeX with TeX fonts
57 ######################
58 # XeTeX with TeX-fonts works only for input encodings "utf8-plain" and "ascii".
59 # Ignore all (except dedicated XeTeX tests):
60 export/export/latex/lyxbugs/wrong_output_3059-rtl-tables-xetex_pdf4_texF
61 !export/export/.*xetex.*_pdf4_texF
62 export/.*/(|ar|ca|cs|da|de|en|el|es|eu|fa|fr|gl|he|hu|id|it|lt|nb||nl|pl|pt|pt_BR|pt_PT|ro|ru|sk|sl|sr|sv|uk).*_pdf4_texF
63
64 # Only PDFLaTeX
65 ###############
66 # Inside these two files, we state that they should only be expected
67 # to work with pdflatex and possibly lualatex.
68 export/examples/Modules/PDF_Form_(dvi.*|pdf[^25]*)
69 export/examples/(|de/|fr/)Modules/PDF_Comments_dvi3_.*F
70 export/examples/(|de/|fr/)Modules/PDF_Comments_pdf5_texF
71
72 # jss.cls (not on CTAN)
73 # "All documents need to be processed by pdflatex" [jss.pdf]
74 export/templates/Articles/Journal_of_Statistical_Software_.*(dvi|dvi3_.*|pdf3?)
75
76 # No dvipdf[m]
77 ##############
78 # Beamer does not work with dvipdf[m] (wrong output or compilation errors).
79 # See `texdoc beamer`.
80 # TODO: Should the export do PDF (dvipdfm) be made unavailable for Beamer or
81 # just a warning be given in the example or documentation?
82 export/.*/(|de/|es/|fr/|ja/).*Beamer.*pdf3
83
84 # Only Postscript (and ps2pdf)
85 #################
86 # Document uses Postscript specials
87 # Does not compile with pdflatex or non-TeX fonts (see note in the document source).
88 export/examples/Graphics_and_Insets/Instant_Preview_pdf[25].*
89 export/examples/Graphics_and_Insets/Instant_Preview_(dvi3|pdf4)_systemF
90
91 export/examples/Articles/Chess/Game_2_pdf[25].*
92 export/examples/(|fr/)Presentations/Powerdot_pdf[25].*
93 export/examples/Modules/Chessboard_(lyx(16|20|21|22|23)|(pdf5|dvi3)_texF)
94
95 # pLaTeX
96 ########
97 # ignore with pdflatex and Xe/LuaTeX with 8-bit fonts:
98 #
99 export/export/latex/.*platex.*(pdf2|texF)
100 export/export/latex/languages/ja[-_].*_(pdf2|texF)
101 #
102 # Most Japanese documents use language "japanese" which is tied to "platex"
103 # (automatically invoked instead of "latex" to create a DVI file).
104 # For a discussion of alternatives for Japanese with LaTeX , see also
105 # https://tex.stackexchange.com/questions/320021/xelatex-using-japanese-ldf-for-babel-causes-invalid-characters-errors
106 #
107 # Exceptions: 
108 # The "!" means: "Protect these tests from being matched by future patterns in this file".
109 # Export by plain- and pdflatex engines works with language "japanese-cjk", e.g.
110 !export/examples/ja/Multilingual_Typesetting_with_CJK_(dvi|pdf[23]?)
111 !export/examples/ja/Multilingual_Typesetting_with_CJK_.*systemF
112 # the rest:
113 export/.*/ja/.*_(pdf2|texF)
114
115 # Japanese knitr.lyx and sweave.lyx support only XeLaTeX with system fonts
116 # because they use the "bxjsarticle" class and non-TeX fonts
117 !export/examples/ja/Modules/Rnw.*knitr.*_(lyx.*|xhtml|pdf4_systemF)
118 export/examples/ja/Modules/Rnw.*knitr.*
119 !export/examples/ja/Modules/Sweave.*_(lyx.*|xhtml|pdf4_systemF)
120 export/examples/ja/Modules/Sweave.*
121
122 # The LuaTeX-ja package, which is loaded by bxjs* class, is not designed
123 # to be used with dvilua(la)tex:
124 #   https://www.mail-archive.com/search?l=mid&q=20200917155146.ec1bd9f9b5d5f5936513e5dd%40yahoo.co.jp
125 # These started to fail due to a "luatex" package update in the TL20 cycle.
126 export/.*/(ja|zh_CN)/.*_dvi3_systemF
127 export/export/latex/CJK/zh_CN-toc.*_dvi3_systemF
128
129 # CJK fails (sometimes) with Xe/LuaTeX and 8-bit fonts:
130 #####
131 export/examples/ja/Multilingual_Typesetting_.*CJK.(dvi3|pdf5)_texF
132 export/.*/(ko|zh_CN)/.*(dvi3|pdf[45])_texF
133 export/export/latex/CJK/zh_CN-toc_*.(dvi3|pdf[45])_texF
134 export/export/latex/CJK/en-de-el-ru-ko_utf8_.*_texF
135
136 # export of minted documents to 2.2.x is not guaranteed to work (and currently
137 # fails for our two minted example files), as explained here:
138 # https://www.mail-archive.com/search?l=mid&q=20190113085555.GA7928%40GIOVE
139 export/examples/Insets/Minted.*lyx22
140
141 # Subdocuments that are not expected to work as stand-alone documents:
142 ##############
143 export/mathmacros/Spacechild[123].*
144 # chapters of Springer books (svmono, svmult) (except 00_Main_File)
145 export/templates/Books/Springer_.*/(0[^0]|1.)_.*
146 check_load/templates/Books/Springer_.*/(0[^0]|1.)_.*
147 export/templates/Theses/PhD_Thesis/(Acknowledgments|Appendix|Summary|Bibliography|Chapter_[12])_lyx.*
148 # Used only as include file for some tests
149 .*/export/IncludeMissingEndTagDiv.*
150
151 # Bibliography.lyx is not expected to compile. See the following for discussion:
152 #   https://www.mail-archive.com/search?l=mid&q=20190104195414.opgeuggeqakxl2fo%40barna
153 # Ignore all formats except xhtml export
154 export/templates/Theses/PhD_Thesis/Bibliography_[^x].*
155
156 # `acmart` and `copernicus` are not supported by LyX < 2.3
157 export/templates/Articles/Association_for_Computing_Machinery.*_lyx(16|20|21|22)
158 export/templates/Articles/Copernicus_Publications_.*_lyx(16|20|21|22)
159 # Seems, like only latex and pdflatex compilations work
160 #! Missing number, treated as zero.
161 # in copernicus.cls:199
162 # \ifnum\pdfoutput=\z@
163 export/templates/Articles/Copernicus_.*_(texF|systemF)
164
165
166
167 # ============================================================
168 Sublabel: obsolete
169 # Documents relying on no longer available packages or classes
170 # ============================================================
171
172 # aastex6.cls is obsoleted by aastex62.cls
173 export/attic/examples/Articles/American_Astronomical_Society_.*v._6%29.*
174 check_load/attic/examples/Articles/American_Astronomical_Society_.*v._6%29
175 export/templates/Obsolete/American_Astronomical_Society_.*v._6%29.*
176 check_load/templates/Obsolete/American_Astronomical_Society_.*v._6%29
177 # Version 6.2 is not supported in LyX 1.6
178 export/examples/Articles/American_Astronomical_Society_.*v._6.2.*_lyx16
179 export/templates/Articles/American_Astronomical_Society_.*v._6.2.*_lyx16
180
181 # latex8.sty is obsoleted by IEEEconf
182 export/templates/Obsolete/Latex8_Article.*(dvi|pdf|lyx2[23]).*
183
184 # ==============================================================
185 Sublabel: irrelevant
186 # Dedicated test samples that don't need testing in all variants
187 # ==============================================================
188
189 # LaTeX
190 # don't check loading, lyx2lyx, or export to other LyX versions or HTML
191 check_load/export/latex/.*
192 lyx2lyx/export/latex/.*
193 export/export/latex/.*(lyx..|xhtml)
194
195 # don't test with non-TeX fonts:
196 export/export/latex/inputenc-.*_systemF # 11522 still open but already tested
197 export/export/latex/languages/supported-languages_babel_(pdf|dvi)._systemF
198 export/export/latex/languages/supported-languages_babel_auto-legacy_.*_systemF
199 export/export/latex/lyxbugs/6197-polish-amssymb_pdf5_systemF
200 export/export/latex/languages/nested-inputenc_auto-legacy_.*_systemF
201 export/export/latex/languages/cyrillic-languages-conflict_.*_systemF
202 export/export/latex/languages/th-en_utf8_.*_systemF
203
204 # wrong output but does not fail:
205 export/export/latex/lyxbugs/3059-language-in-tables_.*_systemF
206
207 # don't test with TeX fonts:
208 export/export/latex/languages/supported-languages_babel_non-tex_.*(dvi|pdf.?|texF)
209 export/export/latex/languages/supported-languages_polyglossia_.*(dvi|pdf.?|texF)
210 export/export/latex/languages/supported-languages_XeTeX_.*(dvi|pdf.?|texF)
211 export/export/latex/languages/supported-languages_(dvi3|pdf5).*_texF
212 export/export/latex/lyxbugs-resolved/9633-.*(dvi|pdf.?|texF)
213 export/export/latex/lyxbugs/11522-systemfonts-Math-missingchars_pdf5_texF
214 export/templates/Articles/American_Psychological_Association_%28APA%29,_v\._7_(dvi3|pdf5)_texF
215 export/export/latex/languages/latinErt_(dvi3|pdf5)_texF
216 export/export/latex/languages/mixed_ltr-art_arabi-standard-font_(dvi3|pdf5)_texF
217
218 # TeXLive does not set up Hebrew 8-bit TeX fonts
219 export/export/latex/unicodesymbols/152-modifiers-presentation_he_.*_pdf2
220 # Tests which are not expected to succeed, because used
221 # as a child
222 export/export/latex/languages/supported-languages_(dvi|pdf).*
223
224 # lyx2lyx
225 # dedicated lyx2lyx tests
226 !export/export/lyx2lyx/.*lyx..
227 export/export/lyx2lyx/.*
228
229
230 # HTML
231 # don't check loading, lyx2lyx, or export to other LyX versions or DVI/PDF
232 check_load/export/xhtml/.*
233 lyx2lyx/export/xhtml/.*
234 export/export/xhtml/.*(lyx..|dvi.*|pdf.*)
235
236 # DocBook
237 # not expected to successful compile
238 check_load/export/docbook/.*
239 lyx2lyx/export/docbook/.*
240 export/export/docbook/.*(lyx..|dvi.*|pdf.*)