]> git.lyx.org Git - lyx.git/blob - lib/configure.py
e369b68e14fa9eabcf8c564c1a3468aae88c4c54
[lyx.git] / lib / configure.py
1 #! /usr/bin/env python
2 # -*- coding: utf-8 -*-
3 #
4 # file configure.py
5 # This file is part of LyX, the document processor.
6 # Licence details can be found in the file COPYING.
7
8 # \author Bo Peng
9 # Full author contact details are available in file CREDITS.
10
11 import sys, os, re, shutil, glob, logging
12
13 # set up logging
14 logging.basicConfig(level = logging.DEBUG,
15     format = '%(levelname)s: %(message)s', # ignore application name
16     filename = 'configure.log',
17     filemode = 'w')
18 #
19 # Add a handler to log to console
20 console = logging.StreamHandler()
21 console.setLevel(logging.INFO) # the console only print out general information
22 formatter = logging.Formatter('%(message)s') # only print out the message itself
23 console.setFormatter(formatter)
24 logger = logging.getLogger('LyX')
25 logger.addHandler(console)
26
27 def writeToFile(filename, lines, append = False):
28     " utility function: write or append lines to filename "
29     if append:
30         file = open(filename, 'a')
31     else:
32         file = open(filename, 'w')
33     file.write(lines)
34     file.close()
35
36
37 def addToRC(lines):
38     ''' utility function: shortcut for appending lines to outfile
39         add newline at the end of lines.
40     '''
41     if lines.strip() != '':
42         writeToFile(outfile, lines + '\n', append = True)
43         logger.debug('Add to RC:\n' + lines + '\n\n')
44
45
46 def removeFiles(filenames):
47     '''utility function: 'rm -f'
48         ignore errors when file does not exist, or is a directory.
49     '''
50     for file in filenames:
51         try:
52             os.remove(file)
53             logger.debug('Removing file %s' % file)
54         except:
55             logger.debug('Failed to remove file %s' % file)
56             pass
57
58
59 def cmdOutput(cmd):
60     '''utility function: run a command and get its output as a string
61         cmd: command to run
62     '''
63     fout = os.popen(cmd)
64     output = fout.read()
65     fout.close()
66     return output.strip()
67
68
69 def setEnviron():
70     ''' I do not really know why this is useful, but we might as well keep it.
71         NLS nuisances.
72         Only set these to C if already set.  These must not be set unconditionally
73         because not all systems understand e.g. LANG=C (notably SCO).
74         Fixing LC_MESSAGES prevents Solaris sh from translating var values in set!
75         Non-C LC_CTYPE values break the ctype check.
76     '''
77     os.environ['LANG'] = os.getenv('LANG', 'C')
78     os.environ['LC'] = os.getenv('LC_ALL', 'C')
79     os.environ['LC_MESSAGE'] = os.getenv('LC_MESSAGE', 'C')
80     os.environ['LC_CTYPE'] = os.getenv('LC_CTYPE', 'C')
81
82
83 def createDirectories():
84     ''' Create the build directories if necessary '''
85     for dir in ['bind', 'clipart', 'doc', 'examples', 'images', 'kbd', \
86         'layouts', 'scripts', 'templates', 'ui' ]:
87         if not os.path.isdir( dir ):
88             try:
89                 os.mkdir( dir)
90                 logger.debug('Create directory %s.' % dir)
91             except:
92                 logger.error('Failed to create directory %s.' % dir)
93                 sys.exit(1)
94
95
96 def checkTeXPaths():
97     ''' Determine the path-style needed by the TeX engine on Win32 (Cygwin) '''
98     windows_style_tex_paths = ''
99     if os.name == 'nt' or sys.platform == 'cygwin':
100         from tempfile import mkstemp
101         fd, tmpfname = mkstemp(suffix='.ltx')
102         if os.name == 'nt':
103             inpname = tmpfname.replace('\\', '/')
104         else:
105             inpname = cmdOutput('cygpath -m ' + tmpfname)
106         logname = os.path.basename(inpname.replace('.ltx', '.log'))
107         inpname = inpname.replace('~', '\\string~')
108         os.write(fd, r'\relax')
109         os.close(fd)
110         latex_out = cmdOutput(r'latex "\nonstopmode\input{%s}"' % inpname)
111         if 'Error' in latex_out:
112             logger.warning("configure: TeX engine needs posix-style paths in latex files")
113             windows_style_tex_paths = 'false'
114         else:
115             logger.info("configure: TeX engine needs windows-style paths in latex files")
116             windows_style_tex_paths = 'true'
117         removeFiles([tmpfname, logname, 'texput.log'])
118     return windows_style_tex_paths
119
120
121 ## Searching some useful programs
122 def checkProg(description, progs, rc_entry = [], path = [], not_found = ''):
123     '''
124         This function will search a program in $PATH plus given path
125         If found, return directory and program name (not the options).
126
127         description: description of the program
128
129         progs: check programs, for each prog, the first word is used
130             for searching but the whole string is used to replace
131             %% for a rc_entry. So, feel free to add '$$i' etc for programs.
132
133         path: additional pathes
134
135         rc_entry: entry to outfile, can be
136             1. emtpy: no rc entry will be added
137             2. one pattern: %% will be replaced by the first found program,
138                 or '' if no program is found.
139             3. several patterns for each prog and not_found. This is used 
140                 when different programs have different usages. If you do not 
141                 want not_found entry to be added to the RC file, you can specify 
142                 an entry for each prog and use '' for the not_found entry.
143
144         not_found: the value that should be used instead of '' if no program
145             was found
146
147     '''
148     # one rc entry for each progs plus not_found entry
149     if len(rc_entry) > 1 and len(rc_entry) != len(progs) + 1:
150         logger.error("rc entry should have one item or item for each prog and not_found.")
151         sys.exit(2)
152     logger.info('checking for ' + description + '...')
153     ## print '(' + ','.join(progs) + ')',
154     for idx in range(len(progs)):
155         # ac_prog may have options, ac_word is the command name
156         ac_prog = progs[idx]
157         ac_word = ac_prog.split(' ')[0]
158         msg = '+checking for "' + ac_word + '"... '
159         path = os.environ["PATH"].split(os.pathsep) + path
160         extlist = ['']
161         if os.environ.has_key("PATHEXT"):
162             extlist = extlist + os.environ["PATHEXT"].split(os.pathsep)
163         for ac_dir in path:
164             for ext in extlist:
165                 if os.path.isfile( os.path.join(ac_dir, ac_word + ext) ):
166                     logger.info(msg + ' yes')
167                     # write rc entries for this command
168                     if len(rc_entry) == 1:
169                         addToRC(rc_entry[0].replace('%%', ac_prog))
170                     elif len(rc_entry) > 1:
171                         addToRC(rc_entry[idx].replace('%%', ac_prog))
172                     return [ac_dir, ac_word]
173         # if not successful
174         logger.info(msg + ' no')
175     # write rc entries for 'not found'
176     if len(rc_entry) > 0:  # the last one.
177         addToRC(rc_entry[-1].replace('%%', not_found))
178     return ['', not_found]
179
180
181 def checkViewer(description, progs, rc_entry = [], path = []):
182     ''' The same as checkProg, but for viewers and editors '''
183     return checkProg(description, progs, rc_entry, path, not_found = 'auto')
184
185
186 def checkDTLtools():
187     ''' Check whether DTL tools are available (Windows only) '''
188     # Find programs! Returned path is not used now
189     if ((os.name == 'nt' or sys.platform == 'cygwin') and
190             checkProg('DVI to DTL converter', ['dv2dt']) != ['', ''] and
191             checkProg('DTL to DVI converter', ['dt2dv']) != ['', '']):
192         dtl_tools = True
193     else:
194         dtl_tools = False
195     return dtl_tools
196
197
198 def checkLatex(dtl_tools):
199     ''' Check latex, return lyx_check_config '''
200     path, LATEX = checkProg('a Latex2e program', ['latex $$i', 'platex $$i', 'latex2e $$i'])
201     path, PPLATEX = checkProg('a DVI postprocessing program', ['pplatex $$i'])
202     #-----------------------------------------------------------------
203     path, PLATEX = checkProg('pLaTeX, the Japanese LaTeX', ['platex $$i'])
204     if PLATEX != '':
205         # check if PLATEX is pLaTeX2e
206         writeToFile('chklatex.ltx', '''
207 \\nonstopmode
208 \\@@end
209 ''')
210         # run platex on chklatex.ltx and check result
211         if cmdOutput(PLATEX + ' chklatex.ltx').find('pLaTeX2e') != -1:
212             # We have the Japanese pLaTeX2e
213             addToRC(r'\converter platex   dvi       "%s"   "latex"' % PLATEX)
214             LATEX = PLATEX
215         else:
216             PLATEX = ''
217             removeFiles(['chklatex.ltx', 'chklatex.log'])
218     #-----------------------------------------------------------------
219     # use LATEX to convert from latex to dvi if PPLATEX is not available    
220     if PPLATEX == '':
221         PPLATEX = LATEX
222     if dtl_tools:
223         # Windows only: DraftDVI
224         addToRC(r'''\converter latex      dvi2       "%s"       "latex"
225 \converter dvi2       dvi        "python -tt $$s/scripts/clean_dvi.py $$i $$o"  ""''' % PPLATEX)
226     else:
227         addToRC(r'\converter latex      dvi        "%s" "latex"' % PPLATEX)
228     # no latex
229     if LATEX != '':
230         # Check if latex is usable
231         writeToFile('chklatex.ltx', '''
232 \\nonstopmode\\makeatletter
233 \\ifx\\undefined\\documentclass\\else
234   \\message{ThisIsLaTeX2e}
235 \\fi
236 \\@@end
237 ''')
238         # run latex on chklatex.ltx and check result
239         if cmdOutput(LATEX + ' chklatex.ltx').find('ThisIsLaTeX2e') != -1:
240             # valid latex2e
241             return LATEX
242         else:
243             logger.warning("Latex not usable (not LaTeX2e) ")
244         # remove temporary files
245         removeFiles(['chklatex.ltx', 'chklatex.log'])
246     return ''
247
248
249 def checkFormatEntries(dtl_tools):  
250     ''' Check all formats (\Format entries) '''
251     checkViewer('a Tgif viewer and editor', ['tgif'],
252         rc_entry = [r'\Format tgif       obj     Tgif                   "" "%%" "%%"    "vector"'])
253     #
254     checkViewer('a FIG viewer and editor', ['xfig', 'jfig3-itext.jar', 'jfig3.jar'],
255         rc_entry = [r'\Format fig        fig     FIG                    "" "%%" "%%"    "vector"'])
256     #
257     checkViewer('a Dia viewer and editor', ['dia'],
258         rc_entry = [r'\Format dia        dia     DIA                    "" "%%" "%%"    "vector"'])
259     #
260     checkViewer('a Grace viewer and editor', ['xmgrace'],
261         rc_entry = [r'\Format agr        agr     Grace                  "" "%%" "%%"    "vector"'])
262     #
263     checkViewer('a FEN viewer and editor', ['xboard -lpf $$i -mode EditPosition'],
264         rc_entry = [r'\Format fen        fen     FEN                    "" "%%" "%%"    ""'])
265     #
266     path, iv = checkViewer('a raster image viewer', ['xv', 'kview', 'gimp-remote', 'gimp'])
267     path, ie = checkViewer('a raster image editor', ['gimp-remote', 'gimp'])
268     addToRC(r'''\Format bmp        bmp     BMP                    "" "%s"       "%s"    ""
269 \Format gif        gif     GIF                    "" "%s"       "%s"    ""
270 \Format jpg        jpg     JPEG                   "" "%s"       "%s"    ""
271 \Format pbm        pbm     PBM                    "" "%s"       "%s"    ""
272 \Format pgm        pgm     PGM                    "" "%s"       "%s"    ""
273 \Format png        png     PNG                    "" "%s"       "%s"    ""
274 \Format ppm        ppm     PPM                    "" "%s"       "%s"    ""
275 \Format tiff       tif     TIFF                   "" "%s"       "%s"    ""
276 \Format xbm        xbm     XBM                    "" "%s"       "%s"    ""
277 \Format xpm        xpm     XPM                    "" "%s"       "%s"    ""''' % \
278         (iv, ie, iv, ie, iv, ie, iv, ie, iv, ie, iv, ie, iv, ie, iv, ie, iv, ie, iv, ie) )
279     #
280     checkViewer('a text editor', ['sensible-editor', 'xemacs', 'gvim', 'kedit', 'kwrite', 'kate', \
281         'nedit', 'gedit', 'notepad'],
282         rc_entry = [r'''\Format asciichess asc    "Plain text (chess output)"  "" ""    "%%"    ""
283 \Format asciiimage asc    "Plain text (image)"         "" ""    "%%"    ""
284 \Format asciixfig  asc    "Plain text (Xfig output)"   "" ""    "%%"    ""
285 \Format dateout    tmp    "date (output)"         "" "" "%%"    ""
286 \Format docbook    sgml    DocBook                B  "" "%%"    "document"
287 \Format docbook-xml xml   "Docbook (XML)"         "" "" "%%"    "document"
288 \Format dot        dot    "Graphviz Dot"          "" "" "%%"    "vector"
289 \Format platex     tex    "LaTeX (pLaTeX)"        "" "" "%%"    "document"
290 \Format literate   nw      NoWeb                  N  "" "%%"    "document"
291 \Format lilypond   ly     "LilyPond music"        "" "" "%%"    "vector"
292 \Format latex      tex    "LaTeX (plain)"         L  "" "%%"    "document"
293 \Format pdflatex   tex    "LaTeX (pdflatex)"      "" "" "%%"    "document"
294 \Format xetex      tex    "LaTeX (XeTeX)"         "" "" "%%"    "document"
295 \Format text       txt    "Plain text"            a  "" "%%"    "document"
296 \Format text2      txt    "Plain text (pstotext)" "" "" "%%"    "document"
297 \Format text3      txt    "Plain text (ps2ascii)" "" "" "%%"    "document"
298 \Format text4      txt    "Plain text (catdvi)"   "" "" "%%"    "document"
299 \Format textparagraph txt "Plain Text, Join Lines" "" ""        "%%"    "document"''' ])
300  #
301     checkViewer('a BibTeX editor', ['sensible-editor', 'jabref', 'JabRef', \
302         'pybliographic', 'bibdesk', 'gbib', 'kbib', \
303         'kbibtex', 'sixpack', 'bibedit', 'tkbibtex' \
304         'xemacs', 'gvim', 'kedit', 'kwrite', 'kate', \
305         'nedit', 'gedit', 'notepad'],
306         rc_entry = [r'''\Format bibtex bib    "BibTeX"         "" ""    "%%"    ""''' ])
307     #
308     #checkProg('a Postscript interpreter', ['gs'],
309     #  rc_entry = [ r'\ps_command "%%"' ])
310     checkViewer('a Postscript previewer', ['kghostview', 'evince', 'gv', 'ghostview -swap'],
311         rc_entry = [r'''\Format eps        eps     EPS                    "" "%%"       ""      "vector"
312 \Format ps         ps      Postscript             t  "%%"       ""      "document,vector"'''])
313     #
314     checkViewer('a PDF previewer', ['kpdf', 'evince', 'kghostview', 'xpdf', 'acrobat', 'acroread', \
315                     'gv', 'ghostview'],
316         rc_entry = [r'''\Format pdf        pdf    "PDF (ps2pdf)"          P  "%%"       ""      "document,vector"
317 \Format pdf2       pdf    "PDF (pdflatex)"        F  "%%"       ""      "document,vector"
318 \Format pdf3       pdf    "PDF (dvipdfm)"         m  "%%"       ""      "document,vector"
319 \Format pdf4       pdf    "PDF (XeTeX)"           X  "%%"       ""      "document,vector"'''])
320     #
321     checkViewer('a DVI previewer', ['xdvi', 'kdvi'],
322         rc_entry = [r'\Format dvi        dvi     DVI                    D  "%%" ""      "document,vector"'])
323     if dtl_tools:
324         # Windows only: DraftDVI
325         addToRC(r'\Format dvi2       dvi     DraftDVI               ""  ""      ""      "vector"')
326     #
327     checkViewer('an HTML previewer', ['firefox', 'mozilla file://$$p$$i', 'netscape'],
328         rc_entry = [r'\Format html       html    HTML                   H  "%%" ""      "document"'])
329     #
330     checkViewer('Noteedit', ['noteedit'],
331         rc_entry = [r'\Format noteedit   not     Noteedit               "" "%%" "%%"    "vector"'])
332     #
333     checkViewer('an OpenDocument viewer', ['swriter', 'oowriter'],
334         rc_entry = [r'\Format odt        odt     OpenDocument           "" "%%" "%%"    "document,vector"'])
335     #
336     # entried that do not need checkProg
337     addToRC(r'''\Format date       ""     "date command"          "" "" ""      ""
338 \Format csv        csv    "Table (CSV)"  "" ""  ""      "document"
339 \Format fax        ""      Fax                    "" "" ""      "document"
340 \Format lyx        lyx     LyX                    "" "" ""      ""
341 \Format lyx13x     lyx13  "LyX 1.3.x"             "" "" ""      "document"
342 \Format lyx14x     lyx14  "LyX 1.4.x"             "" "" ""      "document"
343 \Format lyx15x     lyx15  "LyX 1.5.x"             "" "" ""      "document"
344 \Format lyx16x     lyx16  "LyX 1.6.x"             "" "" ""      "document"
345 \Format clyx       cjklyx "CJK LyX 1.4.x (big5)"  "" "" ""      "document"
346 \Format jlyx       cjklyx "CJK LyX 1.4.x (euc-jp)" "" ""        ""      "document"
347 \Format klyx       cjklyx "CJK LyX 1.4.x (euc-kr)" "" ""        ""      "document"
348 \Format lyxpreview lyxpreview "LyX Preview"       "" "" ""      ""
349 \Format lyxpreview-platex lyxpreview-platex "LyX Preview (pLaTeX)"       "" ""  ""      ""
350 \Format pdftex     pdftex_t PDFTEX                "" "" ""      ""
351 \Format program    ""      Program                "" "" ""      ""
352 \Format pstex      pstex_t PSTEX                  "" "" ""      ""
353 \Format rtf        rtf    "Rich Text Format"      "" "" ""      "document,vector"
354 \Format sxw        sxw    "OpenOffice.Org (sxw)"  ""  ""        ""      "document,vector"
355 \Format wmf        wmf    "Windows Metafile"      "" "" ""      "vector"
356 \Format emf        emf    "Enhanced Metafile"     "" "" ""      "vector"
357 \Format word       doc    "MS Word"               W  "" ""      "document,vector"
358 \Format wordhtml   html   "HTML (MS Word)"        "" ""        ""       "document"
359 ''')
360
361
362 def checkConverterEntries():
363     ''' Check all converters (\converter entries) '''
364     checkProg('the pdflatex program', ['pdflatex $$i'],
365         rc_entry = [ r'\converter pdflatex   pdf2       "%%"    "latex"' ])
366
367     checkProg('XeTeX', ['xelatex $$i'],
368         rc_entry = [ r'\converter xetex      pdf4       "%%"    "latex"' ])
369     
370     ''' If we're running LyX in-place then tex2lyx will be found in
371             ../src/tex2lyx. Add this directory to the PATH temporarily and
372             search for tex2lyx.
373             Use PATH to avoid any problems with paths-with-spaces.
374     '''
375     path_orig = os.environ["PATH"]
376     os.environ["PATH"] = os.path.join('..', 'src', 'tex2lyx') + \
377         os.pathsep + path_orig
378
379     checkProg('a LaTeX/Noweb -> LyX converter', ['tex2lyx', 'tex2lyx' + version_suffix],
380         rc_entry = [r'''\converter latex      lyx        "%% -f $$i $$o"        ""
381 \converter literate   lyx        "%% -n -f $$i $$o"     ""'''])
382
383     os.environ["PATH"] = path_orig
384
385     #
386     checkProg('a Noweb -> LaTeX converter', ['noweave -delay -index $$i > $$o'],
387         rc_entry = [r'''\converter literate   latex      "%%"   ""
388 \converter literate   pdflatex      "%%"        ""'''])
389     #
390     checkProg('an HTML -> LaTeX converter', ['html2latex $$i', 'gnuhtml2latex $$i', \
391         'htmltolatex -input $$i -output $$o', 'java -jar htmltolatex.jar -input $$i -output $$o'],
392         rc_entry = [ r'\converter html       latex      "%%"    ""' ])
393     #
394     checkProg('an MS Word -> LaTeX converter', ['wvCleanLatex $$i $$o'],
395         rc_entry = [ r'\converter word       latex      "%%"    ""' ])
396     # On SuSE the scripts have a .sh suffix, and on debian they are in /usr/share/tex4ht/
397     path, htmlconv = checkProg('a LaTeX -> HTML converter', ['htlatex $$i', 'htlatex.sh $$i', \
398         '/usr/share/tex4ht/htlatex $$i', 'tth  -t -e2 -L$$b < $$i > $$o', \
399         'latex2html -no_subdir -split 0 -show_section_numbers $$i', 'hevea -s $$i'],
400         rc_entry = [ r'\converter latex      html       "%%"    "needaux"' ])
401     if htmlconv.find('htlatex') >= 0 or htmlconv == 'latex2html':
402       addToRC(r'''\copier    html       "python -tt $$s/scripts/ext_copy.py -e html,png,css $$i $$o"''')
403     else:
404       addToRC(r'''\copier    html       "python -tt $$s/scripts/ext_copy.py $$i $$o"''')
405
406     # On SuSE the scripts have a .sh suffix, and on debian they are in /usr/share/tex4ht/
407     path, htmlconv = checkProg('a LaTeX -> MS Word converter', ["htlatex $$i 'html,word' 'symbol/!' '-cvalidate'", \
408         "htlatex.sh $$i 'html,word' 'symbol/!' '-cvalidate'", \
409         "/usr/share/tex4ht/htlatex $$i 'html,word' 'symbol/!' '-cvalidate'"],
410         rc_entry = [ r'\converter latex      wordhtml   "%%"    "needaux"' ])
411     if htmlconv.find('htlatex') >= 0:
412       addToRC(r'''\copier    wordhtml       "python -tt $$s/scripts/ext_copy.py -e html,png,css $$i $$o"''')
413     #
414     checkProg('an OpenOffice.org -> LaTeX converter', ['w2l -clean $$i'],
415         rc_entry = [ r'\converter sxw        latex      "%%"    ""' ])
416     #
417     checkProg('an OpenDocument -> LaTeX converter', ['w2l -clean $$i'],
418         rc_entry = [ r'\converter odt        latex      "%%"    ""' ])
419     # According to http://www.tug.org/applications/tex4ht/mn-commands.html
420     # the command mk4ht oolatex $$i has to be used as default,
421     # but as this would require to have Perl installed, in MiKTeX oolatex is
422     # directly available as application.
423     # On SuSE the scripts have a .sh suffix, and on debian they are in /usr/share/tex4ht/
424     # Both SuSE and debian have oolatex
425     checkProg('a LaTeX -> Open Document converter', [
426         'oolatex $$i', 'mk4ht oolatex $$i', 'oolatex.sh $$i', '/usr/share/tex4ht/oolatex $$i',
427         'htlatex $$i \'xhtml,ooffice\' \'ooffice/! -cmozhtf\' \'-coo\' \'-cvalidate\''],
428         rc_entry = [ r'\converter latex      odt        "%%"    "needaux"' ])
429     # On windows it is called latex2rt.exe
430     checkProg('a LaTeX -> RTF converter', ['latex2rtf -p -S -o $$o $$i', 'latex2rt -p -S -o $$o $$i'],
431         rc_entry = [ r'\converter latex      rtf        "%%"    "needaux"' ])
432     #
433     checkProg('a RTF -> HTML converter', ['unrtf --html  $$i > $$o'],
434         rc_entry = [ r'\converter rtf      html        "%%"     ""' ])
435     #
436     checkProg('a PS to PDF converter', ['ps2pdf13 $$i $$o'],
437         rc_entry = [ r'\converter ps         pdf        "%%"    ""' ])
438     #
439     checkProg('a PS to TXT converter', ['pstotext $$i > $$o'],
440         rc_entry = [ r'\converter ps         text2      "%%"    ""' ])
441     #
442     checkProg('a PS to TXT converter', ['ps2ascii $$i $$o'],
443         rc_entry = [ r'\converter ps         text3      "%%"    ""' ])
444     #
445     checkProg('a PS to EPS converter', ['ps2eps $$i'],
446         rc_entry = [ r'\converter ps         eps      "%%"      ""' ])
447     #
448     checkProg('a PDF to PS converter', ['pdf2ps $$i $$o', 'pdftops $$i $$o'],
449         rc_entry = [ r'\converter pdf         ps        "%%"    ""' ])
450     #
451     checkProg('a PDF to EPS converter', ['pdftops -eps -f 1 -l 1 $$i $$o'],
452         rc_entry = [ r'\converter pdf         eps        "%%"   ""' ])
453     #
454     checkProg('a DVI to TXT converter', ['catdvi $$i > $$o'],
455         rc_entry = [ r'\converter dvi        text4      "%%"    ""' ])
456     #
457     checkProg('a DVI to PS converter', ['dvips -o $$o $$i'],
458         rc_entry = [ r'\converter dvi        ps         "%%"    ""' ])
459     #
460     checkProg('a DVI to PDF converter', ['dvipdfmx -o $$o $$i', 'dvipdfm -o $$o $$i'],
461         rc_entry = [ r'\converter dvi        pdf3       "%%"    ""' ])
462     #
463     path, dvipng = checkProg('dvipng', ['dvipng'])
464     if dvipng == "dvipng":
465         addToRC(r'\converter lyxpreview png        "python -tt $$s/scripts/lyxpreview2bitmap.py"        ""')
466     else:
467         addToRC(r'\converter lyxpreview png        ""   ""')
468     #  
469     checkProg('a fax program', ['kdeprintfax $$i', 'ksendfax $$i'],
470         rc_entry = [ r'\converter ps         fax        "%%"    ""'])
471     #
472     checkProg('a FIG -> EPS/PPM converter', ['fig2dev'],
473         rc_entry = [
474             r'''\converter fig        eps        "fig2dev -L eps $$i $$o"       ""
475 \converter fig        ppm        "fig2dev -L ppm $$i $$o"       ""
476 \converter fig        png        "fig2dev -L png $$i $$o"       ""''',
477             ''])
478     #
479     checkProg('a TIFF -> PS converter', ['tiff2ps $$i > $$o'],
480         rc_entry = [ r'\converter tiff       eps        "%%"    ""', ''])
481     #
482     checkProg('a TGIF -> EPS/PPM converter', ['tgif'],
483         rc_entry = [
484             r'''\converter tgif       eps        "tgif -print -color -eps -stdout $$i > $$o"    ""
485 \converter tgif       png        "tgif -print -color -png -o $$d $$i"   ""
486 \converter tgif       pdf        "tgif -print -color -pdf -stdout $$i > $$o"    ""''',
487             ''])
488     #
489     checkProg('a WMF -> EPS converter', ['metafile2eps $$i $$o', 'wmf2eps -o $$o $$i'],
490         rc_entry = [ r'\converter wmf        eps        "%%"    ""'])
491     #
492     checkProg('an EMF -> EPS converter', ['metafile2eps $$i $$o', 'wmf2eps -o $$o $$i'],
493         rc_entry = [ r'\converter emf        eps        "%%"    ""'])
494     #
495     checkProg('an EPS -> PDF converter', ['epstopdf'],
496         rc_entry = [ r'\converter eps        pdf        "epstopdf --outfile=$$o $$i"    ""', ''])
497     #
498     # no agr -> pdf converter, since the pdf library used by gracebat is not
499     # free software and therefore not compiled in in many installations.
500     # Fortunately, this is not a big problem, because we will use epstopdf to
501     # convert from agr to pdf via eps without loss of quality.
502     checkProg('a Grace -> Image converter', ['gracebat'],
503         rc_entry = [
504             r'''\converter agr        eps        "gracebat -hardcopy -printfile $$o -hdevice EPS $$i 2>/dev/null"       ""
505 \converter agr        png        "gracebat -hardcopy -printfile $$o -hdevice PNG $$i 2>/dev/null"       ""
506 \converter agr        jpg        "gracebat -hardcopy -printfile $$o -hdevice JPEG $$i 2>/dev/null"      ""
507 \converter agr        ppm        "gracebat -hardcopy -printfile $$o -hdevice PNM $$i 2>/dev/null"       ""''',
508             ''])
509     #
510     checkProg('a Dot -> PDF converter', ['dot -Tpdf $$i -o $$o'],
511         rc_entry = [ r'\converter dot        pdf        "%%"    ""'])
512     #
513     checkProg('a Dia -> PNG converter', ['dia -e $$o -t png $$i'],
514         rc_entry = [ r'\converter dia        png        "%%"    ""'])
515     #
516     checkProg('a Dia -> EPS converter', ['dia -e $$o -t eps $$i'],
517         rc_entry = [ r'\converter dia        eps        "%%"    ""'])
518     #
519     #
520     path, lilypond = checkProg('a LilyPond -> EPS/PDF/PNG converter', ['lilypond'])
521     if (lilypond != ''):
522         version_string = cmdOutput("lilypond --version")
523         match = re.match('GNU LilyPond (\S+)', version_string)
524         if match:
525             version_number = match.groups()[0]
526             version = version_number.split('.')
527             if int(version[0]) > 2 or (len(version) > 1 and int(version[0]) == 2 and int(version[1]) >= 11):
528                 addToRC(r'''\converter lilypond   eps        "lilypond -dbackend=eps --ps $$i"  ""
529 \converter lilypond   png        "lilypond -dbackend=eps --png $$i"     ""''')
530                 addToRC(r'\converter lilypond   pdf        "lilypond -dbackend=eps --pdf $$i"   ""')
531                 print '+  found LilyPond version %s.' % version_number
532             elif int(version[0]) > 2 or (len(version) > 1 and int(version[0]) == 2 and int(version[1]) >= 6):
533                 addToRC(r'''\converter lilypond   eps        "lilypond -b eps --ps $$i" ""
534 \converter lilypond   png        "lilypond -b eps --png $$i"    ""''')
535                 if int(version[0]) > 2 or (len(version) > 1 and int(version[0]) == 2 and int(version[1]) >= 9):
536                     addToRC(r'\converter lilypond   pdf        "lilypond -b eps --pdf $$i"      ""')
537                 logger.info('+  found LilyPond version %s.' % version_number)
538             else:
539                 logger.info('+  found LilyPond, but version %s is too old.' % version_number)
540         else:
541             logger.info('+  found LilyPond, but could not extract version number.')
542     #
543     checkProg('a Noteedit -> LilyPond converter', ['noteedit --export-lilypond $$i'],
544         rc_entry = [ r'\converter noteedit   lilypond   "%%"    ""', ''])
545     #
546     # FIXME: no rc_entry? comment it out
547     # checkProg('Image converter', ['convert $$i $$o'])
548     #
549     # Entries that do not need checkProg
550     addToRC(r'''\converter lyxpreview ppm        "python -tt $$s/scripts/lyxpreview2bitmap.py"  ""
551 \converter lyxpreview-platex ppm        "python -tt $$s/scripts/lyxpreview-platex2bitmap.py"    ""
552 \converter csv        lyx        "python -tt $$s/scripts/csv2lyx.py $$i $$o"    ""
553 \converter date       dateout    "python -tt $$s/scripts/date.py %d-%m-%Y > $$o"        ""
554 \converter docbook    docbook-xml "cp $$i $$o"  "xml"
555 \converter fen        asciichess "python -tt $$s/scripts/fen2ascii.py $$i $$o"  ""
556 \converter fig        pdftex     "python -tt $$s/scripts/fig2pdftex.py $$i $$o" ""
557 \converter fig        pstex      "python -tt $$s/scripts/fig2pstex.py $$i $$o"  ""
558 \converter lyx        lyx13x     "python -tt $$s/lyx2lyx/lyx2lyx -t 221 $$i > $$o"      ""
559 \converter lyx        lyx14x     "python -tt $$s/lyx2lyx/lyx2lyx -t 245 $$i > $$o"      ""
560 \converter lyx        lyx15x     "python -tt $$s/lyx2lyx/lyx2lyx -t 276 $$i > $$o"      ""
561 \converter lyx        lyx16x     "python -tt $$s/lyx2lyx/lyx2lyx -t 345 $$i > $$o"      ""
562 \converter lyx        clyx       "python -tt $$s/lyx2lyx/lyx2lyx -c big5 -t 245 $$i > $$o"      ""
563 \converter lyx        jlyx       "python -tt $$s/lyx2lyx/lyx2lyx -c euc_jp -t 245 $$i > $$o"    ""
564 \converter lyx        klyx       "python -tt $$s/lyx2lyx/lyx2lyx -c euc_kr -t 245 $$i > $$o"    ""
565 \converter clyx       lyx        "python -tt $$s/lyx2lyx/lyx2lyx -c big5 $$i > $$o"     ""
566 \converter jlyx       lyx        "python -tt $$s/lyx2lyx/lyx2lyx -c euc_jp $$i > $$o"   ""
567 \converter klyx       lyx        "python -tt $$s/lyx2lyx/lyx2lyx -c euc_kr $$i > $$o"   ""
568 ''')
569
570
571 def checkDocBook():
572     ''' Check docbook '''
573     path, DOCBOOK = checkProg('SGML-tools 2.x (DocBook), db2x scripts or xsltproc', ['sgmltools', 'db2dvi', 'xsltproc'],
574         rc_entry = [
575             r'''\converter docbook    dvi        "sgmltools -b dvi $$i" ""
576 \converter docbook    html       "sgmltools -b html $$i"        ""''',
577             r'''\converter docbook    dvi        "db2dvi $$i"   ""
578 \converter docbook    html       "db2html $$i"  ""''',
579             r'''\converter docbook    dvi        ""     ""
580 \converter docbook    html       "" ""''',
581             r'''\converter docbook    dvi        ""     ""
582 \converter docbook    html       ""     ""'''])
583     #
584     if DOCBOOK != '':
585         return ('yes', 'true', '\\def\\hasdocbook{yes}')
586     else:
587         return ('no', 'false', '')
588
589
590 def checkOtherEntries():
591     ''' entries other than Format and Converter '''
592     checkProg('ChkTeX', ['chktex -n1 -n3 -n6 -n9 -n22 -n25 -n30 -n38'],
593         rc_entry = [ r'\chktex_command "%%"' ])
594     checkProg('BibTeX', ['bibtex'],
595         rc_entry = [ r'\bibtex_command "%%"' ])
596     checkProg('JBibTeX, the Japanese BibTeX', ['jbibtex', 'bibtex'],
597         rc_entry = [ r'\jbibtex_command "%%"' ])
598     checkProg('an index processor', ['texindy', 'makeindex -c -q'],
599         rc_entry = [ r'\index_command "%%"' ])
600     checkProg('an index processor appropriate to Japanese', ['mendex -c -q', 'makeindex -c -q'],
601         rc_entry = [ r'\jindex_command "%%"' ])
602     checkProg('a nomenclature processor', ['makeindex'],
603         rc_entry = [ r'\nomencl_command "makeindex -s nomencl.ist"' ])
604     ## FIXME: OCTAVE is not used anywhere
605     # path, OCTAVE = checkProg('Octave', ['octave'])
606     ## FIXME: MAPLE is not used anywhere
607     # path, MAPLE = checkProg('Maple', ['maple'])
608     checkProg('a spool command', ['lp', 'lpr'],
609         rc_entry = [
610             r'''\print_spool_printerprefix "-d "
611 \print_spool_command "lp"''',
612             r'''\print_spool_printerprefix "-P",
613 \print_spool_command "lpr"''',
614             ''])
615     # Add the rest of the entries (no checkProg is required)
616     addToRC(r'''\copier    fig        "python -tt $$s/scripts/fig_copy.py $$i $$o"
617 \copier    pstex      "python -tt $$s/scripts/tex_copy.py $$i $$o $$l"
618 \copier    pdftex     "python -tt $$s/scripts/tex_copy.py $$i $$o $$l"
619 \copier    program    "python -tt $$s/scripts/ext_copy.py $$i $$o"
620 ''')
621
622
623 def processLayoutFile(file, bool_docbook):
624     ''' process layout file and get a line of result
625         
626         Declare lines look like this: (article.layout, scrbook.layout, svjog.layout)
627         
628         \DeclareLaTeXClass{article}
629         \DeclareLaTeXClass[scrbook]{book (koma-script)}
630         \DeclareLaTeXClass[svjour,svjog.clo]{article (Springer - svjour/jog)}
631
632         we expect output:
633         
634         "article" "article" "article" "false"
635         "scrbook" "scrbook" "book (koma-script)" "false"
636         "svjog" "svjour" "article (Springer - svjour/jog)" "false"
637     '''
638     classname = file.split(os.sep)[-1].split('.')[0]
639     # return ('LaTeX', '[a,b]', 'a', ',b,c', 'article') for \DeclareLaTeXClass[a,b,c]{article}
640     p = re.compile(r'\Declare(LaTeX|DocBook)Class\s*(\[([^,]*)(,.*)*\])*\s*{(.*)}')
641     for line in open(file).readlines():
642         res = p.search(line)
643         if res != None:
644             (classtype, optAll, opt, opt1, desc) = res.groups()
645             avai = {'LaTeX':'false', 'DocBook':bool_docbook}[classtype]
646             if opt == None:
647                 opt = classname
648             return '"%s" "%s" "%s" "%s"\n' % (classname, opt, desc, avai)
649     logger.warning("Layout file " + file + " has no \DeclareXXClass line. ")
650     return ""
651
652
653 def checkLatexConfig(check_config, bool_docbook):
654     ''' Explore the LaTeX configuration 
655         Return None (will be passed to sys.exit()) for success.
656     '''
657     msg = 'checking LaTeX configuration... '
658     # if --without-latex-config is forced, or if there is no previous 
659     # version of textclass.lst, re-generate a default file.
660     if not os.path.isfile('textclass.lst') or not check_config:
661         # remove the files only if we want to regenerate
662         removeFiles(['textclass.lst', 'packages.lst'])
663         #
664         # Then, generate a default textclass.lst. In case configure.py
665         # fails, we still have something to start lyx.
666         logger.info(msg + ' default values')
667         logger.info('+checking list of textclasses... ')
668         tx = open('textclass.lst', 'w')
669         tx.write('''
670 # This file declares layouts and their associated definition files
671 # (include dir. relative to the place where this file is).
672 # It contains only default values, since chkconfig.ltx could not be run
673 # for some reason. Run ./configure.py if you need to update it after a
674 # configuration change.
675 ''')
676         # build the list of available layout files and convert it to commands
677         # for chkconfig.ltx
678         foundClasses = []
679         for file in glob.glob( os.path.join('layouts', '*.layout') ) + \
680             glob.glob( os.path.join(srcdir, 'layouts', '*.layout' ) ) :
681             # valid file?
682             if not os.path.isfile(file): 
683                 continue
684             # get stuff between /xxxx.layout .
685             classname = file.split(os.sep)[-1].split('.')[0]
686             #  tr ' -' '__'`
687             cleanclass = classname.replace(' ', '_')
688             cleanclass = cleanclass.replace('-', '_')
689             # make sure the same class is not considered twice
690             if foundClasses.count(cleanclass) == 0: # not found before
691                 foundClasses.append(cleanclass)
692                 retval = processLayoutFile(file, bool_docbook)
693                 if retval != "":
694                     tx.write(retval)
695         tx.close()
696         logger.info('\tdone')
697     if not check_config:
698         return None
699     # the following will generate textclass.lst.tmp, and packages.lst.tmp
700     else:
701         logger.info(msg + '\tauto')
702         removeFiles(['wrap_chkconfig.ltx', 'chkconfig.vars', \
703             'chkconfig.classes', 'chklayouts.tex'])
704         rmcopy = False
705         if not os.path.isfile( 'chkconfig.ltx' ):
706             shutil.copyfile( os.path.join(srcdir, 'chkconfig.ltx'), 'chkconfig.ltx' )
707             rmcopy = True
708         writeToFile('wrap_chkconfig.ltx', '%s\n\\input{chkconfig.ltx}\n' % docbook_cmd)
709         # Construct the list of classes to test for.
710         # build the list of available layout files and convert it to commands
711         # for chkconfig.ltx
712         p1 = re.compile(r'\Declare(LaTeX|DocBook)Class')
713         testclasses = list()
714         for file in glob.glob( os.path.join('layouts', '*.layout') ) + \
715             glob.glob( os.path.join(srcdir, 'layouts', '*.layout' ) ) :
716             if not os.path.isfile(file):
717                 continue
718             classname = file.split(os.sep)[-1].split('.')[0]
719             for line in open(file).readlines():
720                 if p1.search(line) == None:
721                     continue
722                 if line[0] != '#':
723                     logger.error("Wrong input layout file with line '" + line)
724                     sys.exit(3)
725                 testclasses.append("\\TestDocClass{%s}{%s}" % (classname, line[1:].strip()))
726                 break
727         testclasses.sort()
728         cl = open('chklayouts.tex', 'w')
729         for line in testclasses:
730             cl.write(line + '\n')
731         cl.close()
732         #
733         # we have chklayouts.tex, then process it
734         fout = os.popen(LATEX + ' wrap_chkconfig.ltx')
735         while True:
736             line = fout.readline()
737             if not line:
738                 break;
739             if re.match('^\+', line):
740                 logger.info(line.strip())
741         # if the command succeeds, None will be returned
742         ret = fout.close()
743         #
744         # currently, values in chhkconfig are only used to set
745         # \font_encoding
746         values = {}
747         for line in open('chkconfig.vars').readlines():
748             key, val = re.sub('-', '_', line).split('=')
749             val = val.strip()
750             values[key] = val.strip("'")
751         # chk_fontenc may not exist 
752         try:
753             addToRC(r'\font_encoding "%s"' % values["chk_fontenc"])
754         except:
755             pass
756         if rmcopy:   # remove the copied file
757             removeFiles( [ 'chkconfig.ltx' ] )
758         # if configure successed, move textclass.lst.tmp to textclass.lst
759         # and packages.lst.tmp to packages.lst
760         if os.path.isfile('textclass.lst.tmp') and len(open('textclass.lst.tmp').read()) > 0 \
761             and os.path.isfile('packages.lst.tmp') and len(open('packages.lst.tmp').read()) > 0:
762             shutil.move('textclass.lst.tmp', 'textclass.lst')
763             shutil.move('packages.lst.tmp', 'packages.lst')
764         return ret
765
766
767 def checkModulesConfig():
768   removeFiles(['lyxmodules.lst'])
769
770   logger.info('+checking list of modules... ')
771   tx = open('lyxmodules.lst', 'w')
772   tx.write('''## This file declares modules and their associated definition files.
773 ## It has been automatically generated by configure
774 ## Use "Options/Reconfigure" if you need to update it after a
775 ## configuration change. 
776 ''')
777   # build the list of available modules
778   foundClasses = []
779   for file in glob.glob( os.path.join('layouts', '*.module') ) + \
780       glob.glob( os.path.join(srcdir, 'layouts', '*.module' ) ) :
781       # valid file?
782       logger.info(file)
783       if not os.path.isfile(file): 
784           continue
785       retval = processModuleFile(file, bool_docbook)
786       if retval != "":
787           tx.write(retval)
788   tx.close()
789   logger.info('\tdone')
790
791
792 def processModuleFile(file, bool_docbook):
793     ''' process module file and get a line of result
794
795         The top of a module file should look like this:
796           #\DeclareLyXModule[LaTeX Packages]{ModuleName}
797           #BeginDescription
798           #...body of description...
799           #EndDescription
800           #Requires: [list of required modules]
801           #Excludes: [list of excluded modules]
802         The last two lines are optional
803         We expect output:
804           "ModuleName" "filename" "Description" "Packages" "Requires" "Excludes"
805     '''
806     p = re.compile(r'\DeclareLyXModule\s*(?:\[([^]]*?)\])?{(.*)}')
807     r = re.compile(r'#+\s*Requires: (.*)')
808     x = re.compile(r'#+\s*Excludes: (.*)')
809     b = re.compile(r'#+\s*DescriptionBegin\s*$')
810     e = re.compile(r'#+\s*DescriptionEnd\s*$')
811
812     modname = desc = pkgs = req = excl = ""
813     readingDescription = False
814     descLines = []
815     filename = file.split(os.sep)[-1]
816     filename = filename[:-7]
817
818     for line in open(file).readlines():
819       if readingDescription:
820         res = e.search(line)
821         if res != None:
822           readingDescription = False
823           desc = " ".join(descLines)
824           continue
825         descLines.append(line[1:].strip())
826         continue
827       res = b.search(line)
828       if res != None:
829         readingDescription = True
830         continue
831       res = p.search(line)
832       if res != None:
833           (pkgs, modname) = res.groups()
834           if pkgs == None:
835             pkgs = ""
836           else:
837             tmp = [s.strip() for s in pkgs.split(",")]
838             pkgs = ",".join(tmp)
839           continue
840       res = r.search(line)
841       if res != None:
842         req = res.group(1)
843         tmp = [s.strip() for s in req.split("|")]
844         req = "|".join(tmp)
845         continue
846       res = x.search(line)
847       if res != None:
848         excl = res.group(1)
849         tmp = [s.strip() for s in excl.split("|")]
850         excl = "|".join(tmp)
851         continue
852     if modname != "":
853         return '"%s" "%s" "%s" "%s" "%s" "%s"\n' % (modname, filename, desc, pkgs, req, excl)
854     logger.warning("Module file without \DeclareLyXModule line. ")
855     return ""
856
857
858 def checkTeXAllowSpaces():
859     ''' Let's check whether spaces are allowed in TeX file names '''
860     tex_allows_spaces = 'false'
861     if lyx_check_config:
862         msg = "Checking whether TeX allows spaces in file names... "
863         writeToFile('a b.tex', r'\message{working^^J}' )
864         if os.name == 'nt':
865             latex_out = cmdOutput(LATEX + r""" "\nonstopmode\input{\"a b\"}" """)
866         else:
867             latex_out = cmdOutput(LATEX + r""" '\nonstopmode\input{"a b"}' """)
868         if 'working' in latex_out:
869             logger.info(msg + 'yes')
870             tex_allows_spaces = 'true'
871         else:
872             logger.info(msg + 'no')
873             tex_allows_spaces = 'false'
874         addToRC(r'\tex_allows_spaces ' + tex_allows_spaces)
875         removeFiles( [ 'a b.tex', 'a b.log', 'texput.log' ])
876
877
878 def removeTempFiles():
879     # Final clean-up
880     if not lyx_keep_temps:
881         removeFiles(['chkconfig.vars',  \
882             'wrap_chkconfig.ltx', 'wrap_chkconfig.log', \
883             'chklayouts.tex', 'missfont.log', 
884             'chklatex.ltx', 'chklatex.log'])
885
886
887 if __name__ == '__main__':
888     lyx_check_config = True
889     outfile = 'lyxrc.defaults'
890     rc_entries = ''
891     lyx_keep_temps = False
892     version_suffix = ''
893     ## Parse the command line
894     for op in sys.argv[1:]:   # default shell/for list is $*, the options
895         if op in [ '-help', '--help', '-h' ]:
896             print '''Usage: configure [options]
897 Options:
898     --help                   show this help lines
899     --keep-temps             keep temporary files (for debug. purposes)
900     --without-latex-config   do not run LaTeX to determine configuration
901     --with-version-suffix=suffix suffix of binary installed files
902 '''
903             sys.exit(0)
904         elif op == '--without-latex-config':
905             lyx_check_config = False
906         elif op == '--keep-temps':
907             lyx_keep_temps = True
908         elif op[0:22] == '--with-version-suffix=':  # never mind if op is not long enough
909             version_suffix = op[22:]
910         else:
911             print "Unknown option", op
912             sys.exit(1)
913     #
914     # check if we run from the right directory
915     srcdir = os.path.dirname(sys.argv[0])
916     if srcdir == '':
917         srcdir = '.'
918     if not os.path.isfile( os.path.join(srcdir, 'chkconfig.ltx') ):
919         logger.error("configure: error: cannot find chkconfig.ltx script")
920         sys.exit(1)
921     setEnviron()
922     createDirectories()
923     windows_style_tex_paths = checkTeXPaths()
924     dtl_tools = checkDTLtools()
925     ## Write the first part of outfile
926     writeToFile(outfile, '''# This file has been automatically generated by LyX' lib/configure.py
927 # script. It contains default settings that have been determined by
928 # examining your system. PLEASE DO NOT MODIFY ANYTHING HERE! If you
929 # want to customize LyX, use LyX' Preferences dialog or modify directly 
930 # the "preferences" file instead. Any setting in that file will
931 # override the values given here.
932 ''')
933     # check latex
934     LATEX = checkLatex(dtl_tools)
935     checkFormatEntries(dtl_tools)
936     checkConverterEntries()
937     (chk_docbook, bool_docbook, docbook_cmd) = checkDocBook()
938     checkTeXAllowSpaces()
939     if windows_style_tex_paths != '':
940         addToRC(r'\tex_expects_windows_paths %s' % windows_style_tex_paths)
941     checkOtherEntries()
942     # --without-latex-config can disable lyx_check_config
943     ret = checkLatexConfig(lyx_check_config and LATEX != '', bool_docbook)
944     checkModulesConfig() #lyx_check_config and LATEX != '')
945     removeTempFiles()
946     # The return error code can be 256. Because most systems expect an error code
947     # in the range 0-127, 256 can be interpretted as 'success'. Because we expect
948     # a None for success, 'ret is not None' is used to exit.
949     sys.exit(ret is not None)