development/autotests/export.cmake

   1 # This file is part of LyX, the document processor.
   2 # Licence details can be found in the file COPYING.
   3 #
   4 # Copyright (c) 2012 Kornel Benko kornel@lyx.org
   5 #
   6 #
   7 # LYX_ROOT  = ${TOP_SRC_DIR}/lib/{doc,examples,templates}
   8 # LYX_USERDIR_VER = Name of environment variable for the user directory
   9 # lyx       =
  10 # format    = lyx16x|lyx20x|lyx21x|lyx22x|xhtml
  11 # extension = 16.lyx|20.lyx|21.lyx|22.lyx|xhtml
  12 # file      = xxx
  13 #
  14 # Script should be called like:
  15 # cmake -DLYX_ROOT=xxx \
  16 #       -DLYX_TESTS_USERDIR=${LYX_TESTS_USERDIR} \
  17 #       -DWORKDIR=${BUILD_DIR}/autotests/out-home \
  18 #       -DLYX_USERDIR_VER=${LYX_USERDIR_VER} \
  19 #       -Dlyx=xxx \
  20 #       -Dformat=xxx \
  21 #       -Dfonttype=xxx \
  22 #       -Dextension=xxx \
  23 #       -DLYX_FORMAT_NUM=${_lyx_format_num} \
  24 #       -Dfile=xxx \
  25 #       -Dinverted=[01] \
  26 #       -DTOP_SRC_DIR=${TOP_SRC_DIR} \
  27 #       -DIgnoreErrorMessage=(ON/OFF) \
  28 #       -DPERL_EXECUTABLE=${PERL_EXECUTABLE} \
  29 #       -DXMLLINT_EXECUTABLE=${XMLLINT_EXECUTABLE} \
  30 #       -DENCODING=xxx \
  31 #       -P "${TOP_SRC_DIR}/development/autotests/export.cmake"
  32 #
  33
  34 set(_TestResultMessage "")
  35 message(STATUS "IgnoreErrorMessage = \"${IgnoreErrorMessage}\"")
  36 set(Perl_Script "${TOP_SRC_DIR}/development/autotests/useSystemFonts.pl")
  37 set(Structure_Script "${TOP_SRC_DIR}/development/autotests/beginEndStructureCheck.pl")
  38 set(LanguageFile "${TOP_SRC_DIR}/lib/languages")
  39 set(GetTempDir "${TOP_SRC_DIR}/development/autotests/getTempDir.pl")
  40 set(_ft ${fonttype})
  41 execute_process(COMMAND ${PERL_EXECUTABLE} "${GetTempDir}" "${WORKDIR}" OUTPUT_VARIABLE TempDir)
  42 message(STATUS "using fonttype = ${_ft}")
  43 if(NOT ENCODING)
  44   set(ENCODING "default")
  45 endif()
  46 if(ENCODING STREQUAL "default")
  47   set(_enc)
  48 else()
  49   set(_enc "_${ENCODING}")
  50 endif()
  51 if(format MATCHES "dvi|pdf")
  52   message(STATUS "LYX_TESTS_USERDIR = ${LYX_TESTS_USERDIR}")
  53   message(STATUS "Converting with perl ${Perl_Script}")
  54   set(LYX_SOURCE "${TempDir}/${file}_${format}_${_ft}${_enc}.lyx")
  55   message(STATUS "Using source \"${LYX_ROOT}/${file}.lyx\"")
  56   message(STATUS "Using dest \"${LYX_SOURCE}\"")
  57   if(NOT "${ENCODING}" STREQUAL "default")
  58     # message(STATUS "ENCODING = ${ENCODING}")
  59   endif()
  60   message(STATUS "Executing ${PERL_EXECUTABLE} \"${Perl_Script}\" \"${LYX_ROOT}/${file}.lyx\" \"${LYX_SOURCE}\" ${format} ${_ft} ${ENCODING} ${LanguageFile}")
  61   execute_process(COMMAND ${PERL_EXECUTABLE} "${Perl_Script}" "${LYX_ROOT}/${file}.lyx" "${LYX_SOURCE}" ${format} ${_ft} ${ENCODING} ${LanguageFile}
  62     RESULT_VARIABLE _err)
  63   string(COMPARE EQUAL  ${_err} 0 _erg)
  64   if(NOT _erg)
  65     message(FATAL_ERROR "Export failed while converting")
  66   endif()
  67   set(result_file_name ${file}_${_ft}.${extension})
  68 else()
  69   message(STATUS "Converting with perl ${Perl_Script}")
  70   set(LYX_SOURCE "${TempDir}/${file}.lyx")
  71   message(STATUS "Using source \"${LYX_ROOT}/${file}.lyx\"")
  72   message(STATUS "Using dest \"${LYX_SOURCE}\"")
  73   execute_process(COMMAND ${PERL_EXECUTABLE} "${Perl_Script}" "${LYX_ROOT}/${file}.lyx" "${LYX_SOURCE}" ${format} "dontChange" "default" ${LanguageFile}
  74     RESULT_VARIABLE _err)
  75   string(COMPARE EQUAL  ${_err} 0 _erg)
  76   if(NOT _erg)
  77     message(FATAL_ERROR "Export failed while converting")
  78     endif()
  79   if(extension MATCHES "\\.lyx$")
  80     # Font-type not relevant for lyx16/lyx2[0123] exports
  81     set(result_file_base "${TempDir}/${file}")
  82   else()
  83     set(result_file_name ${file}.${extension})
  84   endif()
  85 endif()
  86
  87 function(get_md5sum msource mresult mreserr)
  88   execute_process(
  89     COMMAND ${CMAKE_COMMAND} -E md5sum ${${msource}}
  90     OUTPUT_VARIABLE msource_md5sum_x
  91     RESULT_VARIABLE mres_err)
  92   if (NOT mres_err)
  93     string(REGEX REPLACE " .*" "" msource_md5sum ${msource_md5sum_x})
  94     set(${mresult} ${msource_md5sum} PARENT_SCOPE)
  95     message(STATUS "MD5SUM of \"${${msource}}\" is ${msource_md5sum}")
  96   else()
  97     set(${mresult} "xx" PARENT_SCOPE)
  98     message(STATUS "Error getting MD5SUM of \"${${msource}}\"")
  99   endif()
 100   set(${mreserr} ${mres_err} PARENT_SCOPE)
 101 endfunction()
 102
 103 set(ENV{${LYX_USERDIR_VER}} "${LYX_TESTS_USERDIR}")
 104 set(ENV{LANG} "en_US.UTF-8") # to get all error-messages in english
 105 #set(ENV{LC_ALL} "C")
 106 if (extension MATCHES "\\.lyx$")
 107   include(${TOP_SRC_DIR}/development/autotests/CheckLoadErrors.cmake)
 108   get_md5sum(LYX_SOURCE source_md5sum _err)
 109   foreach(_lv RANGE 1 20)
 110     set(used_tex_file "${result_file_base}.tex")
 111     set(result_file_base "${result_file_base}.${LYX_FORMAT_NUM}")
 112     set(result_file_name "${result_file_base}.lyx")
 113     file(REMOVE "${result_file_name}" "${result_file_name}.emergency" )
 114     message(STATUS "Executing ${lyx} -userdir \"${LYX_TESTS_USERDIR}\" -E ${format} ${result_file_name} \"${LYX_SOURCE}\"")
 115     message(STATUS "This implicitly checks load of ${LYX_SOURCE}")
 116     execute_process(
 117       COMMAND ${lyx} -userdir "${LYX_TESTS_USERDIR}" -E ${format} ${result_file_name} "${LYX_SOURCE}"
 118       RESULT_VARIABLE _err
 119       ERROR_VARIABLE lyxerr)
 120     set(_mymsg "Converting \"${LYX_SOURCE}\" to format ${format}")
 121     if(_err)
 122       list(APPEND _TestResultMessage "Error: ${_mymsg}")
 123       break()
 124     else()
 125       list(APPEND _TestResultMessage "OK: ${_mymsg}")
 126       if(NOT EXISTS "${result_file_name}")
 127         message(STATUS "Expected result file \"${result_file_name}\" does not exist")
 128         list(APPEND _TestResultMessage "Error: The conversion of \"${LYX_SOURCE}\" to format ${format} did not create result file \"${result_file_name}\"")
 129         set(_err -1)
 130         break()
 131       else()
 132         message(STATUS "Expected result file \"${result_file_name}\" exists")
 133         execute_process(
 134           COMMAND ${PERL_EXECUTABLE} ${Structure_Script} "${result_file_name}"
 135           RESULT_VARIABLE _err)
 136         set(_mymsg "Structure of the intermediate file \"${result_file_name}\"")
 137         if(_err)
 138           list(APPEND _TestResultMessage "Error: ${_mymsg} seems to be broken")
 139           break()
 140         else()
 141           list(APPEND _TestResultMessage "OK: ${_mymsg}")
 142         endif()
 143         checkLoadErrors(lyxerr "${TOP_SRC_DIR}/development/autotests" _err)
 144         set(_mymsg "Examination of error/warning messages of the conversion of \"${LYX_SOURCE}\" to format ${format}")
 145         if(_err)
 146           list(APPEND _TestResultMessage "Error: ${_mymsg}")
 147           break()
 148         else()
 149           list(APPEND _TestResultMessage "OK: ${_mymsg}")
 150         endif()
 151         message(STATUS "Create the corresponding .tex file \"${used_tex_file}\"")
 152         execute_process(
 153           COMMAND ${lyx} -userdir "${LYX_TESTS_USERDIR}" -E pdflatex ${used_tex_file} "${LYX_SOURCE}"
 154           RESULT_VARIABLE _errx)
 155       endif()
 156     endif()
 157     get_md5sum(result_file_name result_md5sum _err)
 158     set(_mymsg "Getting md5sum of \"${result_file_name}\"")
 159     if(_err)
 160       # Somehow the created file is not readable?
 161       list(APPEND _TestResultMessage "Error: ${_mymsg}")
 162       break()
 163     else()
 164       list(APPEND _TestResultMessage "OK: ${_mymsg}")
 165     endif()
 166     # Check if result file identical to source file
 167     if(result_md5sum STREQUAL ${source_md5sum})
 168       if (format MATCHES "lyx(1[0-9]|2[01])x")
 169         # Do not compile, missing \origin statement prevents inclusion of
 170         # files with relative path
 171         message(STATUS "Not exporting due to missing \\origin statement")
 172         break()
 173       endif()
 174       message(STATUS "Source(${LYX_SOURCE}) and dest(${result_file_name}) are equal")
 175       message(STATUS "Now try to export the lyx2lyx created file")
 176       message(STATUS "Executing ${lyx} -userdir \"${LYX_TESTS_USERDIR}\" -E default \"${result_file_name}.default\" \"${result_file_name}\"")
 177       execute_process(
 178         COMMAND ${lyx} -userdir "${LYX_TESTS_USERDIR}" -E default "${result_file_name}.default" "${result_file_name}"
 179         RESULT_VARIABLE _err
 180         ERROR_VARIABLE lyxerr)
 181       set(_mymsg "Test-compilation of \"${result_file_name}\" to format default")
 182       if (_err)
 183         list(APPEND _TestResultMessage "Error: ${_mymsg}")
 184       else()
 185         list(APPEND _TestResultMessage "OK: ${_mymsg}")
 186       endif()
 187       break()
 188     else()
 189       list(APPEND _TestResultMessage "Warning: \"${LYX_SOURCE}\" and \"${result_file_name}\" differ")
 190       message(STATUS "Source(${LYX_SOURCE}) and dest(${result_file_name}) are still different")
 191       if (_lv GREATER 10)
 192         set(_err 1)
 193         message(STATUS "Possible endless loop encountered")
 194         list(APPEND _TestResultMessage "Error: Test-Loop exceeded the count of 10, Possible endless loop")
 195         break()
 196       endif()
 197     endif()
 198     set(source_md5sum ${result_md5sum})
 199     set(LYX_SOURCE ${result_file_name})
 200   endforeach()
 201 else()
 202   if ($ENV{LYX_DEBUG_LATEX})
 203     set(LyXExtraParams -dbg latex)
 204   else()
 205     set(LyXExtraParams)
 206   endif()
 207   if(IgnoreErrorMessage)
 208     foreach (_em ${IgnoreErrorMessage})
 209       list(APPEND LyXExtraParams --ignore-error-message ${_em})
 210     endforeach()
 211   endif()
 212   string(REGEX REPLACE ";" " " _LyXExtraParams "${LyXExtraParams}")
 213   message(STATUS "Executing ${lyx} ${_LyXExtraParams} -userdir \"${LYX_TESTS_USERDIR}\" -E ${format} ${result_file_name} \"${LYX_SOURCE}\"")
 214   file(REMOVE ${result_file_name})
 215   execute_process(
 216     COMMAND ${lyx} ${LyXExtraParams} -userdir "${LYX_TESTS_USERDIR}" -E ${format} ${result_file_name} "${LYX_SOURCE}"
 217     RESULT_VARIABLE _err)
 218
 219   #check if result file created
 220   if (NOT _err)
 221     if (NOT EXISTS "${result_file_name}")
 222       message(STATUS "Expected result file \"${result_file_name}\" does not exist")
 223       set(_err -1)
 224     else()
 225       message(STATUS "Expected result file \"${result_file_name}\" exists")
 226       if (format MATCHES "xhtml")
 227         if (XMLLINT_EXECUTABLE)
 228           message(STATUS "Calling: ${XMLLINT_EXECUTABLE} --sax --html --valid")
 229           # check the created xhtml file
 230           execute_process(
 231             COMMAND ${XMLLINT_EXECUTABLE} --sax --html --valid  "${result_file_name}"
 232             OUTPUT_VARIABLE xmlout
 233             ERROR_VARIABLE xmlerr
 234             RESULT_VARIABLE _err)
 235           file(WRITE "${result_file_name}.sax_out" ${xmlout})
 236           if (NOT _err)
 237             # check if sax-parser output contains error messages
 238             message(STATUS "Check the output: ${PERL_EXECUTABLE} ${TOP_SRC_DIR}/development/autotests/examineXmllintOutput.pl")
 239             execute_process(
 240               COMMAND ${PERL_EXECUTABLE} "${TOP_SRC_DIR}/development/autotests/examineXmllintOutput.pl" "${result_file_name}.sax_out"
 241               OUTPUT_VARIABLE xmlout
 242               RESULT_VARIABLE _err)
 243           endif()
 244           if (NOT _err)
 245             if (NOT "${xmlout}" STREQUAL "")
 246               message(STATUS "${xmlout}")
 247               set(_err -1)
 248             endif()
 249           endif()
 250         endif()
 251       endif()
 252     endif()
 253   endif()
 254 endif()
 255
 256 if(inverted)
 257   string(COMPARE EQUAL  ${_err} 0 _erg)
 258 else()
 259   string(COMPARE NOTEQUAL  ${_err} 0 _erg)
 260 endif()
 261 #execute_process(COMMAND ${CMAKE_COMMAND} -E remove_directory "${TempDir}")
 262 if(_TestResultMessage)
 263   message(STATUS "Msg Summary:")
 264   foreach(_l ${_TestResultMessage})
 265     message(STATUS "\t${_l}")
 266   endforeach()
 267 endif()
 268 if(_erg)
 269   message(STATUS "Exporting ${file}.lyx to ${format}")
 270   message(FATAL_ERROR "Export failed")
 271 endif()