Complete the NoInsetLayout format change

Do not try to load or copy included files when we are in a comment
or doing a dryrun. We skipped some of this before, but not all of it,
which led to bug #8557.

Add templates to export tests (CMake & autotools)

Sort export tests in cmake build according to language

tex2lyx tests: Sort test files

Extend unicodesymbols force flag

As suggested by Günter Milde.

Adapt tex2lyx testcases to new format

Make annoying debug message optional

Add test case for bug #5312

Handle properly insets which have the PassThru property

This fixes in particular bug 5312:
  % escape in \url{} treated as TeX comment start by importer

Set default format to dvi4 for some japanes doc files.
The rest (Tutorial.lyx, Math.lyx, EmbeddedObjects.lyx, UserGuide.lyx,
Intro.lyx and Additional.lyx) are left untouched, because
still not compilable with platex

set default format to dvi4 for japanes example files

Merge branch 'master' of git.lyx.org:lyx

Add new output format dvi4 ( == DVI(pLaTeX)
Add converter for this format (platex without extra parameters)

typo

Fix font encoding with japanese

Since japanese omits fontencoding, the encoding of latin text in fact is OT1.

Candidate for branch, but I would welcome Koji's input.

sweave.lyx: generate both pdf files and eps files

In the figure chunks, now both pdf and eps files are generated.
This way all of latex, pdflatex, and luatex work out of the box.

Merge branch 'master' of git.lyx.org:lyx

tex2lyx: support further TIPA characters

- support for \textdoublevertline, \textvertline, \textglobfall
- support \!o and \!b and \!d and \!g and \!G and \!j
- support  and \*k and \*r and \*t and \*w
- register the package "tipa" if \textipa is detected in an equation
- add a \textipa equation to the testfile

(I failed to implement support for the TIPA character "\t*{ }" and the command "\=*".)

Use the LyX name of encodings instead of the LaTeX names.

- Use the LyX name of encodings instead of the LaTeX names.
  The LyX name must be unique, while the name used by LaTeX
  not necessarily, e.g. different packages might implement
  support for the same encoding.

- Rename koi8 to koi8-r, so that the LyX and LaTeX names match.

- Rename euc-jp-plain to euc-jp-platex, jis-plain to jis-platex
  and shift-jis-plain to shift-jis-platex.

- Add utf8-platex encoding (fixes #8408).

LyX file format incremented to 463.

exemple-powerdot.lyx: set default format to ps2pdf

This way compilation works out of the box.

Fix encoding for japanese documents

The header parameter \inputenc uses the LaTeX name, so we need must not set
it to the LyX name for japanese documents.

Fix missing language option for CJKutf8.tex

Cmake tests: Add lyx-files for export testing recursively.

linguistics.lyx: document diacritics insertion

Typo.

test-insets.tex: fix the encoding of the œ character

tex2lyx: a fix for the \tone support

- the package tone must explicitly be registered because there can be a single tone that is not found via unicodesymbols

sweave.lyx: update FAQ (fragile frames are now supported)

* Additional.lyx  - add git version info hint

Add NoWeb -> LuaTeX converter

Now the examples noweb2lyx.lyx and Literate.lyx can be
exported to the pdf5 format.

linguistics.lyx: mini-tweaks

git typo

Git VCS: use describe for tree revision info.

tex2lyx: add a missing TIPA mark

tex2lyx: support for TIPA \tone

- also simplify the code a bit
- test-insets.tex: add missing preamble code

tex2lyx: more support for TIPA

- support for the combining diacritical marks
- support for \texttoptiebar and \textbottomtiebar
- test-insets.lyx: add complete testcase
- TODO.txt: update what still needs to be done

tex2lyx: support for IPA environment

* sk.po

IEEEtran-*.lyx: formatting fix to fulfill the submission guidelines

linguistics.lyx: correct the date and update fileformat

set default output formt for testing

chess-article.lyx, chess-game.lyx: Set dvipdfm as default output format and adapt note

Make tex2lyx encoding changes more robust

This is achieved by not calling Parse::tokenize_one() anymore in
Parser::good(): The status of the input can be tested without performing the
actual tokenizing. Now there are only two methods that may prevent an encoding
change:next_token() and next_next_token().

Foils.lyx: fix compilation.

The issue here was that an AMS symbol is used as 4-th level bullet, but 'use AMS Symbols automatically' was not selected.

This is a candidate for branch.

We seem to have missed this one.

Clarify the force flag

Fix bug #1424: Native \sideset inset

The toolbar image is the one Uwe attached to the bug report. Note that
\sideset works only for operators like \sum in the nucleus. LyX allows
any content, so you might get a LaTeX error. I don't know how to prevent
wrong content in the nucleus.

Fix force flag for multiple encodings

A comma cannot be used as delimiter, since it is already the flag delimiter.

Add forgotten files

tex2lyx/TODO.txt: update once again

- the kurier font support of fileformat 461 was already committed
- nothing to do for format 460

tex2lyx: support for multiple indices and subindices

Preamble.cpp: code simplification

tex2lyx/TODO.txt: update once again

- \nocite and \nocite{*} is already supported since a while, see also the test-insets.tex test file

tex2lyx: support bibtex inset with \phantomsection

This is an addendum to [72a44b3c/lyxgit] because depending on the environment, LyX adds a \phantomsection before \addcontentsline.

- also update the test file

tex2lyx/Makefile.am: rename the file renamed in previous commit

tex2lyx/TODO.txt: update as refstyle is now really supported

tex2lyx/Preamble.cpp: proper handling of the refstyle preamble code

- also rename the test file because it is also an excellent test file for the theorem environments - which are not yet supported by tex2lyx

Parser.cpp: a workaround for bug #8525

Preamble.cpp: register refstyle

- also Revert "tex2lyx/TODO.txt: update" [4159f05c/lyxgit]
more works needs to be done here

tex2lyx: support for the \textipa inset

tex2lyx/TODO.txt: update

- there is nothing to do for xymatrix, the Xy-pic manual roundtrip works fine

xypic.lyx: update description of spacings for LyX 2.1

- update the spacing description to reflect the new features in LyX 2.1
- also update all web links and squash all LaTeX warnings (ported from branch)

xypic.lyx: port recent fixes from branch

- use a default font except a special one is available
- add our documentation preamble disclaimer
- fixes all occurrences (there were many of them) of the LyX console warnings
"unusual contents found: [formula equation [grid [row [cell [xymatrix [grid [row..."
when the document is opened
- style and formatting fixes for consistency

Add development manual.

This is rather incomplete, and will hopefully be extended in the future.
Currently, its main purpose is to document file format updates and tests.

Fix tex2lyx file format comparison

This is an important part of the tests. If updating the test cases is really a
problem there are two better solutions than not testing the format: Convert
the references with lyx2lyx on the fly, or remove the hard coupling of tex2lyx
and LyX versions again. Both increase additional possible error sources, but
these errors could at least be detected. If the test machinery is made blind
for versions, file format errors are impossible to detect.

Update test case file format

Fix dangerous parser use

Jean-Marc discovered a possible data loss caused by Parser::getChar().
This is now fixed, and Parser::getChar() is removed, since it is no longer
needed and easy to use it in the wrong way.

Update expected test failures

powerdot-example.lyx: set default format to ps2pdf

This way compilation works out of the box.

instant_preview.lyx: set default format to ps2pdf

This way compilation works out of the box.

Add examples to export tests (CMake & autotools)

Now all export tests can be run with:
ctest -R "export"

Only export tests for manuals can be run with:
ctest -R "export/doc"

And only export tests for examples can be run with:
ctest -R "export/examples"

CMake: change name of export autotests

Instead of 'autotests/export/doc/' export tests are prefixed
with 'export/doc/'. This has the advantage of the name better
reflecting the test (export tests are not autotests), but has a
disadvantage in that the old name gave a better idea of where the
export test scripts are located (in the autotests directory).

Make export tests more extendable

For both CMake and autotools. Now we can easily add
the examples to the export tests.

tex2lyx testing. Adapt files.

KOMA sections are raggedright by default (as opposed to the standard classes)

tex2lyx: support for \addcontentsline in BibTeX inset

tex2lyx/TODO.txt: update again

- nothing needs to be done for feyn.sty - it is already recognized as simple feature and the roundtrip using the feynman example file works
- update entry for undertilde to be uniform

tex2lyx/TODO.txt: update

refstyle support was added by http://www.lyx.org/trac/changeset/49c88776/lyxgit

moderncv.layout: update to modernCV 1.3

- this new modernCV version fixes the annoying linebreak bug I was suffering so long, it moreover adds 2 new features

- lyx2lyx/lyx_2_1.py: updated to revert the new features

IEEEtran-CompSoc.layout: use the new NoInsetLayout tag

Fix bug with reading of verbatim environment

The kind of putback() functionality that we need is more tricky
than I thought at first...

Adapt to corrected tex2lyx

Adapt test-insets.lyx.lyx to now correctly running tex2lyx.
Removed errocase.

Move stuff around (again!)

Implement deparsing of tokens

When switching catcodes (for example to verbatim), there are in general some tokens that have already been parsed according to the old catcodes. It is therefore needed to "forget" those token and reparse them.

The basic idea is to use idocstream::putback() to feed the characters back to the stream, but this does not work (probably because we disable buffering). Therefore, we implement a simple stream-like class that implements putback().

Move stuff

Merge branch 'master' of git.lyx.org:lyx

environment.cpp: MSVC compile fix

MSVC told me
"environment.cpp(139): error C4716: 'lyx::support::unsetEnv' : must return a value"

de.po: update

FORMAT: add missing fileformat changes

Move stuff around

Some libertine versions have osf default, some lining

Adjust Libertine font support to most recent version

This needs yet a file format change. I hope the interface is stable now (I had an exchange with the package maintainer, Bob Tennent, about that)

Simplify support for kurier fonts

Cmake build: Creating a define for a header file found
need now only changes in the list of header files in ConfigureChecks.cmake.

tex2lyx: latexfonts importation fixes

C&P error. Sorry

Cmake build: Correct the previous commit.
We have to apply configure_file() twice, therefor the new file.

Cmake build: If checking for new function, say xyzzy, we want
have a definition '#define HAVE_XYZZY 1'.
Now, it is sufficient to add xyzzy to list of functions in ConfigureChecks.cmake'