]> git.lyx.org Git - lyx.git/blob - src/paragraph.C
* src/paragraph.C: remove unused sgmlLineBreak()
[lyx.git] / src / paragraph.C
1 /**
2  * \file paragraph.C
3  * This file is part of LyX, the document processor.
4  * Licence details can be found in the file COPYING.
5  *
6  * \author Asger Alstrup
7  * \author Lars Gullik Bjønnes
8  * \author Jean-Marc Lasgouttes
9  * \author Angus Leeming
10  * \author John Levon
11  * \author André Pönitz
12  * \author Dekel Tsur
13  * \author Jürgen Vigna
14  *
15  * Full author contact details are available in file CREDITS.
16  */
17
18 #include <config.h>
19
20 #include "paragraph.h"
21 #include "paragraph_pimpl.h"
22
23 #include "buffer.h"
24 #include "bufferparams.h"
25 #include "counters.h"
26 #include "encoding.h"
27 #include "debug.h"
28 #include "gettext.h"
29 #include "language.h"
30 #include "LaTeXFeatures.h"
31 #include "lyxfont.h"
32 #include "lyxrc.h"
33 #include "lyxrow.h"
34 #include "messages.h"
35 #include "outputparams.h"
36 #include "paragraph_funcs.h"
37 #include "ParagraphList_fwd.h"
38
39 #include "rowpainter.h"
40
41 #include "sgml.h"
42 #include "texrow.h"
43 #include "vspace.h"
44
45 #include "frontends/FontMetrics.h"
46
47 #include "insets/insetbibitem.h"
48 #include "insets/insetoptarg.h"
49
50 #include "support/lstrings.h"
51 #include "support/textutils.h"
52 #include "support/convert.h"
53 #include "support/unicode.h"
54
55 #include <boost/bind.hpp>
56
57 #include <algorithm>
58 #include <list>
59 #include <stack>
60 #include <sstream>
61
62 using std::distance;
63 using std::endl;
64 using std::list;
65 using std::stack;
66 using std::string;
67 using std::ostream;
68 using std::ostringstream;
69
70 namespace lyx {
71
72 using support::contains;
73 using support::rsplit;
74 using support::subst;
75
76 Paragraph::Paragraph()
77         : begin_of_body_(0), pimpl_(new Paragraph::Pimpl(this))
78 {
79         itemdepth = 0;
80         params().clear();
81 }
82
83
84 Paragraph::Paragraph(Paragraph const & par)
85         : itemdepth(par.itemdepth), insetlist(par.insetlist),
86         layout_(par.layout_),
87         text_(par.text_), begin_of_body_(par.begin_of_body_),
88         pimpl_(new Paragraph::Pimpl(*par.pimpl_, this))
89 {
90         //lyxerr << "Paragraph::Paragraph(Paragraph const&)" << endl;
91         InsetList::iterator it = insetlist.begin();
92         InsetList::iterator end = insetlist.end();
93         for (; it != end; ++it)
94                 it->inset = it->inset->clone().release();
95 }
96
97
98 Paragraph & Paragraph::operator=(Paragraph const & par)
99 {
100         // needed as we will destroy the pimpl_ before copying it
101         if (&par != this) {
102                 itemdepth = par.itemdepth;
103
104                 insetlist = par.insetlist;
105                 InsetList::iterator it = insetlist.begin();
106                 InsetList::iterator end = insetlist.end();
107                 for (; it != end; ++it)
108                         it->inset = it->inset->clone().release();
109
110                 layout_ = par.layout();
111                 text_ = par.text_;
112                 begin_of_body_ = par.begin_of_body_;
113
114                 delete pimpl_;
115                 pimpl_ = new Pimpl(*par.pimpl_, this);
116         }
117         return *this;
118 }
119
120
121 Paragraph::~Paragraph()
122 {
123         delete pimpl_;
124         //
125         //lyxerr << "Paragraph::paragraph_id = "
126         //       << Paragraph::paragraph_id << endl;
127 }
128
129
130 void Paragraph::write(Buffer const & buf, ostream & os,
131                           BufferParams const & bparams,
132                           depth_type & dth) const
133 {
134         // The beginning or end of a deeper (i.e. nested) area?
135         if (dth != params().depth()) {
136                 if (params().depth() > dth) {
137                         while (params().depth() > dth) {
138                                 os << "\n\\begin_deeper";
139                                 ++dth;
140                         }
141                 } else {
142                         while (params().depth() < dth) {
143                                 os << "\n\\end_deeper";
144                                 --dth;
145                         }
146                 }
147         }
148
149         // First write the layout
150         os << "\n\\begin_layout " << layout()->name() << '\n';
151
152         params().write(os);
153
154         LyXFont font1(LyXFont::ALL_INHERIT, bparams.language);
155
156         Change running_change = Change(Change::UNCHANGED);
157
158         int column = 0;
159         for (pos_type i = 0; i <= size(); ++i) {
160
161                 Change change = pimpl_->lookupChange(i);
162                 Changes::lyxMarkChange(os, column, running_change, change);
163                 running_change = change;
164
165                 if (i == size())
166                         break;
167
168                 // Write font changes
169                 LyXFont font2 = getFontSettings(bparams, i);
170                 if (font2 != font1) {
171                         font2.lyxWriteChanges(font1, os);
172                         column = 0;
173                         font1 = font2;
174                 }
175
176                 value_type const c = getChar(i);
177                 switch (c) {
178                 case META_INSET:
179                 {
180                         InsetBase const * inset = getInset(i);
181                         if (inset)
182                                 if (inset->directWrite()) {
183                                         // international char, let it write
184                                         // code directly so it's shorter in
185                                         // the file
186                                         inset->write(buf, os);
187                                 } else {
188                                         if (i)
189                                                 os << '\n';
190                                         os << "\\begin_inset ";
191                                         inset->write(buf, os);
192                                         os << "\n\\end_inset\n\n";
193                                         column = 0;
194                                 }
195                 }
196                 break;
197                 case '\\':
198                         os << "\n\\backslash\n";
199                         column = 0;
200                         break;
201                 case '.':
202                         if (i + 1 < size() && getChar(i + 1) == ' ') {
203                                 os << ".\n";
204                                 column = 0;
205                         } else
206                                 os << '.';
207                         break;
208                 default:
209                         if ((column > 70 && c == ' ')
210                             || column > 79) {
211                                 os << '\n';
212                                 column = 0;
213                         }
214                         // this check is to amend a bug. LyX sometimes
215                         // inserts '\0' this could cause problems.
216                         if (c != '\0') {
217                                 std::vector<char> tmp = ucs4_to_utf8(c);
218                                 tmp.push_back('\0');
219                                 os << &tmp[0];
220                         } else
221                                 lyxerr << "ERROR (Paragraph::writeFile):"
222                                         " NULL char in structure." << endl;
223                         ++column;
224                         break;
225                 }
226         }
227
228         os << "\n\\end_layout\n";
229 }
230
231
232 void Paragraph::validate(LaTeXFeatures & features) const
233 {
234         pimpl_->validate(features, *layout());
235 }
236
237
238 bool Paragraph::eraseChar(pos_type pos, bool trackChanges)
239 {
240         return pimpl_->eraseChar(pos, trackChanges);
241 }
242
243
244 int Paragraph::eraseChars(pos_type start, pos_type end, bool trackChanges)
245 {
246         return pimpl_->eraseChars(start, end, trackChanges);
247 }
248
249
250 void Paragraph::insert(pos_type start, docstring const & str,
251                        LyXFont const & font, Change const & change)
252 {
253         for (size_t i = 0, n = str.size(); i != n ; ++i)
254                 insertChar(start + i, str[i], font, change);
255 }
256
257
258 void Paragraph::insertChar(pos_type pos, Paragraph::value_type c,
259                            bool trackChanges)
260 {
261         pimpl_->insertChar(pos, c, Change(trackChanges ?
262                            Change::INSERTED : Change::UNCHANGED));
263 }
264
265
266 void Paragraph::insertChar(pos_type pos, Paragraph::value_type c,
267                            LyXFont const & font, bool trackChanges)
268 {
269         pimpl_->insertChar(pos, c, Change(trackChanges ?
270                            Change::INSERTED : Change::UNCHANGED));
271         setFont(pos, font);
272 }
273
274
275 void Paragraph::insertChar(pos_type pos, Paragraph::value_type c,
276                            LyXFont const & font, Change const & change)
277 {
278         pimpl_->insertChar(pos, c, change);
279         setFont(pos, font);
280 }
281
282
283 void Paragraph::insertInset(pos_type pos, InsetBase * inset,
284                             Change const & change)
285 {
286         pimpl_->insertInset(pos, inset, change);
287 }
288
289
290 void Paragraph::insertInset(pos_type pos, InsetBase * inset,
291                             LyXFont const & font, Change const & change)
292 {
293         pimpl_->insertInset(pos, inset, change);
294         setFont(pos, font);
295 }
296
297
298 bool Paragraph::insetAllowed(InsetBase_code code)
299 {
300         return !pimpl_->inset_owner || pimpl_->inset_owner->insetAllowed(code);
301 }
302
303
304 // Gets uninstantiated font setting at position.
305 LyXFont const Paragraph::getFontSettings(BufferParams const & bparams,
306                                          pos_type pos) const
307 {
308         if (pos > size()) {
309                 lyxerr << " pos: " << pos << " size: " << size() << endl;
310                 BOOST_ASSERT(pos <= size());
311         }
312
313         Pimpl::FontList::const_iterator cit = pimpl_->fontlist.begin();
314         Pimpl::FontList::const_iterator end = pimpl_->fontlist.end();
315         for (; cit != end; ++cit)
316                 if (cit->pos() >= pos)
317                         break;
318
319         if (cit != end)
320                 return cit->font();
321
322         if (pos == size() && !empty())
323                 return getFontSettings(bparams, pos - 1);
324
325         return LyXFont(LyXFont::ALL_INHERIT, getParLanguage(bparams));
326 }
327
328
329 FontSpan Paragraph::fontSpan(pos_type pos) const
330 {
331         BOOST_ASSERT(pos <= size());
332         pos_type start = 0;
333
334         Pimpl::FontList::const_iterator cit = pimpl_->fontlist.begin();
335         Pimpl::FontList::const_iterator end = pimpl_->fontlist.end();
336         for (; cit != end; ++cit) {
337                 if (cit->pos() >= pos) {
338                         if (pos >= beginOfBody())
339                                 return FontSpan(std::max(start, beginOfBody()),
340                                                 cit->pos());
341                         else
342                                 return FontSpan(start,
343                                                 std::min(beginOfBody() - 1,
344                                                          cit->pos()));
345                 }
346                 start = cit->pos() + 1;
347         }
348
349         // This should not happen, but if so, we take no chances.
350         //lyxerr << "Paragraph::getEndPosOfFontSpan: This should not happen!"
351         //      << endl;
352         return FontSpan(pos, pos);
353 }
354
355
356 // Gets uninstantiated font setting at position 0
357 LyXFont const Paragraph::getFirstFontSettings(BufferParams const & bparams) const
358 {
359         if (!empty() && !pimpl_->fontlist.empty())
360                 return pimpl_->fontlist[0].font();
361
362         return LyXFont(LyXFont::ALL_INHERIT, bparams.language);
363 }
364
365
366 // Gets the fully instantiated font at a given position in a paragraph
367 // This is basically the same function as LyXText::GetFont() in text2.C.
368 // The difference is that this one is used for generating the LaTeX file,
369 // and thus cosmetic "improvements" are disallowed: This has to deliver
370 // the true picture of the buffer. (Asger)
371 LyXFont const Paragraph::getFont(BufferParams const & bparams, pos_type pos,
372                                  LyXFont const & outerfont) const
373 {
374         BOOST_ASSERT(pos >= 0);
375
376         LyXLayout_ptr const & lout = layout();
377
378         pos_type const body_pos = beginOfBody();
379
380         LyXFont layoutfont;
381         if (pos < body_pos)
382                 layoutfont = lout->labelfont;
383         else
384                 layoutfont = lout->font;
385
386         LyXFont font = getFontSettings(bparams, pos);
387         font.realize(layoutfont);
388         font.realize(outerfont);
389         font.realize(bparams.getFont());
390
391         return font;
392 }
393
394
395 LyXFont const Paragraph::getLabelFont
396         (BufferParams const & bparams, LyXFont const & outerfont) const
397 {
398         LyXFont tmpfont = layout()->labelfont;
399         tmpfont.setLanguage(getParLanguage(bparams));
400         tmpfont.realize(outerfont);
401         tmpfont.realize(bparams.getFont());
402         return tmpfont;
403 }
404
405
406 LyXFont const Paragraph::getLayoutFont
407         (BufferParams const & bparams, LyXFont const & outerfont) const
408 {
409         LyXFont tmpfont = layout()->font;
410         tmpfont.setLanguage(getParLanguage(bparams));
411         tmpfont.realize(outerfont);
412         tmpfont.realize(bparams.getFont());
413         return tmpfont;
414 }
415
416
417 /// Returns the height of the highest font in range
418 LyXFont_size Paragraph::highestFontInRange
419         (pos_type startpos, pos_type endpos, LyXFont_size def_size) const
420 {
421         if (pimpl_->fontlist.empty())
422                 return def_size;
423
424         Pimpl::FontList::const_iterator end_it = pimpl_->fontlist.begin();
425         Pimpl::FontList::const_iterator const end = pimpl_->fontlist.end();
426         for (; end_it != end; ++end_it) {
427                 if (end_it->pos() >= endpos)
428                         break;
429         }
430
431         if (end_it != end)
432                 ++end_it;
433
434         Pimpl::FontList::const_iterator cit = pimpl_->fontlist.begin();
435         for (; cit != end; ++cit) {
436                 if (cit->pos() >= startpos)
437                         break;
438         }
439
440         LyXFont::FONT_SIZE maxsize = LyXFont::SIZE_TINY;
441         for (; cit != end_it; ++cit) {
442                 LyXFont::FONT_SIZE size = cit->font().size();
443                 if (size == LyXFont::INHERIT_SIZE)
444                         size = def_size;
445                 if (size > maxsize && size <= LyXFont::SIZE_HUGER)
446                         maxsize = size;
447         }
448         return maxsize;
449 }
450
451
452 Paragraph::value_type
453 Paragraph::getUChar(BufferParams const & bparams, pos_type pos) const
454 {
455         value_type c = getChar(pos);
456         if (!lyxrc.rtl_support)
457                 return c;
458
459         value_type uc = c;
460         switch (c) {
461         case '(':
462                 uc = ')';
463                 break;
464         case ')':
465                 uc = '(';
466                 break;
467         case '[':
468                 uc = ']';
469                 break;
470         case ']':
471                 uc = '[';
472                 break;
473         case '{':
474                 uc = '}';
475                 break;
476         case '}':
477                 uc = '{';
478                 break;
479         case '<':
480                 uc = '>';
481                 break;
482         case '>':
483                 uc = '<';
484                 break;
485         }
486         if (uc != c && getFontSettings(bparams, pos).isRightToLeft())
487                 return uc;
488         else
489                 return c;
490 }
491
492
493 void Paragraph::setFont(pos_type pos, LyXFont const & font)
494 {
495         BOOST_ASSERT(pos <= size());
496
497         // First, reduce font against layout/label font
498         // Update: The setCharFont() routine in text2.C already
499         // reduces font, so we don't need to do that here. (Asger)
500         // No need to simplify this because it will disappear
501         // in a new kernel. (Asger)
502         // Next search font table
503
504         Pimpl::FontList::iterator beg = pimpl_->fontlist.begin();
505         Pimpl::FontList::iterator it = beg;
506         Pimpl::FontList::iterator endit = pimpl_->fontlist.end();
507         for (; it != endit; ++it) {
508                 if (it->pos() >= pos)
509                         break;
510         }
511         size_t const i = distance(beg, it);
512         bool notfound = (it == endit);
513
514         if (!notfound && pimpl_->fontlist[i].font() == font)
515                 return;
516
517         bool begin = pos == 0 || notfound ||
518                 (i > 0 && pimpl_->fontlist[i - 1].pos() == pos - 1);
519         // Is position pos is a beginning of a font block?
520         bool end = !notfound && pimpl_->fontlist[i].pos() == pos;
521         // Is position pos is the end of a font block?
522         if (begin && end) { // A single char block
523                 if (i + 1 < pimpl_->fontlist.size() &&
524                     pimpl_->fontlist[i + 1].font() == font) {
525                         // Merge the singleton block with the next block
526                         pimpl_->fontlist.erase(pimpl_->fontlist.begin() + i);
527                         if (i > 0 && pimpl_->fontlist[i - 1].font() == font)
528                                 pimpl_->fontlist.erase(pimpl_->fontlist.begin() + i - 1);
529                 } else if (i > 0 && pimpl_->fontlist[i - 1].font() == font) {
530                         // Merge the singleton block with the previous block
531                         pimpl_->fontlist[i - 1].pos(pos);
532                         pimpl_->fontlist.erase(pimpl_->fontlist.begin() + i);
533                 } else
534                         pimpl_->fontlist[i].font(font);
535         } else if (begin) {
536                 if (i > 0 && pimpl_->fontlist[i - 1].font() == font)
537                         pimpl_->fontlist[i - 1].pos(pos);
538                 else
539                         pimpl_->fontlist.insert(pimpl_->fontlist.begin() + i,
540                                         Pimpl::FontTable(pos, font));
541         } else if (end) {
542                 pimpl_->fontlist[i].pos(pos - 1);
543                 if (!(i + 1 < pimpl_->fontlist.size() &&
544                       pimpl_->fontlist[i + 1].font() == font))
545                         pimpl_->fontlist.insert(pimpl_->fontlist.begin() + i + 1,
546                                         Pimpl::FontTable(pos, font));
547         } else { // The general case. The block is splitted into 3 blocks
548                 pimpl_->fontlist.insert(pimpl_->fontlist.begin() + i,
549                                 Pimpl::FontTable(pos - 1, pimpl_->fontlist[i].font()));
550                 pimpl_->fontlist.insert(pimpl_->fontlist.begin() + i + 1,
551                                 Pimpl::FontTable(pos, font));
552         }
553 }
554
555
556 void Paragraph::makeSameLayout(Paragraph const & par)
557 {
558         layout(par.layout());
559         // move to pimpl?
560         params() = par.params();
561 }
562
563
564 int Paragraph::stripLeadingSpaces(bool trackChanges)
565 {
566         if (isFreeSpacing())
567                 return 0;
568
569         int pos = 0;
570         int count = 0;
571
572         while (pos < size() && (isNewline(pos) || isLineSeparator(pos))) {
573                 if (eraseChar(pos, trackChanges))
574                         ++count;
575                 else
576                         ++pos;
577         }
578
579         return count;
580 }
581
582
583 bool Paragraph::hasSameLayout(Paragraph const & par) const
584 {
585         return par.layout() == layout() && params().sameLayout(par.params());
586 }
587
588
589 depth_type Paragraph::getDepth() const
590 {
591         return params().depth();
592 }
593
594
595 depth_type Paragraph::getMaxDepthAfter() const
596 {
597         if (layout()->isEnvironment())
598                 return params().depth() + 1;
599         else
600                 return params().depth();
601 }
602
603
604 char Paragraph::getAlign() const
605 {
606         if (params().align() == LYX_ALIGN_LAYOUT)
607                 return layout()->align;
608         else
609                 return params().align();
610 }
611
612
613 docstring const & Paragraph::getLabelstring() const
614 {
615         return params().labelString();
616 }
617
618
619 // the next two functions are for the manual labels
620 docstring const Paragraph::getLabelWidthString() const
621 {
622         if (!params().labelWidthString().empty())
623                 return params().labelWidthString();
624         else
625                 return _("Senseless with this layout!");
626 }
627
628
629 void Paragraph::setLabelWidthString(docstring const & s)
630 {
631         params().labelWidthString(s);
632 }
633
634
635 docstring const Paragraph::translateIfPossible(docstring const & s,
636                 BufferParams const & bparams) const
637 {
638         if (!support::isAscii(s) || s.empty()) {
639                 // This must be a user defined layout. We cannot translate
640                 // this, since gettext accepts only ascii keys.
641                 return s;
642         }
643         // Probably standard layout, try to translate
644         Messages & m = getMessages(getParLanguage(bparams)->code());
645         return m.get(to_ascii(s));
646 }
647
648
649 docstring Paragraph::expandLabel(LyXLayout_ptr const & layout,
650                 BufferParams const & bparams, bool process_appendix) const
651 {
652         LyXTextClass const & tclass = bparams.getLyXTextClass();
653
654         docstring fmt;
655         if (process_appendix && params().appendix())
656                 fmt = translateIfPossible(layout->labelstring_appendix(),
657                         bparams);
658         else
659                 fmt = translateIfPossible(layout->labelstring(), bparams);
660
661         // handle 'inherited level parts' in 'fmt',
662         // i.e. the stuff between '@' in   '@Section@.\arabic{subsection}'
663         size_t const i = fmt.find('@', 0);
664         if (i != docstring::npos) {
665                 size_t const j = fmt.find('@', i + 1);
666                 if (j != docstring::npos) {
667                         docstring parent(fmt, i + 1, j - i - 1);
668                         // FIXME UNICODE
669                         docstring label = expandLabel(tclass[to_utf8(parent)], bparams);
670                         fmt = docstring(fmt, 0, i) + label + docstring(fmt, j + 1, docstring::npos);
671                 }
672         }
673
674         return tclass.counters().counterLabel(fmt);
675 }
676
677
678 void Paragraph::applyLayout(LyXLayout_ptr const & new_layout)
679 {
680         layout(new_layout);
681         params().labelWidthString(docstring());
682         params().align(LYX_ALIGN_LAYOUT);
683         params().spacing(Spacing(Spacing::Default));
684 }
685
686
687 pos_type Paragraph::beginOfBody() const
688 {
689         return begin_of_body_;
690 }
691
692
693 void Paragraph::setBeginOfBody()
694 {
695         if (layout()->labeltype != LABEL_MANUAL) {
696                 begin_of_body_ = 0;
697                 return;
698         }
699
700         // Unroll the first two cycles of the loop
701         // and remember the previous character to
702         // remove unnecessary getChar() calls
703         pos_type i = 0;
704         pos_type end = size();
705         if (i < end && !isNewline(i)) {
706                 ++i;
707                 char_type previous_char = 0;
708                 char_type temp = 0;
709                 if (i < end) {
710                         previous_char = text_[i];
711                         if (!isNewline(i)) {
712                                 ++i;
713                                 while (i < end && previous_char != ' ') {
714                                         temp = text_[i];
715                                         if (isNewline(i))
716                                                 break;
717                                         ++i;
718                                         previous_char = temp;
719                                 }
720                         }
721                 }
722         }
723
724         begin_of_body_ = i;
725 }
726
727
728 // returns -1 if inset not found
729 int Paragraph::getPositionOfInset(InsetBase const * inset) const
730 {
731         // Find the entry.
732         InsetList::const_iterator it = insetlist.begin();
733         InsetList::const_iterator end = insetlist.end();
734         for (; it != end; ++it)
735                 if (it->inset == inset)
736                         return it->pos;
737         return -1;
738 }
739
740
741 InsetBibitem * Paragraph::bibitem() const
742 {
743         if (!insetlist.empty()) {
744                 InsetBase * inset = insetlist.begin()->inset;
745                 if (inset->lyxCode() == InsetBase::BIBITEM_CODE)
746                         return static_cast<InsetBibitem *>(inset);
747         }
748         return 0;
749 }
750
751
752 bool Paragraph::forceDefaultParagraphs() const
753 {
754         return inInset() && inInset()->forceDefaultParagraphs(0);
755 }
756
757
758 namespace {
759
760 // paragraphs inside floats need different alignment tags to avoid
761 // unwanted space
762
763 bool noTrivlistCentering(InsetBase::Code code)
764 {
765         return code == InsetBase::FLOAT_CODE || code == InsetBase::WRAP_CODE;
766 }
767
768
769 string correction(string const & orig)
770 {
771         if (orig == "flushleft")
772                 return "raggedright";
773         if (orig == "flushright")
774                 return "raggedleft";
775         if (orig == "center")
776                 return "centering";
777         return orig;
778 }
779
780
781 string const corrected_env(string const & suffix, string const & env,
782         InsetBase::Code code)
783 {
784         string output = suffix + "{";
785         if (noTrivlistCentering(code))
786                 output += correction(env);
787         else
788                 output += env;
789         output += "}";
790         if (suffix == "\\begin")
791                 output += "\n";
792         return output;
793 }
794
795
796 int adjust_column_count(string const & str, int oldcol)
797 {
798         if (!contains(str, "\n"))
799                 return oldcol + str.size();
800         else {
801                 string tmp;
802                 return rsplit(str, tmp, '\n').size();
803         }
804 }
805
806 } // namespace anon
807
808
809 // This could go to ParagraphParameters if we want to
810 int Paragraph::startTeXParParams(BufferParams const & bparams,
811                                  odocstream & os, bool moving_arg) const
812 {
813         int column = 0;
814
815         if (params().noindent()) {
816                 os << "\\noindent ";
817                 column += 10;
818         }
819
820         switch (params().align()) {
821         case LYX_ALIGN_NONE:
822         case LYX_ALIGN_BLOCK:
823         case LYX_ALIGN_LAYOUT:
824         case LYX_ALIGN_SPECIAL:
825                 break;
826         case LYX_ALIGN_LEFT:
827         case LYX_ALIGN_RIGHT:
828         case LYX_ALIGN_CENTER:
829                 if (moving_arg) {
830                         os << "\\protect";
831                         column += 8;
832                 }
833                 break;
834         }
835
836         switch (params().align()) {
837         case LYX_ALIGN_NONE:
838         case LYX_ALIGN_BLOCK:
839         case LYX_ALIGN_LAYOUT:
840         case LYX_ALIGN_SPECIAL:
841                 break;
842         case LYX_ALIGN_LEFT: {
843                 string output;
844                 if (getParLanguage(bparams)->babel() != "hebrew")
845                         output = corrected_env("\\begin", "flushleft", ownerCode());
846                 else
847                         output = corrected_env("\\begin", "flushright", ownerCode());
848                 os << from_ascii(output);
849                 column = adjust_column_count(output, column);
850                 break;
851         } case LYX_ALIGN_RIGHT: {
852                 string output;
853                 if (getParLanguage(bparams)->babel() != "hebrew")
854                         output = corrected_env("\\begin", "flushright", ownerCode());
855                 else
856                         output = corrected_env("\\begin", "flushleft", ownerCode());
857                 os << from_ascii(output);
858                 column = adjust_column_count(output, column);
859                 break;
860         } case LYX_ALIGN_CENTER: {
861                 string output;
862                 output = corrected_env("\\begin", "center", ownerCode());
863                 os << from_ascii(output);
864                 column = adjust_column_count(output, column);
865                 break;
866         }
867         }
868
869         return column;
870 }
871
872
873 // This could go to ParagraphParameters if we want to
874 int Paragraph::endTeXParParams(BufferParams const & bparams,
875                                odocstream & os, bool moving_arg) const
876 {
877         int column = 0;
878
879         switch (params().align()) {
880         case LYX_ALIGN_NONE:
881         case LYX_ALIGN_BLOCK:
882         case LYX_ALIGN_LAYOUT:
883         case LYX_ALIGN_SPECIAL:
884                 break;
885         case LYX_ALIGN_LEFT:
886         case LYX_ALIGN_RIGHT:
887         case LYX_ALIGN_CENTER:
888                 if (moving_arg) {
889                         os << "\\protect";
890                         column = 8;
891                 }
892                 break;
893         }
894
895         switch (params().align()) {
896         case LYX_ALIGN_NONE:
897         case LYX_ALIGN_BLOCK:
898         case LYX_ALIGN_LAYOUT:
899         case LYX_ALIGN_SPECIAL:
900                 break;
901         case LYX_ALIGN_LEFT: {
902                 string output;
903                 if (getParLanguage(bparams)->babel() != "hebrew")
904                         output = corrected_env("\n\\par\\end", "flushleft", ownerCode());
905                 else
906                         output = corrected_env("\n\\par\\end", "flushright", ownerCode());
907                 os << from_ascii(output);
908                 column = adjust_column_count(output, column);
909                 break;
910         } case LYX_ALIGN_RIGHT: {
911                 string output;
912                 if (getParLanguage(bparams)->babel() != "hebrew")
913                         output = corrected_env("\n\\par\\end", "flushright", ownerCode());
914                 else
915                         output = corrected_env("\n\\par\\end", "flushleft", ownerCode());
916                 os << from_ascii(output);
917                 column = adjust_column_count(output, column);
918                 break;
919         } case LYX_ALIGN_CENTER: {
920                 string output;
921                 output = corrected_env("\n\\par\\end", "center", ownerCode());
922                 os << from_ascii(output);
923                 column = adjust_column_count(output, column);
924                 break;
925         }
926         }
927
928         return column;
929 }
930
931
932 // This one spits out the text of the paragraph
933 bool Paragraph::simpleTeXOnePar(Buffer const & buf,
934                                 BufferParams const & bparams,
935                                 LyXFont const & outerfont,
936                                 odocstream & os, TexRow & texrow,
937                                 OutputParams const & runparams) const
938 {
939         lyxerr[Debug::LATEX] << "SimpleTeXOnePar...     " << this << endl;
940
941         bool return_value = false;
942
943         LyXLayout_ptr style;
944
945         // well we have to check if we are in an inset with unlimited
946         // length (all in one row) if that is true then we don't allow
947         // any special options in the paragraph and also we don't allow
948         // any environment other than "Standard" to be valid!
949         bool asdefault = forceDefaultParagraphs();
950
951         if (asdefault) {
952                 style = bparams.getLyXTextClass().defaultLayout();
953         } else {
954                 style = layout();
955         }
956
957         // Current base font for all inherited font changes, without any
958         // change caused by an individual character, except for the language:
959         // It is set to the language of the first character.
960         // As long as we are in the label, this font is the base font of the
961         // label. Before the first body character it is set to the base font
962         // of the body.
963         // This must be identical to basefont in TeXOnePar().
964         LyXFont basefont;
965
966         LaTeXFeatures features(buf, bparams, runparams);
967
968         // output change tracking marks only if desired,
969         // if dvipost is installed,
970         // and with dvi/ps (other formats don't work)
971         bool const output = bparams.outputChanges
972                 && runparams.flavor == OutputParams::LATEX
973                 && features.isAvailable("dvipost");
974
975         // Maybe we have to create a optional argument.
976         pos_type body_pos = beginOfBody();
977         unsigned int column = 0;
978
979         if (body_pos > 0) {
980                 // the optional argument is kept in curly brackets in
981                 // case it contains a ']'
982                 os << "[{";
983                 column += 2;
984                 basefont = getLabelFont(bparams, outerfont);
985         } else {
986                 basefont = getLayoutFont(bparams, outerfont);
987         }
988
989         // Which font is currently active?
990         LyXFont running_font(basefont);
991         // Do we have an open font change?
992         bool open_font = false;
993
994         Change::Type runningChangeType = Change::UNCHANGED;
995
996         texrow.start(id(), 0);
997
998         // if the paragraph is empty, the loop will not be entered at all
999         if (empty()) {
1000                 if (style->isCommand()) {
1001                         os << '{';
1002                         ++column;
1003                 }
1004                 if (!asdefault)
1005                         column += startTeXParParams(bparams, os,
1006                                                     runparams.moving_arg);
1007         }
1008
1009         for (pos_type i = 0; i < size(); ++i) {
1010                 ++column;
1011                 // First char in paragraph or after label?
1012                 if (i == body_pos) {
1013                         if (body_pos > 0) {
1014                                 if (open_font) {
1015                                         column += running_font.latexWriteEndChanges(
1016                                                 os, basefont, basefont, bparams);
1017                                         open_font = false;
1018                                 }
1019                                 basefont = getLayoutFont(bparams, outerfont);
1020                                 running_font = basefont;
1021                                 os << "}] ";
1022                                 column +=3;
1023                         }
1024                         if (style->isCommand()) {
1025                                 os << '{';
1026                                 ++column;
1027                         }
1028
1029                         if (!asdefault)
1030                                 column += startTeXParParams(bparams, os,
1031                                                             runparams.moving_arg);
1032                 }
1033
1034                 value_type c = getChar(i);
1035
1036                 // Fully instantiated font
1037                 LyXFont font = getFont(bparams, i, outerfont);
1038
1039                 LyXFont const last_font = running_font;
1040
1041                 // Spaces at end of font change are simulated to be
1042                 // outside font change, i.e. we write "\textXX{text} "
1043                 // rather than "\textXX{text }". (Asger)
1044                 if (open_font && c == ' ' && i <= size() - 2) {
1045                         LyXFont const & next_font = getFont(bparams, i + 1, outerfont);
1046                         if (next_font != running_font && next_font != font) {
1047                                 font = next_font;
1048                         }
1049                 }
1050
1051                 // We end font definition before blanks
1052                 if (open_font &&
1053                     (font != running_font ||
1054                      font.language() != running_font.language()))
1055                 {
1056                         column += running_font.latexWriteEndChanges(
1057                                         os, basefont,
1058                                         (i == body_pos-1) ? basefont : font,
1059                                         bparams);
1060                         running_font = basefont;
1061                         open_font = false;
1062                 }
1063
1064                 // Blanks are printed before start of fontswitch
1065                 if (c == ' ') {
1066                         // Do not print the separation of the optional argument
1067                         if (i != body_pos - 1) {
1068                                 pimpl_->simpleTeXBlanks(os, texrow, i,
1069                                                        column, font, *style);
1070                         }
1071                 }
1072
1073                 // Do we need to change font?
1074                 if ((font != running_font ||
1075                      font.language() != running_font.language()) &&
1076                         i != body_pos - 1)
1077                 {
1078                         column += font.latexWriteStartChanges(
1079                                         os, basefont, last_font, bparams);
1080                         running_font = font;
1081                         open_font = true;
1082                 }
1083
1084                 Change::Type changeType = pimpl_->lookupChange(i).type;
1085
1086                 column += Changes::latexMarkChange(os, runningChangeType,
1087                         changeType, output);
1088                 runningChangeType = changeType;
1089
1090                 // do not output text which is marked deleted
1091                 // if change tracking output is not desired
1092                 if (output || runningChangeType != Change::DELETED) {
1093                         OutputParams rp = runparams;
1094                         rp.free_spacing = style->free_spacing;
1095                         rp.local_font = &font;
1096                         rp.intitle = style->intitle;
1097                         pimpl_->simpleTeXSpecialChars(buf, bparams,
1098                                                 os, texrow, rp,
1099                                                 font, running_font,
1100                                                 basefont, outerfont, open_font,
1101                                                 runningChangeType,
1102                                                 *style, i, column, c);
1103                 }
1104         }
1105
1106         column += Changes::latexMarkChange(os,
1107                         runningChangeType, Change::UNCHANGED, output);
1108
1109         // If we have an open font definition, we have to close it
1110         if (open_font) {
1111 #ifdef FIXED_LANGUAGE_END_DETECTION
1112                 if (next_) {
1113                         running_font
1114                                 .latexWriteEndChanges(os, basefont,
1115                                         next_->getFont(bparams, 0, outerfont),
1116                                         bparams);
1117                 } else {
1118                         running_font.latexWriteEndChanges(os, basefont,
1119                                                           basefont, bparams);
1120                 }
1121 #else
1122 #ifdef WITH_WARNINGS
1123 //#warning For now we ALWAYS have to close the foreign font settings if they are
1124 //#warning there as we start another \selectlanguage with the next paragraph if
1125 //#warning we are in need of this. This should be fixed sometime (Jug)
1126 #endif
1127                 running_font.latexWriteEndChanges(os, basefont, basefont,
1128                                                   bparams);
1129 #endif
1130         }
1131
1132         // Needed if there is an optional argument but no contents.
1133         if (body_pos > 0 && body_pos == size()) {
1134                 os << "}]~";
1135                 return_value = false;
1136         }
1137
1138         if (!asdefault) {
1139                 column += endTeXParParams(bparams, os, runparams.moving_arg);
1140         }
1141
1142         lyxerr[Debug::LATEX] << "SimpleTeXOnePar...done " << this << endl;
1143         return return_value;
1144 }
1145
1146
1147 namespace {
1148
1149 enum PAR_TAG {
1150         PAR_NONE=0,
1151         TT = 1,
1152         SF = 2,
1153         BF = 4,
1154         IT = 8,
1155         SL = 16,
1156         EM = 32
1157 };
1158
1159
1160 string tag_name(PAR_TAG const & pt) {
1161         switch (pt) {
1162         case PAR_NONE: return "!-- --";
1163         case TT: return "tt";
1164         case SF: return "sf";
1165         case BF: return "bf";
1166         case IT: return "it";
1167         case SL: return "sl";
1168         case EM: return "em";
1169         }
1170         return "";
1171 }
1172
1173
1174 inline
1175 void operator|=(PAR_TAG & p1, PAR_TAG const & p2)
1176 {
1177         p1 = static_cast<PAR_TAG>(p1 | p2);
1178 }
1179
1180
1181 inline
1182 void reset(PAR_TAG & p1, PAR_TAG const & p2)
1183 {
1184         p1 = static_cast<PAR_TAG>(p1 & ~p2);
1185 }
1186
1187 } // anon
1188
1189
1190 bool Paragraph::emptyTag() const
1191 {
1192         for (pos_type i = 0; i < size(); ++i) {
1193                 if (isInset(i)) {
1194                         InsetBase const * inset = getInset(i);
1195                         InsetBase::Code lyx_code = inset->lyxCode();
1196                         if (lyx_code != InsetBase::TOC_CODE &&
1197                             lyx_code != InsetBase::INCLUDE_CODE &&
1198                             lyx_code != InsetBase::GRAPHICS_CODE &&
1199                             lyx_code != InsetBase::ERT_CODE &&
1200                             lyx_code != InsetBase::FLOAT_CODE &&
1201                             lyx_code != InsetBase::TABULAR_CODE) {
1202                                 return false;
1203                         }
1204                 } else {
1205                         value_type c = getChar(i);
1206                         if (c != ' ' && c != '\t')
1207                                 return false;
1208                 }
1209         }
1210         return true;
1211 }
1212
1213
1214 string Paragraph::getID(Buffer const & buf, OutputParams const & runparams) const
1215 {
1216         for (pos_type i = 0; i < size(); ++i) {
1217                 if (isInset(i)) {
1218                         InsetBase const * inset = getInset(i);
1219                         InsetBase::Code lyx_code = inset->lyxCode();
1220                         if (lyx_code == InsetBase::LABEL_CODE) {
1221                                 string const id = static_cast<InsetCommand const *>(inset)->getContents();
1222                                 return "id='" + to_utf8(sgml::cleanID(buf, runparams, from_utf8(id))) + "'";
1223                         }
1224                 }
1225
1226         }
1227         return string();
1228 }
1229
1230
1231 pos_type Paragraph::getFirstWord(Buffer const & buf, odocstream & os, OutputParams const & runparams) const
1232 {
1233         pos_type i;
1234         for (i = 0; i < size(); ++i) {
1235                 if (isInset(i)) {
1236                         InsetBase const * inset = getInset(i);
1237                         inset->docbook(buf, os, runparams);
1238                 } else {
1239                         value_type c = getChar(i);
1240                         if (c == ' ')
1241                                 break;
1242                         os << sgml::escapeChar(c);
1243                 }
1244         }
1245         return i;
1246 }
1247
1248
1249 bool Paragraph::onlyText(Buffer const & buf, LyXFont const & outerfont, pos_type initial) const
1250 {
1251         LyXFont font_old;
1252
1253         for (pos_type i = initial; i < size(); ++i) {
1254                 LyXFont font = getFont(buf.params(), i, outerfont);
1255                 if (isInset(i))
1256                         return false;
1257                 if (i != initial && font != font_old)
1258                         return false;
1259                 font_old = font;
1260         }
1261
1262         return true;
1263 }
1264
1265
1266 void Paragraph::simpleDocBookOnePar(Buffer const & buf,
1267                                     odocstream & os,
1268                                     OutputParams const & runparams,
1269                                     LyXFont const & outerfont,
1270                                     pos_type initial) const
1271 {
1272         bool emph_flag = false;
1273
1274         LyXLayout_ptr const & style = layout();
1275         LyXFont font_old =
1276                 style->labeltype == LABEL_MANUAL ? style->labelfont : style->font;
1277
1278         if (style->pass_thru && !onlyText(buf, outerfont, initial))
1279                 os << "]]>";
1280
1281         // parsing main loop
1282         for (pos_type i = initial; i < size(); ++i) {
1283                 LyXFont font = getFont(buf.params(), i, outerfont);
1284
1285                 // handle <emphasis> tag
1286                 if (font_old.emph() != font.emph()) {
1287                         if (font.emph() == LyXFont::ON) {
1288                                 os << "<emphasis>";
1289                                 emph_flag = true;
1290                         } else if (i != initial) {
1291                                 os << "</emphasis>";
1292                                 emph_flag = false;
1293                         }
1294                 }
1295
1296                 if (isInset(i)) {
1297                         InsetBase const * inset = getInset(i);
1298                         inset->docbook(buf, os, runparams);
1299                 } else {
1300                         value_type c = getChar(i);
1301
1302                         if (style->pass_thru)
1303                                 os.put(c);
1304                         else
1305                                 os << sgml::escapeChar(c);
1306                 }
1307                 font_old = font;
1308         }
1309
1310         if (emph_flag) {
1311                 os << "</emphasis>";
1312         }
1313
1314         if (style->free_spacing)
1315                 os << '\n';
1316         if (style->pass_thru && !onlyText(buf, outerfont, initial))
1317                 os << "<![CDATA[";
1318 }
1319
1320
1321 bool Paragraph::isNewline(pos_type pos) const
1322 {
1323         return isInset(pos)
1324                 && getInset(pos)->lyxCode() == InsetBase::NEWLINE_CODE;
1325 }
1326
1327
1328 bool Paragraph::isLineSeparator(pos_type pos) const
1329 {
1330         value_type const c = getChar(pos);
1331         return isLineSeparatorChar(c)
1332                 || (c == Paragraph::META_INSET && getInset(pos) &&
1333                 getInset(pos)->isLineSeparator());
1334 }
1335
1336
1337 /// Used by the spellchecker
1338 bool Paragraph::isLetter(pos_type pos) const
1339 {
1340         if (isInset(pos))
1341                 return getInset(pos)->isLetter();
1342         else {
1343                 value_type const c = getChar(pos);
1344                 return isLetterChar(c) || isDigit(c);
1345         }
1346 }
1347
1348
1349 Language const *
1350 Paragraph::getParLanguage(BufferParams const & bparams) const
1351 {
1352         if (!empty())
1353                 return getFirstFontSettings(bparams).language();
1354 #ifdef WITH_WARNINGS
1355 #warning FIXME we should check the prev par as well (Lgb)
1356 #endif
1357         return bparams.language;
1358 }
1359
1360
1361 bool Paragraph::isRightToLeftPar(BufferParams const & bparams) const
1362 {
1363         return lyxrc.rtl_support
1364                 && getParLanguage(bparams)->rightToLeft()
1365                 && ownerCode() != InsetBase::ERT_CODE;
1366 }
1367
1368
1369 void Paragraph::changeLanguage(BufferParams const & bparams,
1370                                Language const * from, Language const * to)
1371 {
1372         // change language including dummy font change at the end
1373         for (pos_type i = 0; i <= size(); ++i) {
1374                 LyXFont font = getFontSettings(bparams, i);
1375                 if (font.language() == from) {
1376                         font.setLanguage(to);
1377                         setFont(i, font);
1378                 }
1379         }
1380 }
1381
1382
1383 bool Paragraph::isMultiLingual(BufferParams const & bparams) const
1384 {
1385         Language const * doc_language = bparams.language;
1386         Pimpl::FontList::const_iterator cit = pimpl_->fontlist.begin();
1387         Pimpl::FontList::const_iterator end = pimpl_->fontlist.end();
1388
1389         for (; cit != end; ++cit)
1390                 if (cit->font().language() != ignore_language &&
1391                     cit->font().language() != latex_language &&
1392                     cit->font().language() != doc_language)
1393                         return true;
1394         return false;
1395 }
1396
1397
1398 // Convert the paragraph to a string.
1399 // Used for building the table of contents
1400 docstring const Paragraph::asString(Buffer const & buffer, bool label) const
1401 {
1402         OutputParams runparams;
1403         return asString(buffer, runparams, label);
1404 }
1405
1406
1407 docstring const Paragraph::asString(Buffer const & buffer,
1408                                  OutputParams const & runparams,
1409                                  bool label) const
1410 {
1411 #if 0
1412         string s;
1413         if (label && !params().labelString().empty())
1414                 s += params().labelString() + ' ';
1415
1416         for (pos_type i = 0; i < size(); ++i) {
1417                 value_type c = getChar(i);
1418                 if (isPrintable(c))
1419                         s += c;
1420                 else if (c == META_INSET &&
1421                          getInset(i)->lyxCode() == InsetBase::MATH_CODE) {
1422                         ostringstream os;
1423                         getInset(i)->plaintext(buffer, os, runparams);
1424                         s += subst(STRCONV(os.str()),'\n',' ');
1425                 }
1426         }
1427
1428         return s;
1429 #else
1430         // This should really be done by the caller and not here.
1431         docstring ret = asString(buffer, runparams, 0, size(), label);
1432         return subst(ret, '\n', ' ');
1433 #endif
1434 }
1435
1436
1437 docstring const Paragraph::asString(Buffer const & buffer,
1438                                  pos_type beg, pos_type end, bool label) const
1439 {
1440
1441         OutputParams const runparams;
1442         return asString(buffer, runparams, beg, end, label);
1443 }
1444
1445
1446 docstring const Paragraph::asString(Buffer const & buffer,
1447                                  OutputParams const & runparams,
1448                                  pos_type beg, pos_type end, bool label) const
1449 {
1450         lyx::odocstringstream os;
1451
1452         if (beg == 0 && label && !params().labelString().empty())
1453                 os << params().labelString() << ' ';
1454
1455         for (pos_type i = beg; i < end; ++i) {
1456                 value_type const c = getUChar(buffer.params(), i);
1457                 if (isPrintable(c))
1458                         os.put(c);
1459                 else if (c == META_INSET)
1460                         getInset(i)->textString(buffer, os, runparams);
1461         }
1462
1463         return os.str();
1464 }
1465
1466
1467 void Paragraph::setInsetOwner(InsetBase * inset)
1468 {
1469         pimpl_->inset_owner = inset;
1470 }
1471
1472
1473 Change const & Paragraph::lookupChange(pos_type pos) const
1474 {
1475         BOOST_ASSERT(pos <= size());
1476         return pimpl_->lookupChange(pos);
1477 }
1478
1479
1480 bool Paragraph::isChanged(pos_type start, pos_type end) const
1481 {
1482         return pimpl_->isChanged(start, end);
1483 }
1484
1485
1486 bool Paragraph::isMergedOnEndOfParDeletion(bool trackChanges) const
1487 {
1488         return pimpl_->isMergedOnEndOfParDeletion(trackChanges);
1489 }
1490
1491
1492 void Paragraph::setChange(Change const & change)
1493 {
1494         pimpl_->setChange(change);
1495 }
1496
1497
1498 void Paragraph::setChange(pos_type pos, Change const & change)
1499 {
1500         pimpl_->setChange(pos, change);
1501 }
1502
1503
1504 void Paragraph::acceptChanges(pos_type start, pos_type end)
1505 {
1506         return pimpl_->acceptChanges(start, end);
1507 }
1508
1509
1510 void Paragraph::rejectChanges(pos_type start, pos_type end)
1511 {
1512         return pimpl_->rejectChanges(start, end);
1513 }
1514
1515
1516 int Paragraph::id() const
1517 {
1518         return pimpl_->id_;
1519 }
1520
1521
1522 LyXLayout_ptr const & Paragraph::layout() const
1523 {
1524         return layout_;
1525 }
1526
1527
1528 void Paragraph::layout(LyXLayout_ptr const & new_layout)
1529 {
1530         layout_ = new_layout;
1531 }
1532
1533
1534 InsetBase * Paragraph::inInset() const
1535 {
1536         return pimpl_->inset_owner;
1537 }
1538
1539
1540 InsetBase::Code Paragraph::ownerCode() const
1541 {
1542         return pimpl_->inset_owner
1543                 ? pimpl_->inset_owner->lyxCode() : InsetBase::NO_CODE;
1544 }
1545
1546
1547 void Paragraph::clearContents()
1548 {
1549         text_.clear();
1550 }
1551
1552
1553 ParagraphParameters & Paragraph::params()
1554 {
1555         return pimpl_->params;
1556 }
1557
1558
1559 ParagraphParameters const & Paragraph::params() const
1560 {
1561         return pimpl_->params;
1562 }
1563
1564
1565 bool Paragraph::isFreeSpacing() const
1566 {
1567         if (layout()->free_spacing)
1568                 return true;
1569
1570         // for now we just need this, later should we need this in some
1571         // other way we can always add a function to InsetBase too.
1572         return ownerCode() == InsetBase::ERT_CODE;
1573 }
1574
1575
1576 bool Paragraph::allowEmpty() const
1577 {
1578         if (layout()->keepempty)
1579                 return true;
1580         return ownerCode() == InsetBase::ERT_CODE;
1581 }
1582
1583
1584 char_type Paragraph::transformChar(char_type c, pos_type pos) const
1585 {
1586         if (!Encodings::is_arabic(c))
1587                 if (lyxrc.font_norm_type == LyXRC::ISO_8859_6_8 && isDigit(c))
1588                         // FIXME UNICODE What does this do?
1589                         return c + (0xb0 - '0');
1590                 else
1591                         return c;
1592
1593         value_type const prev_char = pos > 0 ? getChar(pos - 1) : ' ';
1594         value_type next_char = ' ';
1595
1596         for (pos_type i = pos + 1, end = size(); i < end; ++i) {
1597                 value_type const par_char = getChar(i);
1598                 if (!Encodings::isComposeChar_arabic(par_char)) {
1599                         next_char = par_char;
1600                         break;
1601                 }
1602         }
1603
1604         if (Encodings::is_arabic(next_char)) {
1605                 if (Encodings::is_arabic(prev_char) &&
1606                         !Encodings::is_arabic_special(prev_char))
1607                         return Encodings::transformChar(c, Encodings::FORM_MEDIAL);
1608                 else
1609                         return Encodings::transformChar(c, Encodings::FORM_INITIAL);
1610         } else {
1611                 if (Encodings::is_arabic(prev_char) &&
1612                         !Encodings::is_arabic_special(prev_char))
1613                         return Encodings::transformChar(c, Encodings::FORM_FINAL);
1614                 else
1615                         return Encodings::transformChar(c, Encodings::FORM_ISOLATED);
1616         }
1617 }
1618
1619
1620 bool Paragraph::hfillExpansion(Row const & row, pos_type pos) const
1621 {
1622         if (!isHfill(pos))
1623                 return false;
1624
1625         BOOST_ASSERT(pos >= row.pos() && pos < row.endpos());
1626
1627         // expand at the end of a row only if there is another hfill on the same row
1628         if (pos == row.endpos() - 1) {
1629                 for (pos_type i = row.pos(); i < pos; i++) {
1630                         if (isHfill(i))
1631                                 return true;
1632                 }
1633                 return false;
1634         }
1635
1636         // expand at the beginning of a row only if it is the first row of a paragraph
1637         if (pos == row.pos()) {
1638                 return pos == 0;
1639         }
1640
1641         // do not expand in some labels
1642         if (layout()->margintype != MARGIN_MANUAL && pos < beginOfBody())
1643                 return false;
1644
1645         // if there is anything between the first char of the row and
1646         // the specified position that is neither a newline nor an hfill,
1647         // the hfill will be expanded, otherwise it won't
1648         for (pos_type i = row.pos(); i < pos; i++) {
1649                 if (!isNewline(i) && !isHfill(i))
1650                         return true;
1651         }
1652         return false;
1653 }
1654
1655
1656 bool Paragraph::checkBiblio(bool track_changes)
1657 {
1658         // Add bibitem insets if necessary
1659         if (layout()->labeltype != LABEL_BIBLIO)
1660                 return false;
1661
1662         bool hasbibitem = !insetlist.empty()
1663                 // Insist on it being in pos 0
1664                 && getChar(0) == Paragraph::META_INSET
1665                 && insetlist.begin()->inset->lyxCode() == InsetBase::BIBITEM_CODE;
1666
1667         if (hasbibitem)
1668                 return false;
1669
1670         InsetBibitem * inset(new InsetBibitem(InsetCommandParams("bibitem")));
1671         insertInset(0, static_cast<InsetBase *>(inset),
1672                 Change(track_changes ? Change::INSERTED : Change::UNCHANGED));
1673
1674         return true;
1675 }
1676
1677 } // namespace lyx