src/paragraph.C

   1 /**
   2  * \file paragraph.C
   3  * This file is part of LyX, the document processor.
   4  * Licence details can be found in the file COPYING.
   5  *
   6  * \author Asger Alstrup
   7  * \author Lars Gullik Bjønnes
   8  * \author Jean-Marc Lasgouttes
   9  * \author Angus Leeming
  10  * \author John Levon
  11  * \author André Pönitz
  12  * \author Dekel Tsur
  13  * \author Jürgen Vigna
  14  *
  15  * Full author contact details are available in file CREDITS.
  16  */
  17
  18 #include <config.h>
  19
  20 #include "paragraph.h"
  21 #include "paragraph_pimpl.h"
  22
  23 #include "buffer.h"
  24 #include "bufferparams.h"
  25 #include "counters.h"
  26 #include "encoding.h"
  27 #include "debug.h"
  28 #include "gettext.h"
  29 #include "language.h"
  30 #include "LaTeXFeatures.h"
  31 #include "lyxfont.h"
  32 #include "lyxrc.h"
  33 #include "lyxrow.h"
  34 #include "outputparams.h"
  35 #include "paragraph_funcs.h"
  36 #include "ParagraphList_fwd.h"
  37
  38 #include "rowpainter.h"
  39
  40 #include "sgml.h"
  41 #include "texrow.h"
  42 #include "vspace.h"
  43
  44 #include "frontends/FontMetrics.h"
  45
  46 #include "insets/insetbibitem.h"
  47 #include "insets/insetoptarg.h"
  48
  49 #include "support/lstrings.h"
  50 #include "support/textutils.h"
  51 #include "support/convert.h"
  52 #include "support/unicode.h"
  53
  54 #include <boost/bind.hpp>
  55
  56 #include <algorithm>
  57 #include <list>
  58 #include <stack>
  59 #include <sstream>
  60
  61 using std::distance;
  62 using std::endl;
  63 using std::list;
  64 using std::stack;
  65 using std::string;
  66 using std::ostream;
  67 using std::ostringstream;
  68
  69 namespace lyx {
  70
  71 using support::contains;
  72 using support::rsplit;
  73 using support::subst;
  74
  75 Paragraph::Paragraph()
  76         : begin_of_body_(0), pimpl_(new Paragraph::Pimpl(this))
  77 {
  78         itemdepth = 0;
  79         params().clear();
  80 }
  81
  82
  83 Paragraph::Paragraph(Paragraph const & par)
  84         : itemdepth(par.itemdepth), insetlist(par.insetlist),
  85         layout_(par.layout_),
  86         text_(par.text_), begin_of_body_(par.begin_of_body_),
  87         pimpl_(new Paragraph::Pimpl(*par.pimpl_, this))
  88 {
  89         //lyxerr << "Paragraph::Paragraph(Paragraph const&)" << endl;
  90         InsetList::iterator it = insetlist.begin();
  91         InsetList::iterator end = insetlist.end();
  92         for (; it != end; ++it)
  93                 it->inset = it->inset->clone().release();
  94 }
  95
  96
  97 Paragraph & Paragraph::operator=(Paragraph const & par)
  98 {
  99         // needed as we will destroy the pimpl_ before copying it
 100         if (&par != this) {
 101                 itemdepth = par.itemdepth;
 102
 103                 insetlist = par.insetlist;
 104                 InsetList::iterator it = insetlist.begin();
 105                 InsetList::iterator end = insetlist.end();
 106                 for (; it != end; ++it)
 107                         it->inset = it->inset->clone().release();
 108
 109                 layout_ = par.layout();
 110                 text_ = par.text_;
 111                 begin_of_body_ = par.begin_of_body_;
 112
 113                 delete pimpl_;
 114                 pimpl_ = new Pimpl(*par.pimpl_, this);
 115         }
 116         return *this;
 117 }
 118
 119
 120 Paragraph::~Paragraph()
 121 {
 122         delete pimpl_;
 123         //
 124         //lyxerr << "Paragraph::paragraph_id = "
 125         //       << Paragraph::paragraph_id << endl;
 126 }
 127
 128
 129 void Paragraph::write(Buffer const & buf, ostream & os,
 130                           BufferParams const & bparams,
 131                           depth_type & dth) const
 132 {
 133         // The beginning or end of a deeper (i.e. nested) area?
 134         if (dth != params().depth()) {
 135                 if (params().depth() > dth) {
 136                         while (params().depth() > dth) {
 137                                 os << "\n\\begin_deeper";
 138                                 ++dth;
 139                         }
 140                 } else {
 141                         while (params().depth() < dth) {
 142                                 os << "\n\\end_deeper";
 143                                 --dth;
 144                         }
 145                 }
 146         }
 147
 148         // First write the layout
 149         os << "\n\\begin_layout " << layout()->name() << '\n';
 150
 151         params().write(os);
 152
 153         LyXFont font1(LyXFont::ALL_INHERIT, bparams.language);
 154
 155         Change running_change = Change(Change::UNCHANGED);
 156
 157         int column = 0;
 158         for (pos_type i = 0; i <= size(); ++i) {
 159
 160                 Change change = pimpl_->lookupChange(i);
 161                 Changes::lyxMarkChange(os, column, running_change, change);
 162                 running_change = change;
 163
 164                 if (i == size())
 165                         break;
 166
 167                 // Write font changes
 168                 LyXFont font2 = getFontSettings(bparams, i);
 169                 if (font2 != font1) {
 170                         font2.lyxWriteChanges(font1, os);
 171                         column = 0;
 172                         font1 = font2;
 173                 }
 174
 175                 value_type const c = getChar(i);
 176                 switch (c) {
 177                 case META_INSET:
 178                 {
 179                         InsetBase const * inset = getInset(i);
 180                         if (inset)
 181                                 if (inset->directWrite()) {
 182                                         // international char, let it write
 183                                         // code directly so it's shorter in
 184                                         // the file
 185                                         inset->write(buf, os);
 186                                 } else {
 187                                         if (i)
 188                                                 os << '\n';
 189                                         os << "\\begin_inset ";
 190                                         inset->write(buf, os);
 191                                         os << "\n\\end_inset\n\n";
 192                                         column = 0;
 193                                 }
 194                 }
 195                 break;
 196                 case '\\':
 197                         os << "\n\\backslash\n";
 198                         column = 0;
 199                         break;
 200                 case '.':
 201                         if (i + 1 < size() && getChar(i + 1) == ' ') {
 202                                 os << ".\n";
 203                                 column = 0;
 204                         } else
 205                                 os << '.';
 206                         break;
 207                 default:
 208                         if ((column > 70 && c == ' ')
 209                             || column > 79) {
 210                                 os << '\n';
 211                                 column = 0;
 212                         }
 213                         // this check is to amend a bug. LyX sometimes
 214                         // inserts '\0' this could cause problems.
 215                         if (c != '\0') {
 216                                 std::vector<char> tmp = ucs4_to_utf8(c);
 217                                 tmp.push_back('\0');
 218                                 os << &tmp[0];
 219                         } else
 220                                 lyxerr << "ERROR (Paragraph::writeFile):"
 221                                         " NULL char in structure." << endl;
 222                         ++column;
 223                         break;
 224                 }
 225         }
 226
 227         os << "\n\\end_layout\n";
 228 }
 229
 230
 231 void Paragraph::validate(LaTeXFeatures & features) const
 232 {
 233         pimpl_->validate(features, *layout());
 234 }
 235
 236
 237 bool Paragraph::eraseChar(pos_type pos, bool trackChanges)
 238 {
 239         return pimpl_->eraseChar(pos, trackChanges);
 240 }
 241
 242
 243 int Paragraph::eraseChars(pos_type start, pos_type end, bool trackChanges)
 244 {
 245         return pimpl_->eraseChars(start, end, trackChanges);
 246 }
 247
 248
 249 void Paragraph::insert(pos_type start, docstring const & str,
 250                        LyXFont const & font, Change const & change)
 251 {
 252         for (size_t i = 0, n = str.size(); i != n ; ++i)
 253                 insertChar(start + i, str[i], font, change);
 254 }
 255
 256
 257 void Paragraph::insertChar(pos_type pos, Paragraph::value_type c,
 258                            bool trackChanges)
 259 {
 260         pimpl_->insertChar(pos, c, Change(trackChanges ?
 261                            Change::INSERTED : Change::UNCHANGED));
 262 }
 263
 264
 265 void Paragraph::insertChar(pos_type pos, Paragraph::value_type c,
 266                            LyXFont const & font, bool trackChanges)
 267 {
 268         pimpl_->insertChar(pos, c, Change(trackChanges ?
 269                            Change::INSERTED : Change::UNCHANGED));
 270         setFont(pos, font);
 271 }
 272
 273
 274 void Paragraph::insertChar(pos_type pos, Paragraph::value_type c,
 275                            LyXFont const & font, Change const & change)
 276 {
 277         pimpl_->insertChar(pos, c, change);
 278         setFont(pos, font);
 279 }
 280
 281
 282 void Paragraph::insertInset(pos_type pos, InsetBase * inset,
 283                             Change const & change)
 284 {
 285         pimpl_->insertInset(pos, inset, change);
 286 }
 287
 288
 289 void Paragraph::insertInset(pos_type pos, InsetBase * inset,
 290                             LyXFont const & font, Change const & change)
 291 {
 292         pimpl_->insertInset(pos, inset, change);
 293         setFont(pos, font);
 294 }
 295
 296
 297 bool Paragraph::insetAllowed(InsetBase_code code)
 298 {
 299         return !pimpl_->inset_owner || pimpl_->inset_owner->insetAllowed(code);
 300 }
 301
 302
 303 // Gets uninstantiated font setting at position.
 304 LyXFont const Paragraph::getFontSettings(BufferParams const & bparams,
 305                                          pos_type pos) const
 306 {
 307         if (pos > size()) {
 308                 lyxerr << " pos: " << pos << " size: " << size() << endl;
 309                 BOOST_ASSERT(pos <= size());
 310         }
 311
 312         Pimpl::FontList::const_iterator cit = pimpl_->fontlist.begin();
 313         Pimpl::FontList::const_iterator end = pimpl_->fontlist.end();
 314         for (; cit != end; ++cit)
 315                 if (cit->pos() >= pos)
 316                         break;
 317
 318         if (cit != end)
 319                 return cit->font();
 320
 321         if (pos == size() && !empty())
 322                 return getFontSettings(bparams, pos - 1);
 323
 324         return LyXFont(LyXFont::ALL_INHERIT, getParLanguage(bparams));
 325 }
 326
 327
 328 FontSpan Paragraph::fontSpan(pos_type pos) const
 329 {
 330         BOOST_ASSERT(pos <= size());
 331         pos_type start = 0;
 332
 333         Pimpl::FontList::const_iterator cit = pimpl_->fontlist.begin();
 334         Pimpl::FontList::const_iterator end = pimpl_->fontlist.end();
 335         for (; cit != end; ++cit) {
 336                 if (cit->pos() >= pos) {
 337                         if (pos >= beginOfBody())
 338                                 return FontSpan(std::max(start, beginOfBody()),
 339                                                 cit->pos());
 340                         else
 341                                 return FontSpan(start,
 342                                                 std::min(beginOfBody() - 1,
 343                                                          cit->pos()));
 344                 }
 345                 start = cit->pos() + 1;
 346         }
 347
 348         // This should not happen, but if so, we take no chances.
 349         //lyxerr << "Paragraph::getEndPosOfFontSpan: This should not happen!"
 350         //      << endl;
 351         return FontSpan(pos, pos);
 352 }
 353
 354
 355 // Gets uninstantiated font setting at position 0
 356 LyXFont const Paragraph::getFirstFontSettings(BufferParams const & bparams) const
 357 {
 358         if (!empty() && !pimpl_->fontlist.empty())
 359                 return pimpl_->fontlist[0].font();
 360
 361         return LyXFont(LyXFont::ALL_INHERIT, bparams.language);
 362 }
 363
 364
 365 // Gets the fully instantiated font at a given position in a paragraph
 366 // This is basically the same function as LyXText::GetFont() in text2.C.
 367 // The difference is that this one is used for generating the LaTeX file,
 368 // and thus cosmetic "improvements" are disallowed: This has to deliver
 369 // the true picture of the buffer. (Asger)
 370 LyXFont const Paragraph::getFont(BufferParams const & bparams, pos_type pos,
 371                                  LyXFont const & outerfont) const
 372 {
 373         BOOST_ASSERT(pos >= 0);
 374
 375         LyXLayout_ptr const & lout = layout();
 376
 377         pos_type const body_pos = beginOfBody();
 378
 379         LyXFont layoutfont;
 380         if (pos < body_pos)
 381                 layoutfont = lout->labelfont;
 382         else
 383                 layoutfont = lout->font;
 384
 385         LyXFont font = getFontSettings(bparams, pos);
 386         font.realize(layoutfont);
 387         font.realize(outerfont);
 388         font.realize(bparams.getFont());
 389
 390         return font;
 391 }
 392
 393
 394 LyXFont const Paragraph::getLabelFont
 395         (BufferParams const & bparams, LyXFont const & outerfont) const
 396 {
 397         LyXFont tmpfont = layout()->labelfont;
 398         tmpfont.setLanguage(getParLanguage(bparams));
 399         tmpfont.realize(outerfont);
 400         tmpfont.realize(bparams.getFont());
 401         return tmpfont;
 402 }
 403
 404
 405 LyXFont const Paragraph::getLayoutFont
 406         (BufferParams const & bparams, LyXFont const & outerfont) const
 407 {
 408         LyXFont tmpfont = layout()->font;
 409         tmpfont.setLanguage(getParLanguage(bparams));
 410         tmpfont.realize(outerfont);
 411         tmpfont.realize(bparams.getFont());
 412         return tmpfont;
 413 }
 414
 415
 416 /// Returns the height of the highest font in range
 417 LyXFont_size Paragraph::highestFontInRange
 418         (pos_type startpos, pos_type endpos, LyXFont_size def_size) const
 419 {
 420         if (pimpl_->fontlist.empty())
 421                 return def_size;
 422
 423         Pimpl::FontList::const_iterator end_it = pimpl_->fontlist.begin();
 424         Pimpl::FontList::const_iterator const end = pimpl_->fontlist.end();
 425         for (; end_it != end; ++end_it) {
 426                 if (end_it->pos() >= endpos)
 427                         break;
 428         }
 429
 430         if (end_it != end)
 431                 ++end_it;
 432
 433         Pimpl::FontList::const_iterator cit = pimpl_->fontlist.begin();
 434         for (; cit != end; ++cit) {
 435                 if (cit->pos() >= startpos)
 436                         break;
 437         }
 438
 439         LyXFont::FONT_SIZE maxsize = LyXFont::SIZE_TINY;
 440         for (; cit != end_it; ++cit) {
 441                 LyXFont::FONT_SIZE size = cit->font().size();
 442                 if (size == LyXFont::INHERIT_SIZE)
 443                         size = def_size;
 444                 if (size > maxsize && size <= LyXFont::SIZE_HUGER)
 445                         maxsize = size;
 446         }
 447         return maxsize;
 448 }
 449
 450
 451 Paragraph::value_type
 452 Paragraph::getUChar(BufferParams const & bparams, pos_type pos) const
 453 {
 454         value_type c = getChar(pos);
 455         if (!lyxrc.rtl_support)
 456                 return c;
 457
 458         value_type uc = c;
 459         switch (c) {
 460         case '(':
 461                 uc = ')';
 462                 break;
 463         case ')':
 464                 uc = '(';
 465                 break;
 466         case '[':
 467                 uc = ']';
 468                 break;
 469         case ']':
 470                 uc = '[';
 471                 break;
 472         case '{':
 473                 uc = '}';
 474                 break;
 475         case '}':
 476                 uc = '{';
 477                 break;
 478         case '<':
 479                 uc = '>';
 480                 break;
 481         case '>':
 482                 uc = '<';
 483                 break;
 484         }
 485         if (uc != c && getFontSettings(bparams, pos).isRightToLeft())
 486                 return uc;
 487         else
 488                 return c;
 489 }
 490
 491
 492 void Paragraph::setFont(pos_type pos, LyXFont const & font)
 493 {
 494         BOOST_ASSERT(pos <= size());
 495
 496         // First, reduce font against layout/label font
 497         // Update: The setCharFont() routine in text2.C already
 498         // reduces font, so we don't need to do that here. (Asger)
 499         // No need to simplify this because it will disappear
 500         // in a new kernel. (Asger)
 501         // Next search font table
 502
 503         Pimpl::FontList::iterator beg = pimpl_->fontlist.begin();
 504         Pimpl::FontList::iterator it = beg;
 505         Pimpl::FontList::iterator endit = pimpl_->fontlist.end();
 506         for (; it != endit; ++it) {
 507                 if (it->pos() >= pos)
 508                         break;
 509         }
 510         size_t const i = distance(beg, it);
 511         bool notfound = (it == endit);
 512
 513         if (!notfound && pimpl_->fontlist[i].font() == font)
 514                 return;
 515
 516         bool begin = pos == 0 || notfound ||
 517                 (i > 0 && pimpl_->fontlist[i - 1].pos() == pos - 1);
 518         // Is position pos is a beginning of a font block?
 519         bool end = !notfound && pimpl_->fontlist[i].pos() == pos;
 520         // Is position pos is the end of a font block?
 521         if (begin && end) { // A single char block
 522                 if (i + 1 < pimpl_->fontlist.size() &&
 523                     pimpl_->fontlist[i + 1].font() == font) {
 524                         // Merge the singleton block with the next block
 525                         pimpl_->fontlist.erase(pimpl_->fontlist.begin() + i);
 526                         if (i > 0 && pimpl_->fontlist[i - 1].font() == font)
 527                                 pimpl_->fontlist.erase(pimpl_->fontlist.begin() + i - 1);
 528                 } else if (i > 0 && pimpl_->fontlist[i - 1].font() == font) {
 529                         // Merge the singleton block with the previous block
 530                         pimpl_->fontlist[i - 1].pos(pos);
 531                         pimpl_->fontlist.erase(pimpl_->fontlist.begin() + i);
 532                 } else
 533                         pimpl_->fontlist[i].font(font);
 534         } else if (begin) {
 535                 if (i > 0 && pimpl_->fontlist[i - 1].font() == font)
 536                         pimpl_->fontlist[i - 1].pos(pos);
 537                 else
 538                         pimpl_->fontlist.insert(pimpl_->fontlist.begin() + i,
 539                                         Pimpl::FontTable(pos, font));
 540         } else if (end) {
 541                 pimpl_->fontlist[i].pos(pos - 1);
 542                 if (!(i + 1 < pimpl_->fontlist.size() &&
 543                       pimpl_->fontlist[i + 1].font() == font))
 544                         pimpl_->fontlist.insert(pimpl_->fontlist.begin() + i + 1,
 545                                         Pimpl::FontTable(pos, font));
 546         } else { // The general case. The block is splitted into 3 blocks
 547                 pimpl_->fontlist.insert(pimpl_->fontlist.begin() + i,
 548                                 Pimpl::FontTable(pos - 1, pimpl_->fontlist[i].font()));
 549                 pimpl_->fontlist.insert(pimpl_->fontlist.begin() + i + 1,
 550                                 Pimpl::FontTable(pos, font));
 551         }
 552 }
 553
 554
 555 void Paragraph::makeSameLayout(Paragraph const & par)
 556 {
 557         layout(par.layout());
 558         // move to pimpl?
 559         params() = par.params();
 560 }
 561
 562
 563 int Paragraph::stripLeadingSpaces()
 564 {
 565         if (isFreeSpacing())
 566                 return 0;
 567
 568         int i = 0;
 569         while (!empty() && (isNewline(0) || isLineSeparator(0))
 570                 && !isDeleted(0)) {
 571                 eraseChar(0, false); // no change tracking here
 572                 ++i;
 573         }
 574
 575         return i;
 576 }
 577
 578
 579 bool Paragraph::hasSameLayout(Paragraph const & par) const
 580 {
 581         return par.layout() == layout() && params().sameLayout(par.params());
 582 }
 583
 584
 585 depth_type Paragraph::getDepth() const
 586 {
 587         return params().depth();
 588 }
 589
 590
 591 depth_type Paragraph::getMaxDepthAfter() const
 592 {
 593         if (layout()->isEnvironment())
 594                 return params().depth() + 1;
 595         else
 596                 return params().depth();
 597 }
 598
 599
 600 char Paragraph::getAlign() const
 601 {
 602         if (params().align() == LYX_ALIGN_LAYOUT)
 603                 return layout()->align;
 604         else
 605                 return params().align();
 606 }
 607
 608
 609 docstring const & Paragraph::getLabelstring() const
 610 {
 611         return params().labelString();
 612 }
 613
 614
 615 // the next two functions are for the manual labels
 616 docstring const Paragraph::getLabelWidthString() const
 617 {
 618         if (!params().labelWidthString().empty())
 619                 return params().labelWidthString();
 620         else
 621                 return _("Senseless with this layout!");
 622 }
 623
 624
 625 void Paragraph::setLabelWidthString(docstring const & s)
 626 {
 627         params().labelWidthString(s);
 628 }
 629
 630
 631 void Paragraph::applyLayout(LyXLayout_ptr const & new_layout)
 632 {
 633         layout(new_layout);
 634         params().labelWidthString(docstring());
 635         params().align(LYX_ALIGN_LAYOUT);
 636         params().spacing(Spacing(Spacing::Default));
 637 }
 638
 639
 640 pos_type Paragraph::beginOfBody() const
 641 {
 642         return begin_of_body_;
 643 }
 644
 645
 646 void Paragraph::setBeginOfBody()
 647 {
 648         if (layout()->labeltype != LABEL_MANUAL) {
 649                 begin_of_body_ = 0;
 650                 return;
 651         }
 652
 653         // Unroll the first two cycles of the loop
 654         // and remember the previous character to
 655         // remove unnecessary getChar() calls
 656         pos_type i = 0;
 657         pos_type end = size();
 658         if (i < end && !isNewline(i)) {
 659                 ++i;
 660                 char_type previous_char = 0;
 661                 char_type temp = 0;
 662                 if (i < end) {
 663                         previous_char = text_[i];
 664                         if (!isNewline(i)) {
 665                                 ++i;
 666                                 while (i < end && previous_char != ' ') {
 667                                         temp = text_[i];
 668                                         if (isNewline(i))
 669                                                 break;
 670                                         ++i;
 671                                         previous_char = temp;
 672                                 }
 673                         }
 674                 }
 675         }
 676
 677         begin_of_body_ = i;
 678 }
 679
 680
 681 // returns -1 if inset not found
 682 int Paragraph::getPositionOfInset(InsetBase const * inset) const
 683 {
 684         // Find the entry.
 685         InsetList::const_iterator it = insetlist.begin();
 686         InsetList::const_iterator end = insetlist.end();
 687         for (; it != end; ++it)
 688                 if (it->inset == inset)
 689                         return it->pos;
 690         return -1;
 691 }
 692
 693
 694 InsetBibitem * Paragraph::bibitem() const
 695 {
 696         if (!insetlist.empty()) {
 697                 InsetBase * inset = insetlist.begin()->inset;
 698                 if (inset->lyxCode() == InsetBase::BIBITEM_CODE)
 699                         return static_cast<InsetBibitem *>(inset);
 700         }
 701         return 0;
 702 }
 703
 704
 705 bool Paragraph::forceDefaultParagraphs() const
 706 {
 707         return inInset() && inInset()->forceDefaultParagraphs(0);
 708 }
 709
 710
 711 namespace {
 712
 713 // paragraphs inside floats need different alignment tags to avoid
 714 // unwanted space
 715
 716 bool noTrivlistCentering(InsetBase::Code code)
 717 {
 718         return code == InsetBase::FLOAT_CODE || code == InsetBase::WRAP_CODE;
 719 }
 720
 721
 722 string correction(string const & orig)
 723 {
 724         if (orig == "flushleft")
 725                 return "raggedright";
 726         if (orig == "flushright")
 727                 return "raggedleft";
 728         if (orig == "center")
 729                 return "centering";
 730         return orig;
 731 }
 732
 733
 734 string const corrected_env(string const & suffix, string const & env,
 735         InsetBase::Code code)
 736 {
 737         string output = suffix + "{";
 738         if (noTrivlistCentering(code))
 739                 output += correction(env);
 740         else
 741                 output += env;
 742         output += "}";
 743         if (suffix == "\\begin")
 744                 output += "\n";
 745         return output;
 746 }
 747
 748
 749 int adjust_column_count(string const & str, int oldcol)
 750 {
 751         if (!contains(str, "\n"))
 752                 return oldcol + str.size();
 753         else {
 754                 string tmp;
 755                 return rsplit(str, tmp, '\n').size();
 756         }
 757 }
 758
 759 } // namespace anon
 760
 761
 762 // This could go to ParagraphParameters if we want to
 763 int Paragraph::startTeXParParams(BufferParams const & bparams,
 764                                  odocstream & os, bool moving_arg) const
 765 {
 766         int column = 0;
 767
 768         if (params().noindent()) {
 769                 os << "\\noindent ";
 770                 column += 10;
 771         }
 772
 773         switch (params().align()) {
 774         case LYX_ALIGN_NONE:
 775         case LYX_ALIGN_BLOCK:
 776         case LYX_ALIGN_LAYOUT:
 777         case LYX_ALIGN_SPECIAL:
 778                 break;
 779         case LYX_ALIGN_LEFT:
 780         case LYX_ALIGN_RIGHT:
 781         case LYX_ALIGN_CENTER:
 782                 if (moving_arg) {
 783                         os << "\\protect";
 784                         column += 8;
 785                 }
 786                 break;
 787         }
 788
 789         switch (params().align()) {
 790         case LYX_ALIGN_NONE:
 791         case LYX_ALIGN_BLOCK:
 792         case LYX_ALIGN_LAYOUT:
 793         case LYX_ALIGN_SPECIAL:
 794                 break;
 795         case LYX_ALIGN_LEFT: {
 796                 string output;
 797                 if (getParLanguage(bparams)->babel() != "hebrew")
 798                         output = corrected_env("\\begin", "flushleft", ownerCode());
 799                 else
 800                         output = corrected_env("\\begin", "flushright", ownerCode());
 801                 os << from_ascii(output);
 802                 column = adjust_column_count(output, column);
 803                 break;
 804         } case LYX_ALIGN_RIGHT: {
 805                 string output;
 806                 if (getParLanguage(bparams)->babel() != "hebrew")
 807                         output = corrected_env("\\begin", "flushright", ownerCode());
 808                 else
 809                         output = corrected_env("\\begin", "flushleft", ownerCode());
 810                 os << from_ascii(output);
 811                 column = adjust_column_count(output, column);
 812                 break;
 813         } case LYX_ALIGN_CENTER: {
 814                 string output;
 815                 output = corrected_env("\\begin", "center", ownerCode());
 816                 os << from_ascii(output);
 817                 column = adjust_column_count(output, column);
 818                 break;
 819         }
 820         }
 821
 822         return column;
 823 }
 824
 825
 826 // This could go to ParagraphParameters if we want to
 827 int Paragraph::endTeXParParams(BufferParams const & bparams,
 828                                odocstream & os, bool moving_arg) const
 829 {
 830         int column = 0;
 831
 832         switch (params().align()) {
 833         case LYX_ALIGN_NONE:
 834         case LYX_ALIGN_BLOCK:
 835         case LYX_ALIGN_LAYOUT:
 836         case LYX_ALIGN_SPECIAL:
 837                 break;
 838         case LYX_ALIGN_LEFT:
 839         case LYX_ALIGN_RIGHT:
 840         case LYX_ALIGN_CENTER:
 841                 if (moving_arg) {
 842                         os << "\\protect";
 843                         column = 8;
 844                 }
 845                 break;
 846         }
 847
 848         switch (params().align()) {
 849         case LYX_ALIGN_NONE:
 850         case LYX_ALIGN_BLOCK:
 851         case LYX_ALIGN_LAYOUT:
 852         case LYX_ALIGN_SPECIAL:
 853                 break;
 854         case LYX_ALIGN_LEFT: {
 855                 string output;
 856                 if (getParLanguage(bparams)->babel() != "hebrew")
 857                         output = corrected_env("\n\\par\\end", "flushleft", ownerCode());
 858                 else
 859                         output = corrected_env("\n\\par\\end", "flushright", ownerCode());
 860                 os << from_ascii(output);
 861                 column = adjust_column_count(output, column);
 862                 break;
 863         } case LYX_ALIGN_RIGHT: {
 864                 string output;
 865                 if (getParLanguage(bparams)->babel() != "hebrew")
 866                         output = corrected_env("\n\\par\\end", "flushright", ownerCode());
 867                 else
 868                         output = corrected_env("\n\\par\\end", "flushleft", ownerCode());
 869                 os << from_ascii(output);
 870                 column = adjust_column_count(output, column);
 871                 break;
 872         } case LYX_ALIGN_CENTER: {
 873                 string output;
 874                 output = corrected_env("\n\\par\\end", "center", ownerCode());
 875                 os << from_ascii(output);
 876                 column = adjust_column_count(output, column);
 877                 break;
 878         }
 879         }
 880
 881         return column;
 882 }
 883
 884
 885 // This one spits out the text of the paragraph
 886 bool Paragraph::simpleTeXOnePar(Buffer const & buf,
 887                                 BufferParams const & bparams,
 888                                 LyXFont const & outerfont,
 889                                 odocstream & os, TexRow & texrow,
 890                                 OutputParams const & runparams) const
 891 {
 892         lyxerr[Debug::LATEX] << "SimpleTeXOnePar...     " << this << endl;
 893
 894         bool return_value = false;
 895
 896         LyXLayout_ptr style;
 897
 898         // well we have to check if we are in an inset with unlimited
 899         // length (all in one row) if that is true then we don't allow
 900         // any special options in the paragraph and also we don't allow
 901         // any environment other than "Standard" to be valid!
 902         bool asdefault = forceDefaultParagraphs();
 903
 904         if (asdefault) {
 905                 style = bparams.getLyXTextClass().defaultLayout();
 906         } else {
 907                 style = layout();
 908         }
 909
 910         // Current base font for all inherited font changes, without any
 911         // change caused by an individual character, except for the language:
 912         // It is set to the language of the first character.
 913         // As long as we are in the label, this font is the base font of the
 914         // label. Before the first body character it is set to the base font
 915         // of the body.
 916         LyXFont basefont;
 917
 918         LaTeXFeatures features(buf, bparams, runparams);
 919
 920         // output change tracking marks only if desired,
 921         // if dvipost is installed,
 922         // and with dvi/ps (other formats don't work)
 923         bool const output = bparams.outputChanges
 924                 && runparams.flavor == OutputParams::LATEX
 925                 && features.isAvailable("dvipost");
 926
 927         // Maybe we have to create a optional argument.
 928         pos_type body_pos = beginOfBody();
 929         unsigned int column = 0;
 930
 931         if (body_pos > 0) {
 932                 // the optional argument is kept in curly brackets in
 933                 // case it contains a ']'
 934                 os << "[{";
 935                 column += 2;
 936                 basefont = getLabelFont(bparams, outerfont);
 937         } else {
 938                 basefont = getLayoutFont(bparams, outerfont);
 939         }
 940
 941         // Which font is currently active?
 942         LyXFont running_font(basefont);
 943         // Do we have an open font change?
 944         bool open_font = false;
 945
 946         Change::Type runningChangeType = Change::UNCHANGED;
 947
 948         texrow.start(id(), 0);
 949
 950         // if the paragraph is empty, the loop will not be entered at all
 951         if (empty()) {
 952                 if (style->isCommand()) {
 953                         os << '{';
 954                         ++column;
 955                 }
 956                 if (!asdefault)
 957                         column += startTeXParParams(bparams, os,
 958                                                     runparams.moving_arg);
 959         }
 960
 961         for (pos_type i = 0; i < size(); ++i) {
 962                 ++column;
 963                 // First char in paragraph or after label?
 964                 if (i == body_pos) {
 965                         if (body_pos > 0) {
 966                                 if (open_font) {
 967                                         column += running_font.latexWriteEndChanges(os, basefont, basefont);
 968                                         open_font = false;
 969                                 }
 970                                 basefont = getLayoutFont(bparams, outerfont);
 971                                 running_font = basefont;
 972                                 os << "}] ";
 973                                 column +=3;
 974                         }
 975                         if (style->isCommand()) {
 976                                 os << '{';
 977                                 ++column;
 978                         }
 979
 980                         if (!asdefault)
 981                                 column += startTeXParParams(bparams, os,
 982                                                             runparams.moving_arg);
 983                 }
 984
 985                 value_type c = getChar(i);
 986
 987                 // Fully instantiated font
 988                 LyXFont font = getFont(bparams, i, outerfont);
 989
 990                 LyXFont const last_font = running_font;
 991
 992                 // Spaces at end of font change are simulated to be
 993                 // outside font change, i.e. we write "\textXX{text} "
 994                 // rather than "\textXX{text }". (Asger)
 995                 if (open_font && c == ' ' && i <= size() - 2) {
 996                         LyXFont const & next_font = getFont(bparams, i + 1, outerfont);
 997                         if (next_font != running_font && next_font != font) {
 998                                 font = next_font;
 999                         }
1000                 }
1001
1002                 // We end font definition before blanks
1003                 if (open_font &&
1004                     (font != running_font ||
1005                      font.language() != running_font.language()))
1006                 {
1007                         column += running_font.latexWriteEndChanges(os,
1008                                                                     basefont,
1009                                                                     (i == body_pos-1) ? basefont : font);
1010                         running_font = basefont;
1011                         open_font = false;
1012                 }
1013
1014                 // Blanks are printed before start of fontswitch
1015                 if (c == ' ') {
1016                         // Do not print the separation of the optional argument
1017                         if (i != body_pos - 1) {
1018                                 pimpl_->simpleTeXBlanks(os, texrow, i,
1019                                                        column, font, *style);
1020                         }
1021                 }
1022
1023                 // Do we need to change font?
1024                 if ((font != running_font ||
1025                      font.language() != running_font.language()) &&
1026                         i != body_pos - 1)
1027                 {
1028                         column += font.latexWriteStartChanges(os, basefont,
1029                                                               last_font);
1030                         running_font = font;
1031                         open_font = true;
1032                 }
1033
1034                 Change::Type changeType = pimpl_->lookupChange(i).type;
1035
1036                 column += Changes::latexMarkChange(os, runningChangeType,
1037                         changeType, output);
1038                 runningChangeType = changeType;
1039
1040                 // do not output text which is marked deleted
1041                 // if change tracking output is not desired
1042                 if (output || runningChangeType != Change::DELETED) {
1043                         OutputParams rp = runparams;
1044                         rp.free_spacing = style->free_spacing;
1045                         rp.local_font = &font;
1046                         rp.intitle = style->intitle;
1047                         pimpl_->simpleTeXSpecialChars(buf, bparams,
1048                                                 os, texrow, rp,
1049                                                 font, running_font,
1050                                                 basefont, outerfont, open_font,
1051                                                 runningChangeType,
1052                                                 *style, i, column, c);
1053                 }
1054         }
1055
1056         column += Changes::latexMarkChange(os,
1057                         runningChangeType, Change::UNCHANGED, output);
1058
1059         // If we have an open font definition, we have to close it
1060         if (open_font) {
1061 #ifdef FIXED_LANGUAGE_END_DETECTION
1062                 if (next_) {
1063                         running_font
1064                                 .latexWriteEndChanges(os, basefont,
1065                                                       next_->getFont(bparams,
1066                                                       0, outerfont));
1067                 } else {
1068                         running_font.latexWriteEndChanges(os, basefont,
1069                                                           basefont);
1070                 }
1071 #else
1072 #ifdef WITH_WARNINGS
1073 //#warning For now we ALWAYS have to close the foreign font settings if they are
1074 //#warning there as we start another \selectlanguage with the next paragraph if
1075 //#warning we are in need of this. This should be fixed sometime (Jug)
1076 #endif
1077                 running_font.latexWriteEndChanges(os, basefont,  basefont);
1078 #endif
1079         }
1080
1081         // Needed if there is an optional argument but no contents.
1082         if (body_pos > 0 && body_pos == size()) {
1083                 os << "}]~";
1084                 return_value = false;
1085         }
1086
1087         if (!asdefault) {
1088                 column += endTeXParParams(bparams, os, runparams.moving_arg);
1089         }
1090
1091         lyxerr[Debug::LATEX] << "SimpleTeXOnePar...done " << this << endl;
1092         return return_value;
1093 }
1094
1095
1096 namespace {
1097
1098 // checks, if newcol chars should be put into this line
1099 // writes newline, if necessary.
1100 void sgmlLineBreak(ostream & os, string::size_type & colcount,
1101                           string::size_type newcol)
1102 {
1103         colcount += newcol;
1104         if (colcount > lyxrc.ascii_linelen) {
1105                 os << "\n";
1106                 colcount = newcol; // assume write after this call
1107         }
1108 }
1109
1110 enum PAR_TAG {
1111         PAR_NONE=0,
1112         TT = 1,
1113         SF = 2,
1114         BF = 4,
1115         IT = 8,
1116         SL = 16,
1117         EM = 32
1118 };
1119
1120
1121 string tag_name(PAR_TAG const & pt) {
1122         switch (pt) {
1123         case PAR_NONE: return "!-- --";
1124         case TT: return "tt";
1125         case SF: return "sf";
1126         case BF: return "bf";
1127         case IT: return "it";
1128         case SL: return "sl";
1129         case EM: return "em";
1130         }
1131         return "";
1132 }
1133
1134
1135 inline
1136 void operator|=(PAR_TAG & p1, PAR_TAG const & p2)
1137 {
1138         p1 = static_cast<PAR_TAG>(p1 | p2);
1139 }
1140
1141
1142 inline
1143 void reset(PAR_TAG & p1, PAR_TAG const & p2)
1144 {
1145         p1 = static_cast<PAR_TAG>(p1 & ~p2);
1146 }
1147
1148 } // anon
1149
1150
1151 bool Paragraph::emptyTag() const
1152 {
1153         for (pos_type i = 0; i < size(); ++i) {
1154                 if (isInset(i)) {
1155                         InsetBase const * inset = getInset(i);
1156                         InsetBase::Code lyx_code = inset->lyxCode();
1157                         if (lyx_code != InsetBase::TOC_CODE &&
1158                             lyx_code != InsetBase::INCLUDE_CODE &&
1159                             lyx_code != InsetBase::GRAPHICS_CODE &&
1160                             lyx_code != InsetBase::ERT_CODE &&
1161                             lyx_code != InsetBase::FLOAT_CODE &&
1162                             lyx_code != InsetBase::TABULAR_CODE) {
1163                                 return false;
1164                         }
1165                 } else {
1166                         value_type c = getChar(i);
1167                         if (c != ' ' && c != '\t')
1168                                 return false;
1169                 }
1170         }
1171         return true;
1172 }
1173
1174
1175 string Paragraph::getID(Buffer const & buf, OutputParams const & runparams) const
1176 {
1177         for (pos_type i = 0; i < size(); ++i) {
1178                 if (isInset(i)) {
1179                         InsetBase const * inset = getInset(i);
1180                         InsetBase::Code lyx_code = inset->lyxCode();
1181                         if (lyx_code == InsetBase::LABEL_CODE) {
1182                                 string const id = static_cast<InsetCommand const *>(inset)->getContents();
1183                                 return "id='" + to_utf8(sgml::cleanID(buf, runparams, from_utf8(id))) + "'";
1184                         }
1185                 }
1186
1187         }
1188         return string();
1189 }
1190
1191
1192 pos_type Paragraph::getFirstWord(Buffer const & buf, odocstream & os, OutputParams const & runparams) const
1193 {
1194         pos_type i;
1195         for (i = 0; i < size(); ++i) {
1196                 if (isInset(i)) {
1197                         InsetBase const * inset = getInset(i);
1198                         inset->docbook(buf, os, runparams);
1199                 } else {
1200                         value_type c = getChar(i);
1201                         if (c == ' ')
1202                                 break;
1203                         os << sgml::escapeChar(c);
1204                 }
1205         }
1206         return i;
1207 }
1208
1209
1210 bool Paragraph::onlyText(Buffer const & buf, LyXFont const & outerfont, pos_type initial) const
1211 {
1212         LyXFont font_old;
1213
1214         for (pos_type i = initial; i < size(); ++i) {
1215                 LyXFont font = getFont(buf.params(), i, outerfont);
1216                 if (isInset(i))
1217                         return false;
1218                 if (i != initial && font != font_old)
1219                         return false;
1220                 font_old = font;
1221         }
1222
1223         return true;
1224 }
1225
1226
1227 void Paragraph::simpleDocBookOnePar(Buffer const & buf,
1228                                     odocstream & os,
1229                                     OutputParams const & runparams,
1230                                     LyXFont const & outerfont,
1231                                     pos_type initial) const
1232 {
1233         bool emph_flag = false;
1234
1235         LyXLayout_ptr const & style = layout();
1236         LyXFont font_old =
1237                 style->labeltype == LABEL_MANUAL ? style->labelfont : style->font;
1238
1239         if (style->pass_thru && !onlyText(buf, outerfont, initial))
1240                 os << "]]>";
1241
1242         // parsing main loop
1243         for (pos_type i = initial; i < size(); ++i) {
1244                 LyXFont font = getFont(buf.params(), i, outerfont);
1245
1246                 // handle <emphasis> tag
1247                 if (font_old.emph() != font.emph()) {
1248                         if (font.emph() == LyXFont::ON) {
1249                                 os << "<emphasis>";
1250                                 emph_flag = true;
1251                         } else if (i != initial) {
1252                                 os << "</emphasis>";
1253                                 emph_flag = false;
1254                         }
1255                 }
1256
1257                 if (isInset(i)) {
1258                         InsetBase const * inset = getInset(i);
1259                         inset->docbook(buf, os, runparams);
1260                 } else {
1261                         value_type c = getChar(i);
1262
1263                         if (style->pass_thru)
1264                                 os.put(c);
1265                         else
1266                                 os << sgml::escapeChar(c);
1267                 }
1268                 font_old = font;
1269         }
1270
1271         if (emph_flag) {
1272                 os << "</emphasis>";
1273         }
1274
1275         if (style->free_spacing)
1276                 os << '\n';
1277         if (style->pass_thru && !onlyText(buf, outerfont, initial))
1278                 os << "<![CDATA[";
1279 }
1280
1281
1282 bool Paragraph::isNewline(pos_type pos) const
1283 {
1284         return isInset(pos)
1285                 && getInset(pos)->lyxCode() == InsetBase::NEWLINE_CODE;
1286 }
1287
1288
1289 bool Paragraph::isLineSeparator(pos_type pos) const
1290 {
1291         value_type const c = getChar(pos);
1292         return isLineSeparatorChar(c)
1293                 || (c == Paragraph::META_INSET && getInset(pos) &&
1294                 getInset(pos)->isLineSeparator());
1295 }
1296
1297
1298 /// Used by the spellchecker
1299 bool Paragraph::isLetter(pos_type pos) const
1300 {
1301         if (isInset(pos))
1302                 return getInset(pos)->isLetter();
1303         else {
1304                 value_type const c = getChar(pos);
1305                 return isLetterChar(c) || isDigit(c);
1306         }
1307 }
1308
1309
1310 Language const *
1311 Paragraph::getParLanguage(BufferParams const & bparams) const
1312 {
1313         if (!empty())
1314                 return getFirstFontSettings(bparams).language();
1315 #ifdef WITH_WARNINGS
1316 #warning FIXME we should check the prev par as well (Lgb)
1317 #endif
1318         return bparams.language;
1319 }
1320
1321
1322 bool Paragraph::isRightToLeftPar(BufferParams const & bparams) const
1323 {
1324         return lyxrc.rtl_support
1325                 && getParLanguage(bparams)->rightToLeft()
1326                 && ownerCode() != InsetBase::ERT_CODE;
1327 }
1328
1329
1330 void Paragraph::changeLanguage(BufferParams const & bparams,
1331                                Language const * from, Language const * to)
1332 {
1333         // change language including dummy font change at the end
1334         for (pos_type i = 0; i <= size(); ++i) {
1335                 LyXFont font = getFontSettings(bparams, i);
1336                 if (font.language() == from) {
1337                         font.setLanguage(to);
1338                         setFont(i, font);
1339                 }
1340         }
1341 }
1342
1343
1344 bool Paragraph::isMultiLingual(BufferParams const & bparams) const
1345 {
1346         Language const * doc_language = bparams.language;
1347         Pimpl::FontList::const_iterator cit = pimpl_->fontlist.begin();
1348         Pimpl::FontList::const_iterator end = pimpl_->fontlist.end();
1349
1350         for (; cit != end; ++cit)
1351                 if (cit->font().language() != ignore_language &&
1352                     cit->font().language() != latex_language &&
1353                     cit->font().language() != doc_language)
1354                         return true;
1355         return false;
1356 }
1357
1358
1359 // Convert the paragraph to a string.
1360 // Used for building the table of contents
1361 docstring const Paragraph::asString(Buffer const & buffer, bool label) const
1362 {
1363         OutputParams runparams;
1364         return asString(buffer, runparams, label);
1365 }
1366
1367
1368 docstring const Paragraph::asString(Buffer const & buffer,
1369                                  OutputParams const & runparams,
1370                                  bool label) const
1371 {
1372 #if 0
1373         string s;
1374         if (label && !params().labelString().empty())
1375                 s += params().labelString() + ' ';
1376
1377         for (pos_type i = 0; i < size(); ++i) {
1378                 value_type c = getChar(i);
1379                 if (isPrintable(c))
1380                         s += c;
1381                 else if (c == META_INSET &&
1382                          getInset(i)->lyxCode() == InsetBase::MATH_CODE) {
1383                         ostringstream os;
1384                         getInset(i)->plaintext(buffer, os, runparams);
1385                         s += subst(STRCONV(os.str()),'\n',' ');
1386                 }
1387         }
1388
1389         return s;
1390 #else
1391         // This should really be done by the caller and not here.
1392         docstring ret = asString(buffer, runparams, 0, size(), label);
1393         return subst(ret, '\n', ' ');
1394 #endif
1395 }
1396
1397
1398 docstring const Paragraph::asString(Buffer const & buffer,
1399                                  pos_type beg, pos_type end, bool label) const
1400 {
1401
1402         OutputParams const runparams;
1403         return asString(buffer, runparams, beg, end, label);
1404 }
1405
1406
1407 docstring const Paragraph::asString(Buffer const & buffer,
1408                                  OutputParams const & runparams,
1409                                  pos_type beg, pos_type end, bool label) const
1410 {
1411         lyx::odocstringstream os;
1412
1413         if (beg == 0 && label && !params().labelString().empty())
1414                 os << params().labelString() << ' ';
1415
1416         for (pos_type i = beg; i < end; ++i) {
1417                 value_type const c = getUChar(buffer.params(), i);
1418                 if (isPrintable(c))
1419                         os.put(c);
1420                 else if (c == META_INSET)
1421                         getInset(i)->textString(buffer, os, runparams);
1422         }
1423
1424         return os.str();
1425 }
1426
1427
1428 void Paragraph::setInsetOwner(InsetBase * inset)
1429 {
1430         pimpl_->inset_owner = inset;
1431 }
1432
1433
1434 Change const Paragraph::lookupChange(pos_type pos) const
1435 {
1436         BOOST_ASSERT(pos <= size());
1437         return pimpl_->lookupChange(pos);
1438 }
1439
1440
1441 bool Paragraph::isChanged(pos_type start, pos_type end) const
1442 {
1443         return pimpl_->isChanged(start, end);
1444 }
1445
1446
1447 bool Paragraph::isMergedOnEndOfParDeletion(bool trackChanges) const
1448 {
1449         return pimpl_->isMergedOnEndOfParDeletion(trackChanges);
1450 }
1451
1452
1453 void Paragraph::setChange(Change const & change)
1454 {
1455         pimpl_->setChange(change);
1456 }
1457
1458
1459 void Paragraph::setChange(pos_type pos, Change const & change)
1460 {
1461         pimpl_->setChange(pos, change);
1462 }
1463
1464
1465 void Paragraph::acceptChanges(pos_type start, pos_type end)
1466 {
1467         return pimpl_->acceptChanges(start, end);
1468 }
1469
1470
1471 void Paragraph::rejectChanges(pos_type start, pos_type end)
1472 {
1473         return pimpl_->rejectChanges(start, end);
1474 }
1475
1476
1477 int Paragraph::id() const
1478 {
1479         return pimpl_->id_;
1480 }
1481
1482
1483 LyXLayout_ptr const & Paragraph::layout() const
1484 {
1485         return layout_;
1486 }
1487
1488
1489 void Paragraph::layout(LyXLayout_ptr const & new_layout)
1490 {
1491         layout_ = new_layout;
1492 }
1493
1494
1495 InsetBase * Paragraph::inInset() const
1496 {
1497         return pimpl_->inset_owner;
1498 }
1499
1500
1501 InsetBase::Code Paragraph::ownerCode() const
1502 {
1503         return pimpl_->inset_owner
1504                 ? pimpl_->inset_owner->lyxCode() : InsetBase::NO_CODE;
1505 }
1506
1507
1508 void Paragraph::clearContents()
1509 {
1510         text_.clear();
1511 }
1512
1513
1514 ParagraphParameters & Paragraph::params()
1515 {
1516         return pimpl_->params;
1517 }
1518
1519
1520 ParagraphParameters const & Paragraph::params() const
1521 {
1522         return pimpl_->params;
1523 }
1524
1525
1526 bool Paragraph::isFreeSpacing() const
1527 {
1528         if (layout()->free_spacing)
1529                 return true;
1530
1531         // for now we just need this, later should we need this in some
1532         // other way we can always add a function to InsetBase too.
1533         return ownerCode() == InsetBase::ERT_CODE;
1534 }
1535
1536
1537 bool Paragraph::allowEmpty() const
1538 {
1539         if (layout()->keepempty)
1540                 return true;
1541         return ownerCode() == InsetBase::ERT_CODE;
1542 }
1543
1544
1545 char_type Paragraph::transformChar(char_type c, pos_type pos) const
1546 {
1547         if (!Encodings::is_arabic(c))
1548                 if (lyxrc.font_norm_type == LyXRC::ISO_8859_6_8 && isDigit(c))
1549                         // FIXME UNICODE What does this do?
1550                         return c + (0xb0 - '0');
1551                 else
1552                         return c;
1553
1554         value_type const prev_char = pos > 0 ? getChar(pos - 1) : ' ';
1555         value_type next_char = ' ';
1556
1557         for (pos_type i = pos + 1, end = size(); i < end; ++i) {
1558                 value_type const par_char = getChar(i);
1559                 if (!Encodings::isComposeChar_arabic(par_char)) {
1560                         next_char = par_char;
1561                         break;
1562                 }
1563         }
1564
1565         if (Encodings::is_arabic(next_char)) {
1566                 if (Encodings::is_arabic(prev_char) &&
1567                         !Encodings::is_arabic_special(prev_char))
1568                         return Encodings::transformChar(c, Encodings::FORM_MEDIAL);
1569                 else
1570                         return Encodings::transformChar(c, Encodings::FORM_INITIAL);
1571         } else {
1572                 if (Encodings::is_arabic(prev_char) &&
1573                         !Encodings::is_arabic_special(prev_char))
1574                         return Encodings::transformChar(c, Encodings::FORM_FINAL);
1575                 else
1576                         return Encodings::transformChar(c, Encodings::FORM_ISOLATED);
1577         }
1578 }
1579
1580
1581 bool Paragraph::hfillExpansion(Row const & row, pos_type pos) const
1582 {
1583         if (!isHfill(pos))
1584                 return false;
1585
1586         BOOST_ASSERT(pos >= row.pos() && pos < row.endpos());
1587
1588         // expand at the end of a row only if there is another hfill on the same row
1589         if (pos == row.endpos() - 1) {
1590                 for (pos_type i = row.pos(); i < pos; i++) {
1591                         if (isHfill(i))
1592                                 return true;
1593                 }
1594                 return false;
1595         }
1596
1597         // expand at the beginning of a row only if it is the first row of a paragraph
1598         if (pos == row.pos()) {
1599                 return pos == 0;
1600         }
1601
1602         // do not expand in some labels
1603         if (layout()->margintype != MARGIN_MANUAL && pos < beginOfBody())
1604                 return false;
1605
1606         // if there is anything between the first char of the row and
1607         // the specified position that is neither a newline nor an hfill,
1608         // the hfill will be expanded, otherwise it won't
1609         for (pos_type i = row.pos(); i < pos; i++) {
1610                 if (!isNewline(i) && !isHfill(i))
1611                         return true;
1612         }
1613         return false;
1614 }
1615
1616
1617 bool Paragraph::checkBiblio(bool track_changes)
1618 {
1619         // Add bibitem insets if necessary
1620         if (layout()->labeltype != LABEL_BIBLIO)
1621                 return false;
1622
1623         bool hasbibitem = !insetlist.empty()
1624                 // Insist on it being in pos 0
1625                 && getChar(0) == Paragraph::META_INSET
1626                 && insetlist.begin()->inset->lyxCode() == InsetBase::BIBITEM_CODE;
1627
1628         if (hasbibitem)
1629                 return false;
1630
1631         InsetBibitem * inset(new InsetBibitem(InsetCommandParams("bibitem")));
1632         insertInset(0, static_cast<InsetBase *>(inset),
1633                 Change(track_changes ? Change::INSERTED : Change::UNCHANGED));
1634
1635         return true;
1636 }
1637
1638 } // namespace lyx