]> git.lyx.org Git - features.git/commitdiff
zlib stuff
authorLars Gullik Bjønnes <larsbj@gullik.org>
Sun, 27 Jul 2003 23:40:08 +0000 (23:40 +0000)
committerLars Gullik Bjønnes <larsbj@gullik.org>
Sun, 27 Jul 2003 23:40:08 +0000 (23:40 +0000)
git-svn-id: svn://svn.lyx.org/lyx/lyx-devel/trunk@7405 a592a061-630c-0410-9148-cb99ea01b6c8

12 files changed:
po/POTFILES.in
src/ChangeLog
src/Makefile.am
src/buffer.C
src/buffer.h
src/lyxlex_pimpl.C
src/lyxlex_pimpl.h
src/support/ChangeLog
src/support/Makefile.am
src/support/gzstream.C [new file with mode: 0644]
src/support/gzstream.h [new file with mode: 0644]
src/tex2lyx/Makefile.am

index 87864eb78a9c19373b71ea7ee61e8fbd9678bc2c..b03accf31800da5668b93156763525636410f1b5 100644 (file)
@@ -179,6 +179,7 @@ src/mathed/ref_inset.C
 src/paragraph.C
 src/paragraph_funcs.C
 src/rowpainter.C
+src/support/path_defines.C
 src/text.C
 src/text2.C
 src/text3.C
index 1d95ed92722bdb698ebd22775431c5e0c0bffb0b..59bc1c6ed3991f31977e569a7e74ec7d949e4048 100644 (file)
@@ -1,3 +1,14 @@
+2003-07-28  Lars Gullik Bjønnes  <larsbj@gullik.net>
+
+       * lyxlex_pimpl.C (setFile): compress stuff
+
+       * buffer.C (writeFile): add some compression stuff
+       (do_writeFile): new func, dont call expliti close... will this
+       breake anything?
+
+
+       * Makefile.am (lyx_LDADD): add -lz
+
 2003-07-28  José Matos  <jamatos@fep.up.pt>
 
        * buffer.C: increment file format.
        * Makefile.am: remove special casing for configure-time setting of
        LYX_DIR, TOP_SRCDIR and LOCALEDIR.
 
-       * lyx_main.C (init): remove all Jean-Marc's magic setting of 
+       * lyx_main.C (init): remove all Jean-Marc's magic setting of
        system_lyxdir, build_lyxdir and user_lyxdir into the support lib.
 
 2003-07-26  André Pönitz  <poenitz@gmx.net>
 
-       * paragraph_func.[Ch]:  
+       * paragraph_func.[Ch]:
        * paragraph.C (realizeFont): inline it whereever it is used
-               
+
        * rowpainter.C:
        * text.C:
        * text2.C:
index 81b9e7f1b73baed245a843550d59606bd2641f3f..782df6578a6737544d620a4803d45aa5957628f0 100644 (file)
@@ -31,7 +31,7 @@ BOOST_LIBS = -lboost_regex -lboost_signals
 endif
 
 lyx_LDADD = $(LYX_CONV_LIBS) $(BOOST_LIBS) $(INTLLIBS) \
-       $(AIKSAURUS_LIBS) @LIBS@
+       $(AIKSAURUS_LIBS) @LIBS@ -lz
 
 lyx_DEPENDENCIES = $(LYX_CONV_LIBS) $(BOOST_LIBS) $(INTLLIBS)
 
index 4c9c7c1bd082c0493d0492c161c2b1456065104f..d242264a1f2a8156b4613febfdeee4c22dde0df5 100644 (file)
@@ -65,6 +65,7 @@
 #include "support/FileInfo.h"
 #include "support/lyxmanip.h"
 #include "support/lyxtime.h"
+#include "support/gzstream.h"
 
 #include <boost/bind.hpp>
 #include <boost/tuple/tuple.hpp>
@@ -636,10 +637,29 @@ bool Buffer::writeFile(string const & fname) const
                return false;
        }
 
+       bool const compressed = (fname.substr(fname.size() - 3, 3) == ".gz");
+
+       if (compressed) {
+               gz::ogzstream ofs(fname.c_str());
+
+               if (!ofs)
+                       return false;
+
+               return do_writeFile(ofs);
+
+       }
+
        ofstream ofs(fname.c_str());
        if (!ofs)
                return false;
 
+       return do_writeFile(ofs);
+}
+
+
+bool Buffer::do_writeFile(ostream & ofs) const
+{
+
 #ifdef HAVE_LOCALE
        // Use the standard "C" locale for file output.
        ofs.imbue(std::locale::classic());
@@ -669,7 +689,8 @@ bool Buffer::writeFile(string const & fname) const
        // Write marker that shows file is complete
        ofs << "\n\\the_end" << endl;
 
-       ofs.close();
+       // Shouldn't really be needed....
+       //ofs.close();
 
        // how to check if close went ok?
        // Following is an attempt... (BE 20001011)
index d3fd4229e3b87014e4218f2581e2354baff41814..60c98c841b8579ce0bfd0d4ea81cbb8b7e02d224 100644 (file)
@@ -292,6 +292,8 @@ public:
        AuthorList & authors();
 
 private:
+       bool do_writeFile(std::ostream & ofs) const;
+
        typedef std::map<string, bool> DepClean;
 
        /// need to regenerate .tex ?
index 2962302d062b789ef82297bf0839133851f5d577..da7d92d9a3ab2b76c11e49dbe3412217e168165f 100644 (file)
@@ -113,17 +113,36 @@ void LyXLex::Pimpl::popTable()
 
 bool LyXLex::Pimpl::setFile(string const & filename)
 {
+       // Is this a compressed file or not?
+       bool const compressed = (filename.substr(filename.size() - 3, 3) == ".gz");
+
        // The check only outputs a debug message, because it triggers
        // a bug in compaq cxx 6.2, where is_open() returns 'true' for a
        // fresh new filebuf.  (JMarc)
-       if (fb__.is_open() || is.tellg() > 0)
-               lyxerr[Debug::LYXLEX] << "Error in LyXLex::setFile: "
-                       "file or stream already set." << endl;
-       fb__.open(filename.c_str(), ios::in);
-       is.rdbuf(&fb__);
-       name = filename;
-       lineno = 0;
-       return fb__.is_open() && is.good();
+       if (compressed) {
+               lyxerr << "lyxlex: compressed" << endl;
+
+               if (gz__.is_open() || is.tellg() > 0)
+                       lyxerr[Debug::LYXLEX] << "Error in LyXLex::setFile: "
+                               "file or stream already set." << endl;
+               gz__.open(filename.c_str(), ios::in);
+               is.rdbuf(&gz__);
+               name = filename;
+               lineno = 0;
+               return gz__.is_open() && is.good();
+       } else {
+               lyxerr << "lyxlex: UNcompressed" << endl;
+
+               if (fb__.is_open() || is.tellg() > 0)
+                       lyxerr[Debug::LYXLEX] << "Error in LyXLex::setFile: "
+                               "file or stream already set." << endl;
+               fb__.open(filename.c_str(), ios::in);
+               is.rdbuf(&fb__);
+               name = filename;
+               lineno = 0;
+               return fb__.is_open() && is.good();
+       }
+
 }
 
 
index dd18a1262f70cce19d2ec75f66307fcd80dad229..bc5876aba61f1e82dfaca4b284dfd1cd3b08e406 100644 (file)
@@ -5,6 +5,8 @@
 
 #include "lyxlex.h"
 
+#include "support/gzstream.h"
+
 #include <boost/utility.hpp>
 
 #include <fstream>
@@ -43,8 +45,11 @@ struct LyXLex::Pimpl : boost::noncopyable {
        bool nextToken();
        ///
        void pushToken(string const &);
-       /// fb__ is only used to open files, the stream is accessed through is
+       /// fb__ is only used to open files, the stream is accessed through is.
        std::filebuf fb__;
+       /// gz__ is only used to open files, the stream is accessed through is.
+       gz::gzstreambuf gz__;
+
        /// the stream that we use.
        std::istream is;
        ///
index f2e7616735cb77fcbde738b949ffe19444b65fc5..bbd9ad4366e2a4c17998f8ee9cf2171293fe9ddf 100644 (file)
@@ -1,6 +1,12 @@
+2003-07-28  Lars Gullik Bjønnes  <larsbj@gullik.net>
+
+       * gzstream.h: new file
+
+       * gzstream.C: new file
+
 2003-07-27  Angus Leeming  <leeming@lyx.org>
 
-       * path_defines.{h,C.in} (build_lyxdir, system_lyxdir, 
+       * path_defines.{h,C.in} (build_lyxdir, system_lyxdir,
        user_lyxdir): are now functions, not global vars.
 
        * Makefile.am: set build_lyxdir at make time.
        * path_defines.{h,C.in}: new files. Store/set the various lyx
        paths, lyx_dir, top_srcdir, localedir, system_lyxdir, build_lyxdir
        user_lyxdir.
-       
+
        * Makefile.am: add some magic to enable the user to set the path to
        the system-level lyx support files, the top of the lyx build tree
        and the system-level lyx locale directory at _make_ time rather
        than configure time.
-       
+
        * .cvsignore: add path_defines.C.
 
 2003-07-26  Angus Leeming  <leeming@lyx.org>
index f118de12d23619d27a211042f211ed195f4ebabd..fa803b8d81bb89003be6afda3262d2c3c7f0384f 100644 (file)
@@ -46,6 +46,8 @@ libsupport_la_SOURCES = \
        forkedcontr.C \
        forkedcontr.h \
        getcwd.C \
+       gzstream.C \
+       gzstream.h \
        kill.C \
        limited_stack.h \
        lstrings.C \
diff --git a/src/support/gzstream.C b/src/support/gzstream.C
new file mode 100644 (file)
index 0000000..ce356c7
--- /dev/null
@@ -0,0 +1,165 @@
+// ============================================================================
+// gzstream, C++ iostream classes wrapping the zlib compression library.
+// Copyright (C) 2001  Deepak Bandyopadhyay, Lutz Kettner
+//
+// This library is free software; you can redistribute it and/or
+// modify it under the terms of the GNU Lesser General Public
+// License as published by the Free Software Foundation; either
+// version 2.1 of the License, or (at your option) any later version.
+//
+// This library is distributed in the hope that it will be useful,
+// but WITHOUT ANY WARRANTY; without even the implied warranty of
+// MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
+// Lesser General Public License for more details.
+//
+// You should have received a copy of the GNU Lesser General Public
+// License along with this library; if not, write to the Free Software
+// Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
+// ============================================================================
+//
+// File          : gzstream.C
+// Revision      : $Revision: 1.1 $
+// Revision_date : $Date: 2003/07/27 23:40:08 $
+// Author(s)     : Deepak Bandyopadhyay, Lutz Kettner
+// 
+// Standard streambuf implementation following Nicolai Josuttis, "The 
+// Standard C++ Library".
+// ============================================================================
+
+#include <gzstream.h>
+#include <iostream>
+#include <string.h>  // for memcpy
+
+#ifdef GZSTREAM_NAMESPACE
+namespace GZSTREAM_NAMESPACE {
+#endif
+
+// ----------------------------------------------------------------------------
+// Internal classes to implement gzstream. See header file for user classes.
+// ----------------------------------------------------------------------------
+
+// --------------------------------------
+// class gzstreambuf:
+// --------------------------------------
+
+gzstreambuf* gzstreambuf::open( const char* name, int open_mode) {
+    if ( is_open())
+        return (gzstreambuf*)0;
+    mode = open_mode;
+    // no append nor read/write mode
+    if ((mode & std::ios::ate) || (mode & std::ios::app)
+        || ((mode & std::ios::in) && (mode & std::ios::out)))
+        return (gzstreambuf*)0;
+    char  fmode[10];
+    char* fmodeptr = fmode;
+    if ( mode & std::ios::in)
+        *fmodeptr++ = 'r';
+    else if ( mode & std::ios::out)
+        *fmodeptr++ = 'w';
+    *fmodeptr++ = 'b';
+    *fmodeptr = '\0';
+    file = gzopen( name, fmode);
+    if (file == 0)
+        return (gzstreambuf*)0;
+    opened = 1;
+    return this;
+}
+
+gzstreambuf * gzstreambuf::close() {
+    if ( is_open()) {
+        sync();
+        opened = 0;
+        if ( gzclose( file) == Z_OK)
+            return this;
+    }
+    return (gzstreambuf*)0;
+}
+
+int gzstreambuf::underflow() { // used for input buffer only
+    if ( gptr() && ( gptr() < egptr()))
+        return * reinterpret_cast<unsigned char *>( gptr());
+
+    if ( ! (mode & std::ios::in) || ! opened)
+        return EOF;
+    // Josuttis' implementation of inbuf
+    int n_putback = gptr() - eback();
+    if ( n_putback > 4)
+        n_putback = 4;
+    memcpy( buffer + (4 - n_putback), gptr() - n_putback, n_putback);
+
+    int num = gzread( file, buffer+4, bufferSize-4);
+    if (num <= 0) // ERROR or EOF
+        return EOF;
+
+    // reset buffer pointers
+    setg( buffer + (4 - n_putback),   // beginning of putback area
+          buffer + 4,                 // read position
+          buffer + 4 + num);          // end of buffer
+
+    // return next character
+    return * reinterpret_cast<unsigned char *>( gptr());    
+}
+
+int gzstreambuf::flush_buffer() {
+    // Separate the writing of the buffer from overflow() and
+    // sync() operation.
+    int w = pptr() - pbase();
+    if ( gzwrite( file, pbase(), w) != w)
+        return EOF;
+    pbump( -w);
+    return w;
+}
+
+int gzstreambuf::overflow( int c) { // used for output buffer only
+    if ( ! ( mode & std::ios::out) || ! opened)
+        return EOF;
+    if (c != EOF) {
+        *pptr() = c;
+        pbump(1);
+    }
+    if ( flush_buffer() == EOF)
+        return EOF;
+    return c;
+}
+
+int gzstreambuf::sync() {
+    // Changed to use flush_buffer() instead of overflow( EOF)
+    // which caused improper behavior with std::endl and flush(),
+    // bug reported by Vincent Ricard.
+    if ( pptr() && pptr() > pbase()) {
+        if ( flush_buffer() == EOF)
+            return -1;
+    }
+    return 0;
+}
+
+// --------------------------------------
+// class gzstreambase:
+// --------------------------------------
+
+gzstreambase::gzstreambase( const char* name, int mode) {
+    init( &buf);
+    open( name, mode);
+}
+
+gzstreambase::~gzstreambase() {
+    buf.close();
+}
+
+void gzstreambase::open( const char* name, int open_mode) {
+    if ( ! buf.open( name, open_mode))
+        clear( rdstate() | std::ios::badbit);
+}
+
+void gzstreambase::close() {
+    if ( buf.is_open())
+        if ( ! buf.close())
+            clear( rdstate() | std::ios::badbit);
+}
+
+#ifdef GZSTREAM_NAMESPACE
+} // namespace GZSTREAM_NAMESPACE
+#endif
+
+// ============================================================================
+// EOF //
diff --git a/src/support/gzstream.h b/src/support/gzstream.h
new file mode 100644 (file)
index 0000000..0d7b6cb
--- /dev/null
@@ -0,0 +1,123 @@
+// ============================================================================
+// gzstream, C++ iostream classes wrapping the zlib compression library.
+// Copyright (C) 2001  Deepak Bandyopadhyay, Lutz Kettner
+//
+// This library is free software; you can redistribute it and/or
+// modify it under the terms of the GNU Lesser General Public
+// License as published by the Free Software Foundation; either
+// version 2.1 of the License, or (at your option) any later version.
+//
+// This library is distributed in the hope that it will be useful,
+// but WITHOUT ANY WARRANTY; without even the implied warranty of
+// MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
+// Lesser General Public License for more details.
+//
+// You should have received a copy of the GNU Lesser General Public
+// License along with this library; if not, write to the Free Software
+// Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
+// ============================================================================
+//
+// File          : gzstream.h
+// Revision      : $Revision: 1.1 $
+// Revision_date : $Date: 2003/07/27 23:40:08 $
+// Author(s)     : Deepak Bandyopadhyay, Lutz Kettner
+//
+// Standard streambuf implementation following Nicolai Josuttis, "The
+// Standard C++ Library".
+// ============================================================================
+
+#ifndef GZSTREAM_H
+#define GZSTREAM_H 1
+
+// standard C++ with new header file names and std:: namespace
+#include <iostream>
+#include <fstream>
+#include <zlib.h>
+
+// For LyX
+#define GZSTREAM_NAMESPACE gz
+
+#ifdef GZSTREAM_NAMESPACE
+namespace GZSTREAM_NAMESPACE {
+#endif
+
+// ----------------------------------------------------------------------------
+// Internal classes to implement gzstream. See below for user classes.
+// ----------------------------------------------------------------------------
+
+class gzstreambuf : public std::streambuf {
+private:
+    static const int bufferSize = 47+256;    // size of data buff
+    // totals 512 bytes under g++ for igzstream at the end.
+
+    gzFile           file;               // file handle for compressed file
+    char             buffer[bufferSize]; // data buffer
+    char             opened;             // open/close state of stream
+    int              mode;               // I/O mode
+
+    int flush_buffer();
+public:
+    gzstreambuf() : opened(0) {
+        setp( buffer, buffer + (bufferSize-1));
+        setg( buffer + 4,     // beginning of putback area
+              buffer + 4,     // read position
+              buffer + 4);    // end position
+        // ASSERT: both input & output capabilities will not be used together
+    }
+    int is_open() { return opened; }
+    gzstreambuf* open( const char* name, int open_mode);
+    gzstreambuf* close();
+    ~gzstreambuf() { close(); }
+
+    virtual int     overflow( int c = EOF);
+    virtual int     underflow();
+    virtual int     sync();
+};
+
+class gzstreambase : virtual public std::ios {
+protected:
+    gzstreambuf buf;
+public:
+    gzstreambase() { init(&buf); }
+    gzstreambase( const char* name, int open_mode);
+    ~gzstreambase();
+    void open( const char* name, int open_mode);
+    void close();
+    gzstreambuf* rdbuf() { return &buf; }
+};
+
+// ----------------------------------------------------------------------------
+// User classes. Use igzstream and ogzstream analogously to ifstream and
+// ofstream respectively. They read and write files based on the gz*
+// function interface of the zlib. Files are compatible with gzip compression.
+// ----------------------------------------------------------------------------
+
+class igzstream : public gzstreambase, public std::istream {
+public:
+    igzstream() : std::istream( &buf) {}
+    igzstream( const char* name, int open_mode = std::ios::in)
+        : gzstreambase( name, open_mode), std::istream( &buf) {}
+    gzstreambuf* rdbuf() { return gzstreambase::rdbuf(); }
+    void open( const char* name, int open_mode = std::ios::in) {
+        gzstreambase::open( name, open_mode);
+    }
+};
+
+class ogzstream : public gzstreambase, public std::ostream {
+public:
+    ogzstream() : std::ostream( &buf) {}
+    ogzstream( const char* name, int mode = std::ios::out)
+        : gzstreambase( name, mode), std::ostream( &buf) {}
+    gzstreambuf* rdbuf() { return gzstreambase::rdbuf(); }
+    void open( const char* name, int open_mode = std::ios::out) {
+        gzstreambase::open( name, open_mode);
+    }
+};
+
+#ifdef GZSTREAM_NAMESPACE
+} // namespace GZSTREAM_NAMESPACE
+#endif
+
+#endif // GZSTREAM_H
+// ============================================================================
+// EOF //
index 5896615b9e3e698444d2eeada10b3dc5aa184401..2a9db8313cc7b30ca768e4b941d787d823071981 100644 (file)
@@ -42,9 +42,9 @@ tex2lyx_SOURCES = \
 
 tex2lyx_LDADD = \
        ../support/libsupport.la \
-       ../../boost/libs/regex/src/libboostregex.la
+       ../../boost/libs/regex/src/libboostregex.la -lz
 
-FloatList.C: link_files 
+FloatList.C: link_files
 
 link_files:
        for i in $(linked_files); do \