]> git.lyx.org Git - lyx.git/blobdiff - po/lyx_pot.py
#5502 add binding for full screen toggle on mac
[lyx.git] / po / lyx_pot.py
index aa678b844c2444cd60a209e4ac57d0a1b0c3c8cd..c92939c9b90e4fabaacdbc443b96fa295c77399a 100755 (executable)
@@ -16,9 +16,9 @@
 # This script will extract translatable strings from input files and write
 # to output in gettext .pot format.
 #
+from __future__ import print_function
+
 import sys, os, re, getopt
-if sys.version_info < (2, 4, 0):
-    from sets import Set as set
 
 def relativePath(path, base):
     '''return relative path from top source dir'''
@@ -26,7 +26,7 @@ def relativePath(path, base):
     path1 = os.path.normpath(os.path.realpath(path)).split(os.sep)
     path2 = os.path.normpath(os.path.realpath(base)).split(os.sep)
     if path1[:len(path2)] != path2:
-        print "Path %s is not under top source directory" % path
+        print("Path %s is not under top source directory" % path)
     path3 = os.path.join(*path1[len(path2):]);
     # replace all \ by / such that we get the same comments on Windows and *nix
     path3 = path3.replace('\\', '/')
@@ -37,8 +37,8 @@ def writeString(outfile, infile, basefile, lineno, string):
     string = string.replace('\\', '\\\\').replace('"', '')
     if string == "":
         return
-    print >> outfile, '#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
-        (relativePath(infile, basefile), lineno, string)
+    print('#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
+        (relativePath(infile, basefile), lineno, string), file=outfile)
 
 
 def ui_l10n(input_files, output, base):
@@ -70,8 +70,8 @@ def ui_l10n(input_files, output, base):
                 continue
             string = string.replace('"', '')
             if string != "":
-                print >> output, '#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
-                    (relativePath(src, base), lineno+1, string)
+                print('#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
+                    (relativePath(src, base), lineno+1, string), file=output)
         input.close()
     output.close()
 
@@ -80,30 +80,33 @@ def layouts_l10n(input_files, output, base, layouttranslations):
     '''Generate pot file from lib/layouts/*.{layout,inc,module}'''
     ClassDescription = re.compile(r'^\s*#\s*\\Declare(LaTeX|DocBook)Class.*\{(.*)\}$', re.IGNORECASE)
     ClassCategory = re.compile(r'^\s*#\s*\\DeclareCategory\{(.*)\}$', re.IGNORECASE)
-    Style = re.compile(r'^\s*Style\s+(.*)\s*$', re.IGNORECASE)
+    Style = re.compile(r'^\s*Style\s+(.*\S)\s*$', re.IGNORECASE)
     # match LabelString, EndLabelString, LabelStringAppendix and maybe others but no comments
-    LabelString = re.compile(r'^[^#]*LabelString\S*\s+(.*)\s*$', re.IGNORECASE)
-    GuiName = re.compile(r'^\s*GuiName\s+(.*)\s*$', re.IGNORECASE)
-    ListName = re.compile(r'^\s*ListName\s+(.*)\s*$', re.IGNORECASE)
-    CategoryName = re.compile(r'^\s*Category\s+(.*)\s*$', re.IGNORECASE)
+    LabelString = re.compile(r'^[^#]*LabelString\S*\s+(.*\S)\s*$', re.IGNORECASE)
+    MenuString = re.compile(r'^[^#]*MenuString\S*\s+(.*\S)\s*$', re.IGNORECASE)
+    Tooltip = re.compile(r'^\s*Tooltip\S*\s+(.*\S)\s*$', re.IGNORECASE)
+    GuiName = re.compile(r'^\s*GuiName\s+(.*\S)\s*$', re.IGNORECASE)
+    ListName = re.compile(r'^\s*ListName\s+(.*\S)\s*$', re.IGNORECASE)
+    CategoryName = re.compile(r'^\s*Category\s+(.*\S)\s*$', re.IGNORECASE)
     NameRE = re.compile(r'^\s*#\s*\\DeclareLyXModule.*{(.*)}$', re.IGNORECASE)
     InsetLayout = re.compile(r'^InsetLayout\s+\"?(.*)\"?\s*$', re.IGNORECASE)
     FlexCheck = re.compile(r'^Flex:(.*)', re.IGNORECASE)
+    CaptionCheck = re.compile(r'^Caption:(.*)', re.IGNORECASE)
     DescBegin = re.compile(r'^\s*#DescriptionBegin\s*$', re.IGNORECASE)
     DescEnd = re.compile(r'^\s*#\s*DescriptionEnd\s*$', re.IGNORECASE)
-    Category = re.compile(r'^\s*#\s*Category:\s+(.*)\s*$', re.IGNORECASE)
+    Category = re.compile(r'^\s*#\s*Category:\s+(.*\S)\s*$', re.IGNORECASE)
     I18nPreamble = re.compile(r'^\s*((Lang)|(Babel))Preamble\s*$', re.IGNORECASE)
     EndI18nPreamble = re.compile(r'^\s*End((Lang)|(Babel))Preamble\s*$', re.IGNORECASE)
     I18nString = re.compile(r'_\(([^\)]+)\)')
     CounterFormat = re.compile(r'^\s*PrettyFormat\s+"?(.*)"?\s*$', re.IGNORECASE)
     CiteFormat = re.compile(r'^\s*CiteFormat', re.IGNORECASE)
-    KeyVal = re.compile(r'^\s*_\w+\s+(.*)\s*$')
+    KeyVal = re.compile(r'^\s*_\w+\s+(.*\S)\s*$')
     Float = re.compile(r'^\s*Float\s*$', re.IGNORECASE)
-    UsesFloatPkg = re.compile(r'^\s*UsesFloatPkg\s+(.*)\s*$', re.IGNORECASE)
-    IsPredefined = re.compile(r'^\s*IsPredefined\s+(.*)\s*$', re.IGNORECASE)
+    UsesFloatPkg = re.compile(r'^\s*UsesFloatPkg\s+(.*\S)\s*$', re.IGNORECASE)
+    IsPredefined = re.compile(r'^\s*IsPredefined\s+(.*\S)\s*$', re.IGNORECASE)
     End = re.compile(r'^\s*End', re.IGNORECASE)
     Comment = re.compile(r'^(.*)#')
-    Translation = re.compile(r'^\s*Translation\s+(.*)\s*$', re.IGNORECASE)
+    Translation = re.compile(r'^\s*Translation\s+(.*\S)\s*$', re.IGNORECASE)
     KeyValPair = re.compile(r'\s*"(.*)"\s+"(.*)"')
 
     oldlanguages = []
@@ -150,11 +153,11 @@ def layouts_l10n(input_files, output, base, layouttranslations):
                     oldtrans[lang][key] = val
                     keyset.add(key)
                     continue
-                print "Error: Unable to handle line:"
-                print line
+                print("Error: Unable to handle line:")
+                print(line)
         except IOError:
-            print "Warning: Unable to open %s for reading." % output
-            print "         Old translations will be lost."
+            print("Warning: Unable to open %s for reading." % output)
+            print("         Old translations will be lost.")
 
         # walon is not a known document language
         # FIXME: Do not hardcode, read from lib/languages!
@@ -236,6 +239,18 @@ def layouts_l10n(input_files, output, base, layouttranslations):
                         writeString(out, src, base, lineno, string)
                 continue
             res = LabelString.search(line)
+            if res != None:
+                string = res.group(1)
+                if not layouttranslations:
+                    writeString(out, src, base, lineno, string)
+                continue
+            res = MenuString.search(line)
+            if res != None:
+                string = res.group(1)
+                if not layouttranslations:
+                    writeString(out, src, base, lineno, string)
+                continue
+            res = Tooltip.search(line)
             if res != None:
                 string = res.group(1)
                 if not layouttranslations:
@@ -273,6 +288,10 @@ def layouts_l10n(input_files, output, base, layouttranslations):
                 #if not layouttranslations:
                 #    writeString(out, src, base, lineno, string)
                 m = FlexCheck.search(string)
+                if m:
+                    if not layouttranslations:
+                        writeString(out, src, base, lineno, m.group(1))
+                m = CaptionCheck.search(string)
                 if m:
                     if not layouttranslations:
                         writeString(out, src, base, lineno, m.group(1))
@@ -315,11 +334,14 @@ def layouts_l10n(input_files, output, base, layouttranslations):
                 continue
             res = End.search(line)
             if res != None:
-                # If a float is predefined by the package and it does not need
-                # the float package then it uses the standard babel translations.
-                # This is even true for MarginFigure, MarginTable (both from
+                # We have four combinations of the flags usesFloatPkg and isPredefined:
+                #     usesFloatPkg and     isPredefined: might use standard babel translations
+                #     usesFloatPkg and not isPredefined: does not use standard babel translations
+                # not usesFloatPkg and     isPredefined: uses standard babel translations
+                # not usesFloatPkg and not isPredefined: not supported by LyX
+                # The third combination is even true for MarginFigure, MarginTable (both from
                 # tufte-book.layout) and Planotable, Plate (both from aguplus.inc).
-                if layouttranslations and readingFloat and usesFloatPkg and not isPredefined:
+                if layouttranslations and readingFloat and usesFloatPkg:
                     if floatname != '':
                         keyset.add(floatname)
                     if listname != '':
@@ -352,16 +374,16 @@ def layouts_l10n(input_files, output, base, layouttranslations):
 
         ContextRe = re.compile(r'(.*)(\[\[.*\]\])')
 
-        print >> out, '''# This file has been automatically generated by po/lyx_pot.py.
+        print('''# This file has been automatically generated by po/lyx_pot.py.
 # PLEASE MODIFY ONLY THE LAGUAGES HAVING NO .po FILE! If you want to regenerate
 # this file from the translations, run `make ../lib/layouttranslations' in po.
 # Python polib library is needed for building the output file.
 #
 # This file should remain fixed during minor LyX releases.
-# For more comments see README.localization file.'''
+# For more comments see README.localization file.''', file=out)
         for lang in languages:
-            print >> out, '\nTranslation %s' % lang
-            if lang in oldtrans.keys():
+            print('\nTranslation %s' % lang, file=out)
+            if lang in list(oldtrans.keys()):
                 trans = oldtrans[lang]
             else:
                 trans = dict()
@@ -380,11 +402,14 @@ def layouts_l10n(input_files, output, base, layouttranslations):
                         if val != key:
                             trans[key] = val
             for key in keys:
-                if key in trans.keys():
+                if key in list(trans.keys()):
                     val = trans[key].replace('\\', '\\\\').replace('"', '\\"')
+                    res = ContextRe.search(val)
+                    if res != None:
+                        val = res.group(1)
                     key = key.replace('\\', '\\\\').replace('"', '\\"')
-                    print >> out, '\t"%s" "%s"' % \
-                             (key.encode('utf-8'), val.encode('utf-8'))
+                    print('\t"%s" "%s"' % \
+                             (key.encode('utf-8'), val.encode('utf-8')), file=out)
                 # also print untranslated entries to help translators
                 elif not lang in oldlanguages:
                     key = key.replace('\\', '\\\\').replace('"', '\\"')
@@ -393,9 +418,9 @@ def layouts_l10n(input_files, output, base, layouttranslations):
                         val = res.group(1)
                     else:
                         val = key
-                    print >> out, '\t"%s" "%s"' % \
-                             (key.encode('utf-8'), val.encode('utf-8'))
-            print >> out, 'End'
+                    print('\t"%s" "%s"' % \
+                             (key.encode('utf-8'), val.encode('utf-8')), file=out)
+            print('End', file=out)
 
     out.close()
 
@@ -423,8 +448,8 @@ def qt4_l10n(input_files, output, base):
                 string = string.replace('&lt;', '<').replace('&gt;', '>')
                 string = string.replace('\\', '\\\\').replace('"', r'\"')
                 string = string.replace('&#x0a;', r'\n')
-                print >> output, '#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
-                    (relativePath(src, base), lineno+1, string)
+                print('#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
+                    (relativePath(src, base), lineno+1, string), file=output)
         input.close()
     output.close()
 
@@ -491,7 +516,7 @@ def external_l10n(input_files, output, base):
             elif inHelp:
                 if HelpTextEnd.match(line):
                     if hadHelp:
-                        print >> output, '\nmsgstr ""\n'
+                        print('\nmsgstr ""\n', file=output)
                     inHelp = False
                     hadHelp = False
                     prev_help_string = ''
@@ -499,11 +524,11 @@ def external_l10n(input_files, output, base):
                     (help_string,) = HelpTextSection.match(line).groups()
                     help_string = help_string.replace('"', '')
                     if help_string != "" and prev_help_string == '':
-                        print >> output, '#: %s:%d\nmsgid ""\n"%s\\n"' % \
-                            (relativePath(src, base), lineno+1, help_string)
+                        print('#: %s:%d\nmsgid ""\n"%s\\n"' % \
+                            (relativePath(src, base), lineno+1, help_string), file=output)
                         hadHelp = True
                     elif help_string != "":
-                        print >> output, '"%s\\n"' % help_string
+                        print('"%s\\n"' % help_string, file=output)
                     prev_help_string = help_string
             elif HelpTextStart.match(line):
                 inHelp = True
@@ -512,8 +537,8 @@ def external_l10n(input_files, output, base):
                 continue
             string = string.replace('"', '')
             if string != "" and not inHelp:
-                print >> output, '#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
-                    (relativePath(src, base), lineno+1, string)
+                print('#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
+                    (relativePath(src, base), lineno+1, string), file=output)
         input.close()
     output.close()
 
@@ -539,11 +564,11 @@ def formats_l10n(input_files, output, base):
         if shortcut != "":
             labelsc = label + "|" + shortcut
         if label != "":
-            print >> output, '#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
-                (relativePath(input_files[0], base), lineno+1, label)
+            print('#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
+                (relativePath(input_files[0], base), lineno+1, label), file=output)
         if labelsc != "":
-            print >> output, '#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
-                (relativePath(input_files[0], base), lineno+1, labelsc)
+            print('#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
+                (relativePath(input_files[0], base), lineno+1, labelsc), file=output)
     input.close()
     output.close()
 
@@ -553,17 +578,17 @@ def encodings_l10n(input_files, output, base):
     output = open(output, 'w')
     # assuming only one encodings file
     #                 Encoding utf8      utf8    "Unicode (utf8)" UTF-8    variable inputenc
-    reg = re.compile('Encoding [\w-]+\s+[\w-]+\s+"([\w \-\(\)]+)"\s+[\w-]+\s+(fixed|variable)\s+\w+.*')
+    reg = re.compile('Encoding [\w-]+\s+[\w-]+\s+"([\w \-\(\)]+)"\s+[\w-]+\s+(fixed|variable|variableunsafe)\s+\w+.*')
     input = open(input_files[0])
     for lineno, line in enumerate(input.readlines()):
         if not line.startswith('Encoding'):
             continue
         if reg.match(line):
-            print >> output, '#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
-                (relativePath(input_files[0], base), lineno+1, reg.match(line).groups()[0])
+            print('#: %s:%d\nmsgid "%s"\nmsgstr ""\n' % \
+                (relativePath(input_files[0], base), lineno+1, reg.match(line).groups()[0]), file=output)
         else:
-            print "Error: Unable to handle line:"
-            print line
+            print("Error: Unable to handle line:")
+            print(line)
             # No need to abort if the parsing fails
             # sys.exit(1)
     input.close()
@@ -603,7 +628,7 @@ if __name__ == '__main__':
         ['help', 'type=', 'output=', 'base=', 'src_file='])
     for (opt, value) in optlist:
         if opt in ['-h', '--help']:
-            print Usage
+            print(Usage)
             sys.exit(0)
         elif opt in ['-o', '--output']:
             output = value
@@ -615,7 +640,7 @@ if __name__ == '__main__':
             input_files = [f.strip() for f in open(value)]
 
     if input_type not in ['ui', 'layouts', 'layouttranslations', 'qt4', 'languages', 'latexfonts', 'encodings', 'external', 'formats'] or output is None:
-        print 'Wrong input type or output filename.'
+        print('Wrong input type or output filename.')
         sys.exit(1)
 
     input_files += args