]> git.donarmstrong.com Git - lilypond.git/blobdiff - buildscripts/builder.py
* cygwin/GNUmakefile (INSTALLATION_OUT_SUFFIXES): Remove profile
[lilypond.git] / buildscripts / builder.py
index 93b811300c3de6e8f6d070a5928f198bcfd6549a..b26a4e5fc921e9540c62a3dd2d3272319a9fec34 100644 (file)
@@ -6,123 +6,194 @@ import string
 
 Import ('env')
 
-# junkme
-srcdir = env['srcdir']
+# utility
 
+def add_suffixes (target, source, env, target_suffixes, src_suffixes):
+       base = os.path.splitext (str (target[0]))[0]
+       return (target + map (lambda x: base + x, target_suffixes),
+               source + map (lambda x: base + x, src_suffixes))
+
+# junkme; see _concat
 def join_path (path, infix=os.pathsep, prefix = ''):
        def dir (x):
                if x and x[0] == '#':
-                       return srcdir + x[1:]
+                       return env['srcdir'] + x[1:]
                return x
        return string.join (map (lambda x: prefix + dir (x), path), infix)
 
-env['MAKEINFO_INCLUDES'] = join_path (env['MAKEINFO_PATH'], '', ' -I')
-a = '$MAKEINFO $__verbose $MAKEINFO_INCLUDES --no-split --no-headers \
---output=$TARGET $SOURCE'
-TXT = Builder (action = a, suffix = '.txt', src_suffix = '.texi')
+
+def src_glob (s):
+       here = os.getcwd ()
+       os.chdir (env.Dir ('.').srcnode ().abspath)
+       result = glob.glob (s)
+       os.chdir (here)
+       return result
+
+Export ('src_glob')
+
+def base_glob (s):
+       return map (lambda x: os.path.splitext (x)[0], src_glob (s))
+
+Export ('base_glob')
+
+def install (target, dir):
+       dest = env['DESTDIR'] + dir
+       if type (target) == type ([]):
+               map (lambda x: env.Install (dir, x), target)
+       else:
+               env.Install (dir, target)
+       env.Alias ('install', dir)
+
+Export ('install')
+
+def _fixme (s):
+       x = string.replace (s, '#', env['srcdir'])
+       x = string.replace (x, '@', env['absbuild'])
+       return x
+
+# Clean separation between generic action + flags and actual
+# configuration and flags in environment for this build.
+
+# Generic builders could/should be part of SCons.
+
+
+HH = Builder (action = 'bison -d -o ${TARGET.base}.cc $SOURCE',
+             suffix = '.hh', src_suffix = '.yy')
+env.Append (BUILDERS = {'HH' : HH})
+
+
+# Setup LilyPond environment.  For the LilyPond build, we override
+# some of these commands in the ENVironment.
+
+env.Append (
+       _fixme = _fixme,
+       ##ABC2LY = 'abc2ly',
+       ##LILYPOND = 'lilypond',
+       LILYOND_BOOK = 'lilypond-book',
+
+       #ugr
+       #LILYPOND_BOOK_FORMAT = 'texi',
+       LILYPOND_BOOK_FORMAT = '',
+       #LILYPOND_BOOK_FLAGS = ['--format=$LILYPOND_BOOK_FORMAT'],
+       LILYPOND_BOOK_FLAGS = '''--format=$LILYPOND_BOOK_FORMAT --process="lilypond --backend=eps --formats=ps,png --header=texidoc -I$srcdir/input/test -e '(ly:set-option (quote internal-type-checking) #t)'" ''',
+
+       LILYPOND_PATH = [],
+       # The SCons way around FOO_PATH:
+       ##LILYPOND_INCFLAGS = '$( ${_concat(INCPREFIX, LILYPOND_PATH, INCSUFFIX, __env__, RDirs)} $)',
+       LILYPOND_INCFLAGS = '$( ${_concat(INCPREFIX, LILYPOND_PATH, INCSUFFIX, __env__)} $)',
+
+       MAKEINFO_PATH = [],
+       MAKEINFO_FLAGS = [],
+       MAKEINFO_INCFLAGS = '$( ${_concat(INCPREFIX, MAKEINFO_PATH, INCSUFFIX, __env__, RDirs)} $)',
+       # should not be necessary
+       # PYTHONPATH = ['$absbuild/python/$out'],
+       TEXI2DVI_FLAGS = [],
+       _TEXI2DVI_FLAGS = '$( ${_concat(" ", TEXI2DVI_FLAGS,)} $)',
+       )
+
+TXT =\
+    Builder (action = '$MAKEINFO --output=$TARGET $MAKEINFO_INCFLAGS\
+    --no-split --no-headers $SOURCE',
+              suffix = '.txt', src_suffix = '.texi')
 env.Append (BUILDERS = {'TXT': TXT})
 
-a = '$MAKEINFO $__verbose $MAKEINFO_INCLUDES --output=$TARGET $SOURCE'
-INFO = Builder (action = a, suffix = '.info', src_suffix = '.texi')
+INFO =\
+     Builder (action = '$MAKEINFO --output=$TARGET $MAKEINFO_INCFLAGS $SOURCE',
+             suffix = '.info', src_suffix = '.texi')
 env.Append (BUILDERS = {'INFO': INFO})
 
-a = '$MAKEINFO $__verbose $MAKEINFO_INCLUDES  --html --no-split --no-headers \
---css-include=$srcdir/Documentation/texinfo.css --output=$TARGET $SOURCE'
-HTML = Builder (action = a, suffix = '.html', src_suffix = '.texi')
+HTML =\
+     Builder (action = '$MAKEINFO --output=$TARGET $MAKEINFO_INCLUDES\
+     --html --no-split --no-headers $MAKEINFO_FLAGS $SOURCE',
+suffix = '.html', src_suffix = '.texi')
 env.Append (BUILDERS = {'HTML': HTML})
 
-
-env['LILYPOND_BOOK_INCLUDES'] = join_path (env['LILYPOND_BOOK_PATH'], '',
-                                          ' --include=')
-
-# UGHR, lilypond.py uses lilypond-bin from PATH
-env.PrependENVPath ('PATH',
-                   os.path.join (env['absbuild'], env['out'], 'usr/bin'))
-
-if os.environ.has_key ('TEXMF'):
-       env.Append (ENV = {'TEXMF' : os.environ['TEXMF']})
-env.Append (ENV = {'TEXMF' : '{' + env['LILYPONDPREFIX'] + ',' \
-                  + os.popen ('kpsexpand \$TEXMF').read ()[:-1] + '}' })
-
-if os.environ.has_key ('LD_LIBRARY_PATH'):
-       env.Append (ENV = {'LD_LIBRARY_PATH' : os.environ['LD_LIBRARY_PATH']})
-if os.environ.has_key ('GUILE_LOAD_PATH'):
-       env.Append (ENV = {'GUILE_LOAD_PATH' : os.environ['GUILE_LOAD_PATH']})
-
-env.Append (PYTHONPATH = [os.path.join (env['absbuild'], env['out'],
-                                       'usr/lib/python'),
-                         os.path.join (srcdir, 'buildscripts'),
-                         os.path.join (srcdir, 'python')])
-env.Append (ENV = { 'PYTHONPATH' : string.join (env['PYTHONPATH'],
-                                               os.pathsep) } )
-
-a = ['rm -f $$(grep -LF "\lilypondend" ${TARGET.dir}/lily-*.tex 2>/dev/null);',
-     'LILYPONDPREFIX=$LILYPONDPREFIX \
-     $PYTHON $LILYPOND_BOOK $__verbose \
-     --include=${TARGET.dir} $LILYPOND_BOOK_INCLUDES \
-     --process="$LILYPOND_BIN $LILYPOND_BOOK_INCLUDES" \
-     --output=${TARGET.dir} --format=$LILYPOND_BOOK_FORMAT \
-     $LILYPOND_BOOK_FLAGS \
-     $SOURCE']
-TEXI = Builder (action = a, suffix = '.texi', src_suffix = '.tely')
+TEXI =\
+     Builder (action =
+             '$LILYPOND_BOOK --output=${TARGET.dir} \
+             --include=${TARGET.dir} $LILYPOND_INCFLAGS \
+             --process="$LILYPOND $LILYPOND_INCFLAGS" \
+             $LILYPOND_BOOK_FLAGS \
+             $SOURCE',
+             suffix = '.texi', src_suffix = '.tely')
 env.Append (BUILDERS = {'TEXI': TEXI})
 
-a = 'cd ${TARGET.dir} \
-&& texi2dvi --batch $TEXINFO_PAPERSIZE_OPTION ${SOURCE.file}'
-texi2dvi = Builder (action = a, suffix = '.dvi', src_suffix = '.texi')
-env.Append (BUILDERS = {'Texi2dvi': texi2dvi})
+TEXIDVI =\
+       Builder (action = 'cd ${TARGET.dir} && \
+       texi2dvi --batch $_TEXI2DVI_FLAGS ${SOURCE.file}',
+                suffix = '.dvi', src_suffix = '.texi')
+env.Append (BUILDERS = {'TEXIDVI': TEXIDVI})
+
+DVIPS =\
+      Builder (action = 'TEXINPUTS=${TARGET.dir}:$$TEXINPUTS $DVIPS -o $TARGET $DVIPS_FLAGS $SOURCE',
+              suffix = '.ps', src_suffix = '.dvi')
+env.Append (BUILDERS = {'DVIPS': DVIPS})
+
+DVIPDF =\
+      Builder (action = 'TEXINPUTS=${TARGET.dir}:$$TEXINPUTS $DVIPS -o $TARGET -Ppdf $DVIPS_FLAGS $SOURCE',
+              suffix = '.pdfps', src_suffix = '.dvi')
+env.Append (BUILDERS = {'DVIPDF': DVIPDF})
+
+PSPDF =\
+      Builder (action = 'ps2pdf $PSPDF_FLAGS $SOURCE $TARGET',
+              suffix = '.pdf', src_suffix = '.pdfps')
+env.Append (BUILDERS = {'PSPDF': PSPDF})
 
-env.Append (DVIPSFLAGS = '-Ppdf -u+lilypond.map -u+ec-mftrace.map')
+PNG2EPS =\
+       Builder (action = 'convert $SOURCE $TARGET',
+                suffix = '.eps', src_suffix = '.png')
+env.Append (BUILDERS = {'PNG2EPS': PNG2EPS})
 
-env ['DVIPS_PAPERSIZE'] = 'a4'
-a = ['dvips $DVIPSFLAGS -o ${TARGET}.pdfps -t $DVIPS_PAPERSIZE $SOURCE',
-     'ps2pdf -sPAPERSIZE=$DVIPS_PAPERSIZE ${TARGET}.pdfps $TARGET']
-dvi2pdf = Builder (action = a, suffix = '.pdf', src_suffix = '.dvi')
-env.Append (BUILDERS = {'Dvi2pdf': dvi2pdf})
 
-a = 'convert $SOURCE $TARGET'
-png2eps = Builder (action = a, suffix = '.eps', src_suffix = '.png')
-env.Append (BUILDERS = {'Png2eps': png2eps})
+
+# FIXME: cleanup, see above
+
+
+env.Append (
+
+       #urg
+       BSTINPUTS = '${SOURCE.dir}:${TARGET.dir}:',
+       BIB2HTML = '$PYTHON $srcdir/buildscripts/bib2html.py',
+)
+
 
 def add_ps_target (target, source, env):
        base = os.path.splitext (str (target[0]))[0]
        return (target + [base + '.ps'], source)
 
-#debug = 'echo "PATH=$$PATH";'
-debug = ''
-a = debug + 'LILYPONDPREFIX=$LILYPONDPREFIX \
-$PYTHON $LILYPOND_PY $__verbose \
---include=${TARGET.dir} \
---output=${TARGET.base}  $SOURCE'
-lilypond = Builder (action = a, suffix = '.pdf', src_suffix = '.ly')
+lilypond =\
+        Builder (action = '$LILYPOND --output=${TARGET.base} --include=${TARGET.dir} $SOURCE',
+                 suffix = '.pdf', src_suffix = '.ly')
 ##                 emitter = add_ps_target)
 env.Append (BUILDERS = {'LilyPond': lilypond})
 
-#verbose = verbose_opt (env, ' --verbose')
-verbose = ''
-a = debug + 'LILYPONDPREFIX=$LILYPONDPREFIX $PYTHON $ABC2LY_PY \
---strict --output=${TARGET} $SOURCE'
-ABC = Builder (action = a, suffix = '.ly', src_suffix = '.abc')
+ABC = Builder (action = '$ABC2LY --output=${TARGET} --strict $SOURCE',
+              suffix = '.ly', src_suffix = '.abc')
 env.Append (BUILDERS = {'ABC': ABC})
 
 def add_log_target (target, source, env):
        base = os.path.splitext (str (target[0]))[0]
        return (target + [base + '.log'], source)
 
-def add_enc_ly_tex_target (target, source, env):
+def add_tfm_target (target, source, env):
+       base = os.path.splitext (str (target[0]))[0]
+       return (target + [base + '.tfm'], source)
+
+def add_lisp_enc_tex_ly_target (target, source, env):
        base = os.path.splitext (str (target[0]))[0]
-       return (target + [base + '.enc', base + '.tex', base + 'list.ly'],
+       return (target + [base + '.lisp', base + '.enc', base + '.tex',
+                         base + 'list.ly'],
                source)
 
-def add_suffixes (target, source, env, target_suffixes, src_suffixes):
+def add_cff_cffps_svg (target, source, env):
        base = os.path.splitext (str (target[0]))[0]
-       return (target + map (lambda x: base + x, target_suffixes),
-               source + map (lambda x: base + x, src_suffixes))
+       return (target + [base + '.cff', base + '.cff.ps', base + '.svg'],
+               source)
 
-a = 'cd ${TARGET.dir} && \
-MFINPUTS=.:${SOURCE.dir}:$srcdir/${SOURCE.dir} \
-mf "\\mode:=$MFMODE; nonstopmode; input ${SOURCE.filebase};" \
-| grep -v "@\|>>"'
+a = 'cd ${TARGET.dir} \
+&& MFINPUTS=.:${SOURCE.dir}:$srcdir/${SOURCE.dir}: \
+$MF "\\mode:=$MFMODE; nonstopmode; input ${SOURCE.filebase};" \
+| grep -v "@\|>>\|w:\|h:";'
 tfm = Builder (action = a, suffix = '.tfm', src_suffix = '.mf',
 #             emitter = lambda t, s, e: add_suffixes (t, s, e, ['.log'], []))
               emitter = add_log_target)
@@ -130,24 +201,26 @@ env.Append (BUILDERS = {'TFM': tfm})
 
 a = '$PYTHON $MF_TO_TABLE_PY \
 --outdir=${TARGET.dir} \
---afm=${TARGET.base}.afm \
+--global-lisp=${TARGET.base}.otf-gtable \
+--lisp=${TARGET.base}.lisp \
 --enc=${TARGET.base}.enc \
 --tex=${TARGET.base}.tex \
 --ly=${TARGET.base}list.ly \
 ${TARGET.base}.log'
-afm = Builder (action = a, suffix = '.afm', src_suffix = '.log',
-              emitter = add_enc_ly_tex_target)
-env.Append (BUILDERS = {'AFM': afm})
+gtable = Builder (action = a, suffix = '.otf-gtable', src_suffix = '.log',
+                 emitter = add_lisp_enc_tex_ly_target)
+env.Append (BUILDERS = {'GTABLE': gtable})
 
 def add_enc_src (target, source, env):
        base = os.path.splitext (str (target[0]))[0]
        return (target, source + [base + '.enc'])
 
-# UGH, should fix --output option for mftrace
+# FIXME UGH, should fix --output option for mftrace
 a = 'cd ${TARGET.dir} && \
 if test -e ${SOURCE.filebase}.enc; then encoding="--encoding=${SOURCE.filebase}.enc"; fi; \
 MFINPUTS=$srcdir/mf:.: \
-mftrace --pfa --simplify --keep-trying $$encoding $__verbose \
+$MFTRACE --formats=pfa --simplify --keep-trying --no-afm \
+$$encoding $__verbose \
 --include=${TARGET.dir} \
 ${SOURCE.file}'
 
@@ -157,22 +230,22 @@ pfa = Builder (action = a,
               emitter = add_enc_src)
 env.Append (BUILDERS = {'PFA': pfa})
 
-env['DIFF_PY'] = os.path.join (srcdir, 'stepmake/bin/package-diff.py')
-a = '$PYTHON $DIFF_PY $__verbose --outdir=${TARGET.dir}'
-patch = Builder (action = a, suffix = '.diff', src_suffix = '.tar.gz')
-env.Append (BUILDERS = {'PATCH': patch})
+a = ['(cd ${TARGET.dir} && $FONTFORGE -script ${SOURCE.file})',
+     '$PYTHON $srcdir/buildscripts/ps-embed-cff.py ${SOURCE.base}.cff $$(cat ${SOURCE.base}.fontname) ${SOURCE.base}.cff.ps',
+     'rm -f ${TARGET.dir}/*.scale.pfa']
+otf = Builder (action = a,
+              suffix = '.otf',
+              src_suffix = '.pe',
+              emitter = add_cff_cffps_svg)
+env.Append (BUILDERS = {'OTF': otf})
 
-def src_glob (env, s):
-       here = os.getcwd ()
-       os.chdir (env.Dir ('.').srcnode ().abspath)
-       result = glob.glob (s)
-       os.chdir (here)
-       return result
-env['src_glob'] = src_glob
 
-def base_glob (env, s):
-       return map (lambda x: os.path.splitext (x)[0], src_glob (env, s))
-env['glob'] = base_glob
+# Specific builders
+
+env['DIFF_PY'] = '$srcdir/stepmake/bin/package-diff.py'
+a = '$PYTHON $DIFF_PY $NO__verbose --outdir=${TARGET.dir}'
+patch = Builder (action = a, suffix = '.diff', src_suffix = '.tar.gz')
+env.Append (BUILDERS = {'PATCH': patch})
 
 atvars = [
 'BASH',
@@ -202,7 +275,8 @@ atvars = [
 
 # naming
 def at_copy (target, source, env):
-    s = open (str (source[0])).read ()
+    n = str (source[0])
+    s = open (n).read ()
     for i in atvars:
            if env.has_key (i):
                    s = string.replace (s, '@%s@'% i, env[i])
@@ -212,23 +286,107 @@ def at_copy (target, source, env):
     if os.path.basename (os.path.dirname (str (target[0]))) == 'bin':
            os.chmod (t, 0755)
 
-AT_COPY = Builder (action = at_copy)
+AT_COPY = Builder (action = at_copy, src_suffix = ['.in', '.py', '.sh',])
 env.Append (BUILDERS = {'AT_COPY': AT_COPY})
 
-MO = Builder (action = '$MSGFMT -o $TARGET $SOURCE',
+# naming
+def at_copy_ext (target, source, env):
+    n = str (source[0])
+    s = open (n).read ()
+    for i in atvars:
+           if env.has_key (i):
+                   s = string.replace (s, '@%s@'% i, env[i])
+    # whugh
+    e = os.path.splitext (n)[1]
+    t = str (target[0]) + e
+    open (t, 'w').write (s)
+
+AT_COPY_EXT = Builder (action = at_copy_ext, src_suffix = ['.py', '.sh',])
+env.Append (BUILDERS = {'AT_COPY_EXT': AT_COPY_EXT})
+
+
+MO = Builder (action = 'msgfmt -o $TARGET $SOURCE',
              suffix = '.mo', src_suffix = '.po')
 env.Append (BUILDERS = {'MO': MO})
 
-a = 'xgettext --default-domain=lilypond --join \
+# ' '; ?
+ugh =  'ln -f po/lilypond.pot ${TARGET.dir}/lilypond.po ; '
+a = ugh + 'xgettext --default-domain=lilypond --join \
 --output-dir=${TARGET.dir} --add-comments \
 --keyword=_ --keyword=_f --keyword=_i $SOURCES'
-POT = Builder (action = a, suffix = '.pot')
-#env.Append (BUILDERS = {'POT': POT})
-#env.Command(env['absbuild'] + '/po/' + env['out'] + '/lilypond.pot',
-env['pottarget'] = os.path.join (env['absbuild'], 'po', env['out'],
-                              'lilypond.pot')
-env['potcommand'] = a
-
-a = 'msgmerge ${SOURCE} ${TARGET.dir}/lilypond.pot -o ${TARGET}'
+PO = Builder (action = a, suffix = '.pot',
+             src_suffix = ['.cc', '.hh', '.py'], multi = 1)
+env['potarget'] = os.path.join (env['absbuild'], 'po', env['out'],
+                               'lilypond.pot')
+env['pocommand'] = a
+
+ugh = '; mv ${TARGET} ${SOURCE}'
+a = 'msgmerge ${SOURCE} ${SOURCE.dir}/lilypond.pot -o ${TARGET}' + ugh
 POMERGE = Builder (action = a, suffix = '.pom', src_suffix = '.po')
 env.Append (BUILDERS = {'POMERGE': POMERGE})
+
+#UGRr
+a = 'BSTINPUTS=$BSTINPUTS $BIB2HTML -o $TARGET $SOURCE'
+BIB2HTML = Builder (action = a, suffix = '.html', src_suffix = '.bib')
+env.Append (BUILDERS = {'BIB2HTML': BIB2HTML})
+
+a = '$PYTHON $srcdir/buildscripts/lys-to-tely.py \
+--name=${TARGET.base} --title="$TITLE" $SOURCES'
+LYS2TELY = Builder (action = a, suffix = '.tely', src_suffix = '.ly')
+env.Append (BUILDERS = {'LYS2TELY': LYS2TELY})
+
+
+def mutopia (ly = None, abc = None):
+
+       # FIXME: ugr, huh?  The values from ../SConstruct get appended
+       # to the predefined values from this builder context:
+
+       # abc2ly/usr/bin/python ..../abc2.py
+
+       # Override them again to fix web build...
+
+       
+       #BUILD_ABC2LY = '${set__x}$PYTHON $srcdir/scripts/abc2ly.py'
+       #BUILD_LILYPOND = '$absbuild/$out/lilypond ${__verbose}'
+       e = env.Copy (
+               #LILYPOND = BUILD_LILYPOND,
+               #ABC2LY = BUILD_ABC2LY,
+       )
+       
+       if not abc:
+               abc = base_glob ('*.abc')
+       if not ly:
+               ly = base_glob ('*.ly') + map (e.ABC, abc)
+       pdf = map (e.LilyPond, ly)
+       
+       # We need lily and mf to build these.
+       env.Depends (pdf, ['#/lily', '#/mf'])
+       env.Alias ('doc', pdf)
+
+Export ('mutopia')
+
+
+def collate (title = 'collated files'):
+       ly = base_glob ('*.ly')
+       
+       e = env.Copy (
+               TITLE = title,
+               LILYPOND_BOOK_FLAGS = '''--process="lilypond --backend=eps --formats=ps,png --header=texidoc -I$srcdir/input/test -e '(ly:set-option (quote internal-type-checking) #t)'" ''',
+                                                                                                                                      __verbose = ' --verbose',
+                                                                                                                                      )
+       #
+       tely = e.LYS2TELY ('collated-files', ly)
+       texi = e.TEXI (tely)
+       # We need lily and mf to build these.
+       env.Depends (texi, ['#/lily', '#/mf'])
+       dvi = e.TEXIDVI (texi)
+       pspdf = e.DVIPDF (dvi)
+       pdf = e.PSPDF (pspdf)
+       html = e.HTML (texi)
+
+       env.Alias ('doc', pdf)
+       env.Alias ('doc', html)
+
+Export ('collate')
+
+Export ('env')