]> git.donarmstrong.com Git - lilypond.git/blobdiff - lily/lexer.ll
* stepmake/stepmake/generic-vars.make: new function absdir.
[lilypond.git] / lily / lexer.ll
index 8fba3fa2a71c35d91be9f569f2f85c1042a16f15..a31f25e43bc3d1c785092ea045147e541c6bfd0f 100644 (file)
 #include <iostream>
 using namespace std;
 
-#include "music-function.hh"
-#include "source-file.hh"
-#include "parse-scm.hh"
-#include "lily-guile.hh"
-#include "string.hh"
-#include "string-convert.hh"
-#include "lily-lexer.hh"
+#include "context-def.hh"
+#include "identifier-smob.hh"
+#include "international.hh"
 #include "interval.hh"
 #include "lily-guile.hh"
-#include "parser.hh"
-#include "warn.hh"
+#include "lily-lexer.hh"
+#include "lilypond-input-version.hh"
 #include "main.hh"
+#include "music-function.hh"
+#include "parse-scm.hh"
+#include "parser.hh"
+#include "source-file.hh"
+#include "std-string.hh"
+#include "string-convert.hh"
 #include "version.hh"
-#include "lilypond-input-version.hh"
-#include "context-def.hh"
-#include "identifier-smob.hh"
+#include "warn.hh"
 
 /*
 RH 7 fix (?)
 */
 #define isatty HORRIBLEKLUDGE
 
-void strip_trailing_white (String&);
-void strip_leading_white (String&);
-String lyric_fudge (String s);
+void strip_trailing_white (string&);
+void strip_leading_white (string&);
+string lyric_fudge (string s);
 int music_function_type (SCM);
-SCM lookup_markup_command (String s);
-bool is_valid_version (String s);
+SCM lookup_markup_command (string s);
+bool is_valid_version (string s);
 
 
 #define start_quote()  \
        yy_push_state (quote);\
-       yylval.string = new String
+       yylval.string = new string
 
 #define start_lyric_quote()    \
        yy_push_state (lyric_quote);\
-       yylval.string = new String
+       yylval.string = new string
 
 #define yylval \
        (*(YYSTYPE*)lexval)
@@ -87,7 +87,7 @@ LYRICS                ({AA}|{TEX})[^0-9 \t\n\f]*
 */
 
 
-SCM scan_fraction (String);
+SCM scan_fraction (string);
 SCM (* scm_parse_error_handler) (void *);
 
 
@@ -124,6 +124,8 @@ ACCENT              \\[`'"^]
 NATIONAL       [\001-\006\021-\027\031\036\200-\377]
 TEX            {AA}|-|{PUNCT}|{ACCENT}|{NATIONAL}
 WORD           {A}{AN}*
+DASHED_WORD            {A}({AN}|-)*
+DASHED_KEY_WORD                \\{DASHED_WORD}
 ALPHAWORD      {A}+
 DIGIT          {N}
 UNSIGNED       {N}+
@@ -153,7 +155,7 @@ BOM_UTF8    \357\273\277
 <INITIAL,chords,lyrics,figures,notes>{BOM_UTF8} {
   if (this->lexloc->line_number () != 1 || this->lexloc->column_number () != 0)
     {
-      LexerError (_ ("stray UTF-8 BOM encountered").to_str0 ());
+      LexerError (_ ("stray UTF-8 BOM encountered").c_str ());
       exit (1);
     }
   if (be_verbose_global)
@@ -184,8 +186,8 @@ BOM_UTF8    \357\273\277
        yy_push_state (sourcefilename);
 }
 <version>\"[^"]*\"     { /* got the version number */
-       String s (YYText () + 1);
-       s = s.left_string (s.index_last ('\"'));
+       string s (YYText () + 1);
+       s = s.substr (0, s.rfind ('\"'));
 
        yy_pop_state ();
        if (!is_valid_version (s))
@@ -196,24 +198,24 @@ BOM_UTF8  \357\273\277
 
 }
 <sourcefilename>\"[^"]*\"     {
-       String s (YYText () + 1);
-       s = s.left_string (s.index_last ('\"'));
+       string s (YYText () + 1);
+       s = s.substr (0, s.rfind ('\"'));
 
        yy_pop_state ();
        this->here_input().get_source_file ()->name_ = s;
-       message (_f ("Renaming input to: `%s'", s.to_str0 ()));
+       message (_f ("Renaming input to: `%s'", s.c_str ()));
        progress_indication ("\n");
        scm_module_define (scm_car (scopes_),
                     ly_symbol2scm ("input-file-name"),
-                    scm_makfrom0str (s.to_str0 ()));
+                    scm_makfrom0str (s.c_str ()));
 
 }
 <version>.     {
-       LexerError (_ ("quoted string expected after \\version").to_str0 ());
+       LexerError (_ ("quoted string expected after \\version").c_str ());
        yy_pop_state ();
 }
-<sourcefilename>>.     {
-       LexerError (_ ("quoted string expected after \\sourcefilename").to_str0 ());
+<sourcefilename>     {
+       LexerError (_ ("quoted string expected after \\sourcefilename").c_str ());
        yy_pop_state ();
 }
 <longcomment>{
@@ -226,7 +228,7 @@ BOM_UTF8    \357\273\277
                yy_pop_state ();
        }
        <<EOF>>         {
-               LexerError (_ ("EOF found inside a comment").to_str0 ());
+               LexerError (_ ("EOF found inside a comment").c_str ());
                is_main_input_ = false;
                if (! close_input ()) 
                  yyterminate (); // can't move this, since it actually rets a YY_NULL
@@ -248,26 +250,26 @@ BOM_UTF8  \357\273\277
        yy_push_state (incl);
 }
 <incl>\"[^"]*\"   { /* got the include file name */
-       String s (YYText ()+1);
-       s = s.left_string (s.index_last ('"'));
+       string s (YYText ()+1);
+       s = s.substr (0, s.rfind ('"'));
 
        new_input (s, sources_);
        yy_pop_state ();
 }
 <incl>\\{BLACK}*{WHITE} { /* got the include identifier */
-       String s = YYText () + 1;
+       string s = YYText () + 1;
        strip_trailing_white (s);
        if (s.length () && (s[s.length () - 1] == ';'))
-         s = s.left_string (s.length () - 1);
+         s = s.substr (0, s.length () - 1);
 
        SCM sid = lookup_identifier (s);
        if (scm_is_string (sid)) {
                new_input (ly_scm2string (sid), sources_);
                yy_pop_state ();
        } else { 
-           String msg (_f ("wrong or undefined identifier: `%s'", s ));
+           string msg (_f ("wrong or undefined identifier: `%s'", s ));
 
-           LexerError (msg.to_str0 ());
+           LexerError (msg.c_str ());
            SCM err = scm_current_error_port ();
            scm_puts ("This value was found in the table: ", err);
            scm_display (sid, err);
@@ -302,7 +304,7 @@ BOM_UTF8    \357\273\277
        {
                yyinput ();
        }
-       char_count_stack_.top () += n;
+       char_count_stack_.back () += n;
 
        if (unpack_identifier (sval) != SCM_UNDEFINED)
        {
@@ -347,15 +349,15 @@ BOM_UTF8  \357\273\277
        }
 
        {DIGIT}         {
-               yylval.i = String_convert::dec2int (String (YYText ()));
+               yylval.i = String_convert::dec2int (string (YYText ()));
                return DIGIT;
        }
        {UNSIGNED}              {
-               yylval.i = String_convert::dec2int (String (YYText ()));
+               yylval.i = String_convert::dec2int (string (YYText ()));
                return UNSIGNED;
        }
        {E_UNSIGNED}    {
-               yylval.i = String_convert::dec2int (String (YYText () +1));
+               yylval.i = String_convert::dec2int (string (YYText () +1));
                return E_UNSIGNED;
        }
        \" {
@@ -378,8 +380,8 @@ BOM_UTF8    \357\273\277
                yy_pop_state ();
 
                /* yylval is union. Must remember STRING before setting SCM*/
-               String *sp = yylval.string;
-               yylval.scm = scm_makfrom0str (sp->to_str0 ());
+               string *sp = yylval.string;
+               yylval.scm = scm_makfrom0str (sp->c_str ());
                delete sp;
                return STRING;
        }
@@ -399,8 +401,8 @@ BOM_UTF8    \357\273\277
                yy_pop_state ();
 
                /* yylval is union. Must remember STRING before setting SCM*/
-               String *sp = yylval.string;
-               yylval.scm = scm_makfrom0str (sp->to_str0 ());
+               string *sp = yylval.string;
+               yylval.scm = scm_makfrom0str (sp->c_str ());
                delete sp;
                return LYRICS_STRING;
        }
@@ -418,7 +420,7 @@ BOM_UTF8    \357\273\277
                return FRACTION;
        }
        {UNSIGNED}              {
-               yylval.i = String_convert::dec2int (String (YYText ()));
+               yylval.i = String_convert::dec2int (string (YYText ()));
                return UNSIGNED;
        }
        {NOTECOMMAND}   {
@@ -426,7 +428,7 @@ BOM_UTF8    \357\273\277
        }
        {LYRICS} {
                /* ugr. This sux. */
-               String s (YYText ()); 
+               string s (YYText ()); 
                if (s == "__")
                        return yylval.i = EXTENDER;
                if (s == "--")
@@ -437,7 +439,7 @@ BOM_UTF8    \357\273\277
                if (c == '{' ||  c == '}') // brace open is for not confusing dumb tools.
                        here_input ().warning (
                                _ ("Brace found at end of lyric.  Did you forget a space?"));
-               yylval.scm = scm_makfrom0str (s.to_str0 ());
+               yylval.scm = scm_makfrom0str (s.c_str ());
 
 
                return LYRICS_STRING;
@@ -458,7 +460,7 @@ BOM_UTF8    \357\273\277
                return FRACTION;
        }
        {UNSIGNED}              {
-               yylval.i = String_convert::dec2int (String (YYText ()));
+               yylval.i = String_convert::dec2int (string (YYText ()));
                return UNSIGNED;
        }
        \" {
@@ -493,7 +495,7 @@ BOM_UTF8    \357\273\277
                return SCORE;
        }
        {MARKUPCOMMAND} {
-               String str (YYText () + 1);
+               string str (YYText () + 1);
                SCM s = lookup_markup_command (str);
 
                if (scm_is_pair (s) && scm_is_symbol (scm_cdr (s)) ) {
@@ -529,14 +531,14 @@ BOM_UTF8  \357\273\277
                return YYText ()[0];
        }
        [^#{}"\\ \t\n\r\f]+ {
-               String s (YYText ()); 
+               string s (YYText ()); 
 
                char c = s[s.length () - 1];
                /* brace open is for not confusing dumb tools.  */
                if (c == '{' ||  c == '}')
                        here_input ().warning (
                                _ ("Brace found at end of markup.  Did you forget a space?"));
-               yylval.scm = scm_makfrom0str (s.to_str0 ());
+               yylval.scm = scm_makfrom0str (s.c_str ());
 
 
                return STRING;
@@ -559,6 +561,14 @@ BOM_UTF8   \357\273\277
                yyterminate ();
 }
 
+<INITIAL>{
+       {DASHED_WORD}   {
+               return scan_bare_word (YYText ());
+       }
+       {DASHED_KEY_WORD}       {
+               return scan_escaped_word (YYText () + 1);
+       }
+}
 
 {WORD} {
        return scan_bare_word (YYText ());
@@ -570,13 +580,14 @@ BOM_UTF8  \357\273\277
        Real r;
        int cnv = sscanf (YYText (), "%lf", &r);
        assert (cnv == 1);
+       (void) cnv;
 
        yylval.scm = scm_from_double (r);
        return REAL;
 }
 
 {UNSIGNED}     {
-       yylval.i = String_convert::dec2int (String (YYText ()));
+       yylval.i = String_convert::dec2int (string (YYText ()));
        return UNSIGNED;
 }
 
@@ -626,8 +637,8 @@ BOM_UTF8    \357\273\277
 }
 
 <*>.           {
-       String msg = _f ("invalid character: `%c'", YYText ()[0]);
-       LexerError (msg.to_str0 ());
+       string msg = _f ("invalid character: `%c'", YYText ()[0]);
+       LexerError (msg.c_str ());
        return YYText ()[0];
 }
 
@@ -688,11 +699,11 @@ Lily_lexer::identifier_type (SCM sid)
 
 
 int
-Lily_lexer::scan_escaped_word (String str)
+Lily_lexer::scan_escaped_word (string str)
 {
        // use more SCM for this.
 
-//     SCM sym = ly_symbol2scm (str.to_str0 ());
+//     SCM sym = ly_symbol2scm (str.c_str ());
 
        int i = lookup_keyword (str);
        if (i == MARKUP && is_lyric_state ())
@@ -713,18 +724,18 @@ Lily_lexer::scan_escaped_word (String str)
                return identifier_type (sid);
        }
 
-       String msg (_f ("unknown escaped string: `\\%s'", str));        
-       LexerError (msg.to_str0 ());
+       string msg (_f ("unknown escaped string: `\\%s'", str));        
+       LexerError (msg.c_str ());
 
-       yylval.scm = scm_makfrom0str (str.to_str0 ());
+       yylval.scm = scm_makfrom0str (str.c_str ());
 
        return STRING;
 }
 
 int
-Lily_lexer::scan_bare_word (String str)
+Lily_lexer::scan_bare_word (string str)
 {
-       SCM sym = ly_symbol2scm (str.to_str0 ());
+       SCM sym = ly_symbol2scm (str.c_str ());
        if ((YYSTATE == notes) || (YYSTATE == chords)) {
                SCM handle = SCM_BOOL_F;
                if (scm_is_pair (pitchname_tab_stack_))
@@ -744,7 +755,7 @@ Lily_lexer::scan_bare_word (String str)
                }
        }
 
-       yylval.scm = scm_makfrom0str (str.to_str0 ());
+       yylval.scm = scm_makfrom0str (str.c_str ());
        return STRING;
 }
 
@@ -773,29 +784,29 @@ Lily_lexer::is_figure_state () const
 }
 
 /*
- urg, belong to String (_convert)
+ urg, belong to string (_convert)
  and should be generalised 
  */
 void
-strip_leading_white (String&s)
+strip_leading_white (string&s)
 {
-       int i = 0;
-       for (;  i < s.length (); i++) 
+       ssize i = 0;
+       for (;  i < s.length (); i++)
                if (!isspace (s[i]))
                        break;
 
-       s = s.nomid_string (0, i);
+       s = s.substr (i);
 }
 
 void
-strip_trailing_white (String&s)
+strip_trailing_white (string&s)
 {
-       int i = s.length ();    
+       ssize i = s.length ();  
        while (i--) 
                if (!isspace (s[i]))
                        break;
 
-       s = s.left_string (i+1);
+       s = s.substr (0, i + 1);
 }
 
 
@@ -805,7 +816,7 @@ Lilypond_version oldest_version ("2.3.22");
 
 
 bool
-is_valid_version (String s)
+is_valid_version (string s)
 {
   Lilypond_version current ( MAJOR_VERSION "." MINOR_VERSION "." PATCH_LEVEL );
   Lilypond_version ver (s);
@@ -822,25 +833,25 @@ is_valid_version (String s)
 /*
   substitute _ and \,
 */
-String
-lyric_fudge (String s)
+string
+lyric_fudge (string s)
 {
-  char  * chars  = s.get_copy_str0 ();
+  char *chars = string_copy (s);
 
-  for (char * p = chars; *p ; p++)
+  for (char *p = chars; *p ; p++)
     {
       if (*p == '_' && (p == chars || *(p-1) != '\\'))
        *p = ' ';
     }
   
-  s = String (chars);
+  s = string (chars);
   delete[] chars;
 
-  int i = 0;   
-  if ((i = s.index ("\\,")) != -1)   // change "\," to TeX's "\c "
+  ssize i = 0; 
+  if ((i = s.find ("\\,")) != NPOS)   // change "\," to TeX's "\c "
     {
-      * (s.get_str0 () + i + 1) = 'c';
-      s = s.left_string (i+2) + " " + s.right_string (s.length ()-i-2);
+      * (((char*)s.c_str ()) + i + 1) = 'c';
+      s = s.substr (0, i + 2) + " " + s.substr (i - 2);
     }
 
   return s;
@@ -850,12 +861,11 @@ lyric_fudge (String s)
 Convert "NUM/DEN" into a '(NUM . DEN) cons.
 */
 SCM
-scan_fraction (String frac)
+scan_fraction (string frac)
 {
-       int i = frac.index ('/');
-       int l = frac.length ();
-       String left = frac.left_string (i);
-       String right = frac.right_string (l - i - 1);
+       ssize i = frac.find ('/');
+       string left = frac.substr (0, i);
+       string right = frac.substr (i + 1, (frac.length () - i + 1));
 
        int n = String_convert::dec2int (left);
        int d = String_convert::dec2int (right);
@@ -863,10 +873,10 @@ scan_fraction (String frac)
 }
 
 SCM
-lookup_markup_command (String s)
+lookup_markup_command (string s)
 {
        SCM proc = ly_lily_module_constant ("lookup-markup-command");
-       return scm_call_1 (proc, scm_makfrom0str (s.to_str0 ()));
+       return scm_call_1 (proc, scm_makfrom0str (s.c_str ()));
 }