]> git.donarmstrong.com Git - lilypond.git/blob - lily/include/lily-lexer.hh
lexer.ll: Warn about non-UTF-8 characters
[lilypond.git] / lily / include / lily-lexer.hh
1 /*
2   This file is part of LilyPond, the GNU music typesetter.
3
4   Copyright (C) 1997--2011 Han-Wen Nienhuys <hanwen@xs4all.nl>
5
6   LilyPond is free software: you can redistribute it and/or modify
7   it under the terms of the GNU General Public License as published by
8   the Free Software Foundation, either version 3 of the License, or
9   (at your option) any later version.
10
11   LilyPond is distributed in the hope that it will be useful,
12   but WITHOUT ANY WARRANTY; without even the implied warranty of
13   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
14   GNU General Public License for more details.
15
16   You should have received a copy of the GNU General Public License
17   along with LilyPond.  If not, see <http://www.gnu.org/licenses/>.
18 */
19
20 #ifndef MY_LILY_LEXER_HH
21 #define MY_LILY_LEXER_HH
22
23 #include "includable-lexer.hh"
24
25 #include "input.hh"
26 #include "duration.hh"
27 #include "pitch.hh"
28 #include "parser.hh"
29
30 bool busy_parsing ();
31 void kill_lexer ();
32 void set_lexer ();
33
34 struct Chord_repetition
35 {
36   Chord_repetition ()
37   {
38     last_chord_ = SCM_EOL;
39     repetition_function_ = SCM_EOL;
40     repetition_symbol_ = SCM_EOL;
41   }
42
43   SCM repetition_symbol_;
44   SCM repetition_function_;
45   SCM last_chord_;
46 };
47
48 class Lily_lexer : public Includable_lexer
49 {
50   DECLARE_SMOBS (Lily_lexer);
51
52 private:
53   int lookup_keyword (string);
54   int scan_bare_word (string);
55   SCM scan_markup_word (string);
56   int scan_escaped_word (string);
57   int scan_scm_id (SCM);
58   int identifier_type (SCM);
59   char escaped_char (char) const;
60   const char * YYText_utf8 ();
61
62   Lily_parser *parser_;
63   Keyword_table *keytable_;
64   SCM scopes_;
65   SCM start_module_;
66   int hidden_state_;
67 public:
68   SCM eval_scm (SCM);
69   SCM extra_tokens_;
70   YYSTYPE *lexval_;
71   Input *lexloc_;
72   bool is_main_input_;
73
74   Sources *sources_;
75
76   /* Scheme hash tables with (oct name acc)  values, and symbol keys.  */
77   SCM chordmodifier_tab_;
78   SCM pitchname_tab_stack_;
79
80   Chord_repetition chord_repetition_;
81
82   int error_level_;
83   Input last_input_;
84
85   Lily_lexer (Sources *, Lily_parser *);
86   Lily_lexer (Lily_lexer const &, Lily_parser *);
87   int yylex ();
88
89   void add_lexed_char (int);
90
91   void prepare_for_next_token ();
92   int try_special_identifiers (SCM *, SCM);
93   Input here_input () const;
94
95   void add_scope (SCM);
96   SCM set_current_scope ();
97   bool has_scope () const;
98   SCM remove_scope ();
99
100   void start_main_input ();
101
102   virtual void new_input (string s, Sources *);
103   virtual void new_input (string s, string d, Sources *);
104
105   bool top_input () { return include_stack_.size () < 2; }
106   SCM keyword_list () const;
107   SCM lookup_identifier (string s);
108   SCM lookup_identifier_symbol (SCM s);
109   void push_extra_token (int token_type, SCM scm = SCM_UNDEFINED);
110   void push_chord_state (SCM tab);
111   void push_figuredbass_state ();
112   void push_lyric_state ();
113   void push_initial_state ();
114   void push_markup_state ();
115   void push_note_state (SCM tab);
116   void pop_state ();
117   void LexerError (char const *);
118   void LexerWarning (char const *);
119   void set_identifier (SCM path, SCM val);
120   int get_state () const;
121   bool is_note_state () const;
122   bool is_chord_state () const;
123   bool is_lyric_state () const;
124   bool is_figure_state () const;
125   bool is_clean () const;
126 };
127
128 #endif /* MY_LILY_LEXER_HH */