]> git.sur5r.net Git - cc65/blob - src/cc65/scanner.h
Rewrote literal handling. Literals are now saved together with other function
[cc65] / src / cc65 / scanner.h
1 /*****************************************************************************/
2 /*                                                                           */
3 /*                                 scanner.h                                 */
4 /*                                                                           */
5 /*                      Source file line info structure                      */
6 /*                                                                           */
7 /*                                                                           */
8 /*                                                                           */
9 /* (C) 1998-2009, Ullrich von Bassewitz                                      */
10 /*                Roemerstrasse 52                                           */
11 /*                D-70794 Filderstadt                                        */
12 /* EMail:         uz@cc65.org                                                */
13 /*                                                                           */
14 /*                                                                           */
15 /* This software is provided 'as-is', without any expressed or implied       */
16 /* warranty.  In no event will the authors be held liable for any damages    */
17 /* arising from the use of this software.                                    */
18 /*                                                                           */
19 /* Permission is granted to anyone to use this software for any purpose,     */
20 /* including commercial applications, and to alter it and redistribute it    */
21 /* freely, subject to the following restrictions:                            */
22 /*                                                                           */
23 /* 1. The origin of this software must not be misrepresented; you must not   */
24 /*    claim that you wrote the original software. If you use this software   */
25 /*    in a product, an acknowledgment in the product documentation would be  */
26 /*    appreciated but is not required.                                       */
27 /* 2. Altered source versions must be plainly marked as such, and must not   */
28 /*    be misrepresented as being the original software.                      */
29 /* 3. This notice may not be removed or altered from any source              */
30 /*    distribution.                                                          */
31 /*                                                                           */
32 /*****************************************************************************/
33
34
35
36 #ifndef SCANNER_H
37 #define SCANNER_H
38
39
40
41 /* common */
42 #include "fp.h"
43
44 /* cc65 */
45 #include "datatype.h"
46 #include "ident.h"
47 #include "lineinfo.h"
48
49
50
51 /*****************************************************************************/
52 /*                             Token definitions                             */
53 /*****************************************************************************/
54
55
56
57 typedef enum token_t {
58     TOK_INVALID,
59     TOK_CEOF,
60
61     /* Storage specifiers */
62     TOK_FIRST_STORAGE_CLASS,
63     TOK_AUTO            = TOK_FIRST_STORAGE_CLASS,
64     TOK_EXTERN,
65     TOK_REGISTER,
66     TOK_STATIC,
67     TOK_TYPEDEF,
68     TOK_LAST_STORAGE_CLASS = TOK_TYPEDEF,
69
70     /* Tokens denoting type qualifiers */
71     TOK_FIRST_TYPEQUAL,
72     TOK_CONST           = TOK_FIRST_TYPEQUAL,
73     TOK_VOLATILE,
74     TOK_RESTRICT,
75     TOK_LAST_TYPEQUAL   = TOK_RESTRICT,
76
77     /* Function specifiers */
78     TOK_INLINE,
79     TOK_FASTCALL,
80
81     /* Tokens denoting types */
82     TOK_FIRST_TYPE,
83     TOK_ENUM            = TOK_FIRST_TYPE,
84     TOK_CHAR,
85     TOK_INT,
86     TOK_DOUBLE,
87     TOK_FLOAT,
88     TOK_LONG,
89     TOK_UNSIGNED,
90     TOK_SIGNED,
91     TOK_SHORT,
92     TOK_STRUCT,
93     TOK_UNION,
94     TOK_VOID,
95     TOK_LAST_TYPE       = TOK_VOID,
96
97     /* Control statements */
98     TOK_DO,
99     TOK_FOR,
100     TOK_GOTO,
101     TOK_IF,
102     TOK_RETURN,
103     TOK_SWITCH,
104     TOK_WHILE,
105
106     TOK_ASM,
107     TOK_CASE,
108     TOK_DEFAULT,
109     TOK_BREAK,
110     TOK_CONTINUE,
111     TOK_ELSE,
112     TOK_ELLIPSIS,
113     TOK_SIZEOF,
114
115     TOK_IDENT,
116     TOK_SEMI,
117
118     /* Primary operators */
119     TOK_LBRACK,
120     TOK_LPAREN,
121     TOK_DOT,
122     TOK_PTR_REF,
123
124     TOK_LCURLY,
125     TOK_RBRACK,
126     TOK_COMP,
127     TOK_INC,
128     TOK_PLUS_ASSIGN,
129     TOK_PLUS,
130     TOK_COMMA,
131     TOK_DEC,
132     TOK_MINUS_ASSIGN,
133     TOK_RCURLY,
134     TOK_MINUS,
135     TOK_MUL_ASSIGN,
136     TOK_STAR,
137     TOK_MUL = TOK_STAR,         /* Alias */
138     TOK_DIV_ASSIGN,
139     TOK_DIV,
140     TOK_BOOL_AND,
141     TOK_AND_ASSIGN,
142     TOK_AND,
143     TOK_NE,
144     TOK_BOOL_NOT,
145     TOK_BOOL_OR,
146     TOK_OR_ASSIGN,
147     TOK_OR,
148     TOK_EQ,
149     TOK_ASSIGN,
150
151     /* Inequalities */
152     TOK_LE,
153     TOK_LT,
154     TOK_GE,
155     TOK_GT,
156
157     TOK_SHL_ASSIGN,
158     TOK_SHL,
159     TOK_SHR_ASSIGN,
160     TOK_SHR,
161     TOK_XOR_ASSIGN,
162     TOK_XOR,
163     TOK_MOD_ASSIGN,
164     TOK_MOD,
165     TOK_QUEST,
166     TOK_COLON,
167     TOK_RPAREN,
168     TOK_SCONST,
169     TOK_ICONST,
170     TOK_CCONST,
171     TOK_FCONST,
172     TOK_WCSCONST,
173
174     TOK_ATTRIBUTE,
175     TOK_FAR,
176     TOK_NEAR,
177     TOK_A,
178     TOK_X,
179     TOK_Y,
180     TOK_AX,
181     TOK_EAX,
182
183     TOK_PRAGMA
184 } token_t;
185
186
187
188 /*****************************************************************************/
189 /*                                   Data                                    */
190 /*****************************************************************************/
191
192
193
194 /* Forward for struct Literal */
195 struct Literal;
196
197 /* Token stuff */                     
198 typedef struct Token Token;
199 struct Token {
200     token_t         Tok;        /* The token itself */
201     long            IVal;       /* The integer attribute */
202     Double          FVal;       /* The float attribute */
203     struct Literal* SVal;       /* String literal is any */
204     ident           Ident;      /* Identifier if IDENT */
205     LineInfo*       LI;         /* Source line where the token comes from */
206     Type*           Type;       /* Type if integer or float constant */
207 };
208
209 extern Token CurTok;            /* The current token */
210 extern Token NextTok;           /* The next token */
211
212
213
214 /*****************************************************************************/
215 /*                                   Code                                    */
216 /*****************************************************************************/
217
218
219
220 #if defined(HAVE_INLINE)
221 INLINE int TokIsStorageClass (const Token* T)
222 /* Return true if the token is a storage class specifier */
223 {
224     return (T->Tok >= TOK_FIRST_STORAGE_CLASS && T->Tok <= TOK_LAST_STORAGE_CLASS);
225 }
226 #else
227 #  define TokIsStorageClass(T)  \
228         ((T)->Tok >= TOK_FIRST_STORAGE_CLASS && (T)->Tok <= TOK_LAST_STORAGE_CLASS)
229 #endif
230
231 #if defined(HAVE_INLINE)
232 INLINE int TokIsType (const Token* T)
233 /* Return true if the token is a type */
234 {
235     return (T->Tok >= TOK_FIRST_TYPE && T->Tok <= TOK_LAST_TYPE);
236 }
237 #else
238 #  define TokIsType(T)  ((T)->Tok >= TOK_FIRST_TYPE && (T)->Tok <= TOK_LAST_TYPE)
239 #endif
240
241 #if defined(HAVE_INLINE)
242 INLINE int TokIsTypeQual (const Token* T)
243 /* Return true if the token is a type qualifier */
244 {
245     return (T->Tok >= TOK_FIRST_TYPEQUAL && T->Tok <= TOK_LAST_TYPEQUAL);
246 }
247 #else
248 #  define TokIsTypeQual(T)  ((T)->Tok >= TOK_FIRST_TYPEQUAL && (T)->Tok <= TOK_LAST_TYPEQUAL)
249 #endif
250
251 int TokIsFuncSpec (const Token* T);
252 /* Return true if the token is a function specifier */
253
254 void SymName (char* S);
255 /* Read a symbol from the input stream. The first character must have been
256  * checked before calling this function. The buffer is expected to be at
257  * least of size MAX_IDENTLEN+1.
258  */
259
260 int IsSym (char* S);
261 /* If a symbol follows, read it and return 1, otherwise return 0 */
262
263 void NextToken (void);
264 /* Get next token from input stream */
265
266 void SkipTokens (const token_t* TokenList, unsigned TokenCount);
267 /* Skip tokens until we reach TOK_CEOF or a token in the given token list.
268  * This routine is used for error recovery.
269  */
270
271 int Consume (token_t Token, const char* ErrorMsg);
272 /* Eat token if it is the next in the input stream, otherwise print an error
273  * message. Returns true if the token was found and false otherwise.
274  */
275
276 int ConsumeColon (void);
277 /* Check for a colon and skip it. */
278
279 int ConsumeSemi (void);
280 /* Check for a semicolon and skip it. */
281
282 int ConsumeComma (void);
283 /* Check for a comma and skip it. */
284
285 int ConsumeLParen (void);
286 /* Check for a left parenthesis and skip it */
287
288 int ConsumeRParen (void);
289 /* Check for a right parenthesis and skip it */
290
291 int ConsumeLBrack (void);
292 /* Check for a left bracket and skip it */
293
294 int ConsumeRBrack (void);
295 /* Check for a right bracket and skip it */
296
297 int ConsumeLCurly (void);
298 /* Check for a left curly brace and skip it */
299
300 int ConsumeRCurly (void);
301 /* Check for a right curly brace and skip it */
302
303
304
305 /* End of scanner.h */
306 #endif
307
308
309
310
311
312