]> git.xonotic.org Git - xonotic/gmqcc.git/blob - parser.c
Allow multiple fields to be declared using comma
[xonotic/gmqcc.git] / parser.c
1 #include <stdio.h>
2 #include <stdarg.h>
3
4 #include "gmqcc.h"
5 #include "lexer.h"
6
7 typedef struct {
8     char *name;
9     ast_expression *var;
10 } varentry_t;
11
12 typedef struct {
13     lex_file *lex;
14     int      tok;
15
16     MEM_VECTOR_MAKE(varentry_t, globals);
17     MEM_VECTOR_MAKE(varentry_t, fields);
18     MEM_VECTOR_MAKE(ast_function*, functions);
19     MEM_VECTOR_MAKE(ast_value*, imm_float);
20     MEM_VECTOR_MAKE(ast_value*, imm_string);
21     MEM_VECTOR_MAKE(ast_value*, imm_vector);
22
23     ast_function *function;
24     MEM_VECTOR_MAKE(varentry_t, locals);
25     size_t blocklocal;
26
27     size_t errors;
28
29     /* TYPE_FIELD -> parser_find_fields is used instead of find_var
30      * TODO: TYPE_VECTOR -> x, y and z are accepted in the gmqcc standard
31      * anything else: type error
32      */
33     qcint  memberof;
34 } parser_t;
35
36 MEM_VEC_FUNCTIONS(parser_t, varentry_t, globals)
37 MEM_VEC_FUNCTIONS(parser_t, varentry_t, fields)
38 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_float)
39 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_string)
40 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_vector)
41 MEM_VEC_FUNCTIONS(parser_t, varentry_t, locals)
42 MEM_VEC_FUNCTIONS(parser_t, ast_function*, functions)
43
44 static void parser_pop_local(parser_t *parser);
45 static bool parser_variable(parser_t *parser, ast_block *localblock);
46 static ast_block* parser_parse_block(parser_t *parser);
47 static ast_expression* parser_parse_statement_or_block(parser_t *parser);
48 static ast_expression* parser_expression_leave(parser_t *parser);
49 static ast_expression* parser_expression(parser_t *parser);
50
51 void parseerror(parser_t *parser, const char *fmt, ...)
52 {
53         va_list ap;
54
55         parser->errors++;
56
57         va_start(ap, fmt);
58     vprintmsg(LVL_ERROR, parser->lex->tok->ctx.file, parser->lex->tok->ctx.line, "parse error", fmt, ap);
59         va_end(ap);
60
61         printf("\n");
62 }
63
64 /* returns true if it counts as an error */
65 bool GMQCC_WARN parsewarning(parser_t *parser, int warntype, const char *fmt, ...)
66 {
67         va_list ap;
68         int lvl = LVL_WARNING;
69
70     if (!OPTS_WARN(warntype))
71         return false;
72
73     if (OPTS_WARN(WARN_ERROR)) {
74             parser->errors++;
75             lvl = LVL_ERROR;
76         }
77
78         va_start(ap, fmt);
79     vprintmsg(lvl, parser->lex->tok->ctx.file, parser->lex->tok->ctx.line, "warning", fmt, ap);
80         va_end(ap);
81
82         return OPTS_WARN(WARN_ERROR);
83 }
84
85 bool parser_next(parser_t *parser)
86 {
87     /* lex_do kills the previous token */
88     parser->tok = lex_do(parser->lex);
89     if (parser->tok == TOKEN_EOF || parser->tok >= TOKEN_ERROR)
90         return false;
91     return true;
92 }
93
94 /* lift a token out of the parser so it's not destroyed by parser_next */
95 token *parser_lift(parser_t *parser)
96 {
97     token *tok = parser->lex->tok;
98     parser->lex->tok = NULL;
99     return tok;
100 }
101
102 #define parser_tokval(p) (p->lex->tok->value)
103 #define parser_token(p)  (p->lex->tok)
104 #define parser_ctx(p)    (p->lex->tok->ctx)
105
106 ast_value* parser_const_float(parser_t *parser, double d)
107 {
108     size_t i;
109     ast_value *out;
110     for (i = 0; i < parser->imm_float_count; ++i) {
111         if (parser->imm_float[i]->constval.vfloat == d)
112             return parser->imm_float[i];
113     }
114     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_FLOAT);
115     out->isconst = true;
116     out->constval.vfloat = d;
117     if (!parser_t_imm_float_add(parser, out)) {
118         ast_value_delete(out);
119         return NULL;
120     }
121     return out;
122 }
123
124 ast_value* parser_const_string(parser_t *parser, const char *str)
125 {
126     size_t i;
127     ast_value *out;
128     for (i = 0; i < parser->imm_string_count; ++i) {
129         if (!strcmp(parser->imm_string[i]->constval.vstring, str))
130             return parser->imm_string[i];
131     }
132     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_STRING);
133     out->isconst = true;
134     out->constval.vstring = util_strdup(str);
135     if (!parser_t_imm_string_add(parser, out)) {
136         ast_value_delete(out);
137         return NULL;
138     }
139     return out;
140 }
141
142 ast_value* parser_const_vector(parser_t *parser, vector v)
143 {
144     size_t i;
145     ast_value *out;
146     for (i = 0; i < parser->imm_vector_count; ++i) {
147         if (!memcmp(&parser->imm_vector[i]->constval.vvec, &v, sizeof(v)))
148             return parser->imm_vector[i];
149     }
150     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_VECTOR);
151     out->isconst = true;
152     out->constval.vvec = v;
153     if (!parser_t_imm_vector_add(parser, out)) {
154         ast_value_delete(out);
155         return NULL;
156     }
157     return out;
158 }
159
160 ast_expression* parser_find_field(parser_t *parser, const char *name)
161 {
162     size_t i;
163     for (i = 0; i < parser->fields_count; ++i) {
164         if (!strcmp(parser->fields[i].name, name))
165             return parser->fields[i].var;
166     }
167     return NULL;
168 }
169
170 ast_expression* parser_find_global(parser_t *parser, const char *name)
171 {
172     size_t i;
173     for (i = 0; i < parser->globals_count; ++i) {
174         if (!strcmp(parser->globals[i].name, name))
175             return parser->globals[i].var;
176     }
177     return NULL;
178 }
179
180 ast_expression* parser_find_local(parser_t *parser, const char *name, size_t upto)
181 {
182     size_t i;
183     ast_value *fun;
184     for (i = parser->locals_count; i > upto;) {
185         --i;
186         if (!strcmp(parser->locals[i].name, name))
187             return parser->locals[i].var;
188     }
189     fun = parser->function->vtype;
190     for (i = 0; i < fun->expression.params_count; ++i) {
191         if (!strcmp(fun->expression.params[i]->name, name))
192             return (ast_expression*)(fun->expression.params[i]);
193     }
194     return NULL;
195 }
196
197 ast_expression* parser_find_var(parser_t *parser, const char *name)
198 {
199     ast_expression *v;
200     v         = parser_find_local(parser, name, 0);
201     if (!v) v = parser_find_global(parser, name);
202     return v;
203 }
204
205 typedef struct {
206     MEM_VECTOR_MAKE(ast_value*, p);
207 } paramlist_t;
208 MEM_VEC_FUNCTIONS(paramlist_t, ast_value*, p)
209
210 static ast_value *parser_parse_type(parser_t *parser, int basetype, bool *isfunc)
211 {
212     paramlist_t params;
213     ast_value *var;
214     lex_ctx   ctx = parser_ctx(parser);
215     int vtype = basetype;
216     int temptype;
217     size_t i;
218
219     MEM_VECTOR_INIT(&params, p);
220
221     *isfunc = false;
222
223     if (parser->tok == '(') {
224         *isfunc = true;
225         while (true) {
226             ast_value *param;
227             bool dummy;
228
229             if (!parser_next(parser))
230                 goto on_error;
231
232             if (parser->tok == ')')
233                 break;
234
235             temptype = parser_token(parser)->constval.t;
236             if (!parser_next(parser))
237                 goto on_error;
238
239             param = parser_parse_type(parser, temptype, &dummy);
240             (void)dummy;
241
242             if (!param)
243                 goto on_error;
244
245             if (parser->tok == TOKEN_IDENT) {
246                 /* named parameter */
247                 if (!ast_value_set_name(param, parser_tokval(parser)))
248                     goto on_error;
249                 if (!parser_next(parser))
250                     goto on_error;
251             }
252
253             if (!paramlist_t_p_add(&params, param)) {
254                 parseerror(parser, "Out of memory while parsing typename");
255                 goto on_error;
256             }
257
258             if (parser->tok == ',')
259                 continue;
260             if (parser->tok == ')')
261                 break;
262             parseerror(parser, "Unexpected token");
263             goto on_error;
264         }
265         if (!parser_next(parser))
266             goto on_error;
267     }
268
269     var = ast_value_new(ctx, "<unnamed>", vtype);
270     if (!var)
271         goto on_error;
272     MEM_VECTOR_MOVE(&params, p, &var->expression, params);
273     return var;
274 on_error:
275     for (i = 0; i < params.p_count; ++i)
276         ast_value_delete(params.p[i]);
277     MEM_VECTOR_CLEAR(&params, p);
278     return NULL;
279 }
280
281 typedef struct
282 {
283     size_t etype; /* 0 = expression, others are operators */
284     int             paren;
285     size_t          off;
286     ast_expression *out;
287     ast_block      *block; /* for commas and function calls */
288     lex_ctx ctx;
289 } sy_elem;
290 typedef struct
291 {
292     MEM_VECTOR_MAKE(sy_elem, out);
293     MEM_VECTOR_MAKE(sy_elem, ops);
294 } shunt;
295 MEM_VEC_FUNCTIONS(shunt, sy_elem, out)
296 MEM_VEC_FUNCTIONS(shunt, sy_elem, ops)
297
298 static sy_elem syexp(lex_ctx ctx, ast_expression *v) {
299     sy_elem e;
300     e.etype = 0;
301     e.out   = v;
302     e.block = NULL;
303     e.ctx   = ctx;
304     e.paren = 0;
305     return e;
306 }
307
308 static sy_elem syblock(lex_ctx ctx, ast_block *v) {
309     sy_elem e;
310     e.etype = 0;
311     e.out   = (ast_expression*)v;
312     e.block = v;
313     e.ctx   = ctx;
314     e.paren = 0;
315     return e;
316 }
317
318 static sy_elem syop(lex_ctx ctx, const oper_info *op) {
319     sy_elem e;
320     e.etype = 1 + (op - operators);
321     e.out   = NULL;
322     e.block = NULL;
323     e.ctx   = ctx;
324     e.paren = 0;
325     return e;
326 }
327
328 static sy_elem syparen(lex_ctx ctx, int p, size_t off) {
329     sy_elem e;
330     e.etype = 0;
331     e.off   = off;
332     e.out   = NULL;
333     e.block = NULL;
334     e.ctx   = ctx;
335     e.paren = p;
336     return e;
337 }
338
339 #ifdef DEBUGSHUNT
340 # define DEBUGSHUNTDO(x) x
341 #else
342 # define DEBUGSHUNTDO(x)
343 #endif
344
345 static bool parser_sy_pop(parser_t *parser, shunt *sy)
346 {
347     const oper_info *op;
348     lex_ctx ctx;
349     ast_expression *out = NULL;
350     ast_expression *exprs[3];
351     ast_block      *blocks[3];
352     size_t i, assignop;
353     qcint  generated_op = 0;
354
355     if (!sy->ops_count) {
356         parseerror(parser, "internal error: missing operator");
357         return false;
358     }
359
360     if (sy->ops[sy->ops_count-1].paren) {
361         parseerror(parser, "unmatched parenthesis");
362         return false;
363     }
364
365     op = &operators[sy->ops[sy->ops_count-1].etype - 1];
366     ctx = sy->ops[sy->ops_count-1].ctx;
367
368     DEBUGSHUNTDO(printf("apply %s\n", op->op));
369
370     if (sy->out_count < op->operands) {
371         parseerror(parser, "internal error: not enough operands: %i", sy->out_count);
372         return false;
373     }
374
375     sy->ops_count--;
376
377     sy->out_count -= op->operands;
378     for (i = 0; i < op->operands; ++i) {
379         exprs[i]  = sy->out[sy->out_count+i].out;
380         blocks[i] = sy->out[sy->out_count+i].block;
381     }
382
383     if (blocks[0] && !blocks[0]->exprs_count && op->id != opid1(',')) {
384         parseerror(parser, "internal error: operator cannot be applied on empty blocks");
385         return false;
386     }
387
388 #define NotSameType(T) \
389              (exprs[0]->expression.vtype != exprs[1]->expression.vtype || \
390               exprs[0]->expression.vtype != T)
391     switch (op->id)
392     {
393         default:
394             parseerror(parser, "internal error: unhandled operand");
395             return false;
396
397         case opid1('.'):
398             if (exprs[0]->expression.vtype == TYPE_ENTITY) {
399                 if (exprs[1]->expression.vtype != TYPE_FIELD) {
400                     parseerror(parser, "type error: right hand of member-operand should be an entity-field");
401                     return false;
402                 }
403                 out = (ast_expression*)ast_entfield_new(ctx, exprs[0], exprs[1]);
404             }
405             else if (exprs[0]->expression.vtype == TYPE_VECTOR) {
406                 parseerror(parser, "internal error: vector access is not supposed to be handled at this point");
407                 return false;
408             }
409             else {
410                 parseerror(parser, "type error: member-of operator on something that is not an entity or vector");
411                 return false;
412             }
413             break;
414
415         case opid1(','):
416             if (blocks[0]) {
417                 if (!ast_block_exprs_add(blocks[0], exprs[1]))
418                     return false;
419             } else {
420                 blocks[0] = ast_block_new(ctx);
421                 if (!ast_block_exprs_add(blocks[0], exprs[0]) ||
422                     !ast_block_exprs_add(blocks[0], exprs[1]))
423                 {
424                     return false;
425                 }
426             }
427             if (!ast_block_set_type(blocks[0], exprs[1]))
428                 return false;
429
430             sy->out[sy->out_count++] = syblock(ctx, blocks[0]);
431             return true;
432
433         case opid1('+'):
434             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
435                 parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
436                            type_name[exprs[0]->expression.vtype],
437                            type_name[exprs[1]->expression.vtype]);
438                 return false;
439             }
440             if (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) {
441                 parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
442                            type_name[exprs[0]->expression.vtype],
443                            type_name[exprs[1]->expression.vtype]);
444                 return false;
445             }
446             switch (exprs[0]->expression.vtype) {
447                 case TYPE_FLOAT:
448                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_F, exprs[0], exprs[1]);
449                     break;
450                 case TYPE_VECTOR:
451                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_V, exprs[0], exprs[1]);
452                     break;
453                 default:
454                     parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
455                                type_name[exprs[0]->expression.vtype],
456                                type_name[exprs[1]->expression.vtype]);
457                     return false;
458             };
459             break;
460         case opid1('-'):
461             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
462                 parseerror(parser, "invalid types used in expression: cannot subtract type %s from %s",
463                            type_name[exprs[1]->expression.vtype],
464                            type_name[exprs[0]->expression.vtype]);
465                 return false;
466             }
467             if (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) {
468                 parseerror(parser, "invalid types used in expression: cannot subtract type %s from %s",
469                            type_name[exprs[0]->expression.vtype],
470                            type_name[exprs[1]->expression.vtype]);
471                 return false;
472             }
473             switch (exprs[0]->expression.vtype) {
474                 case TYPE_FLOAT:
475                     out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_F, exprs[0], exprs[1]);
476                     break;
477                 case TYPE_VECTOR:
478                     out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_V, exprs[0], exprs[1]);
479                     break;
480                 default:
481                     parseerror(parser, "invalid types used in expression: cannot subtract type %s from %s",
482                                type_name[exprs[1]->expression.vtype],
483                                type_name[exprs[0]->expression.vtype]);
484                     return false;
485             };
486             break;
487         case opid1('*'):
488             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype &&
489                 exprs[0]->expression.vtype != TYPE_VECTOR &&
490                 exprs[0]->expression.vtype != TYPE_FLOAT &&
491                 exprs[1]->expression.vtype != TYPE_VECTOR &&
492                 exprs[1]->expression.vtype != TYPE_FLOAT)
493             {
494                 parseerror(parser, "invalid types used in expression: cannot multiply types %s and %s",
495                            type_name[exprs[1]->expression.vtype],
496                            type_name[exprs[0]->expression.vtype]);
497                 return false;
498             }
499             switch (exprs[0]->expression.vtype) {
500                 case TYPE_FLOAT:
501                     if (exprs[1]->expression.vtype == TYPE_VECTOR)
502                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_FV, exprs[0], exprs[1]);
503                     else
504                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_F, exprs[0], exprs[1]);
505                     break;
506                 case TYPE_VECTOR:
507                     if (exprs[1]->expression.vtype == TYPE_FLOAT)
508                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_VF, exprs[0], exprs[1]);
509                     else
510                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_V, exprs[0], exprs[1]);
511                     break;
512                 default:
513                     parseerror(parser, "invalid types used in expression: cannot multiply types %s and %s",
514                                type_name[exprs[1]->expression.vtype],
515                                type_name[exprs[0]->expression.vtype]);
516                     return false;
517             };
518             break;
519         case opid1('/'):
520             if (NotSameType(TYPE_FLOAT)) {
521                 parseerror(parser, "invalid types used in expression: cannot divide types %s and %s",
522                            type_name[exprs[0]->expression.vtype],
523                            type_name[exprs[1]->expression.vtype]);
524                 return false;
525             }
526             out = (ast_expression*)ast_binary_new(ctx, INSTR_DIV_F, exprs[0], exprs[1]);
527             break;
528         case opid1('%'):
529         case opid2('%','='):
530             parseerror(parser, "qc does not have a modulo operator");
531             return false;
532         case opid1('|'):
533         case opid1('&'):
534             if (NotSameType(TYPE_FLOAT)) {
535                 parseerror(parser, "invalid types used in expression: cannot perform bit operations between types %s and %s",
536                            type_name[exprs[0]->expression.vtype],
537                            type_name[exprs[1]->expression.vtype]);
538                 return false;
539             }
540             out = (ast_expression*)ast_binary_new(ctx,
541                                                   (op->id == opid1('|') ? INSTR_BITOR : INSTR_BITAND),
542                                                   exprs[0], exprs[1]);
543             break;
544         case opid1('^'):
545             parseerror(parser, "TODO: bitxor");
546             return false;
547
548         case opid2('<','<'):
549         case opid2('>','>'):
550         case opid3('<','<','='):
551         case opid3('>','>','='):
552             parseerror(parser, "TODO: shifts");
553             return false;
554
555         case opid2('|','|'):
556             generated_op += 1; /* INSTR_OR */
557         case opid2('&','&'):
558             generated_op += INSTR_AND;
559             if (NotSameType(TYPE_FLOAT)) {
560                 parseerror(parser, "invalid types used in expression: cannot perform logical operations between types %s and %s",
561                            type_name[exprs[0]->expression.vtype],
562                            type_name[exprs[1]->expression.vtype]);
563                 parseerror(parser, "TODO: logical ops for arbitrary types using INSTR_NOT");
564                 parseerror(parser, "TODO: optional early out");
565                 return false;
566             }
567             if (opts_standard == COMPILER_GMQCC)
568                 printf("TODO: early out logic\n");
569             out = (ast_expression*)ast_binary_new(ctx, generated_op, exprs[0], exprs[1]);
570             break;
571
572         case opid1('>'):
573             generated_op += 1; /* INSTR_GT */
574         case opid1('<'):
575             generated_op += 1; /* INSTR_LT */
576         case opid2('>', '='):
577             generated_op += 1; /* INSTR_GE */
578         case opid2('<', '='):
579             generated_op += INSTR_LE;
580             if (NotSameType(TYPE_FLOAT)) {
581                 parseerror(parser, "invalid types used in expression: cannot perform comparison between types %s and %s",
582                            type_name[exprs[0]->expression.vtype],
583                            type_name[exprs[1]->expression.vtype]);
584                 return false;
585             }
586             out = (ast_expression*)ast_binary_new(ctx, generated_op, exprs[0], exprs[1]);
587             break;
588         case opid2('!', '='):
589             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
590                 parseerror(parser, "invalid types used in expression: cannot perform comparison between types %s and %s",
591                            type_name[exprs[0]->expression.vtype],
592                            type_name[exprs[1]->expression.vtype]);
593                 return false;
594             }
595             out = (ast_expression*)ast_binary_new(ctx, type_ne_instr[exprs[0]->expression.vtype], exprs[0], exprs[1]);
596             break;
597         case opid2('=', '='):
598             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
599                 parseerror(parser, "invalid types used in expression: cannot perform comparison between types %s and %s",
600                            type_name[exprs[0]->expression.vtype],
601                            type_name[exprs[1]->expression.vtype]);
602                 return false;
603             }
604             out = (ast_expression*)ast_binary_new(ctx, type_eq_instr[exprs[0]->expression.vtype], exprs[0], exprs[1]);
605             break;
606
607         case opid1('='):
608             if (ast_istype(exprs[0], ast_entfield))
609                 assignop = type_storep_instr[exprs[0]->expression.vtype];
610             else
611                 assignop = type_store_instr[exprs[0]->expression.vtype];
612             out = (ast_expression*)ast_store_new(ctx, assignop, exprs[0], exprs[1]);
613             break;
614         case opid2('+','='):
615         case opid2('-','='):
616             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype ||
617                 (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) )
618             {
619                 parseerror(parser, "invalid types used in expression: cannot add or subtract type %s and %s",
620                            type_name[exprs[0]->expression.vtype],
621                            type_name[exprs[1]->expression.vtype]);
622                 return false;
623             }
624             if (ast_istype(exprs[0], ast_entfield))
625                 assignop = type_storep_instr[exprs[0]->expression.vtype];
626             else
627                 assignop = type_store_instr[exprs[0]->expression.vtype];
628             switch (exprs[0]->expression.vtype) {
629                 case TYPE_FLOAT:
630                     out = (ast_expression*)ast_binstore_new(ctx, assignop,
631                                                             (op->id == opid2('+','=') ? INSTR_ADD_F : INSTR_SUB_F),
632                                                             exprs[0], exprs[1]);
633                     break;
634                 case TYPE_VECTOR:
635                     out = (ast_expression*)ast_binstore_new(ctx, assignop,
636                                                             (op->id == opid2('+','=') ? INSTR_ADD_V : INSTR_SUB_V),
637                                                             exprs[0], exprs[1]);
638                     break;
639                 default:
640                     parseerror(parser, "invalid types used in expression: cannot add or subtract type %s and %s",
641                                type_name[exprs[0]->expression.vtype],
642                                type_name[exprs[1]->expression.vtype]);
643                     return false;
644             };
645             break;
646     }
647 #undef NotSameType
648
649     if (!out) {
650         parseerror(parser, "failed to apply operand %s", op->op);
651         return false;
652     }
653
654     DEBUGSHUNTDO(printf("applied %s\n", op->op));
655     sy->out[sy->out_count++] = syexp(ctx, out);
656     return true;
657 }
658
659 static bool parser_close_call(parser_t *parser, shunt *sy)
660 {
661     /* was a function call */
662     ast_expression *fun;
663     ast_call       *call;
664
665     size_t          fid;
666     size_t          paramcount;
667
668     sy->ops_count--;
669     fid = sy->ops[sy->ops_count].off;
670
671     /* out[fid] is the function
672      * everything above is parameters...
673      * 0 params = nothing
674      * 1 params = ast_expression
675      * more = ast_block
676      */
677
678     if (sy->out_count < 1 || sy->out_count <= fid) {
679         parseerror(parser, "internal error: function call needs function and parameter list...");
680         return false;
681     }
682
683     fun = sy->out[fid].out;
684
685     call = ast_call_new(sy->ops[sy->ops_count].ctx, fun);
686     if (!call) {
687         parseerror(parser, "out of memory");
688         return false;
689     }
690
691     if (fid+1 == sy->out_count) {
692         /* no arguments */
693         paramcount = 0;
694     } else if (fid+2 == sy->out_count) {
695         ast_block *params;
696         sy->out_count--;
697         params = sy->out[sy->out_count].block;
698         if (!params) {
699             /* 1 param */
700             paramcount = 1;
701             if (!ast_call_params_add(call, sy->out[sy->out_count].out)) {
702                 ast_delete(sy->out[sy->out_count].out);
703                 parseerror(parser, "out of memory");
704                 return false;
705             }
706         } else {
707             paramcount = params->exprs_count;
708             MEM_VECTOR_MOVE(params, exprs, call, params);
709             ast_delete(params);
710         }
711     } else {
712         parseerror(parser, "invalid function call");
713         return false;
714     }
715
716     /* overwrite fid, the function, with a call */
717     sy->out[fid] = syexp(call->expression.node.context, (ast_expression*)call);
718
719     if (fun->expression.vtype != TYPE_FUNCTION) {
720         parseerror(parser, "not a function");
721         return false;
722     }
723
724     if (!fun->expression.next) {
725         parseerror(parser, "could not determine function return type");
726         return false;
727     } else {
728         if (fun->expression.params_count != paramcount) {
729             parseerror(parser, "expected %i parameters, got %i", (int)fun->expression.params_count, paramcount);
730             return false;
731         }
732     }
733
734     return true;
735 }
736
737 static bool parser_close_paren(parser_t *parser, shunt *sy, bool functions_only)
738 {
739     if (!sy->ops_count) {
740         parseerror(parser, "unmatched closing paren");
741         return false;
742     }
743     if (sy->ops[sy->ops_count-1].paren == 1) {
744         parseerror(parser, "empty parenthesis expression");
745         return false;
746     }
747     while (sy->ops_count) {
748         if (sy->ops[sy->ops_count-1].paren == 'f') {
749             if (!parser_close_call(parser, sy))
750                 return false;
751             break;
752         }
753         if (sy->ops[sy->ops_count-1].paren == 1) {
754             sy->ops_count--;
755             return !functions_only;
756         }
757         if (!parser_sy_pop(parser, sy))
758             return false;
759     }
760     return true;
761 }
762
763 static ast_expression* parser_expression_leave(parser_t *parser)
764 {
765     ast_expression *expr = NULL;
766     shunt sy;
767     bool wantop = false;
768     bool gotmemberof = false;
769
770     /* count the parens because an if starts with one, so the
771      * end of a condition is an unmatched closing paren
772      */
773     int parens = 0;
774
775     MEM_VECTOR_INIT(&sy, out);
776     MEM_VECTOR_INIT(&sy, ops);
777
778     while (true)
779     {
780         if (gotmemberof)
781             gotmemberof = false;
782         else
783             parser->memberof = 0;
784         if (!wantop)
785         {
786             bool nextwant = true;
787             if (parser->tok == TOKEN_IDENT)
788             {
789                 /* variable */
790                 ast_expression *var;
791                 if (opts_standard == COMPILER_GMQCC)
792                 {
793                     if (parser->memberof == TYPE_ENTITY)
794                         var = parser_find_field(parser, parser_tokval(parser));
795                     else if (parser->memberof == TYPE_VECTOR)
796                     {
797                         parseerror(parser, "TODO: implement effective vector member access");
798                         goto onerr;
799                     }
800                     else if (parser->memberof) {
801                         parseerror(parser, "namespace for member not found");
802                         goto onerr;
803                     }
804                     else
805                         var = parser_find_var(parser, parser_tokval(parser));
806                 } else {
807                     var = parser_find_var(parser, parser_tokval(parser));
808                     if (!var)
809                         var = parser_find_field(parser, parser_tokval(parser));
810                 }
811                 if (!var) {
812                     parseerror(parser, "unexpected ident: %s", parser_tokval(parser));
813                     goto onerr;
814                 }
815                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), var))) {
816                     parseerror(parser, "out of memory");
817                     goto onerr;
818                 }
819                 DEBUGSHUNTDO(printf("push %s\n", parser_tokval(parser)));
820             }
821             else if (parser->tok == TOKEN_FLOATCONST) {
822                 ast_value *val = parser_const_float(parser, (parser_token(parser)->constval.f));
823                 if (!val)
824                     return false;
825                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
826                     parseerror(parser, "out of memory");
827                     goto onerr;
828                 }
829                 DEBUGSHUNTDO(printf("push %g\n", parser_token(parser)->constval.f));
830             }
831             else if (parser->tok == TOKEN_INTCONST) {
832                 ast_value *val = parser_const_float(parser, (double)(parser_token(parser)->constval.i));
833                 if (!val)
834                     return false;
835                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
836                     parseerror(parser, "out of memory");
837                     goto onerr;
838                 }
839                 DEBUGSHUNTDO(printf("push %i\n", parser_token(parser)->constval.i));
840             }
841             else if (parser->tok == TOKEN_STRINGCONST) {
842                 ast_value *val = parser_const_string(parser, parser_tokval(parser));
843                 if (!val)
844                     return false;
845                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
846                     parseerror(parser, "out of memory");
847                     goto onerr;
848                 }
849                 DEBUGSHUNTDO(printf("push string\n"));
850             }
851             else if (parser->tok == TOKEN_VECTORCONST) {
852                 ast_value *val = parser_const_vector(parser, parser_token(parser)->constval.v);
853                 if (!val)
854                     return false;
855                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
856                     parseerror(parser, "out of memory");
857                     goto onerr;
858                 }
859                 DEBUGSHUNTDO(printf("push '%g %g %g'\n",
860                                     parser_token(parser)->constval.v.x,
861                                     parser_token(parser)->constval.v.y,
862                                     parser_token(parser)->constval.v.z));
863             }
864             else if (parser->tok == '(') {
865                 ++parens;
866                 nextwant = false; /* not expecting an operator next */
867                 if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 1, 0))) {
868                     parseerror(parser, "out of memory");
869                     goto onerr;
870                 }
871                 DEBUGSHUNTDO(printf("push (\n"));
872             }
873             else if (parser->tok == ')') {
874                 DEBUGSHUNTDO(printf("do[nop] )\n"));
875                 --parens;
876                 if (parens < 0)
877                     break;
878                 /* allowed for function calls */
879                 if (!parser_close_paren(parser, &sy, true))
880                     goto onerr;
881             }
882             else {
883                 /* TODO: prefix operators */
884                 parseerror(parser, "expected statement");
885                 goto onerr;
886             }
887             wantop = nextwant;
888             parser->lex->flags.noops = !wantop;
889         } else {
890             bool nextwant = false;
891             if (parser->tok == '(') {
892                 DEBUGSHUNTDO(printf("push (\n"));
893                 ++parens;
894                 /* we expected an operator, this is the function-call operator */
895                 if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 'f', sy.out_count-1))) {
896                     parseerror(parser, "out of memory");
897                     goto onerr;
898                 }
899             }
900             else if (parser->tok == ')') {
901                 DEBUGSHUNTDO(printf("do[op] )\n"));
902                 --parens;
903                 if (parens < 0)
904                     break;
905                 /* we do expect an operator next */
906                 /* closing an opening paren */
907                 if (!parser_close_paren(parser, &sy, false))
908                     goto onerr;
909                 nextwant = true;
910             }
911             else if (parser->tok != TOKEN_OPERATOR) {
912                 parseerror(parser, "expected operator or end of statement");
913                 goto onerr;
914             }
915             else {
916                 /* classify the operator */
917                 /* TODO: suffix operators */
918                 const oper_info *op;
919                 const oper_info *olast = NULL;
920                 size_t o;
921                 for (o = 0; o < operator_count; ++o) {
922                     if (!(operators[o].flags & OP_PREFIX) &&
923                         !(operators[o].flags & OP_SUFFIX) && /* remove this */
924                         !strcmp(parser_tokval(parser), operators[o].op))
925                     {
926                         break;
927                     }
928                 }
929                 if (o == operator_count) {
930                     /* no operator found... must be the end of the statement */
931                     break;
932                 }
933                 /* found an operator */
934                 op = &operators[o];
935                 if (op->id == opid1('.')) {
936                     /* for gmqcc standard: open up the namespace of the previous type */
937                     ast_expression *prevex = sy.out[sy.out_count-1].out;
938                     if (!prevex) {
939                         parseerror(parser, "unexpected member operator");
940                         goto onerr;
941                     }
942                     if (prevex->expression.vtype == TYPE_ENTITY)
943                         parser->memberof = TYPE_ENTITY;
944                     else if (prevex->expression.vtype == TYPE_VECTOR)
945                         parser->memberof = TYPE_VECTOR;
946                     else {
947                         parseerror(parser, "type error: type has no members");
948                         goto onerr;
949                     }
950                     gotmemberof = true;
951                 }
952
953                 if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
954                     olast = &operators[sy.ops[sy.ops_count-1].etype-1];
955
956                 while (olast && (
957                         (op->prec < olast->prec) ||
958                         (op->assoc == ASSOC_LEFT && op->prec <= olast->prec) ) )
959                 {
960                     if (!parser_sy_pop(parser, &sy))
961                         goto onerr;
962                     if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
963                         olast = &operators[sy.ops[sy.ops_count-1].etype-1];
964                     else
965                         olast = NULL;
966                 }
967
968                 DEBUGSHUNTDO(printf("push operator %s\n", op->op));
969                 if (!shunt_ops_add(&sy, syop(parser_ctx(parser), op)))
970                     goto onerr;
971             }
972             wantop = nextwant;
973             parser->lex->flags.noops = !wantop;
974         }
975         if (!parser_next(parser)) {
976             goto onerr;
977         }
978         if (parser->tok == ';') {
979             break;
980         }
981     }
982
983     while (sy.ops_count) {
984         if (!parser_sy_pop(parser, &sy))
985             goto onerr;
986     }
987
988     parser->lex->flags.noops = true;
989     if (!sy.out_count) {
990         parseerror(parser, "empty expression");
991         expr = NULL;
992     } else
993         expr = sy.out[0].out;
994     MEM_VECTOR_CLEAR(&sy, out);
995     MEM_VECTOR_CLEAR(&sy, ops);
996     DEBUGSHUNTDO(printf("shut done\n"));
997     return expr;
998
999 onerr:
1000     parser->lex->flags.noops = true;
1001     MEM_VECTOR_CLEAR(&sy, out);
1002     MEM_VECTOR_CLEAR(&sy, ops);
1003     return NULL;
1004 }
1005
1006 static ast_expression* parser_expression(parser_t *parser)
1007 {
1008     ast_expression *e = parser_expression_leave(parser);
1009     if (!e)
1010         return NULL;
1011     if (!parser_next(parser)) {
1012         ast_delete(e);
1013         return NULL;
1014     }
1015     return e;
1016 }
1017
1018 static bool parser_parse_if(parser_t *parser, ast_block *block, ast_expression **out)
1019 {
1020     ast_ifthen *ifthen;
1021     ast_expression *cond, *ontrue, *onfalse = NULL;
1022
1023     lex_ctx ctx = parser_ctx(parser);
1024
1025     /* skip the 'if' and check for opening paren */
1026     if (!parser_next(parser) || parser->tok != '(') {
1027         parseerror(parser, "expected 'if' condition in parenthesis");
1028         return false;
1029     }
1030     /* parse into the expression */
1031     if (!parser_next(parser)) {
1032         parseerror(parser, "expected 'if' condition after opening paren");
1033         return false;
1034     }
1035     /* parse the condition */
1036     cond = parser_expression_leave(parser);
1037     if (!cond)
1038         return false;
1039     /* closing paren */
1040     if (parser->tok != ')') {
1041         parseerror(parser, "expected closing paren after 'if' condition");
1042         ast_delete(cond);
1043         return false;
1044     }
1045     /* parse into the 'then' branch */
1046     if (!parser_next(parser)) {
1047         parseerror(parser, "expected statement for on-true branch of 'if'");
1048         ast_delete(cond);
1049         return false;
1050     }
1051     ontrue = parser_parse_statement_or_block(parser);
1052     if (!ontrue) {
1053         ast_delete(cond);
1054         return false;
1055     }
1056     /* check for an else */
1057     if (!strcmp(parser_tokval(parser), "else")) {
1058         /* parse into the 'else' branch */
1059         if (!parser_next(parser)) {
1060             parseerror(parser, "expected on-false branch after 'else'");
1061             ast_delete(ontrue);
1062             ast_delete(cond);
1063             return false;
1064         }
1065         onfalse = parser_parse_statement_or_block(parser);
1066         if (!onfalse) {
1067             ast_delete(ontrue);
1068             ast_delete(cond);
1069             return false;
1070         }
1071     }
1072
1073     ifthen = ast_ifthen_new(ctx, cond, ontrue, onfalse);
1074     *out = (ast_expression*)ifthen;
1075     return true;
1076 }
1077
1078 static bool parser_parse_while(parser_t *parser, ast_block *block, ast_expression **out)
1079 {
1080     ast_loop *aloop;
1081     ast_expression *cond, *ontrue;
1082
1083     lex_ctx ctx = parser_ctx(parser);
1084
1085     /* skip the 'while' and check for opening paren */
1086     if (!parser_next(parser) || parser->tok != '(') {
1087         parseerror(parser, "expected 'while' condition in parenthesis");
1088         return false;
1089     }
1090     /* parse into the expression */
1091     if (!parser_next(parser)) {
1092         parseerror(parser, "expected 'while' condition after opening paren");
1093         return false;
1094     }
1095     /* parse the condition */
1096     cond = parser_expression_leave(parser);
1097     if (!cond)
1098         return false;
1099     /* closing paren */
1100     if (parser->tok != ')') {
1101         parseerror(parser, "expected closing paren after 'while' condition");
1102         ast_delete(cond);
1103         return false;
1104     }
1105     /* parse into the 'then' branch */
1106     if (!parser_next(parser)) {
1107         parseerror(parser, "expected while-loop body");
1108         ast_delete(cond);
1109         return false;
1110     }
1111     ontrue = parser_parse_statement_or_block(parser);
1112     if (!ontrue) {
1113         ast_delete(cond);
1114         return false;
1115     }
1116
1117     aloop = ast_loop_new(ctx, NULL, cond, NULL, NULL, ontrue);
1118     *out = (ast_expression*)aloop;
1119     return true;
1120 }
1121
1122 static bool parser_parse_dowhile(parser_t *parser, ast_block *block, ast_expression **out)
1123 {
1124     ast_loop *aloop;
1125     ast_expression *cond, *ontrue;
1126
1127     lex_ctx ctx = parser_ctx(parser);
1128
1129     /* skip the 'do' and get the body */
1130     if (!parser_next(parser)) {
1131         parseerror(parser, "expected loop body");
1132         return false;
1133     }
1134     ontrue = parser_parse_statement_or_block(parser);
1135     if (!ontrue)
1136         return false;
1137
1138     /* expect the "while" */
1139     if (parser->tok != TOKEN_KEYWORD ||
1140         strcmp(parser_tokval(parser), "while"))
1141     {
1142         parseerror(parser, "expected 'while' and condition");
1143         ast_delete(ontrue);
1144         return false;
1145     }
1146
1147     /* skip the 'while' and check for opening paren */
1148     if (!parser_next(parser) || parser->tok != '(') {
1149         parseerror(parser, "expected 'while' condition in parenthesis");
1150         ast_delete(ontrue);
1151         return false;
1152     }
1153     /* parse into the expression */
1154     if (!parser_next(parser)) {
1155         parseerror(parser, "expected 'while' condition after opening paren");
1156         ast_delete(ontrue);
1157         return false;
1158     }
1159     /* parse the condition */
1160     cond = parser_expression_leave(parser);
1161     if (!cond)
1162         return false;
1163     /* closing paren */
1164     if (parser->tok != ')') {
1165         parseerror(parser, "expected closing paren after 'while' condition");
1166         ast_delete(ontrue);
1167         ast_delete(cond);
1168         return false;
1169     }
1170     /* parse on */
1171     if (!parser_next(parser) || parser->tok != ';') {
1172         parseerror(parser, "expected semicolon after condition");
1173         ast_delete(ontrue);
1174         ast_delete(cond);
1175         return false;
1176     }
1177
1178     if (!parser_next(parser)) {
1179         parseerror(parser, "parse error");
1180         ast_delete(ontrue);
1181         ast_delete(cond);
1182         return false;
1183     }
1184
1185     aloop = ast_loop_new(ctx, NULL, NULL, cond, NULL, ontrue);
1186     *out = (ast_expression*)aloop;
1187     return true;
1188 }
1189
1190 static bool parser_parse_for(parser_t *parser, ast_block *block, ast_expression **out)
1191 {
1192     ast_loop *aloop;
1193     ast_expression *initexpr, *cond, *increment, *ontrue;
1194     size_t oldblocklocal;
1195
1196     lex_ctx ctx = parser_ctx(parser);
1197
1198     oldblocklocal = parser->blocklocal;
1199     parser->blocklocal = parser->locals_count;
1200
1201     initexpr  = NULL;
1202     cond      = NULL;
1203     increment = NULL;
1204     ontrue    = NULL;
1205
1206     /* skip the 'while' and check for opening paren */
1207     if (!parser_next(parser) || parser->tok != '(') {
1208         parseerror(parser, "expected 'for' expressions in parenthesis");
1209         goto onerr;
1210     }
1211     /* parse into the expression */
1212     if (!parser_next(parser)) {
1213         parseerror(parser, "expected 'for' initializer after opening paren");
1214         goto onerr;
1215     }
1216
1217     if (parser->tok == TOKEN_TYPENAME) {
1218         if (opts_standard != COMPILER_GMQCC) {
1219             if (parsewarning(parser, WARN_EXTENSIONS,
1220                              "current standard does not allow variable declarations in for-loop initializers"))
1221                 goto onerr;
1222         }
1223
1224         parseerror(parser, "TODO: assignment of new variables to be non-const");
1225         goto onerr;
1226         if (!parser_variable(parser, block))
1227             goto onerr;
1228     }
1229     else if (parser->tok != ';')
1230     {
1231         initexpr = parser_expression_leave(parser);
1232         if (!initexpr)
1233             goto onerr;
1234     }
1235
1236     /* move on to condition */
1237     if (parser->tok != ';') {
1238         parseerror(parser, "expected semicolon after for-loop initializer");
1239         goto onerr;
1240     }
1241     if (!parser_next(parser)) {
1242         parseerror(parser, "expected for-loop condition");
1243         goto onerr;
1244     }
1245
1246     /* parse the condition */
1247     if (parser->tok != ';') {
1248         cond = parser_expression_leave(parser);
1249         if (!cond)
1250             goto onerr;
1251     }
1252
1253     /* move on to incrementor */
1254     if (parser->tok != ';') {
1255         parseerror(parser, "expected semicolon after for-loop initializer");
1256         goto onerr;
1257     }
1258     if (!parser_next(parser)) {
1259         parseerror(parser, "expected for-loop condition");
1260         goto onerr;
1261     }
1262
1263     /* parse the incrementor */
1264     if (parser->tok != ')') {
1265         increment = parser_expression_leave(parser);
1266         if (!increment)
1267             goto onerr;
1268     }
1269
1270     /* closing paren */
1271     if (parser->tok != ')') {
1272         parseerror(parser, "expected closing paren after 'for-loop' incrementor");
1273         goto onerr;
1274     }
1275     /* parse into the 'then' branch */
1276     if (!parser_next(parser)) {
1277         parseerror(parser, "expected for-loop body");
1278         goto onerr;
1279     }
1280     ontrue = parser_parse_statement_or_block(parser);
1281     if (!ontrue) {
1282         goto onerr;
1283     }
1284
1285     aloop = ast_loop_new(ctx, initexpr, cond, NULL, increment, ontrue);
1286     *out = (ast_expression*)aloop;
1287
1288     while (parser->locals_count > parser->blocklocal)
1289         parser_pop_local(parser);
1290     parser->blocklocal = oldblocklocal;
1291     return true;
1292 onerr:
1293     if (initexpr)  ast_delete(initexpr);
1294     if (cond)      ast_delete(cond);
1295     if (increment) ast_delete(increment);
1296     while (parser->locals_count > parser->blocklocal)
1297         parser_pop_local(parser);
1298     parser->blocklocal = oldblocklocal;
1299     return false;
1300 }
1301
1302 static bool parser_parse_statement(parser_t *parser, ast_block *block, ast_expression **out)
1303 {
1304     if (parser->tok == TOKEN_TYPENAME)
1305     {
1306         /* local variable */
1307         if (!block) {
1308             parseerror(parser, "cannot declare a variable from here");
1309             return false;
1310         }
1311         if (opts_standard == COMPILER_QCC) {
1312             if (parsewarning(parser, WARN_EXTENSIONS, "missing 'local' keyword when declaring a local variable"))
1313                 return false;
1314         }
1315         if (!parser_variable(parser, block))
1316             return false;
1317         *out = NULL;
1318         return true;
1319     }
1320     else if (parser->tok == TOKEN_KEYWORD)
1321     {
1322         if (!strcmp(parser_tokval(parser), "local"))
1323         {
1324             if (!block) {
1325                 parseerror(parser, "cannot declare a local variable here");
1326                 return false;
1327             }
1328             if (!parser_next(parser)) {
1329                 parseerror(parser, "expected variable declaration");
1330                 return false;
1331             }
1332             if (!parser_variable(parser, block))
1333                 return false;
1334             *out = NULL;
1335             return true;
1336         }
1337         else if (!strcmp(parser_tokval(parser), "return"))
1338         {
1339             ast_expression *exp = NULL;
1340             ast_return     *ret = NULL;
1341             ast_value      *expected = parser->function->vtype;
1342
1343             if (!parser_next(parser)) {
1344                 parseerror(parser, "expected return expression");
1345                 return false;
1346             }
1347
1348             if (parser->tok != ';') {
1349                 exp = parser_expression(parser);
1350                 if (!exp)
1351                     return false;
1352
1353                 if (exp->expression.vtype != expected->expression.next->expression.vtype) {
1354                     parseerror(parser, "return with invalid expression");
1355                 }
1356
1357                 ret = ast_return_new(exp->expression.node.context, exp);
1358                 if (!ret) {
1359                     ast_delete(exp);
1360                     return false;
1361                 }
1362
1363                 *out = (ast_expression*)ret;
1364             } else if (!parser_next(parser)) {
1365                 parseerror(parser, "expected semicolon");
1366                 if (expected->expression.next->expression.vtype != TYPE_VOID) {
1367                     parseerror(parser, "return without value");
1368                 }
1369             }
1370             return true;
1371         }
1372         else if (!strcmp(parser_tokval(parser), "if"))
1373         {
1374             return parser_parse_if(parser, block, out);
1375         }
1376         else if (!strcmp(parser_tokval(parser), "while"))
1377         {
1378             return parser_parse_while(parser, block, out);
1379         }
1380         else if (!strcmp(parser_tokval(parser), "do"))
1381         {
1382             return parser_parse_dowhile(parser, block, out);
1383         }
1384         else if (!strcmp(parser_tokval(parser), "for"))
1385         {
1386             if (opts_standard == COMPILER_QCC) {
1387                 if (parsewarning(parser, WARN_EXTENSIONS, "for loops are not recognized in the original Quake C standard, to enable try an alternate standard --std=?"))
1388                     return false;
1389             }
1390             return parser_parse_for(parser, block, out);
1391         }
1392         parseerror(parser, "Unexpected keyword");
1393         return false;
1394     }
1395     else if (parser->tok == '{')
1396     {
1397         ast_block *inner;
1398         inner = parser_parse_block(parser);
1399         if (!inner)
1400             return false;
1401         *out = (ast_expression*)inner;
1402         return true;
1403     }
1404     else
1405     {
1406         ast_expression *exp = parser_expression(parser);
1407         if (!exp)
1408             return false;
1409         *out = exp;
1410         return true;
1411     }
1412 }
1413
1414 static void parser_pop_local(parser_t *parser)
1415 {
1416     parser->locals_count--;
1417     mem_d(parser->locals[parser->locals_count].name);
1418 }
1419
1420 static ast_block* parser_parse_block(parser_t *parser)
1421 {
1422     size_t oldblocklocal;
1423     ast_block *block = NULL;
1424
1425     oldblocklocal = parser->blocklocal;
1426     parser->blocklocal = parser->locals_count;
1427
1428     if (!parser_next(parser)) { /* skip the '{' */
1429         parseerror(parser, "expected function body");
1430         goto cleanup;
1431     }
1432
1433     block = ast_block_new(parser_ctx(parser));
1434
1435     while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
1436     {
1437         ast_expression *expr;
1438         if (parser->tok == '}')
1439             break;
1440
1441         if (!parser_parse_statement(parser, block, &expr)) {
1442             ast_block_delete(block);
1443             block = NULL;
1444             goto cleanup;
1445         }
1446         if (!expr)
1447             continue;
1448         if (!ast_block_exprs_add(block, expr)) {
1449             ast_delete(expr);
1450             ast_block_delete(block);
1451             block = NULL;
1452             goto cleanup;
1453         }
1454     }
1455
1456     if (parser->tok != '}') {
1457         ast_block_delete(block);
1458         block = NULL;
1459     } else {
1460         (void)parser_next(parser);
1461     }
1462
1463 cleanup:
1464     while (parser->locals_count > parser->blocklocal)
1465         parser_pop_local(parser);
1466     parser->blocklocal = oldblocklocal;
1467     /* unroll the local vector */
1468     return block;
1469 }
1470
1471 static ast_expression* parser_parse_statement_or_block(parser_t *parser)
1472 {
1473     ast_expression *expr;
1474     if (parser->tok == '{')
1475         return (ast_expression*)parser_parse_block(parser);
1476     if (!parser_parse_statement(parser, NULL, &expr))
1477         return NULL;
1478     return expr;
1479 }
1480
1481 static bool parser_variable(parser_t *parser, ast_block *localblock)
1482 {
1483     bool          isfunc = false;
1484     ast_function *func = NULL;
1485     lex_ctx       ctx;
1486     ast_value    *var;
1487     varentry_t    varent;
1488     ast_expression *olddecl;
1489
1490     int basetype = parser_token(parser)->constval.t;
1491
1492     while (true)
1493     {
1494         if (!parser_next(parser)) { /* skip basetype or comma */
1495             parseerror(parser, "expected variable declaration");
1496             return false;
1497         }
1498
1499         olddecl = NULL;
1500         isfunc  = false;
1501         func    = NULL;
1502         ctx = parser_ctx(parser);
1503         var = parser_parse_type(parser, basetype, &isfunc);
1504
1505         if (!var)
1506             return false;
1507
1508         if (parser->tok != TOKEN_IDENT) {
1509             parseerror(parser, "expected variable name\n");
1510             return false;
1511         }
1512
1513         if (!isfunc) {
1514             if (!localblock && (olddecl = parser_find_global(parser, parser_tokval(parser)))) {
1515                 ast_value_delete(var);
1516                 parseerror(parser, "global %s already declared here: %s:%i\n",
1517                            parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1518                 return false;
1519             }
1520
1521             if (localblock && parser_find_local(parser, parser_tokval(parser), parser->blocklocal)) {
1522                 ast_value_delete(var);
1523                 parseerror(parser, "local %s already declared here: %s:%i\n",
1524                            parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1525                 return false;
1526             }
1527         }
1528
1529         if (!ast_value_set_name(var, parser_tokval(parser))) {
1530             parseerror(parser, "failed to set variable name\n");
1531             ast_value_delete(var);
1532             return false;
1533         }
1534
1535         if (isfunc) {
1536             /* a function was defined */
1537             ast_value *fval;
1538             ast_value *proto = NULL;
1539
1540             if (!localblock)
1541                 olddecl = parser_find_global(parser, parser_tokval(parser));
1542             else
1543                 olddecl = parser_find_local(parser, parser_tokval(parser), parser->blocklocal);
1544
1545             if (olddecl) {
1546                 /* we had a prototype */
1547                 if (!ast_istype(olddecl, ast_value)) {
1548                     /* theoretically not possible you think?
1549                      * well:
1550                      * vector v;
1551                      * void() v_x = {}
1552                      * got it?
1553                      */
1554                     parseerror(parser, "cannot declare a function with the same name as a vector's member: %s",
1555                                parser_tokval(parser));
1556                     ast_value_delete(var);
1557                     return false;
1558                 }
1559
1560                 proto = (ast_value*)olddecl;
1561             }
1562
1563             /* turn var into a value of TYPE_FUNCTION, with the old var
1564              * as return type
1565              */
1566             fval = ast_value_new(ctx, var->name, TYPE_FUNCTION);
1567             func = ast_function_new(ctx, var->name, fval);
1568             if (!fval || !func) {
1569                 ast_value_delete(var);
1570                 if (fval) ast_value_delete(fval);
1571                 if (func) ast_function_delete(func);
1572                 return false;
1573             }
1574
1575             fval->expression.next = (ast_expression*)var;
1576             MEM_VECTOR_MOVE(&var->expression, params, &fval->expression, params);
1577
1578             /* we compare the type late here, but it's easier than
1579              * messing with the parameter-vector etc. earlier
1580              */
1581             if (proto) {
1582                 if (!ast_compare_type((ast_expression*)proto, (ast_expression*)fval)) {
1583                     parseerror(parser, "conflicting types for `%s`, previous declaration was here: %s:%i",
1584                                proto->name,
1585                                ast_ctx(proto).file, ast_ctx(proto).line);
1586                     ast_function_delete(func);
1587                     ast_value_delete(fval);
1588                     return false;
1589                 }
1590                 ast_function_delete(func);
1591                 ast_value_delete(fval);
1592                 var = proto;
1593                 func = var->constval.vfunc;
1594             }
1595             else
1596             {
1597                 if (!parser_t_functions_add(parser, func)) {
1598                     ast_function_delete(func);
1599                     ast_value_delete(fval);
1600                     return false;
1601                 }
1602             }
1603
1604             var = fval;
1605         }
1606
1607         varent.name = util_strdup(var->name);
1608         varent.var = (ast_expression*)var;
1609         if (var->expression.vtype == TYPE_VECTOR)
1610         {
1611             size_t len = strlen(varent.name);
1612             varentry_t vx, vy, vz;
1613             vx.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 0);
1614             vy.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 1);
1615             vz.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 2);
1616             vx.name = mem_a(len+3);
1617             vy.name = mem_a(len+3);
1618             vz.name = mem_a(len+3);
1619             strcpy(vx.name, varent.name);
1620             strcpy(vy.name, varent.name);
1621             strcpy(vz.name, varent.name);
1622             vx.name[len] = vy.name[len] = vz.name[len] = '_';
1623             vx.name[len+1] = 'x';
1624             vy.name[len+1] = 'y';
1625             vz.name[len+1] = 'z';
1626             vx.name[len+2] = vy.name[len+2] = vz.name[len+2] = 0;
1627
1628             if (!localblock) {
1629                 (void)!parser_t_globals_add(parser, varent);
1630                 (void)!parser_t_globals_add(parser, vx);
1631                 (void)!parser_t_globals_add(parser, vy);
1632                 (void)!parser_t_globals_add(parser, vz);
1633             } else {
1634                 (void)!parser_t_locals_add(parser, varent);
1635                 (void)!parser_t_locals_add(parser, vx);
1636                 (void)!parser_t_locals_add(parser, vy);
1637                 (void)!parser_t_locals_add(parser, vz);
1638             }
1639         }
1640         else
1641         {
1642             if ( (!localblock && !parser_t_globals_add(parser, varent)) ||
1643                  ( localblock && !parser_t_locals_add(parser, varent)) )
1644             {
1645                 ast_value_delete(var);
1646                 return false;
1647             }
1648         }
1649         if (localblock && !ast_block_locals_add(localblock, var))
1650         {
1651             parser_pop_local(parser);
1652             ast_value_delete(var);
1653             return false;
1654         }
1655
1656         if (!parser_next(parser)) {
1657             ast_value_delete(var);
1658             return false;
1659         }
1660
1661         if (parser->tok == ';') {
1662             if (!parser_next(parser))
1663                 return parser->tok == TOKEN_EOF;
1664             return true;
1665         }
1666
1667         if (parser->tok == ',') {
1668             /* another var */
1669             continue;
1670         }
1671
1672         if (parser->tok != '=') {
1673             parseerror(parser, "expected '=' or ';'");
1674             return false;
1675         }
1676
1677         if (!parser_next(parser))
1678             return false;
1679
1680         if (parser->tok == '#') {
1681             if (localblock) {
1682                 parseerror(parser, "cannot declare builtins within functions");
1683                 return false;
1684             }
1685             if (!isfunc || !func) {
1686                 parseerror(parser, "unexpected builtin number, '%s' is not a function", var->name);
1687                 return false;
1688             }
1689             if (!parser_next(parser)) {
1690                 parseerror(parser, "expected builtin number");
1691                 return false;
1692             }
1693             if (parser->tok != TOKEN_INTCONST) {
1694                 parseerror(parser, "builtin number must be an integer constant");
1695                 return false;
1696             }
1697             if (parser_token(parser)->constval.i <= 0) {
1698                 parseerror(parser, "builtin number must be positive integer greater than zero");
1699                 return false;
1700             }
1701
1702             func->builtin = -parser_token(parser)->constval.i;
1703         } else if (parser->tok == '{') {
1704             /* function body */
1705             ast_block *block;
1706             ast_function *old = parser->function;
1707
1708             if (localblock) {
1709                 parseerror(parser, "cannot declare functions within functions");
1710                 return false;
1711             }
1712
1713             parser->function = func;
1714             block = parser_parse_block(parser);
1715             parser->function = old;
1716
1717             if (!block)
1718                 return false;
1719
1720             if (!ast_function_blocks_add(func, block)) {
1721                 ast_block_delete(block);
1722                 return false;
1723             }
1724
1725             if (parser->tok == ';')
1726                 return parser_next(parser) || parser->tok == TOKEN_EOF;
1727             else if (opts_standard == COMPILER_QCC)
1728                 parseerror(parser, "missing semicolon after function body (mandatory with -std=qcc)");
1729             return true;
1730         } else {
1731             parseerror(parser, "TODO, const assignment");
1732         }
1733
1734         if (!parser_next(parser))
1735             return false;
1736
1737         if (parser->tok == ',') {
1738             /* another */
1739             continue;
1740         }
1741
1742         if (parser->tok != ';') {
1743             parseerror(parser, "expected semicolon");
1744             return false;
1745         }
1746
1747         (void)parser_next(parser);
1748
1749         return true;
1750     }
1751 }
1752
1753 static bool parser_do(parser_t *parser)
1754 {
1755     if (parser->tok == TOKEN_TYPENAME)
1756     {
1757         return parser_variable(parser, NULL);
1758     }
1759     else if (parser->tok == TOKEN_KEYWORD)
1760     {
1761         /* handle 'var' and 'const' */
1762         return false;
1763     }
1764     else if (parser->tok == '.')
1765     {
1766         ast_value *var;
1767         ast_value *fld;
1768         bool       isfunc = false;
1769         int        basetype;
1770         lex_ctx    ctx = parser_ctx(parser);
1771         varentry_t varent;
1772
1773         /* entity-member declaration */
1774         if (!parser_next(parser) || parser->tok != TOKEN_TYPENAME) {
1775             parseerror(parser, "expected member variable definition");
1776             return false;
1777         }
1778
1779         /* remember the base/return type */
1780         basetype = parser_token(parser)->constval.t;
1781
1782         /* parse into the declaration */
1783         if (!parser_next(parser)) {
1784             parseerror(parser, "expected field def");
1785             return false;
1786         }
1787
1788         /* parse the field type fully */
1789         var = parser_parse_type(parser, basetype, &isfunc);
1790         if (!var)
1791             return false;
1792
1793         while (true) {
1794             /* now the field name */
1795             if (parser->tok != TOKEN_IDENT) {
1796                 parseerror(parser, "expected field name");
1797                 ast_delete(var);
1798                 return false;
1799             }
1800
1801             /* check for an existing field
1802              * in original qc we also have to check for an existing
1803              * global named like the field
1804              */
1805             if (opts_standard == COMPILER_QCC) {
1806                 if (parser_find_global(parser, parser_tokval(parser))) {
1807                     parseerror(parser, "cannot declare a field and a global of the same name with -std=qcc");
1808                     ast_delete(var);
1809                     return false;
1810                 }
1811             }
1812             if (parser_find_field(parser, parser_tokval(parser))) {
1813                 parseerror(parser, "field %s already exists", parser_tokval(parser));
1814                 ast_delete(var);
1815                 return false;
1816             }
1817
1818             /* if it was a function, turn it into a function */
1819             if (isfunc) {
1820                 ast_value *fval;
1821                 /* turn var into a value of TYPE_FUNCTION, with the old var
1822                  * as return type
1823                  */
1824                 fval = ast_value_new(ctx, var->name, TYPE_FUNCTION);
1825                 if (!fval) {
1826                     ast_value_delete(var);
1827                     ast_value_delete(fval);
1828                     return false;
1829                 }
1830
1831                 fval->expression.next = (ast_expression*)var;
1832                 MEM_VECTOR_MOVE(&var->expression, params, &fval->expression, params);
1833
1834                 var = fval;
1835             }
1836
1837             /* turn it into a field */
1838             fld = ast_value_new(ctx, parser_tokval(parser), TYPE_FIELD);
1839             fld->expression.next = (ast_expression*)var;
1840
1841             varent.var = (ast_expression*)fld;
1842             varent.name = util_strdup(fld->name);
1843             (void)!parser_t_fields_add(parser, varent);
1844
1845             if (var->expression.vtype == TYPE_VECTOR)
1846             {
1847                 /* create _x, _y and _z fields as well */
1848                 size_t len;
1849                 varentry_t vx, vy, vz;
1850
1851                 len = strlen(varent.name);
1852                 vx.var = (ast_expression*)ast_member_new(ast_ctx(fld), (ast_expression*)fld, 0);
1853                 vy.var = (ast_expression*)ast_member_new(ast_ctx(fld), (ast_expression*)fld, 1);
1854                 vz.var = (ast_expression*)ast_member_new(ast_ctx(fld), (ast_expression*)fld, 2);
1855                 vx.name = mem_a(len+3);
1856                 vy.name = mem_a(len+3);
1857                 vz.name = mem_a(len+3);
1858                 strcpy(vx.name, varent.name);
1859                 strcpy(vy.name, varent.name);
1860                 strcpy(vz.name, varent.name);
1861                 vx.name[len] = vy.name[len] = vz.name[len] = '_';
1862                 vx.name[len+1] = 'x';
1863                 vy.name[len+1] = 'y';
1864                 vz.name[len+1] = 'z';
1865                 vx.name[len+2] = vy.name[len+2] = vz.name[len+2] = 0;
1866                 (void)!parser_t_fields_add(parser, vx);
1867                 (void)!parser_t_fields_add(parser, vy);
1868                 (void)!parser_t_fields_add(parser, vz);
1869             }
1870
1871             if (!parser_next(parser)) {
1872                 parseerror(parser, "expected semicolon or another field name");
1873                 return false;
1874             }
1875             if (parser->tok == ';')
1876                 break;
1877             if (parser->tok != ',' || !parser_next(parser)) {
1878                 parseerror(parser, "expected semicolon or another field name");
1879                 return false;
1880             }
1881         }
1882
1883         /* skip the semicolon */
1884         if (!parser_next(parser))
1885             return parser->tok == TOKEN_EOF;
1886
1887         return true;
1888     }
1889     else
1890     {
1891         parseerror(parser, "unexpected token: %s", parser->lex->tok->value);
1892         return false;
1893     }
1894     return true;
1895 }
1896
1897 static parser_t *parser;
1898
1899 bool parser_init()
1900 {
1901     parser = (parser_t*)mem_a(sizeof(parser_t));
1902     if (!parser)
1903         return false;
1904
1905     memset(parser, 0, sizeof(parser));
1906
1907     MEM_VECTOR_INIT(parser, globals);
1908     MEM_VECTOR_INIT(parser, locals);
1909     return true;
1910 }
1911
1912 bool parser_compile(const char *filename)
1913 {
1914     parser->lex = lex_open(filename);
1915     if (!parser->lex) {
1916         printf("failed to open file \"%s\"\n", filename);
1917         return false;
1918     }
1919
1920     /* initial lexer/parser state */
1921     parser->lex->flags.noops = true;
1922
1923     if (parser_next(parser))
1924     {
1925         while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
1926         {
1927             if (!parser_do(parser)) {
1928                 if (parser->tok == TOKEN_EOF)
1929                     parseerror(parser, "unexpected eof");
1930                 else if (!parser->errors)
1931                     parseerror(parser, "parse error\n");
1932                 lex_close(parser->lex);
1933                 mem_d(parser);
1934                 return false;
1935             }
1936         }
1937     }
1938
1939     lex_close(parser->lex);
1940
1941     return !parser->errors;
1942 }
1943
1944 void parser_cleanup()
1945 {
1946     size_t i;
1947     for (i = 0; i < parser->functions_count; ++i) {
1948         ast_delete(parser->functions[i]);
1949     }
1950     for (i = 0; i < parser->imm_vector_count; ++i) {
1951         ast_delete(parser->imm_vector[i]);
1952     }
1953     for (i = 0; i < parser->imm_string_count; ++i) {
1954         ast_delete(parser->imm_string[i]);
1955     }
1956     for (i = 0; i < parser->imm_float_count; ++i) {
1957         ast_delete(parser->imm_float[i]);
1958     }
1959     for (i = 0; i < parser->globals_count; ++i) {
1960         ast_delete(parser->globals[i].var);
1961         mem_d(parser->globals[i].name);
1962     }
1963     MEM_VECTOR_CLEAR(parser, globals);
1964
1965     mem_d(parser);
1966 }
1967
1968 bool parser_finish(const char *output)
1969 {
1970     size_t i;
1971     ir_builder *ir;
1972
1973     if (!parser->errors)
1974     {
1975         ir = ir_builder_new("gmqcc_out");
1976         if (!ir) {
1977             printf("failed to allocate builder\n");
1978             return false;
1979         }
1980
1981         for (i = 0; i < parser->imm_float_count; ++i) {
1982             if (!ast_global_codegen(parser->imm_float[i], ir)) {
1983                 printf("failed to generate global %s\n", parser->imm_float[i]->name);
1984                 ir_builder_delete(ir);
1985                 return false;
1986             }
1987         }
1988         for (i = 0; i < parser->imm_string_count; ++i) {
1989             if (!ast_global_codegen(parser->imm_string[i], ir)) {
1990                 printf("failed to generate global %s\n", parser->imm_string[i]->name);
1991                 ir_builder_delete(ir);
1992                 return false;
1993             }
1994         }
1995         for (i = 0; i < parser->imm_vector_count; ++i) {
1996             if (!ast_global_codegen(parser->imm_vector[i], ir)) {
1997                 printf("failed to generate global %s\n", parser->imm_vector[i]->name);
1998                 ir_builder_delete(ir);
1999                 return false;
2000             }
2001         }
2002         for (i = 0; i < parser->fields_count; ++i) {
2003             ast_value *field;
2004             bool isconst;
2005             if (!ast_istype(parser->fields[i].var, ast_value))
2006                 continue;
2007             field = (ast_value*)parser->fields[i].var;
2008             isconst = field->isconst;
2009             field->isconst = false;
2010             if (!ast_global_codegen((ast_value*)field, ir)) {
2011                 printf("failed to generate field %s\n", field->name);
2012                 ir_builder_delete(ir);
2013                 return false;
2014             }
2015             if (isconst) {
2016                 ir_value *ifld;
2017                 ast_expression *subtype;
2018                 field->isconst = true;
2019                 subtype = field->expression.next;
2020                 ifld = ir_builder_create_field(ir, field->name, subtype->expression.vtype);
2021                 if (subtype->expression.vtype == TYPE_FIELD)
2022                     ifld->fieldtype = subtype->expression.next->expression.vtype;
2023                 else if (subtype->expression.vtype == TYPE_FUNCTION)
2024                     ifld->outtype = subtype->expression.next->expression.vtype;
2025                 (void)!ir_value_set_field(field->ir_v, ifld);
2026             }
2027         }
2028         for (i = 0; i < parser->globals_count; ++i) {
2029             if (!ast_istype(parser->globals[i].var, ast_value))
2030                 continue;
2031             if (!ast_global_codegen((ast_value*)(parser->globals[i].var), ir)) {
2032                 printf("failed to generate global %s\n", parser->globals[i].name);
2033                 ir_builder_delete(ir);
2034                 return false;
2035             }
2036         }
2037         for (i = 0; i < parser->functions_count; ++i) {
2038             if (!ast_function_codegen(parser->functions[i], ir)) {
2039                 printf("failed to generate function %s\n", parser->functions[i]->name);
2040                 ir_builder_delete(ir);
2041                 return false;
2042             }
2043             if (!ir_function_finalize(parser->functions[i]->ir_func)) {
2044                 printf("failed to finalize function %s\n", parser->functions[i]->name);
2045                 ir_builder_delete(ir);
2046                 return false;
2047             }
2048         }
2049
2050         if (opts_dump)
2051             ir_builder_dump(ir, printf);
2052
2053         if (!ir_builder_generate(ir, output)) {
2054             printf("*** failed to generate output file\n");
2055             ir_builder_delete(ir);
2056             return false;
2057         }
2058
2059         ir_builder_delete(ir);
2060         return true;
2061     }
2062
2063     printf("*** there were compile errors\n");
2064     return false;
2065 }