]> git.xonotic.org Git - xonotic/gmqcc.git/blob - parser.c
+= operator implemented
[xonotic/gmqcc.git] / parser.c
1 #include <stdio.h>
2 #include <stdarg.h>
3
4 #include "gmqcc.h"
5 #include "lexer.h"
6
7 typedef struct {
8     char *name;
9     ast_expression *var;
10 } varentry_t;
11
12 typedef struct {
13     lex_file *lex;
14     int      tok;
15
16     MEM_VECTOR_MAKE(varentry_t, globals);
17     MEM_VECTOR_MAKE(varentry_t, fields);
18     MEM_VECTOR_MAKE(ast_function*, functions);
19     MEM_VECTOR_MAKE(ast_value*, imm_float);
20     MEM_VECTOR_MAKE(ast_value*, imm_string);
21     MEM_VECTOR_MAKE(ast_value*, imm_vector);
22
23     ast_function *function;
24     MEM_VECTOR_MAKE(varentry_t, locals);
25     size_t blocklocal;
26
27     size_t errors;
28
29     /* TYPE_FIELD -> parser_find_fields is used instead of find_var
30      * TODO: TYPE_VECTOR -> x, y and z are accepted in the gmqcc standard
31      * anything else: type error
32      */
33     qcint  memberof;
34 } parser_t;
35
36 MEM_VEC_FUNCTIONS(parser_t, varentry_t, globals)
37 MEM_VEC_FUNCTIONS(parser_t, varentry_t, fields)
38 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_float)
39 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_string)
40 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_vector)
41 MEM_VEC_FUNCTIONS(parser_t, varentry_t, locals)
42 MEM_VEC_FUNCTIONS(parser_t, ast_function*, functions)
43
44 static void parser_pop_local(parser_t *parser);
45 static bool parser_variable(parser_t *parser, ast_block *localblock);
46 static ast_block* parser_parse_block(parser_t *parser);
47 static ast_expression* parser_parse_statement_or_block(parser_t *parser);
48 static ast_expression* parser_expression_leave(parser_t *parser);
49 static ast_expression* parser_expression(parser_t *parser);
50
51 void parseerror(parser_t *parser, const char *fmt, ...)
52 {
53         va_list ap;
54
55         parser->errors++;
56
57         va_start(ap, fmt);
58     vprintmsg(LVL_ERROR, parser->lex->tok->ctx.file, parser->lex->tok->ctx.line, "parse error", fmt, ap);
59         va_end(ap);
60
61         printf("\n");
62 }
63
64 /* returns true if it counts as an error */
65 bool GMQCC_WARN parsewarning(parser_t *parser, int warntype, const char *fmt, ...)
66 {
67         va_list ap;
68         int lvl = LVL_WARNING;
69
70     if (!OPTS_WARN(warntype))
71         return false;
72
73     if (OPTS_WARN(WARN_ERROR)) {
74             parser->errors++;
75             lvl = LVL_ERROR;
76         }
77
78         va_start(ap, fmt);
79     vprintmsg(lvl, parser->lex->tok->ctx.file, parser->lex->tok->ctx.line, "warning", fmt, ap);
80         va_end(ap);
81
82         return OPTS_WARN(WARN_ERROR);
83 }
84
85 bool parser_next(parser_t *parser)
86 {
87     /* lex_do kills the previous token */
88     parser->tok = lex_do(parser->lex);
89     if (parser->tok == TOKEN_EOF || parser->tok >= TOKEN_ERROR)
90         return false;
91     return true;
92 }
93
94 /* lift a token out of the parser so it's not destroyed by parser_next */
95 token *parser_lift(parser_t *parser)
96 {
97     token *tok = parser->lex->tok;
98     parser->lex->tok = NULL;
99     return tok;
100 }
101
102 #define parser_tokval(p) (p->lex->tok->value)
103 #define parser_token(p)  (p->lex->tok)
104 #define parser_ctx(p)    (p->lex->tok->ctx)
105
106 ast_value* parser_const_float(parser_t *parser, double d)
107 {
108     size_t i;
109     ast_value *out;
110     for (i = 0; i < parser->imm_float_count; ++i) {
111         if (parser->imm_float[i]->constval.vfloat == d)
112             return parser->imm_float[i];
113     }
114     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_FLOAT);
115     out->isconst = true;
116     out->constval.vfloat = d;
117     if (!parser_t_imm_float_add(parser, out)) {
118         ast_value_delete(out);
119         return NULL;
120     }
121     return out;
122 }
123
124 ast_value* parser_const_string(parser_t *parser, const char *str)
125 {
126     size_t i;
127     ast_value *out;
128     for (i = 0; i < parser->imm_string_count; ++i) {
129         if (!strcmp(parser->imm_string[i]->constval.vstring, str))
130             return parser->imm_string[i];
131     }
132     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_STRING);
133     out->isconst = true;
134     out->constval.vstring = util_strdup(str);
135     if (!parser_t_imm_string_add(parser, out)) {
136         ast_value_delete(out);
137         return NULL;
138     }
139     return out;
140 }
141
142 ast_value* parser_const_vector(parser_t *parser, vector v)
143 {
144     size_t i;
145     ast_value *out;
146     for (i = 0; i < parser->imm_vector_count; ++i) {
147         if (!memcmp(&parser->imm_vector[i]->constval.vvec, &v, sizeof(v)))
148             return parser->imm_vector[i];
149     }
150     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_VECTOR);
151     out->isconst = true;
152     out->constval.vvec = v;
153     if (!parser_t_imm_vector_add(parser, out)) {
154         ast_value_delete(out);
155         return NULL;
156     }
157     return out;
158 }
159
160 ast_expression* parser_find_field(parser_t *parser, const char *name)
161 {
162     size_t i;
163     for (i = 0; i < parser->fields_count; ++i) {
164         if (!strcmp(parser->fields[i].name, name))
165             return parser->fields[i].var;
166     }
167     return NULL;
168 }
169
170 ast_expression* parser_find_global(parser_t *parser, const char *name)
171 {
172     size_t i;
173     for (i = 0; i < parser->globals_count; ++i) {
174         if (!strcmp(parser->globals[i].name, name))
175             return parser->globals[i].var;
176     }
177     return NULL;
178 }
179
180 ast_expression* parser_find_local(parser_t *parser, const char *name, size_t upto)
181 {
182     size_t i;
183     ast_value *fun;
184     for (i = parser->locals_count; i > upto;) {
185         --i;
186         if (!strcmp(parser->locals[i].name, name))
187             return parser->locals[i].var;
188     }
189     fun = parser->function->vtype;
190     for (i = 0; i < fun->expression.params_count; ++i) {
191         if (!strcmp(fun->expression.params[i]->name, name))
192             return (ast_expression*)(fun->expression.params[i]);
193     }
194     return NULL;
195 }
196
197 ast_expression* parser_find_var(parser_t *parser, const char *name)
198 {
199     ast_expression *v;
200     v         = parser_find_local(parser, name, 0);
201     if (!v) v = parser_find_global(parser, name);
202     return v;
203 }
204
205 typedef struct {
206     MEM_VECTOR_MAKE(ast_value*, p);
207 } paramlist_t;
208 MEM_VEC_FUNCTIONS(paramlist_t, ast_value*, p)
209
210 static ast_value *parser_parse_type(parser_t *parser, int basetype, bool *isfunc)
211 {
212     paramlist_t params;
213     ast_value *var;
214     lex_ctx   ctx = parser_ctx(parser);
215     int vtype = basetype;
216     int temptype;
217     size_t i;
218
219     MEM_VECTOR_INIT(&params, p);
220
221     *isfunc = false;
222
223     if (parser->tok == '(') {
224         *isfunc = true;
225         while (true) {
226             ast_value *param;
227             bool dummy;
228
229             if (!parser_next(parser))
230                 goto on_error;
231
232             if (parser->tok == ')')
233                 break;
234
235             temptype = parser_token(parser)->constval.t;
236             if (!parser_next(parser))
237                 goto on_error;
238
239             param = parser_parse_type(parser, temptype, &dummy);
240             (void)dummy;
241
242             if (!param)
243                 goto on_error;
244
245             if (parser->tok == TOKEN_IDENT) {
246                 /* named parameter */
247                 if (!ast_value_set_name(param, parser_tokval(parser)))
248                     goto on_error;
249                 if (!parser_next(parser))
250                     goto on_error;
251             }
252
253             if (!paramlist_t_p_add(&params, param)) {
254                 parseerror(parser, "Out of memory while parsing typename");
255                 goto on_error;
256             }
257
258             if (parser->tok == ',')
259                 continue;
260             if (parser->tok == ')')
261                 break;
262             parseerror(parser, "Unexpected token");
263             goto on_error;
264         }
265         if (!parser_next(parser))
266             goto on_error;
267     }
268
269     var = ast_value_new(ctx, "<unnamed>", vtype);
270     if (!var)
271         goto on_error;
272     MEM_VECTOR_MOVE(&params, p, &var->expression, params);
273     return var;
274 on_error:
275     for (i = 0; i < params.p_count; ++i)
276         ast_value_delete(params.p[i]);
277     MEM_VECTOR_CLEAR(&params, p);
278     return NULL;
279 }
280
281 typedef struct
282 {
283     size_t etype; /* 0 = expression, others are operators */
284     int             paren;
285     size_t          off;
286     ast_expression *out;
287     ast_block      *block; /* for commas and function calls */
288     lex_ctx ctx;
289 } sy_elem;
290 typedef struct
291 {
292     MEM_VECTOR_MAKE(sy_elem, out);
293     MEM_VECTOR_MAKE(sy_elem, ops);
294 } shunt;
295 MEM_VEC_FUNCTIONS(shunt, sy_elem, out)
296 MEM_VEC_FUNCTIONS(shunt, sy_elem, ops)
297
298 static sy_elem syexp(lex_ctx ctx, ast_expression *v) {
299     sy_elem e;
300     e.etype = 0;
301     e.out   = v;
302     e.block = NULL;
303     e.ctx   = ctx;
304     e.paren = 0;
305     return e;
306 }
307
308 static sy_elem syblock(lex_ctx ctx, ast_block *v) {
309     sy_elem e;
310     e.etype = 0;
311     e.out   = (ast_expression*)v;
312     e.block = v;
313     e.ctx   = ctx;
314     e.paren = 0;
315     return e;
316 }
317
318 static sy_elem syop(lex_ctx ctx, const oper_info *op) {
319     sy_elem e;
320     e.etype = 1 + (op - operators);
321     e.out   = NULL;
322     e.block = NULL;
323     e.ctx   = ctx;
324     e.paren = 0;
325     return e;
326 }
327
328 static sy_elem syparen(lex_ctx ctx, int p, size_t off) {
329     sy_elem e;
330     e.etype = 0;
331     e.off   = off;
332     e.out   = NULL;
333     e.block = NULL;
334     e.ctx   = ctx;
335     e.paren = p;
336     return e;
337 }
338
339 #ifdef DEBUGSHUNT
340 # define DEBUGSHUNTDO(x) x
341 #else
342 # define DEBUGSHUNTDO(x)
343 #endif
344
345 static bool parser_sy_pop(parser_t *parser, shunt *sy)
346 {
347     const oper_info *op;
348     lex_ctx ctx;
349     ast_expression *out = NULL;
350     ast_expression *exprs[3];
351     ast_block      *blocks[3];
352     size_t i, assignop;
353     qcint  generated_op = 0;
354
355     if (!sy->ops_count) {
356         parseerror(parser, "internal error: missing operator");
357         return false;
358     }
359
360     if (sy->ops[sy->ops_count-1].paren) {
361         parseerror(parser, "unmatched parenthesis");
362         return false;
363     }
364
365     op = &operators[sy->ops[sy->ops_count-1].etype - 1];
366     ctx = sy->ops[sy->ops_count-1].ctx;
367
368     DEBUGSHUNTDO(printf("apply %s\n", op->op));
369
370     if (sy->out_count < op->operands) {
371         parseerror(parser, "internal error: not enough operands: %i", sy->out_count);
372         return false;
373     }
374
375     sy->ops_count--;
376
377     sy->out_count -= op->operands;
378     for (i = 0; i < op->operands; ++i) {
379         exprs[i]  = sy->out[sy->out_count+i].out;
380         blocks[i] = sy->out[sy->out_count+i].block;
381     }
382
383     if (blocks[0] && !blocks[0]->exprs_count && op->id != opid1(',')) {
384         parseerror(parser, "internal error: operator cannot be applied on empty blocks");
385         return false;
386     }
387
388 #define NotSameType(T) \
389              (exprs[0]->expression.vtype != exprs[1]->expression.vtype || \
390               exprs[0]->expression.vtype != T)
391     switch (op->id)
392     {
393         default:
394             parseerror(parser, "internal error: unhandled operand");
395             return false;
396
397         case opid1('.'):
398             if (exprs[0]->expression.vtype == TYPE_ENTITY) {
399                 if (exprs[1]->expression.vtype != TYPE_FIELD) {
400                     parseerror(parser, "type error: right hand of member-operand should be an entity-field");
401                     return false;
402                 }
403                 out = (ast_expression*)ast_entfield_new(ctx, exprs[0], exprs[1]);
404             }
405             else if (exprs[0]->expression.vtype == TYPE_VECTOR) {
406                 parseerror(parser, "internal error: vector access is not supposed to be handled at this point");
407                 return false;
408             }
409             else {
410                 parseerror(parser, "type error: member-of operator on something that is not an entity or vector");
411                 return false;
412             }
413             break;
414
415         case opid1(','):
416             if (blocks[0]) {
417                 if (!ast_block_exprs_add(blocks[0], exprs[1]))
418                     return false;
419             } else {
420                 blocks[0] = ast_block_new(ctx);
421                 if (!ast_block_exprs_add(blocks[0], exprs[0]) ||
422                     !ast_block_exprs_add(blocks[0], exprs[1]))
423                 {
424                     return false;
425                 }
426             }
427             if (!ast_block_set_type(blocks[0], exprs[1]))
428                 return false;
429
430             sy->out[sy->out_count++] = syblock(ctx, blocks[0]);
431             return true;
432
433         case opid1('+'):
434             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
435                 parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
436                            type_name[exprs[0]->expression.vtype],
437                            type_name[exprs[1]->expression.vtype]);
438                 return false;
439             }
440             if (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) {
441                 parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
442                            type_name[exprs[0]->expression.vtype],
443                            type_name[exprs[1]->expression.vtype]);
444                 return false;
445             }
446             switch (exprs[0]->expression.vtype) {
447                 case TYPE_FLOAT:
448                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_F, exprs[0], exprs[1]);
449                     break;
450                 case TYPE_VECTOR:
451                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_V, exprs[0], exprs[1]);
452                     break;
453                 default:
454                     parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
455                                type_name[exprs[0]->expression.vtype],
456                                type_name[exprs[1]->expression.vtype]);
457                     return false;
458             };
459             break;
460         case opid1('-'):
461             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
462                 parseerror(parser, "invalid types used in expression: cannot subtract type %s from %s",
463                            type_name[exprs[1]->expression.vtype],
464                            type_name[exprs[0]->expression.vtype]);
465                 return false;
466             }
467             if (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) {
468                 parseerror(parser, "invalid types used in expression: cannot subtract type %s from %s",
469                            type_name[exprs[0]->expression.vtype],
470                            type_name[exprs[1]->expression.vtype]);
471                 return false;
472             }
473             switch (exprs[0]->expression.vtype) {
474                 case TYPE_FLOAT:
475                     out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_F, exprs[0], exprs[1]);
476                     break;
477                 case TYPE_VECTOR:
478                     out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_V, exprs[0], exprs[1]);
479                     break;
480                 default:
481                     parseerror(parser, "invalid types used in expression: cannot subtract type %s from %s",
482                                type_name[exprs[1]->expression.vtype],
483                                type_name[exprs[0]->expression.vtype]);
484                     return false;
485             };
486             break;
487         case opid1('*'):
488             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype &&
489                 exprs[0]->expression.vtype != TYPE_VECTOR &&
490                 exprs[0]->expression.vtype != TYPE_FLOAT &&
491                 exprs[1]->expression.vtype != TYPE_VECTOR &&
492                 exprs[1]->expression.vtype != TYPE_FLOAT)
493             {
494                 parseerror(parser, "invalid types used in expression: cannot multiply types %s and %s",
495                            type_name[exprs[1]->expression.vtype],
496                            type_name[exprs[0]->expression.vtype]);
497                 return false;
498             }
499             switch (exprs[0]->expression.vtype) {
500                 case TYPE_FLOAT:
501                     if (exprs[1]->expression.vtype == TYPE_VECTOR)
502                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_FV, exprs[0], exprs[1]);
503                     else
504                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_F, exprs[0], exprs[1]);
505                     break;
506                 case TYPE_VECTOR:
507                     if (exprs[1]->expression.vtype == TYPE_FLOAT)
508                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_VF, exprs[0], exprs[1]);
509                     else
510                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_V, exprs[0], exprs[1]);
511                     break;
512                 default:
513                     parseerror(parser, "invalid types used in expression: cannot multiply types %s and %s",
514                                type_name[exprs[1]->expression.vtype],
515                                type_name[exprs[0]->expression.vtype]);
516                     return false;
517             };
518             break;
519         case opid1('/'):
520             if (NotSameType(TYPE_FLOAT)) {
521                 parseerror(parser, "invalid types used in expression: cannot divide types %s and %s",
522                            type_name[exprs[0]->expression.vtype],
523                            type_name[exprs[1]->expression.vtype]);
524                 return false;
525             }
526             out = (ast_expression*)ast_binary_new(ctx, INSTR_DIV_F, exprs[0], exprs[1]);
527             break;
528         case opid1('%'):
529         case opid2('%','='):
530             parseerror(parser, "qc does not have a modulo operator");
531             return false;
532         case opid1('|'):
533         case opid1('&'):
534             if (NotSameType(TYPE_FLOAT)) {
535                 parseerror(parser, "invalid types used in expression: cannot perform bit operations between types %s and %s",
536                            type_name[exprs[0]->expression.vtype],
537                            type_name[exprs[1]->expression.vtype]);
538                 return false;
539             }
540             out = (ast_expression*)ast_binary_new(ctx,
541                                                   (op->id == opid1('|') ? INSTR_BITOR : INSTR_BITAND),
542                                                   exprs[0], exprs[1]);
543             break;
544         case opid1('^'):
545             parseerror(parser, "TODO: bitxor");
546             return false;
547
548         case opid2('<','<'):
549         case opid2('>','>'):
550         case opid3('<','<','='):
551         case opid3('>','>','='):
552             parseerror(parser, "TODO: shifts");
553             return false;
554
555         case opid2('|','|'):
556             generated_op += 1; /* INSTR_OR */
557         case opid2('&','&'):
558             generated_op += INSTR_AND;
559             if (NotSameType(TYPE_FLOAT)) {
560                 parseerror(parser, "invalid types used in expression: cannot perform logical operations between types %s and %s",
561                            type_name[exprs[0]->expression.vtype],
562                            type_name[exprs[1]->expression.vtype]);
563                 parseerror(parser, "TODO: logical ops for arbitrary types using INSTR_NOT");
564                 parseerror(parser, "TODO: optional early out");
565                 return false;
566             }
567             if (opts_standard == COMPILER_GMQCC)
568                 printf("TODO: early out logic\n");
569             out = (ast_expression*)ast_binary_new(ctx, generated_op, exprs[0], exprs[1]);
570             break;
571
572         case opid1('>'):
573             generated_op += 1; /* INSTR_GT */
574         case opid1('<'):
575             generated_op += 1; /* INSTR_LT */
576         case opid2('>', '='):
577             generated_op += 1; /* INSTR_GE */
578         case opid2('<', '='):
579             generated_op += INSTR_LE;
580             if (NotSameType(TYPE_FLOAT)) {
581                 parseerror(parser, "invalid types used in expression: cannot perform comparison between types %s and %s",
582                            type_name[exprs[0]->expression.vtype],
583                            type_name[exprs[1]->expression.vtype]);
584                 return false;
585             }
586             out = (ast_expression*)ast_binary_new(ctx, generated_op, exprs[0], exprs[1]);
587             break;
588         case opid2('!', '='):
589             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
590                 parseerror(parser, "invalid types used in expression: cannot perform comparison between types %s and %s",
591                            type_name[exprs[0]->expression.vtype],
592                            type_name[exprs[1]->expression.vtype]);
593                 return false;
594             }
595             out = (ast_expression*)ast_binary_new(ctx, type_ne_instr[exprs[0]->expression.vtype], exprs[0], exprs[1]);
596             break;
597         case opid2('=', '='):
598             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
599                 parseerror(parser, "invalid types used in expression: cannot perform comparison between types %s and %s",
600                            type_name[exprs[0]->expression.vtype],
601                            type_name[exprs[1]->expression.vtype]);
602                 return false;
603             }
604             out = (ast_expression*)ast_binary_new(ctx, type_eq_instr[exprs[0]->expression.vtype], exprs[0], exprs[1]);
605             break;
606
607         case opid1('='):
608             if (ast_istype(exprs[0], ast_entfield))
609                 assignop = type_storep_instr[exprs[0]->expression.vtype];
610             else
611                 assignop = type_store_instr[exprs[0]->expression.vtype];
612             out = (ast_expression*)ast_store_new(ctx, assignop, exprs[0], exprs[1]);
613             break;
614         case opid2('+','='):
615             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
616                 parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
617                            type_name[exprs[0]->expression.vtype],
618                            type_name[exprs[1]->expression.vtype]);
619                 return false;
620             }
621             if (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) {
622                 parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
623                            type_name[exprs[0]->expression.vtype],
624                            type_name[exprs[1]->expression.vtype]);
625                 return false;
626             }
627             if (ast_istype(exprs[0], ast_entfield))
628                 assignop = type_storep_instr[exprs[0]->expression.vtype];
629             else
630                 assignop = type_store_instr[exprs[0]->expression.vtype];
631             switch (exprs[0]->expression.vtype) {
632                 case TYPE_FLOAT:
633                     out = (ast_expression*)ast_binstore_new(ctx, assignop, INSTR_ADD_F, exprs[0], exprs[1]);
634                     break;
635                 case TYPE_VECTOR:
636                     out = (ast_expression*)ast_binstore_new(ctx, assignop, INSTR_ADD_V, exprs[0], exprs[1]);
637                     break;
638                 default:
639                     parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
640                                type_name[exprs[0]->expression.vtype],
641                                type_name[exprs[1]->expression.vtype]);
642                     return false;
643             };
644             break;
645     }
646 #undef NotSameType
647
648     if (!out) {
649         parseerror(parser, "failed to apply operand %s", op->op);
650         return false;
651     }
652
653     DEBUGSHUNTDO(printf("applied %s\n", op->op));
654     sy->out[sy->out_count++] = syexp(ctx, out);
655     return true;
656 }
657
658 static bool parser_close_call(parser_t *parser, shunt *sy)
659 {
660     /* was a function call */
661     ast_expression *fun;
662     ast_call       *call;
663
664     size_t          fid;
665     size_t          paramcount;
666
667     sy->ops_count--;
668     fid = sy->ops[sy->ops_count].off;
669
670     /* out[fid] is the function
671      * everything above is parameters...
672      * 0 params = nothing
673      * 1 params = ast_expression
674      * more = ast_block
675      */
676
677     if (sy->out_count < 1 || sy->out_count <= fid) {
678         parseerror(parser, "internal error: function call needs function and parameter list...");
679         return false;
680     }
681
682     fun = sy->out[fid].out;
683
684     call = ast_call_new(sy->ops[sy->ops_count].ctx, fun);
685     if (!call) {
686         parseerror(parser, "out of memory");
687         return false;
688     }
689
690     if (fid+1 == sy->out_count) {
691         /* no arguments */
692         paramcount = 0;
693     } else if (fid+2 == sy->out_count) {
694         ast_block *params;
695         sy->out_count--;
696         params = sy->out[sy->out_count].block;
697         if (!params) {
698             /* 1 param */
699             paramcount = 1;
700             if (!ast_call_params_add(call, sy->out[sy->out_count].out)) {
701                 ast_delete(sy->out[sy->out_count].out);
702                 parseerror(parser, "out of memory");
703                 return false;
704             }
705         } else {
706             paramcount = params->exprs_count;
707             MEM_VECTOR_MOVE(params, exprs, call, params);
708             ast_delete(params);
709         }
710     } else {
711         parseerror(parser, "invalid function call");
712         return false;
713     }
714
715     /* overwrite fid, the function, with a call */
716     sy->out[fid] = syexp(call->expression.node.context, (ast_expression*)call);
717
718     if (fun->expression.vtype != TYPE_FUNCTION) {
719         parseerror(parser, "not a function");
720         return false;
721     }
722
723     if (!fun->expression.next) {
724         parseerror(parser, "could not determine function return type");
725         return false;
726     } else {
727         if (fun->expression.params_count != paramcount) {
728             parseerror(parser, "expected %i parameters, got %i", (int)fun->expression.params_count, paramcount);
729             return false;
730         }
731     }
732
733     return true;
734 }
735
736 static bool parser_close_paren(parser_t *parser, shunt *sy, bool functions_only)
737 {
738     if (!sy->ops_count) {
739         parseerror(parser, "unmatched closing paren");
740         return false;
741     }
742     if (sy->ops[sy->ops_count-1].paren == 1) {
743         parseerror(parser, "empty parenthesis expression");
744         return false;
745     }
746     while (sy->ops_count) {
747         if (sy->ops[sy->ops_count-1].paren == 'f') {
748             if (!parser_close_call(parser, sy))
749                 return false;
750             break;
751         }
752         if (sy->ops[sy->ops_count-1].paren == 1) {
753             sy->ops_count--;
754             return !functions_only;
755         }
756         if (!parser_sy_pop(parser, sy))
757             return false;
758     }
759     return true;
760 }
761
762 static ast_expression* parser_expression_leave(parser_t *parser)
763 {
764     ast_expression *expr = NULL;
765     shunt sy;
766     bool wantop = false;
767     bool gotmemberof = false;
768
769     /* count the parens because an if starts with one, so the
770      * end of a condition is an unmatched closing paren
771      */
772     int parens = 0;
773
774     MEM_VECTOR_INIT(&sy, out);
775     MEM_VECTOR_INIT(&sy, ops);
776
777     while (true)
778     {
779         if (gotmemberof)
780             gotmemberof = false;
781         else
782             parser->memberof = 0;
783         if (!wantop)
784         {
785             bool nextwant = true;
786             if (parser->tok == TOKEN_IDENT)
787             {
788                 /* variable */
789                 ast_expression *var;
790                 if (opts_standard == COMPILER_GMQCC)
791                 {
792                     if (parser->memberof == TYPE_ENTITY)
793                         var = parser_find_field(parser, parser_tokval(parser));
794                     else if (parser->memberof == TYPE_VECTOR)
795                     {
796                         parseerror(parser, "TODO: implement effective vector member access");
797                         goto onerr;
798                     }
799                     else if (parser->memberof) {
800                         parseerror(parser, "namespace for member not found");
801                         goto onerr;
802                     }
803                     else
804                         var = parser_find_var(parser, parser_tokval(parser));
805                 } else {
806                     var = parser_find_var(parser, parser_tokval(parser));
807                     if (!var)
808                         var = parser_find_field(parser, parser_tokval(parser));
809                 }
810                 if (!var) {
811                     parseerror(parser, "unexpected ident: %s", parser_tokval(parser));
812                     goto onerr;
813                 }
814                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), var))) {
815                     parseerror(parser, "out of memory");
816                     goto onerr;
817                 }
818                 DEBUGSHUNTDO(printf("push %s\n", parser_tokval(parser)));
819             }
820             else if (parser->tok == TOKEN_FLOATCONST) {
821                 ast_value *val = parser_const_float(parser, (parser_token(parser)->constval.f));
822                 if (!val)
823                     return false;
824                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
825                     parseerror(parser, "out of memory");
826                     goto onerr;
827                 }
828                 DEBUGSHUNTDO(printf("push %g\n", parser_token(parser)->constval.f));
829             }
830             else if (parser->tok == TOKEN_INTCONST) {
831                 ast_value *val = parser_const_float(parser, (double)(parser_token(parser)->constval.i));
832                 if (!val)
833                     return false;
834                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
835                     parseerror(parser, "out of memory");
836                     goto onerr;
837                 }
838                 DEBUGSHUNTDO(printf("push %i\n", parser_token(parser)->constval.i));
839             }
840             else if (parser->tok == TOKEN_STRINGCONST) {
841                 ast_value *val = parser_const_string(parser, parser_tokval(parser));
842                 if (!val)
843                     return false;
844                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
845                     parseerror(parser, "out of memory");
846                     goto onerr;
847                 }
848                 DEBUGSHUNTDO(printf("push string\n"));
849             }
850             else if (parser->tok == TOKEN_VECTORCONST) {
851                 ast_value *val = parser_const_vector(parser, parser_token(parser)->constval.v);
852                 if (!val)
853                     return false;
854                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
855                     parseerror(parser, "out of memory");
856                     goto onerr;
857                 }
858                 DEBUGSHUNTDO(printf("push '%g %g %g'\n",
859                                     parser_token(parser)->constval.v.x,
860                                     parser_token(parser)->constval.v.y,
861                                     parser_token(parser)->constval.v.z));
862             }
863             else if (parser->tok == '(') {
864                 ++parens;
865                 nextwant = false; /* not expecting an operator next */
866                 if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 1, 0))) {
867                     parseerror(parser, "out of memory");
868                     goto onerr;
869                 }
870                 DEBUGSHUNTDO(printf("push (\n"));
871             }
872             else if (parser->tok == ')') {
873                 DEBUGSHUNTDO(printf("do[nop] )\n"));
874                 --parens;
875                 if (parens < 0)
876                     break;
877                 /* allowed for function calls */
878                 if (!parser_close_paren(parser, &sy, true))
879                     goto onerr;
880             }
881             else {
882                 /* TODO: prefix operators */
883                 parseerror(parser, "expected statement");
884                 goto onerr;
885             }
886             wantop = nextwant;
887             parser->lex->flags.noops = !wantop;
888         } else {
889             bool nextwant = false;
890             if (parser->tok == '(') {
891                 DEBUGSHUNTDO(printf("push (\n"));
892                 ++parens;
893                 /* we expected an operator, this is the function-call operator */
894                 if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 'f', sy.out_count-1))) {
895                     parseerror(parser, "out of memory");
896                     goto onerr;
897                 }
898             }
899             else if (parser->tok == ')') {
900                 DEBUGSHUNTDO(printf("do[op] )\n"));
901                 --parens;
902                 if (parens < 0)
903                     break;
904                 /* we do expect an operator next */
905                 /* closing an opening paren */
906                 if (!parser_close_paren(parser, &sy, false))
907                     goto onerr;
908                 nextwant = true;
909             }
910             else if (parser->tok != TOKEN_OPERATOR) {
911                 parseerror(parser, "expected operator or end of statement");
912                 goto onerr;
913             }
914             else {
915                 /* classify the operator */
916                 /* TODO: suffix operators */
917                 const oper_info *op;
918                 const oper_info *olast = NULL;
919                 size_t o;
920                 for (o = 0; o < operator_count; ++o) {
921                     if (!(operators[o].flags & OP_PREFIX) &&
922                         !(operators[o].flags & OP_SUFFIX) && /* remove this */
923                         !strcmp(parser_tokval(parser), operators[o].op))
924                     {
925                         break;
926                     }
927                 }
928                 if (o == operator_count) {
929                     /* no operator found... must be the end of the statement */
930                     break;
931                 }
932                 /* found an operator */
933                 op = &operators[o];
934                 if (op->id == opid1('.')) {
935                     /* for gmqcc standard: open up the namespace of the previous type */
936                     ast_expression *prevex = sy.out[sy.out_count-1].out;
937                     if (!prevex) {
938                         parseerror(parser, "unexpected member operator");
939                         goto onerr;
940                     }
941                     if (prevex->expression.vtype == TYPE_ENTITY)
942                         parser->memberof = TYPE_ENTITY;
943                     else if (prevex->expression.vtype == TYPE_VECTOR)
944                         parser->memberof = TYPE_VECTOR;
945                     else {
946                         parseerror(parser, "type error: type has no members");
947                         goto onerr;
948                     }
949                     gotmemberof = true;
950                 }
951
952                 if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
953                     olast = &operators[sy.ops[sy.ops_count-1].etype-1];
954
955                 while (olast && (
956                         (op->prec < olast->prec) ||
957                         (op->assoc == ASSOC_LEFT && op->prec <= olast->prec) ) )
958                 {
959                     if (!parser_sy_pop(parser, &sy))
960                         goto onerr;
961                     if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
962                         olast = &operators[sy.ops[sy.ops_count-1].etype-1];
963                     else
964                         olast = NULL;
965                 }
966
967                 DEBUGSHUNTDO(printf("push operator %s\n", op->op));
968                 if (!shunt_ops_add(&sy, syop(parser_ctx(parser), op)))
969                     goto onerr;
970             }
971             wantop = nextwant;
972             parser->lex->flags.noops = !wantop;
973         }
974         if (!parser_next(parser)) {
975             goto onerr;
976         }
977         if (parser->tok == ';') {
978             break;
979         }
980     }
981
982     while (sy.ops_count) {
983         if (!parser_sy_pop(parser, &sy))
984             goto onerr;
985     }
986
987     parser->lex->flags.noops = true;
988     if (!sy.out_count) {
989         parseerror(parser, "empty expression");
990         expr = NULL;
991     } else
992         expr = sy.out[0].out;
993     MEM_VECTOR_CLEAR(&sy, out);
994     MEM_VECTOR_CLEAR(&sy, ops);
995     DEBUGSHUNTDO(printf("shut done\n"));
996     return expr;
997
998 onerr:
999     parser->lex->flags.noops = true;
1000     MEM_VECTOR_CLEAR(&sy, out);
1001     MEM_VECTOR_CLEAR(&sy, ops);
1002     return NULL;
1003 }
1004
1005 static ast_expression* parser_expression(parser_t *parser)
1006 {
1007     ast_expression *e = parser_expression_leave(parser);
1008     if (!e)
1009         return NULL;
1010     if (!parser_next(parser)) {
1011         ast_delete(e);
1012         return NULL;
1013     }
1014     return e;
1015 }
1016
1017 static bool parser_parse_if(parser_t *parser, ast_block *block, ast_expression **out)
1018 {
1019     ast_ifthen *ifthen;
1020     ast_expression *cond, *ontrue, *onfalse = NULL;
1021
1022     lex_ctx ctx = parser_ctx(parser);
1023
1024     /* skip the 'if' and check for opening paren */
1025     if (!parser_next(parser) || parser->tok != '(') {
1026         parseerror(parser, "expected 'if' condition in parenthesis");
1027         return false;
1028     }
1029     /* parse into the expression */
1030     if (!parser_next(parser)) {
1031         parseerror(parser, "expected 'if' condition after opening paren");
1032         return false;
1033     }
1034     /* parse the condition */
1035     cond = parser_expression_leave(parser);
1036     if (!cond)
1037         return false;
1038     /* closing paren */
1039     if (parser->tok != ')') {
1040         parseerror(parser, "expected closing paren after 'if' condition");
1041         ast_delete(cond);
1042         return false;
1043     }
1044     /* parse into the 'then' branch */
1045     if (!parser_next(parser)) {
1046         parseerror(parser, "expected statement for on-true branch of 'if'");
1047         ast_delete(cond);
1048         return false;
1049     }
1050     ontrue = parser_parse_statement_or_block(parser);
1051     if (!ontrue) {
1052         ast_delete(cond);
1053         return false;
1054     }
1055     /* check for an else */
1056     if (!strcmp(parser_tokval(parser), "else")) {
1057         /* parse into the 'else' branch */
1058         if (!parser_next(parser)) {
1059             parseerror(parser, "expected on-false branch after 'else'");
1060             ast_delete(ontrue);
1061             ast_delete(cond);
1062             return false;
1063         }
1064         onfalse = parser_parse_statement_or_block(parser);
1065         if (!onfalse) {
1066             ast_delete(ontrue);
1067             ast_delete(cond);
1068             return false;
1069         }
1070     }
1071
1072     ifthen = ast_ifthen_new(ctx, cond, ontrue, onfalse);
1073     *out = (ast_expression*)ifthen;
1074     return true;
1075 }
1076
1077 static bool parser_parse_while(parser_t *parser, ast_block *block, ast_expression **out)
1078 {
1079     ast_loop *aloop;
1080     ast_expression *cond, *ontrue;
1081
1082     lex_ctx ctx = parser_ctx(parser);
1083
1084     /* skip the 'while' and check for opening paren */
1085     if (!parser_next(parser) || parser->tok != '(') {
1086         parseerror(parser, "expected 'while' condition in parenthesis");
1087         return false;
1088     }
1089     /* parse into the expression */
1090     if (!parser_next(parser)) {
1091         parseerror(parser, "expected 'while' condition after opening paren");
1092         return false;
1093     }
1094     /* parse the condition */
1095     cond = parser_expression_leave(parser);
1096     if (!cond)
1097         return false;
1098     /* closing paren */
1099     if (parser->tok != ')') {
1100         parseerror(parser, "expected closing paren after 'while' condition");
1101         ast_delete(cond);
1102         return false;
1103     }
1104     /* parse into the 'then' branch */
1105     if (!parser_next(parser)) {
1106         parseerror(parser, "expected while-loop body");
1107         ast_delete(cond);
1108         return false;
1109     }
1110     ontrue = parser_parse_statement_or_block(parser);
1111     if (!ontrue) {
1112         ast_delete(cond);
1113         return false;
1114     }
1115
1116     aloop = ast_loop_new(ctx, NULL, cond, NULL, NULL, ontrue);
1117     *out = (ast_expression*)aloop;
1118     return true;
1119 }
1120
1121 static bool parser_parse_dowhile(parser_t *parser, ast_block *block, ast_expression **out)
1122 {
1123     ast_loop *aloop;
1124     ast_expression *cond, *ontrue;
1125
1126     lex_ctx ctx = parser_ctx(parser);
1127
1128     /* skip the 'do' and get the body */
1129     if (!parser_next(parser)) {
1130         parseerror(parser, "expected loop body");
1131         return false;
1132     }
1133     ontrue = parser_parse_statement_or_block(parser);
1134     if (!ontrue)
1135         return false;
1136
1137     /* expect the "while" */
1138     if (parser->tok != TOKEN_KEYWORD ||
1139         strcmp(parser_tokval(parser), "while"))
1140     {
1141         parseerror(parser, "expected 'while' and condition");
1142         ast_delete(ontrue);
1143         return false;
1144     }
1145
1146     /* skip the 'while' and check for opening paren */
1147     if (!parser_next(parser) || parser->tok != '(') {
1148         parseerror(parser, "expected 'while' condition in parenthesis");
1149         ast_delete(ontrue);
1150         return false;
1151     }
1152     /* parse into the expression */
1153     if (!parser_next(parser)) {
1154         parseerror(parser, "expected 'while' condition after opening paren");
1155         ast_delete(ontrue);
1156         return false;
1157     }
1158     /* parse the condition */
1159     cond = parser_expression_leave(parser);
1160     if (!cond)
1161         return false;
1162     /* closing paren */
1163     if (parser->tok != ')') {
1164         parseerror(parser, "expected closing paren after 'while' condition");
1165         ast_delete(ontrue);
1166         ast_delete(cond);
1167         return false;
1168     }
1169     /* parse on */
1170     if (!parser_next(parser) || parser->tok != ';') {
1171         parseerror(parser, "expected semicolon after condition");
1172         ast_delete(ontrue);
1173         ast_delete(cond);
1174         return false;
1175     }
1176
1177     if (!parser_next(parser)) {
1178         parseerror(parser, "parse error");
1179         ast_delete(ontrue);
1180         ast_delete(cond);
1181         return false;
1182     }
1183
1184     aloop = ast_loop_new(ctx, NULL, NULL, cond, NULL, ontrue);
1185     *out = (ast_expression*)aloop;
1186     return true;
1187 }
1188
1189 static bool parser_parse_for(parser_t *parser, ast_block *block, ast_expression **out)
1190 {
1191     ast_loop *aloop;
1192     ast_expression *initexpr, *cond, *increment, *ontrue;
1193     size_t oldblocklocal;
1194
1195     lex_ctx ctx = parser_ctx(parser);
1196
1197     oldblocklocal = parser->blocklocal;
1198     parser->blocklocal = parser->locals_count;
1199
1200     initexpr  = NULL;
1201     cond      = NULL;
1202     increment = NULL;
1203     ontrue    = NULL;
1204
1205     /* skip the 'while' and check for opening paren */
1206     if (!parser_next(parser) || parser->tok != '(') {
1207         parseerror(parser, "expected 'for' expressions in parenthesis");
1208         goto onerr;
1209     }
1210     /* parse into the expression */
1211     if (!parser_next(parser)) {
1212         parseerror(parser, "expected 'for' initializer after opening paren");
1213         goto onerr;
1214     }
1215
1216     if (parser->tok == TOKEN_TYPENAME) {
1217         if (opts_standard != COMPILER_GMQCC) {
1218             if (parsewarning(parser, WARN_EXTENSIONS,
1219                              "current standard does not allow variable declarations in for-loop initializers"))
1220                 goto onerr;
1221         }
1222
1223         parseerror(parser, "TODO: assignment of new variables to be non-const");
1224         goto onerr;
1225         if (!parser_variable(parser, block))
1226             goto onerr;
1227     }
1228     else if (parser->tok != ';')
1229     {
1230         initexpr = parser_expression_leave(parser);
1231         if (!initexpr)
1232             goto onerr;
1233     }
1234
1235     /* move on to condition */
1236     if (parser->tok != ';') {
1237         parseerror(parser, "expected semicolon after for-loop initializer");
1238         goto onerr;
1239     }
1240     if (!parser_next(parser)) {
1241         parseerror(parser, "expected for-loop condition");
1242         goto onerr;
1243     }
1244
1245     /* parse the condition */
1246     if (parser->tok != ';') {
1247         cond = parser_expression_leave(parser);
1248         if (!cond)
1249             goto onerr;
1250     }
1251
1252     /* move on to incrementor */
1253     if (parser->tok != ';') {
1254         parseerror(parser, "expected semicolon after for-loop initializer");
1255         goto onerr;
1256     }
1257     if (!parser_next(parser)) {
1258         parseerror(parser, "expected for-loop condition");
1259         goto onerr;
1260     }
1261
1262     /* parse the incrementor */
1263     if (parser->tok != ')') {
1264         increment = parser_expression_leave(parser);
1265         if (!increment)
1266             goto onerr;
1267     }
1268
1269     /* closing paren */
1270     if (parser->tok != ')') {
1271         parseerror(parser, "expected closing paren after 'for-loop' incrementor");
1272         goto onerr;
1273     }
1274     /* parse into the 'then' branch */
1275     if (!parser_next(parser)) {
1276         parseerror(parser, "expected for-loop body");
1277         goto onerr;
1278     }
1279     ontrue = parser_parse_statement_or_block(parser);
1280     if (!ontrue) {
1281         goto onerr;
1282     }
1283
1284     aloop = ast_loop_new(ctx, initexpr, cond, NULL, increment, ontrue);
1285     *out = (ast_expression*)aloop;
1286
1287     while (parser->locals_count > parser->blocklocal)
1288         parser_pop_local(parser);
1289     parser->blocklocal = oldblocklocal;
1290     return true;
1291 onerr:
1292     if (initexpr)  ast_delete(initexpr);
1293     if (cond)      ast_delete(cond);
1294     if (increment) ast_delete(increment);
1295     while (parser->locals_count > parser->blocklocal)
1296         parser_pop_local(parser);
1297     parser->blocklocal = oldblocklocal;
1298     return false;
1299 }
1300
1301 static bool parser_parse_statement(parser_t *parser, ast_block *block, ast_expression **out)
1302 {
1303     if (parser->tok == TOKEN_TYPENAME)
1304     {
1305         /* local variable */
1306         if (!block) {
1307             parseerror(parser, "cannot declare a variable from here");
1308             return false;
1309         }
1310         if (opts_standard == COMPILER_QCC) {
1311             if (parsewarning(parser, WARN_EXTENSIONS, "missing 'local' keyword when declaring a local variable"))
1312                 return false;
1313         }
1314         if (!parser_variable(parser, block))
1315             return false;
1316         *out = NULL;
1317         return true;
1318     }
1319     else if (parser->tok == TOKEN_KEYWORD)
1320     {
1321         if (!strcmp(parser_tokval(parser), "local"))
1322         {
1323             if (!block) {
1324                 parseerror(parser, "cannot declare a local variable here");
1325                 return false;
1326             }
1327             if (!parser_next(parser)) {
1328                 parseerror(parser, "expected variable declaration");
1329                 return false;
1330             }
1331             if (!parser_variable(parser, block))
1332                 return false;
1333             *out = NULL;
1334             return true;
1335         }
1336         else if (!strcmp(parser_tokval(parser), "return"))
1337         {
1338             ast_expression *exp = NULL;
1339             ast_return     *ret = NULL;
1340             ast_value      *expected = parser->function->vtype;
1341
1342             if (!parser_next(parser)) {
1343                 parseerror(parser, "expected return expression");
1344                 return false;
1345             }
1346
1347             if (parser->tok != ';') {
1348                 exp = parser_expression(parser);
1349                 if (!exp)
1350                     return false;
1351
1352                 if (exp->expression.vtype != expected->expression.next->expression.vtype) {
1353                     parseerror(parser, "return with invalid expression");
1354                 }
1355
1356                 ret = ast_return_new(exp->expression.node.context, exp);
1357                 if (!ret) {
1358                     ast_delete(exp);
1359                     return false;
1360                 }
1361
1362                 *out = (ast_expression*)ret;
1363             } else if (!parser_next(parser)) {
1364                 parseerror(parser, "expected semicolon");
1365                 if (expected->expression.next->expression.vtype != TYPE_VOID) {
1366                     parseerror(parser, "return without value");
1367                 }
1368             }
1369             return true;
1370         }
1371         else if (!strcmp(parser_tokval(parser), "if"))
1372         {
1373             return parser_parse_if(parser, block, out);
1374         }
1375         else if (!strcmp(parser_tokval(parser), "while"))
1376         {
1377             return parser_parse_while(parser, block, out);
1378         }
1379         else if (!strcmp(parser_tokval(parser), "do"))
1380         {
1381             return parser_parse_dowhile(parser, block, out);
1382         }
1383         else if (!strcmp(parser_tokval(parser), "for"))
1384         {
1385             if (opts_standard == COMPILER_QCC) {
1386                 if (parsewarning(parser, WARN_EXTENSIONS, "for loops are not recognized in the original Quake C standard, to enable try an alternate standard --std=?"))
1387                     return false;
1388             }
1389             return parser_parse_for(parser, block, out);
1390         }
1391         parseerror(parser, "Unexpected keyword");
1392         return false;
1393     }
1394     else if (parser->tok == '{')
1395     {
1396         ast_block *inner;
1397         inner = parser_parse_block(parser);
1398         if (!inner)
1399             return false;
1400         *out = (ast_expression*)inner;
1401         return true;
1402     }
1403     else
1404     {
1405         ast_expression *exp = parser_expression(parser);
1406         if (!exp)
1407             return false;
1408         *out = exp;
1409         return true;
1410     }
1411 }
1412
1413 static void parser_pop_local(parser_t *parser)
1414 {
1415     parser->locals_count--;
1416     mem_d(parser->locals[parser->locals_count].name);
1417 }
1418
1419 static ast_block* parser_parse_block(parser_t *parser)
1420 {
1421     size_t oldblocklocal;
1422     ast_block *block = NULL;
1423
1424     oldblocklocal = parser->blocklocal;
1425     parser->blocklocal = parser->locals_count;
1426
1427     if (!parser_next(parser)) { /* skip the '{' */
1428         parseerror(parser, "expected function body");
1429         goto cleanup;
1430     }
1431
1432     block = ast_block_new(parser_ctx(parser));
1433
1434     while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
1435     {
1436         ast_expression *expr;
1437         if (parser->tok == '}')
1438             break;
1439
1440         if (!parser_parse_statement(parser, block, &expr)) {
1441             ast_block_delete(block);
1442             block = NULL;
1443             goto cleanup;
1444         }
1445         if (!expr)
1446             continue;
1447         if (!ast_block_exprs_add(block, expr)) {
1448             ast_delete(expr);
1449             ast_block_delete(block);
1450             block = NULL;
1451             goto cleanup;
1452         }
1453     }
1454
1455     if (parser->tok != '}') {
1456         ast_block_delete(block);
1457         block = NULL;
1458     } else {
1459         (void)parser_next(parser);
1460     }
1461
1462 cleanup:
1463     while (parser->locals_count > parser->blocklocal)
1464         parser_pop_local(parser);
1465     parser->blocklocal = oldblocklocal;
1466     /* unroll the local vector */
1467     return block;
1468 }
1469
1470 static ast_expression* parser_parse_statement_or_block(parser_t *parser)
1471 {
1472     ast_expression *expr;
1473     if (parser->tok == '{')
1474         return (ast_expression*)parser_parse_block(parser);
1475     if (!parser_parse_statement(parser, NULL, &expr))
1476         return NULL;
1477     return expr;
1478 }
1479
1480 static bool parser_variable(parser_t *parser, ast_block *localblock)
1481 {
1482     bool          isfunc = false;
1483     ast_function *func = NULL;
1484     lex_ctx       ctx;
1485     ast_value    *var;
1486     varentry_t    varent;
1487     ast_expression *olddecl;
1488
1489     int basetype = parser_token(parser)->constval.t;
1490
1491     while (true)
1492     {
1493         if (!parser_next(parser)) { /* skip basetype or comma */
1494             parseerror(parser, "expected variable declaration");
1495             return false;
1496         }
1497
1498         olddecl = NULL;
1499         isfunc  = false;
1500         func    = NULL;
1501         ctx = parser_ctx(parser);
1502         var = parser_parse_type(parser, basetype, &isfunc);
1503
1504         if (!var)
1505             return false;
1506
1507         if (parser->tok != TOKEN_IDENT) {
1508             parseerror(parser, "expected variable name\n");
1509             return false;
1510         }
1511
1512         if (!isfunc) {
1513             if (!localblock && (olddecl = parser_find_global(parser, parser_tokval(parser)))) {
1514                 ast_value_delete(var);
1515                 parseerror(parser, "global %s already declared here: %s:%i\n",
1516                            parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1517                 return false;
1518             }
1519
1520             if (localblock && parser_find_local(parser, parser_tokval(parser), parser->blocklocal)) {
1521                 ast_value_delete(var);
1522                 parseerror(parser, "local %s already declared here: %s:%i\n",
1523                            parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1524                 return false;
1525             }
1526         }
1527
1528         if (!ast_value_set_name(var, parser_tokval(parser))) {
1529             parseerror(parser, "failed to set variable name\n");
1530             ast_value_delete(var);
1531             return false;
1532         }
1533
1534         if (isfunc) {
1535             /* a function was defined */
1536             ast_value *fval;
1537             ast_value *proto = NULL;
1538
1539             if (!localblock)
1540                 olddecl = parser_find_global(parser, parser_tokval(parser));
1541             else
1542                 olddecl = parser_find_local(parser, parser_tokval(parser), parser->blocklocal);
1543
1544             if (olddecl) {
1545                 /* we had a prototype */
1546                 if (!ast_istype(olddecl, ast_value)) {
1547                     /* theoretically not possible you think?
1548                      * well:
1549                      * vector v;
1550                      * void() v_x = {}
1551                      * got it?
1552                      */
1553                     parseerror(parser, "cannot declare a function with the same name as a vector's member: %s",
1554                                parser_tokval(parser));
1555                     ast_value_delete(var);
1556                     return false;
1557                 }
1558
1559                 proto = (ast_value*)olddecl;
1560             }
1561
1562             /* turn var into a value of TYPE_FUNCTION, with the old var
1563              * as return type
1564              */
1565             fval = ast_value_new(ctx, var->name, TYPE_FUNCTION);
1566             func = ast_function_new(ctx, var->name, fval);
1567             if (!fval || !func) {
1568                 ast_value_delete(var);
1569                 if (fval) ast_value_delete(fval);
1570                 if (func) ast_function_delete(func);
1571                 return false;
1572             }
1573
1574             fval->expression.next = (ast_expression*)var;
1575             MEM_VECTOR_MOVE(&var->expression, params, &fval->expression, params);
1576
1577             /* we compare the type late here, but it's easier than
1578              * messing with the parameter-vector etc. earlier
1579              */
1580             if (proto) {
1581                 if (!ast_compare_type((ast_expression*)proto, (ast_expression*)fval)) {
1582                     parseerror(parser, "prototype declared at %s:%i had a different type",
1583                                ast_ctx(proto).file, ast_ctx(proto).line);
1584                     ast_function_delete(func);
1585                     ast_value_delete(fval);
1586                     return false;
1587                 }
1588                 ast_function_delete(func);
1589                 ast_value_delete(fval);
1590                 var = proto;
1591                 func = var->constval.vfunc;
1592             }
1593             else
1594             {
1595                 if (!parser_t_functions_add(parser, func)) {
1596                     ast_function_delete(func);
1597                     ast_value_delete(fval);
1598                     return false;
1599                 }
1600             }
1601
1602             var = fval;
1603         }
1604
1605         varent.name = util_strdup(var->name);
1606         varent.var = (ast_expression*)var;
1607         if (var->expression.vtype == TYPE_VECTOR)
1608         {
1609             size_t len = strlen(varent.name);
1610             varentry_t vx, vy, vz;
1611             vx.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 0);
1612             vy.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 1);
1613             vz.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 2);
1614             vx.name = mem_a(len+3);
1615             vy.name = mem_a(len+3);
1616             vz.name = mem_a(len+3);
1617             strcpy(vx.name, varent.name);
1618             strcpy(vy.name, varent.name);
1619             strcpy(vz.name, varent.name);
1620             vx.name[len] = vy.name[len] = vz.name[len] = '_';
1621             vx.name[len+1] = 'x';
1622             vy.name[len+1] = 'y';
1623             vz.name[len+1] = 'z';
1624             vx.name[len+2] = vy.name[len+2] = vz.name[len+2] = 0;
1625
1626             if (!localblock) {
1627                 (void)!parser_t_globals_add(parser, varent);
1628                 (void)!parser_t_globals_add(parser, vx);
1629                 (void)!parser_t_globals_add(parser, vy);
1630                 (void)!parser_t_globals_add(parser, vz);
1631             } else {
1632                 (void)!parser_t_locals_add(parser, varent);
1633                 (void)!parser_t_locals_add(parser, vx);
1634                 (void)!parser_t_locals_add(parser, vy);
1635                 (void)!parser_t_locals_add(parser, vz);
1636             }
1637         }
1638         else
1639         {
1640             if ( (!localblock && !parser_t_globals_add(parser, varent)) ||
1641                  ( localblock && !parser_t_locals_add(parser, varent)) )
1642             {
1643                 ast_value_delete(var);
1644                 return false;
1645             }
1646         }
1647         if (localblock && !ast_block_locals_add(localblock, var))
1648         {
1649             parser_pop_local(parser);
1650             ast_value_delete(var);
1651             return false;
1652         }
1653
1654         if (!parser_next(parser)) {
1655             ast_value_delete(var);
1656             return false;
1657         }
1658
1659         if (parser->tok == ';') {
1660             if (!parser_next(parser))
1661                 return parser->tok == TOKEN_EOF;
1662             return true;
1663         }
1664
1665         if (parser->tok == ',') {
1666             /* another var */
1667             continue;
1668         }
1669
1670         if (parser->tok != '=') {
1671             parseerror(parser, "expected '=' or ';'");
1672             return false;
1673         }
1674
1675         if (!parser_next(parser))
1676             return false;
1677
1678         if (parser->tok == '#') {
1679             if (localblock) {
1680                 parseerror(parser, "cannot declare builtins within functions");
1681                 return false;
1682             }
1683             if (!isfunc || !func) {
1684                 parseerror(parser, "unexpected builtin number, '%s' is not a function", var->name);
1685                 return false;
1686             }
1687             if (!parser_next(parser)) {
1688                 parseerror(parser, "expected builtin number");
1689                 return false;
1690             }
1691             if (parser->tok != TOKEN_INTCONST) {
1692                 parseerror(parser, "builtin number must be an integer constant");
1693                 return false;
1694             }
1695             if (parser_token(parser)->constval.i <= 0) {
1696                 parseerror(parser, "builtin number must be positive integer greater than zero");
1697                 return false;
1698             }
1699
1700             func->builtin = -parser_token(parser)->constval.i;
1701         } else if (parser->tok == '{') {
1702             /* function body */
1703             ast_block *block;
1704             ast_function *old = parser->function;
1705
1706             if (localblock) {
1707                 parseerror(parser, "cannot declare functions within functions");
1708                 return false;
1709             }
1710
1711             parser->function = func;
1712             block = parser_parse_block(parser);
1713             parser->function = old;
1714
1715             if (!block)
1716                 return false;
1717
1718             if (!ast_function_blocks_add(func, block)) {
1719                 ast_block_delete(block);
1720                 return false;
1721             }
1722
1723             if (parser->tok == ';')
1724                 return parser_next(parser) || parser->tok == TOKEN_EOF;
1725             else if (opts_standard == COMPILER_QCC)
1726                 parseerror(parser, "missing semicolon after function body (mandatory with -std=qcc)");
1727             return true;
1728         } else {
1729             parseerror(parser, "TODO, const assignment");
1730         }
1731
1732         if (!parser_next(parser))
1733             return false;
1734
1735         if (parser->tok == ',') {
1736             /* another */
1737             continue;
1738         }
1739
1740         if (parser->tok != ';') {
1741             parseerror(parser, "expected semicolon");
1742             return false;
1743         }
1744
1745         (void)parser_next(parser);
1746
1747         return true;
1748     }
1749 }
1750
1751 static bool parser_do(parser_t *parser)
1752 {
1753     if (parser->tok == TOKEN_TYPENAME)
1754     {
1755         return parser_variable(parser, NULL);
1756     }
1757     else if (parser->tok == TOKEN_KEYWORD)
1758     {
1759         /* handle 'var' and 'const' */
1760         return false;
1761     }
1762     else if (parser->tok == '.')
1763     {
1764         ast_value *var;
1765         ast_value *fld;
1766         bool       isfunc = false;
1767         int        basetype;
1768         lex_ctx    ctx = parser_ctx(parser);
1769         varentry_t varent;
1770
1771         /* entity-member declaration */
1772         if (!parser_next(parser) || parser->tok != TOKEN_TYPENAME) {
1773             parseerror(parser, "expected member variable definition");
1774             return false;
1775         }
1776
1777         /* remember the base/return type */
1778         basetype = parser_token(parser)->constval.t;
1779
1780         /* parse into the declaration */
1781         if (!parser_next(parser)) {
1782             parseerror(parser, "expected field def");
1783             return false;
1784         }
1785
1786         /* parse the field type fully */
1787         var = parser_parse_type(parser, basetype, &isfunc);
1788         if (!var)
1789             return false;
1790
1791         /* now the field name */
1792         if (parser->tok != TOKEN_IDENT) {
1793             parseerror(parser, "expected field name");
1794             ast_delete(var);
1795             return false;
1796         }
1797
1798         /* check for an existing field
1799          * in original qc we also have to check for an existing
1800          * global named like the field
1801          */
1802         if (opts_standard == COMPILER_QCC) {
1803             if (parser_find_global(parser, parser_tokval(parser))) {
1804                 parseerror(parser, "cannot declare a field and a global of the same name with -std=qcc");
1805                 ast_delete(var);
1806                 return false;
1807             }
1808         }
1809         if (parser_find_field(parser, parser_tokval(parser))) {
1810             parseerror(parser, "field %s already exists", parser_tokval(parser));
1811             ast_delete(var);
1812             return false;
1813         }
1814
1815         /* if it was a function, turn it into a function */
1816         if (isfunc) {
1817             ast_value *fval;
1818             /* turn var into a value of TYPE_FUNCTION, with the old var
1819              * as return type
1820              */
1821             fval = ast_value_new(ctx, var->name, TYPE_FUNCTION);
1822             if (!fval) {
1823                 ast_value_delete(var);
1824                 ast_value_delete(fval);
1825                 return false;
1826             }
1827
1828             fval->expression.next = (ast_expression*)var;
1829             MEM_VECTOR_MOVE(&var->expression, params, &fval->expression, params);
1830
1831             var = fval;
1832         }
1833
1834         /* turn it into a field */
1835         fld = ast_value_new(ctx, parser_tokval(parser), TYPE_FIELD);
1836         fld->expression.next = (ast_expression*)var;
1837
1838         varent.var = (ast_expression*)fld;
1839         if (var->expression.vtype == TYPE_VECTOR)
1840         {
1841             /* create _x, _y and _z fields as well */
1842             parseerror(parser, "TODO: vector field members (_x,_y,_z)");
1843             ast_delete(fld);
1844             return false;
1845         }
1846
1847         varent.name = util_strdup(fld->name);
1848         (void)!parser_t_fields_add(parser, varent);
1849
1850         /* end with a semicolon */
1851         if (!parser_next(parser) || parser->tok != ';') {
1852             parseerror(parser, "semicolon expected");
1853             return false;
1854         }
1855
1856         /* skip the semicolon */
1857         if (!parser_next(parser))
1858             return parser->tok == TOKEN_EOF;
1859
1860         return true;
1861     }
1862     else
1863     {
1864         parseerror(parser, "unexpected token: %s", parser->lex->tok->value);
1865         return false;
1866     }
1867     return true;
1868 }
1869
1870 static parser_t *parser;
1871
1872 bool parser_init()
1873 {
1874     parser = (parser_t*)mem_a(sizeof(parser_t));
1875     if (!parser)
1876         return false;
1877
1878     memset(parser, 0, sizeof(parser));
1879
1880     MEM_VECTOR_INIT(parser, globals);
1881     MEM_VECTOR_INIT(parser, locals);
1882     return true;
1883 }
1884
1885 bool parser_compile(const char *filename)
1886 {
1887     parser->lex = lex_open(filename);
1888     if (!parser->lex) {
1889         printf("failed to open file \"%s\"\n", filename);
1890         return false;
1891     }
1892
1893     /* initial lexer/parser state */
1894     parser->lex->flags.noops = true;
1895
1896     if (parser_next(parser))
1897     {
1898         while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
1899         {
1900             if (!parser_do(parser)) {
1901                 if (parser->tok == TOKEN_EOF)
1902                     parseerror(parser, "unexpected eof");
1903                 else if (!parser->errors)
1904                     parseerror(parser, "parse error\n");
1905                 lex_close(parser->lex);
1906                 mem_d(parser);
1907                 return false;
1908             }
1909         }
1910     }
1911
1912     lex_close(parser->lex);
1913
1914     return !parser->errors;
1915 }
1916
1917 void parser_cleanup()
1918 {
1919     size_t i;
1920     for (i = 0; i < parser->functions_count; ++i) {
1921         ast_delete(parser->functions[i]);
1922     }
1923     for (i = 0; i < parser->imm_vector_count; ++i) {
1924         ast_delete(parser->imm_vector[i]);
1925     }
1926     for (i = 0; i < parser->imm_string_count; ++i) {
1927         ast_delete(parser->imm_string[i]);
1928     }
1929     for (i = 0; i < parser->imm_float_count; ++i) {
1930         ast_delete(parser->imm_float[i]);
1931     }
1932     for (i = 0; i < parser->globals_count; ++i) {
1933         ast_delete(parser->globals[i].var);
1934         mem_d(parser->globals[i].name);
1935     }
1936     MEM_VECTOR_CLEAR(parser, globals);
1937
1938     mem_d(parser);
1939 }
1940
1941 bool parser_finish(const char *output)
1942 {
1943     size_t i;
1944     ir_builder *ir;
1945
1946     if (!parser->errors)
1947     {
1948         ir = ir_builder_new("gmqcc_out");
1949         if (!ir) {
1950             printf("failed to allocate builder\n");
1951             return false;
1952         }
1953
1954         for (i = 0; i < parser->imm_float_count; ++i) {
1955             if (!ast_global_codegen(parser->imm_float[i], ir)) {
1956                 printf("failed to generate global %s\n", parser->imm_float[i]->name);
1957                 ir_builder_delete(ir);
1958                 return false;
1959             }
1960         }
1961         for (i = 0; i < parser->imm_string_count; ++i) {
1962             if (!ast_global_codegen(parser->imm_string[i], ir)) {
1963                 printf("failed to generate global %s\n", parser->imm_string[i]->name);
1964                 ir_builder_delete(ir);
1965                 return false;
1966             }
1967         }
1968         for (i = 0; i < parser->imm_vector_count; ++i) {
1969             if (!ast_global_codegen(parser->imm_vector[i], ir)) {
1970                 printf("failed to generate global %s\n", parser->imm_vector[i]->name);
1971                 ir_builder_delete(ir);
1972                 return false;
1973             }
1974         }
1975         for (i = 0; i < parser->fields_count; ++i) {
1976             ast_value *field;
1977             bool isconst;
1978             if (!ast_istype(parser->fields[i].var, ast_value))
1979                 continue;
1980             field = (ast_value*)parser->fields[i].var;
1981             isconst = field->isconst;
1982             field->isconst = false;
1983             if (!ast_global_codegen((ast_value*)field, ir)) {
1984                 printf("failed to generate field %s\n", field->name);
1985                 ir_builder_delete(ir);
1986                 return false;
1987             }
1988             if (isconst) {
1989                 ir_value *ifld;
1990                 ast_expression *subtype;
1991                 field->isconst = true;
1992                 subtype = field->expression.next;
1993                 ifld = ir_builder_create_field(ir, field->name, subtype->expression.vtype);
1994                 if (subtype->expression.vtype == TYPE_FIELD)
1995                     ifld->fieldtype = subtype->expression.next->expression.vtype;
1996                 else if (subtype->expression.vtype == TYPE_FUNCTION)
1997                     ifld->outtype = subtype->expression.next->expression.vtype;
1998                 (void)!ir_value_set_field(field->ir_v, ifld);
1999             }
2000         }
2001         for (i = 0; i < parser->globals_count; ++i) {
2002             if (!ast_istype(parser->globals[i].var, ast_value))
2003                 continue;
2004             if (!ast_global_codegen((ast_value*)(parser->globals[i].var), ir)) {
2005                 printf("failed to generate global %s\n", parser->globals[i].name);
2006                 ir_builder_delete(ir);
2007                 return false;
2008             }
2009         }
2010         for (i = 0; i < parser->functions_count; ++i) {
2011             if (!ast_function_codegen(parser->functions[i], ir)) {
2012                 printf("failed to generate function %s\n", parser->functions[i]->name);
2013                 ir_builder_delete(ir);
2014                 return false;
2015             }
2016             if (!ir_function_finalize(parser->functions[i]->ir_func)) {
2017                 printf("failed to finalize function %s\n", parser->functions[i]->name);
2018                 ir_builder_delete(ir);
2019                 return false;
2020             }
2021         }
2022
2023         if (opts_dump)
2024             ir_builder_dump(ir, printf);
2025
2026         if (!ir_builder_generate(ir, output)) {
2027             printf("*** failed to generate output file\n");
2028             ir_builder_delete(ir);
2029             return false;
2030         }
2031
2032         ir_builder_delete(ir);
2033         return true;
2034     }
2035
2036     printf("*** there were compile errors\n");
2037     return false;
2038 }