parser.c

   1 #include <stdio.h>
   2 #include <stdarg.h>
   3
   4 #include "gmqcc.h"
   5 #include "lexer.h"
   6
   7 typedef struct {
   8     char *name;
   9     ast_expression *var;
  10 } varentry_t;
  11
  12 typedef struct {
  13     lex_file *lex;
  14     int      tok;
  15
  16     MEM_VECTOR_MAKE(varentry_t, globals);
  17     MEM_VECTOR_MAKE(varentry_t, fields);
  18     MEM_VECTOR_MAKE(ast_function*, functions);
  19     MEM_VECTOR_MAKE(ast_value*, imm_float);
  20     MEM_VECTOR_MAKE(ast_value*, imm_string);
  21     MEM_VECTOR_MAKE(ast_value*, imm_vector);
  22
  23     ast_value *imm_float_zero;
  24     ast_value *imm_vector_zero;
  25
  26     ast_function *function;
  27     MEM_VECTOR_MAKE(varentry_t, locals);
  28     size_t blocklocal;
  29
  30     size_t errors;
  31
  32     /* TYPE_FIELD -> parser_find_fields is used instead of find_var
  33      * TODO: TYPE_VECTOR -> x, y and z are accepted in the gmqcc standard
  34      * anything else: type error
  35      */
  36     qcint  memberof;
  37 } parser_t;
  38
  39 MEM_VEC_FUNCTIONS(parser_t, varentry_t, globals)
  40 MEM_VEC_FUNCTIONS(parser_t, varentry_t, fields)
  41 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_float)
  42 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_string)
  43 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_vector)
  44 MEM_VEC_FUNCTIONS(parser_t, varentry_t, locals)
  45 MEM_VEC_FUNCTIONS(parser_t, ast_function*, functions)
  46
  47 static void parser_pop_local(parser_t *parser);
  48 static bool parser_variable(parser_t *parser, ast_block *localblock);
  49 static ast_block* parser_parse_block(parser_t *parser);
  50 static ast_expression* parser_parse_statement_or_block(parser_t *parser);
  51 static ast_expression* parser_expression_leave(parser_t *parser, bool stopatcomma);
  52 static ast_expression* parser_expression(parser_t *parser, bool stopatcomma);
  53
  54 void parseerror(parser_t *parser, const char *fmt, ...)
  55 {
  56         va_list ap;
  57
  58         parser->errors++;
  59
  60         va_start(ap, fmt);
  61     vprintmsg(LVL_ERROR, parser->lex->tok->ctx.file, parser->lex->tok->ctx.line, "parse error", fmt, ap);
  62         va_end(ap);
  63 }
  64
  65 /* returns true if it counts as an error */
  66 bool GMQCC_WARN parsewarning(parser_t *parser, int warntype, const char *fmt, ...)
  67 {
  68         va_list ap;
  69         int lvl = LVL_WARNING;
  70
  71     if (!OPTS_WARN(warntype))
  72         return false;
  73
  74     if (opts_werror) {
  75             parser->errors++;
  76             lvl = LVL_ERROR;
  77         }
  78
  79         va_start(ap, fmt);
  80     vprintmsg(lvl, parser->lex->tok->ctx.file, parser->lex->tok->ctx.line, "warning", fmt, ap);
  81         va_end(ap);
  82
  83         return opts_werror;
  84 }
  85
  86 /**********************************************************************
  87  * some maths used for constant folding
  88  */
  89
  90 vector vec3_add(vector a, vector b)
  91 {
  92     vector out;
  93     out.x = a.x + b.x;
  94     out.y = a.y + b.y;
  95     out.z = a.z + b.z;
  96     return out;
  97 }
  98
  99 vector vec3_sub(vector a, vector b)
 100 {
 101     vector out;
 102     out.x = a.x - b.x;
 103     out.y = a.y - b.y;
 104     out.z = a.z - b.z;
 105     return out;
 106 }
 107
 108 qcfloat vec3_mulvv(vector a, vector b)
 109 {
 110     return (a.x * b.x + a.y * b.y + a.z * b.z);
 111 }
 112
 113 vector vec3_mulvf(vector a, float b)
 114 {
 115     vector out;
 116     out.x = a.x * b;
 117     out.y = a.y * b;
 118     out.z = a.z * b;
 119     return out;
 120 }
 121
 122 /**********************************************************************
 123  * parsing
 124  */
 125
 126 bool parser_next(parser_t *parser)
 127 {
 128     /* lex_do kills the previous token */
 129     parser->tok = lex_do(parser->lex);
 130     if (parser->tok == TOKEN_EOF || parser->tok >= TOKEN_ERROR)
 131         return false;
 132     return true;
 133 }
 134
 135 /* lift a token out of the parser so it's not destroyed by parser_next */
 136 token *parser_lift(parser_t *parser)
 137 {
 138     token *tok = parser->lex->tok;
 139     parser->lex->tok = NULL;
 140     return tok;
 141 }
 142
 143 #define parser_tokval(p) (p->lex->tok->value)
 144 #define parser_token(p)  (p->lex->tok)
 145 #define parser_ctx(p)    (p->lex->tok->ctx)
 146
 147 ast_value* parser_const_float(parser_t *parser, double d)
 148 {
 149     size_t i;
 150     ast_value *out;
 151     for (i = 0; i < parser->imm_float_count; ++i) {
 152         if (parser->imm_float[i]->constval.vfloat == d)
 153             return parser->imm_float[i];
 154     }
 155     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_FLOAT);
 156     out->isconst = true;
 157     out->constval.vfloat = d;
 158     if (!parser_t_imm_float_add(parser, out)) {
 159         ast_value_delete(out);
 160         return NULL;
 161     }
 162     return out;
 163 }
 164
 165 ast_value* parser_const_float_0(parser_t *parser)
 166 {
 167     if (!parser->imm_float_zero)
 168         parser->imm_float_zero = parser_const_float(parser, 0);
 169     return parser->imm_float_zero;
 170 }
 171
 172 char *parser_strdup(const char *str)
 173 {
 174     if (str && !*str) {
 175         /* actually dup empty strings */
 176         char *out = mem_a(1);
 177         *out = 0;
 178         return out;
 179     }
 180     return util_strdup(str);
 181 }
 182
 183 ast_value* parser_const_string(parser_t *parser, const char *str)
 184 {
 185     size_t i;
 186     ast_value *out;
 187     for (i = 0; i < parser->imm_string_count; ++i) {
 188         if (!strcmp(parser->imm_string[i]->constval.vstring, str))
 189             return parser->imm_string[i];
 190     }
 191     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_STRING);
 192     out->isconst = true;
 193     out->constval.vstring = parser_strdup(str);
 194     if (!parser_t_imm_string_add(parser, out)) {
 195         ast_value_delete(out);
 196         return NULL;
 197     }
 198     return out;
 199 }
 200
 201 ast_value* parser_const_vector(parser_t *parser, vector v)
 202 {
 203     size_t i;
 204     ast_value *out;
 205     for (i = 0; i < parser->imm_vector_count; ++i) {
 206         if (!memcmp(&parser->imm_vector[i]->constval.vvec, &v, sizeof(v)))
 207             return parser->imm_vector[i];
 208     }
 209     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_VECTOR);
 210     out->isconst = true;
 211     out->constval.vvec = v;
 212     if (!parser_t_imm_vector_add(parser, out)) {
 213         ast_value_delete(out);
 214         return NULL;
 215     }
 216     return out;
 217 }
 218
 219 ast_value* parser_const_vector_f(parser_t *parser, float x, float y, float z)
 220 {
 221     vector v;
 222     v.x = x;
 223     v.y = y;
 224     v.z = z;
 225     return parser_const_vector(parser, v);
 226 }
 227
 228 ast_value* parser_const_vector_0(parser_t *parser)
 229 {
 230     if (!parser->imm_vector_zero)
 231         parser->imm_vector_zero = parser_const_vector_f(parser, 0, 0, 0);
 232     return parser->imm_vector_zero;
 233 }
 234
 235 ast_expression* parser_find_field(parser_t *parser, const char *name)
 236 {
 237     size_t i;
 238     for (i = 0; i < parser->fields_count; ++i) {
 239         if (!strcmp(parser->fields[i].name, name))
 240             return parser->fields[i].var;
 241     }
 242     return NULL;
 243 }
 244
 245 ast_expression* parser_find_global(parser_t *parser, const char *name)
 246 {
 247     size_t i;
 248     for (i = 0; i < parser->globals_count; ++i) {
 249         if (!strcmp(parser->globals[i].name, name))
 250             return parser->globals[i].var;
 251     }
 252     return NULL;
 253 }
 254
 255 ast_expression* parser_find_param(parser_t *parser, const char *name)
 256 {
 257     size_t i;
 258     ast_value *fun;
 259     if (!parser->function)
 260         return NULL;
 261     fun = parser->function->vtype;
 262     for (i = 0; i < fun->expression.params_count; ++i) {
 263         if (!strcmp(fun->expression.params[i]->name, name))
 264             return (ast_expression*)(fun->expression.params[i]);
 265     }
 266     return NULL;
 267 }
 268
 269 ast_expression* parser_find_local(parser_t *parser, const char *name, size_t upto, bool *isparam)
 270 {
 271     size_t i;
 272     *isparam = false;
 273     for (i = parser->locals_count; i > upto;) {
 274         --i;
 275         if (!strcmp(parser->locals[i].name, name))
 276             return parser->locals[i].var;
 277     }
 278     *isparam = true;
 279     return parser_find_param(parser, name);
 280 }
 281
 282 ast_expression* parser_find_var(parser_t *parser, const char *name)
 283 {
 284     bool dummy;
 285     ast_expression *v;
 286     v         = parser_find_local(parser, name, 0, &dummy);
 287     if (!v) v = parser_find_global(parser, name);
 288     return v;
 289 }
 290
 291 typedef struct {
 292     MEM_VECTOR_MAKE(ast_value*, p);
 293 } paramlist_t;
 294 MEM_VEC_FUNCTIONS(paramlist_t, ast_value*, p)
 295
 296 static ast_value *parser_parse_type(parser_t *parser, int basetype, bool *isfunc)
 297 {
 298     paramlist_t params;
 299     ast_value *var;
 300     lex_ctx   ctx = parser_ctx(parser);
 301     int vtype = basetype;
 302     int temptype;
 303     size_t i;
 304
 305     MEM_VECTOR_INIT(&params, p);
 306
 307     *isfunc = false;
 308
 309     if (parser->tok == '(') {
 310         *isfunc = true;
 311         while (true) {
 312             ast_value *param;
 313             ast_value *fld;
 314             bool isfield = false;
 315             bool dummy;
 316
 317             if (!parser_next(parser))
 318                 goto on_error;
 319
 320             if (parser->tok == ')')
 321                 break;
 322
 323             if (parser->tok == '.') {
 324                 isfield = true;
 325                 if (!parser_next(parser)) {
 326                     parseerror(parser, "expected field parameter type");
 327                     goto on_error;
 328                 }
 329             }
 330
 331             temptype = parser_token(parser)->constval.t;
 332             if (!parser_next(parser))
 333                 goto on_error;
 334
 335             param = parser_parse_type(parser, temptype, &dummy);
 336             (void)dummy;
 337
 338             if (!param)
 339                 goto on_error;
 340
 341             if (parser->tok == TOKEN_IDENT) {
 342                 /* named parameter */
 343                 if (!ast_value_set_name(param, parser_tokval(parser)))
 344                     goto on_error;
 345                 if (!parser_next(parser))
 346                     goto on_error;
 347             }
 348
 349             if (isfield) {
 350                 fld = ast_value_new(ctx, param->name, TYPE_FIELD);
 351                 fld->expression.next = (ast_expression*)param;
 352                 param = fld;
 353             }
 354
 355             if (!paramlist_t_p_add(&params, param)) {
 356                 parseerror(parser, "Out of memory while parsing typename");
 357                 goto on_error;
 358             }
 359
 360             if (parser->tok == ',')
 361                 continue;
 362             if (parser->tok == ')')
 363                 break;
 364             parseerror(parser, "Unexpected token");
 365             goto on_error;
 366         }
 367         if (!parser_next(parser))
 368             goto on_error;
 369     }
 370
 371     var = ast_value_new(ctx, "<unnamed>", vtype);
 372     if (!var)
 373         goto on_error;
 374     MEM_VECTOR_MOVE(&params, p, &var->expression, params);
 375     return var;
 376 on_error:
 377     for (i = 0; i < params.p_count; ++i)
 378         ast_value_delete(params.p[i]);
 379     MEM_VECTOR_CLEAR(&params, p);
 380     return NULL;
 381 }
 382
 383 typedef struct
 384 {
 385     size_t etype; /* 0 = expression, others are operators */
 386     int             paren;
 387     size_t          off;
 388     ast_expression *out;
 389     ast_block      *block; /* for commas and function calls */
 390     lex_ctx ctx;
 391 } sy_elem;
 392 typedef struct
 393 {
 394     MEM_VECTOR_MAKE(sy_elem, out);
 395     MEM_VECTOR_MAKE(sy_elem, ops);
 396 } shunt;
 397 MEM_VEC_FUNCTIONS(shunt, sy_elem, out)
 398 MEM_VEC_FUNCTIONS(shunt, sy_elem, ops)
 399
 400 static sy_elem syexp(lex_ctx ctx, ast_expression *v) {
 401     sy_elem e;
 402     e.etype = 0;
 403     e.out   = v;
 404     e.block = NULL;
 405     e.ctx   = ctx;
 406     e.paren = 0;
 407     return e;
 408 }
 409
 410 static sy_elem syblock(lex_ctx ctx, ast_block *v) {
 411     sy_elem e;
 412     e.etype = 0;
 413     e.out   = (ast_expression*)v;
 414     e.block = v;
 415     e.ctx   = ctx;
 416     e.paren = 0;
 417     return e;
 418 }
 419
 420 static sy_elem syop(lex_ctx ctx, const oper_info *op) {
 421     sy_elem e;
 422     e.etype = 1 + (op - operators);
 423     e.out   = NULL;
 424     e.block = NULL;
 425     e.ctx   = ctx;
 426     e.paren = 0;
 427     return e;
 428 }
 429
 430 static sy_elem syparen(lex_ctx ctx, int p, size_t off) {
 431     sy_elem e;
 432     e.etype = 0;
 433     e.off   = off;
 434     e.out   = NULL;
 435     e.block = NULL;
 436     e.ctx   = ctx;
 437     e.paren = p;
 438     return e;
 439 }
 440
 441 #ifdef DEBUGSHUNT
 442 # define DEBUGSHUNTDO(x) x
 443 #else
 444 # define DEBUGSHUNTDO(x)
 445 #endif
 446
 447 static bool parser_sy_pop(parser_t *parser, shunt *sy)
 448 {
 449     const oper_info *op;
 450     lex_ctx ctx;
 451     ast_expression *out = NULL;
 452     ast_expression *exprs[3];
 453     ast_block      *blocks[3];
 454     ast_value      *asvalue[3];
 455     size_t i, assignop;
 456     qcint  generated_op = 0;
 457
 458     if (!sy->ops_count) {
 459         parseerror(parser, "internal error: missing operator");
 460         return false;
 461     }
 462
 463     if (sy->ops[sy->ops_count-1].paren) {
 464         parseerror(parser, "unmatched parenthesis");
 465         return false;
 466     }
 467
 468     op = &operators[sy->ops[sy->ops_count-1].etype - 1];
 469     ctx = sy->ops[sy->ops_count-1].ctx;
 470
 471     DEBUGSHUNTDO(printf("apply %s\n", op->op));
 472
 473     if (sy->out_count < op->operands) {
 474         parseerror(parser, "internal error: not enough operands: %i (operator %s (%i))", sy->out_count,
 475                    op->op, (int)op->id);
 476         return false;
 477     }
 478
 479     sy->ops_count--;
 480
 481     sy->out_count -= op->operands;
 482     for (i = 0; i < op->operands; ++i) {
 483         exprs[i]  = sy->out[sy->out_count+i].out;
 484         blocks[i] = sy->out[sy->out_count+i].block;
 485         asvalue[i] = (ast_value*)exprs[i];
 486     }
 487
 488     if (blocks[0] && !blocks[0]->exprs_count && op->id != opid1(',')) {
 489         parseerror(parser, "internal error: operator cannot be applied on empty blocks");
 490         return false;
 491     }
 492
 493 #define NotSameType(T) \
 494              (exprs[0]->expression.vtype != exprs[1]->expression.vtype || \
 495               exprs[0]->expression.vtype != T)
 496 #define CanConstFold1(A) \
 497              (ast_istype((A), ast_value) && ((ast_value*)(A))->isconst)
 498 #define CanConstFold(A, B) \
 499              (CanConstFold1(A) && CanConstFold1(B))
 500 #define ConstV(i) (asvalue[(i)]->constval.vvec)
 501 #define ConstF(i) (asvalue[(i)]->constval.vfloat)
 502 #define ConstS(i) (asvalue[(i)]->constval.vstring)
 503     switch (op->id)
 504     {
 505         default:
 506             parseerror(parser, "internal error: unhandled operator: %s (%i)", op->op, (int)op->id);
 507             return false;
 508
 509         case opid1('.'):
 510             if (exprs[0]->expression.vtype == TYPE_ENTITY) {
 511                 if (exprs[1]->expression.vtype != TYPE_FIELD) {
 512                     parseerror(parser, "type error: right hand of member-operand should be an entity-field");
 513                     return false;
 514                 }
 515                 out = (ast_expression*)ast_entfield_new(ctx, exprs[0], exprs[1]);
 516             }
 517             else if (exprs[0]->expression.vtype == TYPE_VECTOR) {
 518                 parseerror(parser, "internal error: vector access is not supposed to be handled at this point");
 519                 return false;
 520             }
 521             else {
 522                 parseerror(parser, "type error: member-of operator on something that is not an entity or vector");
 523                 return false;
 524             }
 525             break;
 526
 527         case opid1(','):
 528             if (blocks[0]) {
 529                 if (!ast_block_exprs_add(blocks[0], exprs[1]))
 530                     return false;
 531             } else {
 532                 blocks[0] = ast_block_new(ctx);
 533                 if (!ast_block_exprs_add(blocks[0], exprs[0]) ||
 534                     !ast_block_exprs_add(blocks[0], exprs[1]))
 535                 {
 536                     return false;
 537                 }
 538             }
 539             if (!ast_block_set_type(blocks[0], exprs[1]))
 540                 return false;
 541
 542             sy->out[sy->out_count++] = syblock(ctx, blocks[0]);
 543             return true;
 544
 545         case opid2('-','P'):
 546             switch (exprs[0]->expression.vtype) {
 547                 case TYPE_FLOAT:
 548                     if (CanConstFold1(exprs[0]))
 549                         out = (ast_expression*)parser_const_float(parser, -ConstF(0));
 550                     else
 551                         out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_F,
 552                                                               (ast_expression*)parser_const_float_0(parser),
 553                                                               exprs[0]);
 554                     break;
 555                 case TYPE_VECTOR:
 556                     if (CanConstFold1(exprs[0]))
 557                         out = (ast_expression*)parser_const_vector_f(parser,
 558                             -ConstV(0).x, -ConstV(0).y, -ConstV(0).z);
 559                     else
 560                         out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_V,
 561                                                               (ast_expression*)parser_const_vector_0(parser),
 562                                                               exprs[0]);
 563                     break;
 564                 default:
 565                 parseerror(parser, "invalid types used in expression: cannot negate type %s",
 566                            type_name[exprs[0]->expression.vtype]);
 567                 return false;
 568             }
 569             break;
 570
 571         case opid2('!','P'):
 572             switch (exprs[0]->expression.vtype) {
 573                 case TYPE_FLOAT:
 574                     if (CanConstFold1(exprs[0]))
 575                         out = (ast_expression*)parser_const_float(parser, !ConstF(0));
 576                     else
 577                         out = (ast_expression*)ast_unary_new(ctx, INSTR_NOT_F, exprs[0]);
 578                     break;
 579                 case TYPE_VECTOR:
 580                     if (CanConstFold1(exprs[0]))
 581                         out = (ast_expression*)parser_const_float(parser,
 582                             (!ConstV(0).x && !ConstV(0).y && !ConstV(0).z));
 583                     else
 584                         out = (ast_expression*)ast_unary_new(ctx, INSTR_NOT_V, exprs[0]);
 585                     break;
 586                 case TYPE_STRING:
 587                     if (CanConstFold1(exprs[0]))
 588                         out = (ast_expression*)parser_const_float(parser, !ConstS(0) || !*ConstS(0));
 589                     else
 590                         out = (ast_expression*)ast_unary_new(ctx, INSTR_NOT_S, exprs[0]);
 591                     break;
 592                 /* we don't constant-fold NOT for these types */
 593                 case TYPE_ENTITY:
 594                     out = (ast_expression*)ast_unary_new(ctx, INSTR_NOT_ENT, exprs[0]);
 595                     break;
 596                 case TYPE_FUNCTION:
 597                     out = (ast_expression*)ast_unary_new(ctx, INSTR_NOT_FNC, exprs[0]);
 598                     break;
 599                 default:
 600                 parseerror(parser, "invalid types used in expression: cannot logically negate type %s",
 601                            type_name[exprs[0]->expression.vtype]);
 602                 return false;
 603             }
 604             break;
 605
 606         case opid1('+'):
 607             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype ||
 608                 (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) )
 609             {
 610                 parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
 611                            type_name[exprs[0]->expression.vtype],
 612                            type_name[exprs[1]->expression.vtype]);
 613                 return false;
 614             }
 615             switch (exprs[0]->expression.vtype) {
 616                 case TYPE_FLOAT:
 617                     if (CanConstFold(exprs[0], exprs[1]))
 618                     {
 619                         out = (ast_expression*)parser_const_float(parser, ConstF(0) + ConstF(1));
 620                     }
 621                     else
 622                         out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_F, exprs[0], exprs[1]);
 623                     break;
 624                 case TYPE_VECTOR:
 625                     if (CanConstFold(exprs[0], exprs[1]))
 626                         out = (ast_expression*)parser_const_vector(parser, vec3_add(ConstV(0), ConstV(1)));
 627                     else
 628                         out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_V, exprs[0], exprs[1]);
 629                     break;
 630                 default:
 631                     parseerror(parser, "invalid types used in expression: cannot add type %s and %s",
 632                                type_name[exprs[0]->expression.vtype],
 633                                type_name[exprs[1]->expression.vtype]);
 634                     return false;
 635             };
 636             break;
 637         case opid1('-'):
 638             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype ||
 639                 (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) )
 640             {
 641                 parseerror(parser, "invalid types used in expression: cannot subtract type %s from %s",
 642                            type_name[exprs[1]->expression.vtype],
 643                            type_name[exprs[0]->expression.vtype]);
 644                 return false;
 645             }
 646             switch (exprs[0]->expression.vtype) {
 647                 case TYPE_FLOAT:
 648                     if (CanConstFold(exprs[0], exprs[1]))
 649                         out = (ast_expression*)parser_const_float(parser, ConstF(0) - ConstF(1));
 650                     else
 651                         out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_F, exprs[0], exprs[1]);
 652                     break;
 653                 case TYPE_VECTOR:
 654                     if (CanConstFold(exprs[0], exprs[1]))
 655                         out = (ast_expression*)parser_const_vector(parser, vec3_sub(ConstV(0), ConstV(1)));
 656                     else
 657                         out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_V, exprs[0], exprs[1]);
 658                     break;
 659                 default:
 660                     parseerror(parser, "invalid types used in expression: cannot subtract type %s from %s",
 661                                type_name[exprs[1]->expression.vtype],
 662                                type_name[exprs[0]->expression.vtype]);
 663                     return false;
 664             };
 665             break;
 666         case opid1('*'):
 667             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype &&
 668                 exprs[0]->expression.vtype != TYPE_VECTOR &&
 669                 exprs[0]->expression.vtype != TYPE_FLOAT &&
 670                 exprs[1]->expression.vtype != TYPE_VECTOR &&
 671                 exprs[1]->expression.vtype != TYPE_FLOAT)
 672             {
 673                 parseerror(parser, "invalid types used in expression: cannot multiply types %s and %s",
 674                            type_name[exprs[1]->expression.vtype],
 675                            type_name[exprs[0]->expression.vtype]);
 676                 return false;
 677             }
 678             switch (exprs[0]->expression.vtype) {
 679                 case TYPE_FLOAT:
 680                     if (exprs[1]->expression.vtype == TYPE_VECTOR)
 681                     {
 682                         if (CanConstFold(exprs[0], exprs[1]))
 683                             out = (ast_expression*)parser_const_vector(parser, vec3_mulvf(ConstV(1), ConstF(0)));
 684                         else
 685                             out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_FV, exprs[0], exprs[1]);
 686                     }
 687                     else
 688                     {
 689                         if (CanConstFold(exprs[0], exprs[1]))
 690                             out = (ast_expression*)parser_const_float(parser, ConstF(0) * ConstF(1));
 691                         else
 692                             out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_F, exprs[0], exprs[1]);
 693                     }
 694                     break;
 695                 case TYPE_VECTOR:
 696                     if (exprs[1]->expression.vtype == TYPE_FLOAT)
 697                     {
 698                         if (CanConstFold(exprs[0], exprs[1]))
 699                             out = (ast_expression*)parser_const_vector(parser, vec3_mulvf(ConstV(0), ConstF(1)));
 700                         else
 701                             out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_VF, exprs[0], exprs[1]);
 702                     }
 703                     else
 704                     {
 705                         if (CanConstFold(exprs[0], exprs[1]))
 706                             out = (ast_expression*)parser_const_float(parser, vec3_mulvv(ConstV(0), ConstV(1)));
 707                         else
 708                             out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_V, exprs[0], exprs[1]);
 709                     }
 710                     break;
 711                 default:
 712                     parseerror(parser, "invalid types used in expression: cannot multiply types %s and %s",
 713                                type_name[exprs[1]->expression.vtype],
 714                                type_name[exprs[0]->expression.vtype]);
 715                     return false;
 716             };
 717             break;
 718         case opid1('/'):
 719             if (NotSameType(TYPE_FLOAT)) {
 720                 parseerror(parser, "invalid types used in expression: cannot divide types %s and %s",
 721                            type_name[exprs[0]->expression.vtype],
 722                            type_name[exprs[1]->expression.vtype]);
 723                 return false;
 724             }
 725             if (CanConstFold(exprs[0], exprs[1]))
 726                 out = (ast_expression*)parser_const_float(parser, ConstF(0) / ConstF(1));
 727             else
 728                 out = (ast_expression*)ast_binary_new(ctx, INSTR_DIV_F, exprs[0], exprs[1]);
 729             break;
 730         case opid1('%'):
 731         case opid2('%','='):
 732             parseerror(parser, "qc does not have a modulo operator");
 733             return false;
 734         case opid1('|'):
 735         case opid1('&'):
 736             if (NotSameType(TYPE_FLOAT)) {
 737                 parseerror(parser, "invalid types used in expression: cannot perform bit operations between types %s and %s",
 738                            type_name[exprs[0]->expression.vtype],
 739                            type_name[exprs[1]->expression.vtype]);
 740                 return false;
 741             }
 742             if (CanConstFold(exprs[0], exprs[1]))
 743                 out = (ast_expression*)parser_const_float(parser,
 744                     (op->id == opid1('|') ? (float)( ((qcint)ConstF(0)) | ((qcint)ConstF(1)) ) :
 745                                             (float)( ((qcint)ConstF(0)) & ((qcint)ConstF(1)) ) ));
 746             else
 747                 out = (ast_expression*)ast_binary_new(ctx,
 748                     (op->id == opid1('|') ? INSTR_BITOR : INSTR_BITAND),
 749                     exprs[0], exprs[1]);
 750             break;
 751         case opid1('^'):
 752             parseerror(parser, "TODO: bitxor");
 753             return false;
 754
 755         case opid2('<','<'):
 756         case opid2('>','>'):
 757         case opid3('<','<','='):
 758         case opid3('>','>','='):
 759             parseerror(parser, "TODO: shifts");
 760             return false;
 761
 762         case opid2('|','|'):
 763             generated_op += 1; /* INSTR_OR */
 764         case opid2('&','&'):
 765             generated_op += INSTR_AND;
 766             if (NotSameType(TYPE_FLOAT)) {
 767                 parseerror(parser, "invalid types used in expression: cannot perform logical operations between types %s and %s",
 768                            type_name[exprs[0]->expression.vtype],
 769                            type_name[exprs[1]->expression.vtype]);
 770                 parseerror(parser, "TODO: logical ops for arbitrary types using INSTR_NOT");
 771                 parseerror(parser, "TODO: optional early out");
 772                 return false;
 773             }
 774             if (opts_standard == COMPILER_GMQCC)
 775                 printf("TODO: early out logic\n");
 776             if (CanConstFold(exprs[0], exprs[1]))
 777                 out = (ast_expression*)parser_const_float(parser,
 778                     (generated_op == INSTR_OR ? (ConstF(0) || ConstF(1)) : (ConstF(0) && ConstF(1))));
 779             else
 780                 out = (ast_expression*)ast_binary_new(ctx, generated_op, exprs[0], exprs[1]);
 781             break;
 782
 783         case opid1('>'):
 784             generated_op += 1; /* INSTR_GT */
 785         case opid1('<'):
 786             generated_op += 1; /* INSTR_LT */
 787         case opid2('>', '='):
 788             generated_op += 1; /* INSTR_GE */
 789         case opid2('<', '='):
 790             generated_op += INSTR_LE;
 791             if (NotSameType(TYPE_FLOAT)) {
 792                 parseerror(parser, "invalid types used in expression: cannot perform comparison between types %s and %s",
 793                            type_name[exprs[0]->expression.vtype],
 794                            type_name[exprs[1]->expression.vtype]);
 795                 return false;
 796             }
 797             out = (ast_expression*)ast_binary_new(ctx, generated_op, exprs[0], exprs[1]);
 798             break;
 799         case opid2('!', '='):
 800             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
 801                 parseerror(parser, "invalid types used in expression: cannot perform comparison between types %s and %s",
 802                            type_name[exprs[0]->expression.vtype],
 803                            type_name[exprs[1]->expression.vtype]);
 804                 return false;
 805             }
 806             out = (ast_expression*)ast_binary_new(ctx, type_ne_instr[exprs[0]->expression.vtype], exprs[0], exprs[1]);
 807             break;
 808         case opid2('=', '='):
 809             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
 810                 parseerror(parser, "invalid types used in expression: cannot perform comparison between types %s and %s",
 811                            type_name[exprs[0]->expression.vtype],
 812                            type_name[exprs[1]->expression.vtype]);
 813                 return false;
 814             }
 815             out = (ast_expression*)ast_binary_new(ctx, type_eq_instr[exprs[0]->expression.vtype], exprs[0], exprs[1]);
 816             break;
 817
 818         case opid1('='):
 819             if (ast_istype(exprs[0], ast_entfield))
 820                 assignop = type_storep_instr[exprs[0]->expression.vtype];
 821             else
 822                 assignop = type_store_instr[exprs[0]->expression.vtype];
 823             out = (ast_expression*)ast_store_new(ctx, assignop, exprs[0], exprs[1]);
 824             break;
 825         case opid2('+','='):
 826         case opid2('-','='):
 827             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype ||
 828                 (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) )
 829             {
 830                 parseerror(parser, "invalid types used in expression: cannot add or subtract type %s and %s",
 831                            type_name[exprs[0]->expression.vtype],
 832                            type_name[exprs[1]->expression.vtype]);
 833                 return false;
 834             }
 835             if (ast_istype(exprs[0], ast_entfield))
 836                 assignop = type_storep_instr[exprs[0]->expression.vtype];
 837             else
 838                 assignop = type_store_instr[exprs[0]->expression.vtype];
 839             switch (exprs[0]->expression.vtype) {
 840                 case TYPE_FLOAT:
 841                     out = (ast_expression*)ast_binstore_new(ctx, assignop,
 842                                                             (op->id == opid2('+','=') ? INSTR_ADD_F : INSTR_SUB_F),
 843                                                             exprs[0], exprs[1]);
 844                     break;
 845                 case TYPE_VECTOR:
 846                     out = (ast_expression*)ast_binstore_new(ctx, assignop,
 847                                                             (op->id == opid2('+','=') ? INSTR_ADD_V : INSTR_SUB_V),
 848                                                             exprs[0], exprs[1]);
 849                     break;
 850                 default:
 851                     parseerror(parser, "invalid types used in expression: cannot add or subtract type %s and %s",
 852                                type_name[exprs[0]->expression.vtype],
 853                                type_name[exprs[1]->expression.vtype]);
 854                     return false;
 855             };
 856             break;
 857     }
 858 #undef NotSameType
 859
 860     if (!out) {
 861         parseerror(parser, "failed to apply operand %s", op->op);
 862         return false;
 863     }
 864
 865     DEBUGSHUNTDO(printf("applied %s\n", op->op));
 866     sy->out[sy->out_count++] = syexp(ctx, out);
 867     return true;
 868 }
 869
 870 static bool parser_close_call(parser_t *parser, shunt *sy)
 871 {
 872     /* was a function call */
 873     ast_expression *fun;
 874     ast_call       *call;
 875
 876     size_t          fid;
 877     size_t          paramcount;
 878
 879     sy->ops_count--;
 880     fid = sy->ops[sy->ops_count].off;
 881
 882     /* out[fid] is the function
 883      * everything above is parameters...
 884      * 0 params = nothing
 885      * 1 params = ast_expression
 886      * more = ast_block
 887      */
 888
 889     if (sy->out_count < 1 || sy->out_count <= fid) {
 890         parseerror(parser, "internal error: function call needs function and parameter list...");
 891         return false;
 892     }
 893
 894     fun = sy->out[fid].out;
 895
 896     call = ast_call_new(sy->ops[sy->ops_count].ctx, fun);
 897     if (!call) {
 898         parseerror(parser, "out of memory");
 899         return false;
 900     }
 901
 902     if (fid+1 == sy->out_count) {
 903         /* no arguments */
 904         paramcount = 0;
 905     } else if (fid+2 == sy->out_count) {
 906         ast_block *params;
 907         sy->out_count--;
 908         params = sy->out[sy->out_count].block;
 909         if (!params) {
 910             /* 1 param */
 911             paramcount = 1;
 912             if (!ast_call_params_add(call, sy->out[sy->out_count].out)) {
 913                 ast_delete(sy->out[sy->out_count].out);
 914                 parseerror(parser, "out of memory");
 915                 return false;
 916             }
 917         } else {
 918             paramcount = params->exprs_count;
 919             MEM_VECTOR_MOVE(params, exprs, call, params);
 920             ast_delete(params);
 921         }
 922     } else {
 923         parseerror(parser, "invalid function call");
 924         return false;
 925     }
 926
 927     /* overwrite fid, the function, with a call */
 928     sy->out[fid] = syexp(call->expression.node.context, (ast_expression*)call);
 929
 930     if (fun->expression.vtype != TYPE_FUNCTION) {
 931         parseerror(parser, "not a function (%s)", type_name[fun->expression.vtype]);
 932         return false;
 933     }
 934
 935     if (!fun->expression.next) {
 936         parseerror(parser, "could not determine function return type");
 937         return false;
 938     } else {
 939         if (fun->expression.params_count != paramcount) {
 940             ast_value *fval;
 941             fval = (ast_istype(fun, ast_value) ? ((ast_value*)fun) : NULL);
 942             if (opts_standard == COMPILER_GMQCC)
 943             {
 944                 if (fval)
 945                     parseerror(parser, "too few parameters for call to %s: expected %i, got %i",
 946                                fval->name, (int)fun->expression.params_count, paramcount);
 947                 else
 948                     parseerror(parser, "too few parameters for function call: expected %i, got %i",
 949                                (int)fun->expression.params_count, paramcount);
 950                 return false;
 951             }
 952             else
 953             {
 954                 if (fval)
 955                     return !parsewarning(parser, WARN_TOO_FEW_PARAMETERS,
 956                                          "too few parameters for call to %s: expected %i, got %i",
 957                                          fval->name, (int)fun->expression.params_count, paramcount);
 958                 else
 959                     return !parsewarning(parser, WARN_TOO_FEW_PARAMETERS,
 960                                          "too few parameters for function call: expected %i, got %i",
 961                                          (int)fun->expression.params_count, paramcount);
 962             }
 963         }
 964     }
 965
 966     return true;
 967 }
 968
 969 static bool parser_close_paren(parser_t *parser, shunt *sy, bool functions_only)
 970 {
 971     if (!sy->ops_count) {
 972         parseerror(parser, "unmatched closing paren");
 973         return false;
 974     }
 975     if (sy->ops[sy->ops_count-1].paren == 1) {
 976         parseerror(parser, "empty parenthesis expression");
 977         return false;
 978     }
 979     while (sy->ops_count) {
 980         if (sy->ops[sy->ops_count-1].paren == 'f') {
 981             if (!parser_close_call(parser, sy))
 982                 return false;
 983             break;
 984         }
 985         if (sy->ops[sy->ops_count-1].paren == 1) {
 986             sy->ops_count--;
 987             return !functions_only;
 988         }
 989         if (!parser_sy_pop(parser, sy))
 990             return false;
 991     }
 992     return true;
 993 }
 994
 995 static void parser_reclassify_token(parser_t *parser)
 996 {
 997     size_t i;
 998     for (i = 0; i < operator_count; ++i) {
 999         if (!strcmp(parser_tokval(parser), operators[i].op)) {
1000             parser->tok = TOKEN_OPERATOR;
1001             return;
1002         }
1003     }
1004 }
1005
1006 static ast_expression* parser_expression_leave(parser_t *parser, bool stopatcomma)
1007 {
1008     ast_expression *expr = NULL;
1009     shunt sy;
1010     bool wantop = false;
1011     bool gotmemberof = false;
1012
1013     /* count the parens because an if starts with one, so the
1014      * end of a condition is an unmatched closing paren
1015      */
1016     int parens = 0;
1017
1018     MEM_VECTOR_INIT(&sy, out);
1019     MEM_VECTOR_INIT(&sy, ops);
1020
1021     parser->lex->flags.noops = false;
1022
1023     parser_reclassify_token(parser);
1024
1025     while (true)
1026     {
1027         if (gotmemberof)
1028             gotmemberof = false;
1029         else
1030             parser->memberof = 0;
1031
1032         if (parser->tok == TOKEN_IDENT)
1033         {
1034             ast_expression *var;
1035             if (wantop) {
1036                 parseerror(parser, "expected operator or end of statement");
1037                 goto onerr;
1038             }
1039             wantop = true;
1040             /* variable */
1041             if (opts_standard == COMPILER_GMQCC)
1042             {
1043                 if (parser->memberof == TYPE_ENTITY) {
1044                     /* still get vars first since there could be a fieldpointer */
1045                     var = parser_find_var(parser, parser_tokval(parser));
1046                     if (!var)
1047                         var = parser_find_field(parser, parser_tokval(parser));
1048                 }
1049                 else if (parser->memberof == TYPE_VECTOR)
1050                 {
1051                     parseerror(parser, "TODO: implement effective vector member access");
1052                     goto onerr;
1053                 }
1054                 else if (parser->memberof) {
1055                     parseerror(parser, "namespace for member not found");
1056                     goto onerr;
1057                 }
1058                 else
1059                     var = parser_find_var(parser, parser_tokval(parser));
1060             } else {
1061                 var = parser_find_var(parser, parser_tokval(parser));
1062                 if (!var)
1063                     var = parser_find_field(parser, parser_tokval(parser));
1064             }
1065             if (!var) {
1066                 parseerror(parser, "unexpected ident: %s", parser_tokval(parser));
1067                 goto onerr;
1068             }
1069             if (!shunt_out_add(&sy, syexp(parser_ctx(parser), var))) {
1070                 parseerror(parser, "out of memory");
1071                 goto onerr;
1072             }
1073             DEBUGSHUNTDO(printf("push %s\n", parser_tokval(parser)));
1074         }
1075         else if (parser->tok == TOKEN_FLOATCONST) {
1076             ast_value *val;
1077             if (wantop) {
1078                 parseerror(parser, "expected operator or end of statement, got constant");
1079                 goto onerr;
1080             }
1081             wantop = true;
1082             val = parser_const_float(parser, (parser_token(parser)->constval.f));
1083             if (!val)
1084                 return false;
1085             if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
1086                 parseerror(parser, "out of memory");
1087                 goto onerr;
1088             }
1089             DEBUGSHUNTDO(printf("push %g\n", parser_token(parser)->constval.f));
1090         }
1091         else if (parser->tok == TOKEN_INTCONST) {
1092             ast_value *val;
1093             if (wantop) {
1094                 parseerror(parser, "expected operator or end of statement, got constant");
1095                 goto onerr;
1096             }
1097             wantop = true;
1098             val = parser_const_float(parser, (double)(parser_token(parser)->constval.i));
1099             if (!val)
1100                 return false;
1101             if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
1102                 parseerror(parser, "out of memory");
1103                 goto onerr;
1104             }
1105             DEBUGSHUNTDO(printf("push %i\n", parser_token(parser)->constval.i));
1106         }
1107         else if (parser->tok == TOKEN_STRINGCONST) {
1108             ast_value *val;
1109             if (wantop) {
1110                 parseerror(parser, "expected operator or end of statement, got constant");
1111                 goto onerr;
1112             }
1113             wantop = true;
1114             val = parser_const_string(parser, parser_tokval(parser));
1115             if (!val)
1116                 return false;
1117             if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
1118                 parseerror(parser, "out of memory");
1119                 goto onerr;
1120             }
1121             DEBUGSHUNTDO(printf("push string\n"));
1122         }
1123         else if (parser->tok == TOKEN_VECTORCONST) {
1124             ast_value *val;
1125             if (wantop) {
1126                 parseerror(parser, "expected operator or end of statement, got constant");
1127                 goto onerr;
1128             }
1129             wantop = true;
1130             val = parser_const_vector(parser, parser_token(parser)->constval.v);
1131             if (!val)
1132                 return false;
1133             if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
1134                 parseerror(parser, "out of memory");
1135                 goto onerr;
1136             }
1137             DEBUGSHUNTDO(printf("push '%g %g %g'\n",
1138                                 parser_token(parser)->constval.v.x,
1139                                 parser_token(parser)->constval.v.y,
1140                                 parser_token(parser)->constval.v.z));
1141         }
1142         else if (parser->tok == '(') {
1143             parseerror(parser, "internal error: '(' should be classified as operator");
1144             goto onerr;
1145         }
1146         else if (parser->tok == ')') {
1147             if (wantop) {
1148                 DEBUGSHUNTDO(printf("do[op] )\n"));
1149                 --parens;
1150                 if (parens < 0)
1151                     break;
1152                 /* we do expect an operator next */
1153                 /* closing an opening paren */
1154                 if (!parser_close_paren(parser, &sy, false))
1155                     goto onerr;
1156             } else {
1157                 DEBUGSHUNTDO(printf("do[nop] )\n"));
1158                 --parens;
1159                 if (parens < 0)
1160                     break;
1161                 /* allowed for function calls */
1162                 if (!parser_close_paren(parser, &sy, true))
1163                     goto onerr;
1164             }
1165             wantop = true;
1166         }
1167         else if (parser->tok != TOKEN_OPERATOR) {
1168             if (wantop) {
1169                 parseerror(parser, "expected operator or end of statement");
1170                 goto onerr;
1171             }
1172             break;
1173         }
1174         else
1175         {
1176             /* classify the operator */
1177             /* TODO: suffix operators */
1178             const oper_info *op;
1179             const oper_info *olast = NULL;
1180             size_t o;
1181             for (o = 0; o < operator_count; ++o) {
1182                 if ((!(operators[o].flags & OP_PREFIX) == wantop) &&
1183                     !(operators[o].flags & OP_SUFFIX) && /* remove this */
1184                     !strcmp(parser_tokval(parser), operators[o].op))
1185                 {
1186                     break;
1187                 }
1188             }
1189             if (o == operator_count) {
1190                 /* no operator found... must be the end of the statement */
1191                 break;
1192             }
1193             /* found an operator */
1194             op = &operators[o];
1195
1196             /* when declaring variables, a comma starts a new variable */
1197             if (op->id == opid1(',') && !parens && stopatcomma)
1198                 break;
1199
1200             if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
1201                 olast = &operators[sy.ops[sy.ops_count-1].etype-1];
1202
1203             while (olast && (
1204                     (op->prec < olast->prec) ||
1205                     (op->assoc == ASSOC_LEFT && op->prec <= olast->prec) ) )
1206             {
1207                 if (!parser_sy_pop(parser, &sy))
1208                     goto onerr;
1209                 if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
1210                     olast = &operators[sy.ops[sy.ops_count-1].etype-1];
1211                 else
1212                     olast = NULL;
1213             }
1214
1215             if (op->id == opid1('.') && opts_standard == COMPILER_GMQCC) {
1216                 /* for gmqcc standard: open up the namespace of the previous type */
1217                 ast_expression *prevex = sy.out[sy.out_count-1].out;
1218                 if (!prevex) {
1219                     parseerror(parser, "unexpected member operator");
1220                     goto onerr;
1221                 }
1222                 if (prevex->expression.vtype == TYPE_ENTITY)
1223                     parser->memberof = TYPE_ENTITY;
1224                 else if (prevex->expression.vtype == TYPE_VECTOR)
1225                     parser->memberof = TYPE_VECTOR;
1226                 else {
1227                     parseerror(parser, "type error: type has no members");
1228                     goto onerr;
1229                 }
1230                 gotmemberof = true;
1231             }
1232
1233             if (op->id == opid1('(')) {
1234                 if (wantop) {
1235                     DEBUGSHUNTDO(printf("push (\n"));
1236                     ++parens;
1237                     /* we expected an operator, this is the function-call operator */
1238                     if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 'f', sy.out_count-1))) {
1239                         parseerror(parser, "out of memory");
1240                         goto onerr;
1241                     }
1242                 } else {
1243                     ++parens;
1244                     if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 1, 0))) {
1245                         parseerror(parser, "out of memory");
1246                         goto onerr;
1247                     }
1248                     DEBUGSHUNTDO(printf("push (\n"));
1249                 }
1250                 wantop = false;
1251             } else {
1252                 DEBUGSHUNTDO(printf("push operator %s\n", op->op));
1253                 if (!shunt_ops_add(&sy, syop(parser_ctx(parser), op)))
1254                     goto onerr;
1255                 wantop = false;
1256             }
1257         }
1258         if (!parser_next(parser)) {
1259             goto onerr;
1260         }
1261         if (parser->tok == ';') {
1262             break;
1263         }
1264     }
1265
1266     while (sy.ops_count) {
1267         if (!parser_sy_pop(parser, &sy))
1268             goto onerr;
1269     }
1270
1271     parser->lex->flags.noops = true;
1272     if (!sy.out_count) {
1273         parseerror(parser, "empty expression");
1274         expr = NULL;
1275     } else
1276         expr = sy.out[0].out;
1277     MEM_VECTOR_CLEAR(&sy, out);
1278     MEM_VECTOR_CLEAR(&sy, ops);
1279     DEBUGSHUNTDO(printf("shunt done\n"));
1280     return expr;
1281
1282 onerr:
1283     parser->lex->flags.noops = true;
1284     MEM_VECTOR_CLEAR(&sy, out);
1285     MEM_VECTOR_CLEAR(&sy, ops);
1286     return NULL;
1287 }
1288
1289 static ast_expression* parser_expression(parser_t *parser, bool stopatcomma)
1290 {
1291     ast_expression *e = parser_expression_leave(parser, stopatcomma);
1292     if (!e)
1293         return NULL;
1294     if (!parser_next(parser)) {
1295         ast_delete(e);
1296         return NULL;
1297     }
1298     return e;
1299 }
1300
1301 static bool parser_parse_if(parser_t *parser, ast_block *block, ast_expression **out)
1302 {
1303     ast_ifthen *ifthen;
1304     ast_expression *cond, *ontrue, *onfalse = NULL;
1305
1306     lex_ctx ctx = parser_ctx(parser);
1307
1308     /* skip the 'if' and check for opening paren */
1309     if (!parser_next(parser) || parser->tok != '(') {
1310         parseerror(parser, "expected 'if' condition in parenthesis");
1311         return false;
1312     }
1313     /* parse into the expression */
1314     if (!parser_next(parser)) {
1315         parseerror(parser, "expected 'if' condition after opening paren");
1316         return false;
1317     }
1318     /* parse the condition */
1319     cond = parser_expression_leave(parser, false);
1320     if (!cond)
1321         return false;
1322     /* closing paren */
1323     if (parser->tok != ')') {
1324         parseerror(parser, "expected closing paren after 'if' condition");
1325         ast_delete(cond);
1326         return false;
1327     }
1328     /* parse into the 'then' branch */
1329     if (!parser_next(parser)) {
1330         parseerror(parser, "expected statement for on-true branch of 'if'");
1331         ast_delete(cond);
1332         return false;
1333     }
1334     ontrue = parser_parse_statement_or_block(parser);
1335     if (!ontrue) {
1336         ast_delete(cond);
1337         return false;
1338     }
1339     /* check for an else */
1340     if (!strcmp(parser_tokval(parser), "else")) {
1341         /* parse into the 'else' branch */
1342         if (!parser_next(parser)) {
1343             parseerror(parser, "expected on-false branch after 'else'");
1344             ast_delete(ontrue);
1345             ast_delete(cond);
1346             return false;
1347         }
1348         onfalse = parser_parse_statement_or_block(parser);
1349         if (!onfalse) {
1350             ast_delete(ontrue);
1351             ast_delete(cond);
1352             return false;
1353         }
1354     }
1355
1356     ifthen = ast_ifthen_new(ctx, cond, ontrue, onfalse);
1357     *out = (ast_expression*)ifthen;
1358     return true;
1359 }
1360
1361 static bool parser_parse_while(parser_t *parser, ast_block *block, ast_expression **out)
1362 {
1363     ast_loop *aloop;
1364     ast_expression *cond, *ontrue;
1365
1366     lex_ctx ctx = parser_ctx(parser);
1367
1368     /* skip the 'while' and check for opening paren */
1369     if (!parser_next(parser) || parser->tok != '(') {
1370         parseerror(parser, "expected 'while' condition in parenthesis");
1371         return false;
1372     }
1373     /* parse into the expression */
1374     if (!parser_next(parser)) {
1375         parseerror(parser, "expected 'while' condition after opening paren");
1376         return false;
1377     }
1378     /* parse the condition */
1379     cond = parser_expression_leave(parser, false);
1380     if (!cond)
1381         return false;
1382     /* closing paren */
1383     if (parser->tok != ')') {
1384         parseerror(parser, "expected closing paren after 'while' condition");
1385         ast_delete(cond);
1386         return false;
1387     }
1388     /* parse into the 'then' branch */
1389     if (!parser_next(parser)) {
1390         parseerror(parser, "expected while-loop body");
1391         ast_delete(cond);
1392         return false;
1393     }
1394     ontrue = parser_parse_statement_or_block(parser);
1395     if (!ontrue) {
1396         ast_delete(cond);
1397         return false;
1398     }
1399
1400     aloop = ast_loop_new(ctx, NULL, cond, NULL, NULL, ontrue);
1401     *out = (ast_expression*)aloop;
1402     return true;
1403 }
1404
1405 static bool parser_parse_dowhile(parser_t *parser, ast_block *block, ast_expression **out)
1406 {
1407     ast_loop *aloop;
1408     ast_expression *cond, *ontrue;
1409
1410     lex_ctx ctx = parser_ctx(parser);
1411
1412     /* skip the 'do' and get the body */
1413     if (!parser_next(parser)) {
1414         parseerror(parser, "expected loop body");
1415         return false;
1416     }
1417     ontrue = parser_parse_statement_or_block(parser);
1418     if (!ontrue)
1419         return false;
1420
1421     /* expect the "while" */
1422     if (parser->tok != TOKEN_KEYWORD ||
1423         strcmp(parser_tokval(parser), "while"))
1424     {
1425         parseerror(parser, "expected 'while' and condition");
1426         ast_delete(ontrue);
1427         return false;
1428     }
1429
1430     /* skip the 'while' and check for opening paren */
1431     if (!parser_next(parser) || parser->tok != '(') {
1432         parseerror(parser, "expected 'while' condition in parenthesis");
1433         ast_delete(ontrue);
1434         return false;
1435     }
1436     /* parse into the expression */
1437     if (!parser_next(parser)) {
1438         parseerror(parser, "expected 'while' condition after opening paren");
1439         ast_delete(ontrue);
1440         return false;
1441     }
1442     /* parse the condition */
1443     cond = parser_expression_leave(parser, false);
1444     if (!cond)
1445         return false;
1446     /* closing paren */
1447     if (parser->tok != ')') {
1448         parseerror(parser, "expected closing paren after 'while' condition");
1449         ast_delete(ontrue);
1450         ast_delete(cond);
1451         return false;
1452     }
1453     /* parse on */
1454     if (!parser_next(parser) || parser->tok != ';') {
1455         parseerror(parser, "expected semicolon after condition");
1456         ast_delete(ontrue);
1457         ast_delete(cond);
1458         return false;
1459     }
1460
1461     if (!parser_next(parser)) {
1462         parseerror(parser, "parse error");
1463         ast_delete(ontrue);
1464         ast_delete(cond);
1465         return false;
1466     }
1467
1468     aloop = ast_loop_new(ctx, NULL, NULL, cond, NULL, ontrue);
1469     *out = (ast_expression*)aloop;
1470     return true;
1471 }
1472
1473 static bool parser_parse_for(parser_t *parser, ast_block *block, ast_expression **out)
1474 {
1475     ast_loop *aloop;
1476     ast_expression *initexpr, *cond, *increment, *ontrue;
1477     size_t oldblocklocal;
1478
1479     lex_ctx ctx = parser_ctx(parser);
1480
1481     oldblocklocal = parser->blocklocal;
1482     parser->blocklocal = parser->locals_count;
1483
1484     initexpr  = NULL;
1485     cond      = NULL;
1486     increment = NULL;
1487     ontrue    = NULL;
1488
1489     /* skip the 'while' and check for opening paren */
1490     if (!parser_next(parser) || parser->tok != '(') {
1491         parseerror(parser, "expected 'for' expressions in parenthesis");
1492         goto onerr;
1493     }
1494     /* parse into the expression */
1495     if (!parser_next(parser)) {
1496         parseerror(parser, "expected 'for' initializer after opening paren");
1497         goto onerr;
1498     }
1499
1500     if (parser->tok == TOKEN_TYPENAME) {
1501         if (opts_standard != COMPILER_GMQCC) {
1502             if (parsewarning(parser, WARN_EXTENSIONS,
1503                              "current standard does not allow variable declarations in for-loop initializers"))
1504                 goto onerr;
1505         }
1506
1507         parseerror(parser, "TODO: assignment of new variables to be non-const");
1508         goto onerr;
1509         if (!parser_variable(parser, block))
1510             goto onerr;
1511     }
1512     else if (parser->tok != ';')
1513     {
1514         initexpr = parser_expression_leave(parser, false);
1515         if (!initexpr)
1516             goto onerr;
1517     }
1518
1519     /* move on to condition */
1520     if (parser->tok != ';') {
1521         parseerror(parser, "expected semicolon after for-loop initializer");
1522         goto onerr;
1523     }
1524     if (!parser_next(parser)) {
1525         parseerror(parser, "expected for-loop condition");
1526         goto onerr;
1527     }
1528
1529     /* parse the condition */
1530     if (parser->tok != ';') {
1531         cond = parser_expression_leave(parser, false);
1532         if (!cond)
1533             goto onerr;
1534     }
1535
1536     /* move on to incrementor */
1537     if (parser->tok != ';') {
1538         parseerror(parser, "expected semicolon after for-loop initializer");
1539         goto onerr;
1540     }
1541     if (!parser_next(parser)) {
1542         parseerror(parser, "expected for-loop condition");
1543         goto onerr;
1544     }
1545
1546     /* parse the incrementor */
1547     if (parser->tok != ')') {
1548         increment = parser_expression_leave(parser, false);
1549         if (!increment)
1550             goto onerr;
1551     }
1552
1553     /* closing paren */
1554     if (parser->tok != ')') {
1555         parseerror(parser, "expected closing paren after 'for-loop' incrementor");
1556         goto onerr;
1557     }
1558     /* parse into the 'then' branch */
1559     if (!parser_next(parser)) {
1560         parseerror(parser, "expected for-loop body");
1561         goto onerr;
1562     }
1563     ontrue = parser_parse_statement_or_block(parser);
1564     if (!ontrue) {
1565         goto onerr;
1566     }
1567
1568     aloop = ast_loop_new(ctx, initexpr, cond, NULL, increment, ontrue);
1569     *out = (ast_expression*)aloop;
1570
1571     while (parser->locals_count > parser->blocklocal)
1572         parser_pop_local(parser);
1573     parser->blocklocal = oldblocklocal;
1574     return true;
1575 onerr:
1576     if (initexpr)  ast_delete(initexpr);
1577     if (cond)      ast_delete(cond);
1578     if (increment) ast_delete(increment);
1579     while (parser->locals_count > parser->blocklocal)
1580         parser_pop_local(parser);
1581     parser->blocklocal = oldblocklocal;
1582     return false;
1583 }
1584
1585 static bool parser_parse_statement(parser_t *parser, ast_block *block, ast_expression **out)
1586 {
1587     if (parser->tok == TOKEN_TYPENAME)
1588     {
1589         /* local variable */
1590         if (!block) {
1591             parseerror(parser, "cannot declare a variable from here");
1592             return false;
1593         }
1594         if (opts_standard == COMPILER_QCC) {
1595             if (parsewarning(parser, WARN_EXTENSIONS, "missing 'local' keyword when declaring a local variable"))
1596                 return false;
1597         }
1598         if (!parser_variable(parser, block))
1599             return false;
1600         *out = NULL;
1601         return true;
1602     }
1603     else if (parser->tok == TOKEN_KEYWORD)
1604     {
1605         if (!strcmp(parser_tokval(parser), "local"))
1606         {
1607             if (!block) {
1608                 parseerror(parser, "cannot declare a local variable here");
1609                 return false;
1610             }
1611             if (!parser_next(parser)) {
1612                 parseerror(parser, "expected variable declaration");
1613                 return false;
1614             }
1615             if (!parser_variable(parser, block))
1616                 return false;
1617             *out = NULL;
1618             return true;
1619         }
1620         else if (!strcmp(parser_tokval(parser), "return"))
1621         {
1622             ast_expression *exp = NULL;
1623             ast_return     *ret = NULL;
1624             ast_value      *expected = parser->function->vtype;
1625
1626             if (!parser_next(parser)) {
1627                 parseerror(parser, "expected return expression");
1628                 return false;
1629             }
1630
1631             if (parser->tok != ';') {
1632                 exp = parser_expression(parser, false);
1633                 if (!exp)
1634                     return false;
1635
1636                 if (exp->expression.vtype != expected->expression.next->expression.vtype) {
1637                     parseerror(parser, "return with invalid expression");
1638                 }
1639
1640                 ret = ast_return_new(exp->expression.node.context, exp);
1641                 if (!ret) {
1642                     ast_delete(exp);
1643                     return false;
1644                 }
1645             } else {
1646                 if (!parser_next(parser))
1647                     parseerror(parser, "parse error");
1648                 if (expected->expression.next->expression.vtype != TYPE_VOID) {
1649                     if (opts_standard != COMPILER_GMQCC)
1650                         (void)!parsewarning(parser, WARN_MISSING_RETURN_VALUES, "return without value");
1651                     else
1652                         parseerror(parser, "return without value");
1653                 }
1654                 ret = ast_return_new(parser_ctx(parser), NULL);
1655             }
1656             *out = (ast_expression*)ret;
1657             return true;
1658         }
1659         else if (!strcmp(parser_tokval(parser), "if"))
1660         {
1661             return parser_parse_if(parser, block, out);
1662         }
1663         else if (!strcmp(parser_tokval(parser), "while"))
1664         {
1665             return parser_parse_while(parser, block, out);
1666         }
1667         else if (!strcmp(parser_tokval(parser), "do"))
1668         {
1669             return parser_parse_dowhile(parser, block, out);
1670         }
1671         else if (!strcmp(parser_tokval(parser), "for"))
1672         {
1673             if (opts_standard == COMPILER_QCC) {
1674                 if (parsewarning(parser, WARN_EXTENSIONS, "for loops are not recognized in the original Quake C standard, to enable try an alternate standard --std=?"))
1675                     return false;
1676             }
1677             return parser_parse_for(parser, block, out);
1678         }
1679         parseerror(parser, "Unexpected keyword");
1680         return false;
1681     }
1682     else if (parser->tok == '{')
1683     {
1684         ast_block *inner;
1685         inner = parser_parse_block(parser);
1686         if (!inner)
1687             return false;
1688         *out = (ast_expression*)inner;
1689         return true;
1690     }
1691     else
1692     {
1693         ast_expression *exp = parser_expression(parser, false);
1694         if (!exp)
1695             return false;
1696         *out = exp;
1697         return true;
1698     }
1699 }
1700
1701 static void parser_pop_local(parser_t *parser)
1702 {
1703     parser->locals_count--;
1704     mem_d(parser->locals[parser->locals_count].name);
1705 }
1706
1707 static ast_block* parser_parse_block(parser_t *parser)
1708 {
1709     size_t oldblocklocal;
1710     ast_block *block = NULL;
1711
1712     oldblocklocal = parser->blocklocal;
1713     parser->blocklocal = parser->locals_count;
1714
1715     if (!parser_next(parser)) { /* skip the '{' */
1716         parseerror(parser, "expected function body");
1717         goto cleanup;
1718     }
1719
1720     block = ast_block_new(parser_ctx(parser));
1721
1722     while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
1723     {
1724         ast_expression *expr;
1725         if (parser->tok == '}')
1726             break;
1727
1728         if (!parser_parse_statement(parser, block, &expr)) {
1729             parseerror(parser, "parse error");
1730             ast_block_delete(block);
1731             block = NULL;
1732             goto cleanup;
1733         }
1734         if (!expr)
1735             continue;
1736         if (!ast_block_exprs_add(block, expr)) {
1737             ast_delete(expr);
1738             ast_block_delete(block);
1739             block = NULL;
1740             goto cleanup;
1741         }
1742     }
1743
1744     if (parser->tok != '}') {
1745         ast_block_delete(block);
1746         block = NULL;
1747     } else {
1748         (void)parser_next(parser);
1749     }
1750
1751 cleanup:
1752     while (parser->locals_count > parser->blocklocal)
1753         parser_pop_local(parser);
1754     parser->blocklocal = oldblocklocal;
1755     /* unroll the local vector */
1756     return block;
1757 }
1758
1759 static ast_expression* parser_parse_statement_or_block(parser_t *parser)
1760 {
1761     ast_expression *expr = NULL;
1762     if (parser->tok == '{')
1763         return (ast_expression*)parser_parse_block(parser);
1764     if (!parser_parse_statement(parser, NULL, &expr))
1765         return NULL;
1766     return expr;
1767 }
1768
1769 static bool parser_variable(parser_t *parser, ast_block *localblock)
1770 {
1771     bool          isfunc = false;
1772     ast_function *func = NULL;
1773     lex_ctx       ctx;
1774     ast_value    *var;
1775     varentry_t    varent;
1776     ast_expression *olddecl;
1777
1778     bool hadproto;
1779     bool isparam;
1780
1781     int basetype = parser_token(parser)->constval.t;
1782
1783     while (true)
1784     {
1785         hadproto = false;
1786
1787         if (!parser_next(parser)) { /* skip basetype or comma */
1788             parseerror(parser, "expected variable declaration");
1789             return false;
1790         }
1791
1792         olddecl = NULL;
1793         isfunc  = false;
1794         func    = NULL;
1795         isparam = false;
1796         ctx = parser_ctx(parser);
1797         var = parser_parse_type(parser, basetype, &isfunc);
1798
1799         if (!var)
1800             return false;
1801
1802         if (parser->tok != TOKEN_IDENT) {
1803             parseerror(parser, "expected variable name\n");
1804             return false;
1805         }
1806
1807         if (!isfunc) {
1808             if (!localblock && (olddecl = parser_find_global(parser, parser_tokval(parser)))) {
1809                 ast_value_delete(var);
1810                 parseerror(parser, "global `%s` already declared here: %s:%i",
1811                            parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1812                 return false;
1813             }
1814
1815             if (localblock) {
1816                 olddecl = parser_find_local(parser, parser_tokval(parser), parser->blocklocal, &isparam);
1817                 if (opts_standard == COMPILER_GMQCC)
1818                 {
1819                     if (olddecl)
1820                     {
1821                         if (!isparam) {
1822                             ast_value_delete(var);
1823                             parseerror(parser, "local `%s` already declared here: %s:%i",
1824                                        parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1825                             return false;
1826                         }
1827                     }
1828
1829                     if( (!isparam && olddecl) || (olddecl = parser_find_local(parser, parser_tokval(parser), 0, &isparam)) )
1830                     {
1831                         if (parsewarning(parser, WARN_LOCAL_SHADOWS,
1832                                          "local `%s` is shadowing a parameter", parser_tokval(parser)))
1833                         {
1834                             ast_value_delete(var);
1835                             parseerror(parser, "local `%s` already declared here: %s:%i",
1836                                        parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1837                             return false;
1838                         }
1839                     }
1840                 }
1841                 else
1842                 {
1843                     if (olddecl)
1844                     {
1845                         ast_value_delete(var);
1846                         if (isparam &&
1847                             parsewarning(parser, WARN_LOCAL_SHADOWS,
1848                                          "a parameter is shadowing local `%s`", parser_tokval(parser)))
1849                         {
1850                             return false;
1851                         }
1852                         else if (!isparam)
1853                         {
1854                             parseerror(parser, "local `%s` already declared here: %s:%i",
1855                                        parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1856                             return false;
1857                         }
1858                         goto nextvar;
1859                     }
1860                 }
1861             }
1862         }
1863
1864         if (!ast_value_set_name(var, parser_tokval(parser))) {
1865             parseerror(parser, "failed to set variable name\n");
1866             ast_value_delete(var);
1867             return false;
1868         }
1869
1870         if (isfunc) {
1871             /* a function was defined */
1872             ast_value *fval;
1873             ast_value *proto = NULL;
1874             bool dummy;
1875
1876             if (!localblock)
1877                 olddecl = parser_find_global(parser, parser_tokval(parser));
1878             else
1879                 olddecl = parser_find_local(parser, parser_tokval(parser), parser->blocklocal, &dummy);
1880
1881             if (olddecl) {
1882                 /* we had a prototype */
1883                 if (!ast_istype(olddecl, ast_value)) {
1884                     /* theoretically not possible you think?
1885                      * well:
1886                      * vector v;
1887                      * void() v_x = {}
1888                      * got it?
1889                      */
1890                     parseerror(parser, "cannot declare a function with the same name as a vector's member: %s",
1891                                parser_tokval(parser));
1892                     ast_value_delete(var);
1893                     return false;
1894                 }
1895
1896                 proto = (ast_value*)olddecl;
1897             }
1898
1899             /* turn var into a value of TYPE_FUNCTION, with the old var
1900              * as return type
1901              */
1902             fval = ast_value_new(ctx, var->name, TYPE_FUNCTION);
1903             func = ast_function_new(ctx, var->name, fval);
1904             if (!fval || !func) {
1905                 ast_value_delete(var);
1906                 if (fval) ast_value_delete(fval);
1907                 if (func) ast_function_delete(func);
1908                 return false;
1909             }
1910
1911             fval->expression.next = (ast_expression*)var;
1912             MEM_VECTOR_MOVE(&var->expression, params, &fval->expression, params);
1913
1914             /* we compare the type late here, but it's easier than
1915              * messing with the parameter-vector etc. earlier
1916              */
1917             if (proto) {
1918                 size_t param;
1919                 if (!ast_compare_type((ast_expression*)proto, (ast_expression*)fval)) {
1920                     parseerror(parser, "conflicting types for `%s`, previous declaration was here: %s:%i",
1921                                proto->name,
1922                                ast_ctx(proto).file, ast_ctx(proto).line);
1923                     ast_function_delete(func);
1924                     ast_value_delete(fval);
1925                     return false;
1926                 }
1927                 /* copy over the parameter names */
1928                 for (param = 0; param < fval->expression.params_count; ++param)
1929                     ast_value_set_name(proto->expression.params[param], fval->expression.params[param]->name);
1930
1931                 /* now ditch the rest of the new data */
1932                 ast_function_delete(func);
1933                 ast_value_delete(fval);
1934                 fval = proto;
1935                 func = proto->constval.vfunc;
1936                 hadproto = true;
1937             }
1938             else
1939             {
1940                 if (!parser_t_functions_add(parser, func)) {
1941                     ast_function_delete(func);
1942                     ast_value_delete(fval);
1943                     return false;
1944                 }
1945             }
1946
1947             var = fval;
1948         }
1949
1950         if (!hadproto) {
1951             varent.name = util_strdup(var->name);
1952             varent.var = (ast_expression*)var;
1953             if (var->expression.vtype == TYPE_VECTOR)
1954             {
1955                 size_t len = strlen(varent.name);
1956                 varentry_t vx, vy, vz;
1957                 vx.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 0);
1958                 vy.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 1);
1959                 vz.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 2);
1960                 vx.name = (char*)mem_a(len+3);
1961                 vy.name = (char*)mem_a(len+3);
1962                 vz.name = (char*)mem_a(len+3);
1963                 memcpy(vx.name, varent.name, len);
1964                 memcpy(vy.name, varent.name, len);
1965                 memcpy(vz.name, varent.name, len);
1966                 vx.name[len] = vy.name[len] = vz.name[len] = '_';
1967                 vx.name[len+1] = 'x';
1968                 vy.name[len+1] = 'y';
1969                 vz.name[len+1] = 'z';
1970                 vx.name[len+2] = vy.name[len+2] = vz.name[len+2] = 0;
1971
1972                 if (!localblock) {
1973                     (void)!parser_t_globals_add(parser, varent);
1974                     (void)!parser_t_globals_add(parser, vx);
1975                     (void)!parser_t_globals_add(parser, vy);
1976                     (void)!parser_t_globals_add(parser, vz);
1977                 } else {
1978                     (void)!parser_t_locals_add(parser, varent);
1979                     (void)!parser_t_locals_add(parser, vx);
1980                     (void)!parser_t_locals_add(parser, vy);
1981                     (void)!parser_t_locals_add(parser, vz);
1982                     if (!ast_block_locals_add(localblock, var) ||
1983                         !ast_block_collect(localblock, vx.var) ||
1984                         !ast_block_collect(localblock, vy.var) ||
1985                         !ast_block_collect(localblock, vz.var))
1986                     {
1987                         parser_pop_local(parser);
1988                         parser_pop_local(parser);
1989                         parser_pop_local(parser);
1990                         parser_pop_local(parser);
1991                         ast_value_delete(var);
1992                         return false;
1993                     }
1994                 }
1995             }
1996             else
1997             {
1998                 if ( (!localblock && !parser_t_globals_add(parser, varent)) ||
1999                      ( localblock && !parser_t_locals_add(parser, varent)) )
2000                 {
2001                     ast_value_delete(var);
2002                     return false;
2003                 }
2004                 if (localblock && !ast_block_locals_add(localblock, var))
2005                 {
2006                     parser_pop_local(parser);
2007                     ast_value_delete(var);
2008                     return false;
2009                 }
2010             }
2011         }
2012
2013 nextvar:
2014         if (!parser_next(parser)) {
2015             ast_value_delete(var);
2016             return false;
2017         }
2018
2019         if (parser->tok == ';') {
2020             if (!parser_next(parser))
2021                 return parser->tok == TOKEN_EOF;
2022             return true;
2023         }
2024
2025         if (parser->tok == ',') {
2026             /* another var */
2027             continue;
2028         }
2029
2030         if (parser->tok != '=') {
2031             parseerror(parser, "expected '=' or ';'");
2032             return false;
2033         }
2034
2035         if (!parser_next(parser))
2036             return false;
2037
2038         if (parser->tok == '#') {
2039             if (localblock) {
2040                 parseerror(parser, "cannot declare builtins within functions");
2041                 return false;
2042             }
2043             if (!isfunc || !func) {
2044                 parseerror(parser, "unexpected builtin number, '%s' is not a function", var->name);
2045                 return false;
2046             }
2047             if (!parser_next(parser)) {
2048                 parseerror(parser, "expected builtin number");
2049                 return false;
2050             }
2051             if (parser->tok != TOKEN_INTCONST) {
2052                 parseerror(parser, "builtin number must be an integer constant");
2053                 return false;
2054             }
2055             if (parser_token(parser)->constval.i <= 0) {
2056                 parseerror(parser, "builtin number must be positive integer greater than zero");
2057                 return false;
2058             }
2059
2060             func->builtin = -parser_token(parser)->constval.i;
2061
2062             if (!parser_next(parser))
2063                 return false;
2064         } else if (parser->tok == '{') {
2065             /* function body */
2066             ast_block *block;
2067             ast_function *old = parser->function;
2068
2069             if (localblock) {
2070                 parseerror(parser, "cannot declare functions within functions");
2071                 return false;
2072             }
2073
2074             parser->function = func;
2075             block = parser_parse_block(parser);
2076             parser->function = old;
2077
2078             if (!block)
2079                 return false;
2080
2081             if (!ast_function_blocks_add(func, block)) {
2082                 ast_block_delete(block);
2083                 return false;
2084             }
2085
2086             if (parser->tok == ';')
2087                 return parser_next(parser) || parser->tok == TOKEN_EOF;
2088             else if (opts_standard == COMPILER_QCC)
2089                 parseerror(parser, "missing semicolon after function body (mandatory with -std=qcc)");
2090             return true;
2091         } else {
2092             ast_expression *cexp;
2093             ast_value      *cval;
2094
2095             cexp = parser_expression_leave(parser, true);
2096             cval = (ast_value*)cexp;
2097             if (!ast_istype(cval, ast_value) || !cval->isconst)
2098                 parseerror(parser, "cannot initialize a global constant variable with a non-constant expression");
2099             else
2100             {
2101                 var->isconst = true;
2102                 memcpy(&var->constval, &cval->constval, sizeof(var->constval));
2103                 memset(&cval->constval, 0, sizeof(cval->constval));
2104                 ast_unref(cval);
2105             }
2106         }
2107
2108         if (parser->tok == ',') {
2109             /* another */
2110             continue;
2111         }
2112
2113         if (parser->tok != ';') {
2114             parseerror(parser, "missing semicolon");
2115             return false;
2116         }
2117
2118         (void)parser_next(parser);
2119
2120         return true;
2121     }
2122 }
2123
2124 static bool parser_do(parser_t *parser)
2125 {
2126     if (parser->tok == TOKEN_TYPENAME)
2127     {
2128         return parser_variable(parser, NULL);
2129     }
2130     else if (parser->tok == TOKEN_KEYWORD)
2131     {
2132         /* handle 'var' and 'const' */
2133         return false;
2134     }
2135     else if (parser->tok == '.')
2136     {
2137         ast_value *var;
2138         ast_value *typevar;
2139         ast_value *fld;
2140         ast_expression *oldex;
2141         bool       isfunc = false;
2142         int        basetype;
2143         lex_ctx    ctx = parser_ctx(parser);
2144         varentry_t varent;
2145
2146         /* entity-member declaration */
2147         if (!parser_next(parser) || parser->tok != TOKEN_TYPENAME) {
2148             parseerror(parser, "expected member variable definition");
2149             return false;
2150         }
2151
2152         /* remember the base/return type */
2153         basetype = parser_token(parser)->constval.t;
2154
2155         /* parse into the declaration */
2156         if (!parser_next(parser)) {
2157             parseerror(parser, "expected field def");
2158             return false;
2159         }
2160
2161         /* parse the field type fully */
2162         typevar = var = parser_parse_type(parser, basetype, &isfunc);
2163         if (!var)
2164             return false;
2165
2166         while (true) {
2167             var = ast_value_copy(typevar);
2168             /* now the field name */
2169             if (parser->tok != TOKEN_IDENT) {
2170                 parseerror(parser, "expected field name");
2171                 ast_delete(var);
2172                 return false;
2173             }
2174
2175             /* check for an existing field
2176              * in original qc we also have to check for an existing
2177              * global named like the field
2178              */
2179             if (opts_standard == COMPILER_QCC) {
2180                 if (parser_find_global(parser, parser_tokval(parser))) {
2181                     parseerror(parser, "cannot declare a field and a global of the same name with -std=qcc");
2182                     ast_delete(var);
2183                     return false;
2184                 }
2185             }
2186
2187             if (isfunc) {
2188                 ast_value *fval;
2189                 fval = ast_value_new(ctx, var->name, TYPE_FUNCTION);
2190                 if (!fval) {
2191                     ast_value_delete(var);
2192                     return false;
2193                 }
2194                 fval->expression.next = (ast_expression*)var;
2195                 MEM_VECTOR_MOVE(&var->expression, params, &fval->expression, params);
2196                 var = fval;
2197             }
2198
2199             /* turn it into a field */
2200             fld = ast_value_new(ctx, parser_tokval(parser), TYPE_FIELD);
2201             fld->expression.next = (ast_expression*)var;
2202
2203             if ( (oldex = parser_find_field(parser, parser_tokval(parser)))) {
2204                 if (ast_istype(oldex, ast_member)) {
2205                     parseerror(parser, "cannot declare a field with the same name as a vector component, component %s has been declared here: %s:%i",
2206                                parser_tokval(parser), ast_ctx(oldex).file, (int)ast_ctx(oldex).line);
2207                     ast_delete(fld);
2208                     return false;
2209                 }
2210                 if (!ast_istype(oldex, ast_value)) {
2211                     /* not possible / sanity check */
2212                     parseerror(parser, "internal error: %s is not an ast_value", parser_tokval(parser));
2213                     ast_delete(fld);
2214                     return false;
2215                 }
2216
2217                 if (!ast_compare_type(oldex, (ast_expression*)fld)) {
2218                     parseerror(parser, "field %s has previously been declared with a different type here: %s:%i",
2219                                parser_tokval(parser), ast_ctx(oldex).file, (int)ast_ctx(oldex).line);
2220                     ast_delete(fld);
2221                     return false;
2222                 } else {
2223                     if (parsewarning(parser, WARN_FIELD_REDECLARED, "field %s has already been declared here: %s:%i",
2224                                      parser_tokval(parser), ast_ctx(oldex).file, (int)ast_ctx(oldex).line))
2225                     {
2226                         ast_delete(fld);
2227                         return false;
2228                     }
2229                 }
2230
2231                 ast_delete(fld);
2232                 goto nextfield;
2233             }
2234
2235             varent.var = (ast_expression*)fld;
2236             varent.name = util_strdup(fld->name);
2237             (void)!parser_t_fields_add(parser, varent);
2238
2239             if (var->expression.vtype == TYPE_VECTOR)
2240             {
2241                 /* create _x, _y and _z fields as well */
2242                 size_t len;
2243                 varentry_t vx, vy, vz;
2244
2245                 len = strlen(varent.name);
2246                 vx.var = (ast_expression*)ast_member_new(ast_ctx(fld), (ast_expression*)fld, 0);
2247                 vy.var = (ast_expression*)ast_member_new(ast_ctx(fld), (ast_expression*)fld, 1);
2248                 vz.var = (ast_expression*)ast_member_new(ast_ctx(fld), (ast_expression*)fld, 2);
2249                 vx.name = (char*)mem_a(len+3);
2250                 vy.name = (char*)mem_a(len+3);
2251                 vz.name = (char*)mem_a(len+3);
2252                 memcpy(vx.name, varent.name, len);
2253                 memcpy(vy.name, varent.name, len);
2254                 memcpy(vz.name, varent.name, len);
2255                 vx.name[len] = vy.name[len] = vz.name[len] = '_';
2256                 vx.name[len+1] = 'x';
2257                 vy.name[len+1] = 'y';
2258                 vz.name[len+1] = 'z';
2259                 vx.name[len+2] = vy.name[len+2] = vz.name[len+2] = 0;
2260                 (void)!parser_t_fields_add(parser, vx);
2261                 (void)!parser_t_fields_add(parser, vy);
2262                 (void)!parser_t_fields_add(parser, vz);
2263             }
2264
2265 nextfield:
2266             if (!parser_next(parser)) {
2267                 parseerror(parser, "expected semicolon or another field name");
2268                 return false;
2269             }
2270             if (parser->tok == ';')
2271                 break;
2272             if (parser->tok != ',' || !parser_next(parser)) {
2273                 parseerror(parser, "expected semicolon or another field name");
2274                 return false;
2275             }
2276         }
2277         ast_delete(typevar);
2278
2279         /* skip the semicolon */
2280         if (!parser_next(parser))
2281             return parser->tok == TOKEN_EOF;
2282
2283         return true;
2284     }
2285     else if (parser->tok == '$')
2286     {
2287         if (!parser_next(parser)) {
2288             parseerror(parser, "parse error");
2289             return false;
2290         }
2291     }
2292     else
2293     {
2294         parseerror(parser, "unexpected token: %s", parser->lex->tok->value);
2295         return false;
2296     }
2297     return true;
2298 }
2299
2300 static parser_t *parser;
2301
2302 bool parser_init()
2303 {
2304     parser = (parser_t*)mem_a(sizeof(parser_t));
2305     if (!parser)
2306         return false;
2307
2308     memset(parser, 0, sizeof(*parser));
2309     return true;
2310 }
2311
2312 bool parser_compile(const char *filename)
2313 {
2314     parser->lex = lex_open(filename);
2315     if (!parser->lex) {
2316         printf("failed to open file \"%s\"\n", filename);
2317         return false;
2318     }
2319
2320     /* initial lexer/parser state */
2321     parser->lex->flags.noops = true;
2322
2323     if (parser_next(parser))
2324     {
2325         while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
2326         {
2327             if (!parser_do(parser)) {
2328                 if (parser->tok == TOKEN_EOF)
2329                     parseerror(parser, "unexpected eof");
2330                 else if (!parser->errors)
2331                     parseerror(parser, "parse error\n");
2332                 lex_close(parser->lex);
2333                 parser->lex = NULL;
2334                 return false;
2335             }
2336         }
2337     }
2338
2339     lex_close(parser->lex);
2340     parser->lex = NULL;
2341
2342     return !parser->errors;
2343 }
2344
2345 void parser_cleanup()
2346 {
2347     size_t i;
2348     for (i = 0; i < parser->functions_count; ++i) {
2349         ast_delete(parser->functions[i]);
2350     }
2351     for (i = 0; i < parser->imm_vector_count; ++i) {
2352         ast_delete(parser->imm_vector[i]);
2353     }
2354     for (i = 0; i < parser->imm_string_count; ++i) {
2355         ast_delete(parser->imm_string[i]);
2356     }
2357     for (i = 0; i < parser->imm_float_count; ++i) {
2358         ast_delete(parser->imm_float[i]);
2359     }
2360     for (i = 0; i < parser->fields_count; ++i) {
2361         ast_delete(parser->fields[i].var);
2362         mem_d(parser->fields[i].name);
2363     }
2364     for (i = 0; i < parser->globals_count; ++i) {
2365         ast_delete(parser->globals[i].var);
2366         mem_d(parser->globals[i].name);
2367     }
2368     MEM_VECTOR_CLEAR(parser, functions);
2369     MEM_VECTOR_CLEAR(parser, imm_vector);
2370     MEM_VECTOR_CLEAR(parser, imm_string);
2371     MEM_VECTOR_CLEAR(parser, imm_float);
2372     MEM_VECTOR_CLEAR(parser, globals);
2373     MEM_VECTOR_CLEAR(parser, fields);
2374     MEM_VECTOR_CLEAR(parser, locals);
2375
2376     mem_d(parser);
2377 }
2378
2379 bool parser_finish(const char *output)
2380 {
2381     size_t i;
2382     ir_builder *ir;
2383
2384     if (!parser->errors)
2385     {
2386         ir = ir_builder_new("gmqcc_out");
2387         if (!ir) {
2388             printf("failed to allocate builder\n");
2389             return false;
2390         }
2391
2392         for (i = 0; i < parser->imm_float_count; ++i) {
2393             if (!ast_global_codegen(parser->imm_float[i], ir)) {
2394                 printf("failed to generate global %s\n", parser->imm_float[i]->name);
2395                 ir_builder_delete(ir);
2396                 return false;
2397             }
2398         }
2399         for (i = 0; i < parser->imm_string_count; ++i) {
2400             if (!ast_global_codegen(parser->imm_string[i], ir)) {
2401                 printf("failed to generate global %s\n", parser->imm_string[i]->name);
2402                 ir_builder_delete(ir);
2403                 return false;
2404             }
2405         }
2406         for (i = 0; i < parser->imm_vector_count; ++i) {
2407             if (!ast_global_codegen(parser->imm_vector[i], ir)) {
2408                 printf("failed to generate global %s\n", parser->imm_vector[i]->name);
2409                 ir_builder_delete(ir);
2410                 return false;
2411             }
2412         }
2413         for (i = 0; i < parser->fields_count; ++i) {
2414             ast_value *field;
2415             bool isconst;
2416             if (!ast_istype(parser->fields[i].var, ast_value))
2417                 continue;
2418             field = (ast_value*)parser->fields[i].var;
2419             isconst = field->isconst;
2420             field->isconst = false;
2421             if (!ast_global_codegen((ast_value*)field, ir)) {
2422                 printf("failed to generate field %s\n", field->name);
2423                 ir_builder_delete(ir);
2424                 return false;
2425             }
2426             if (isconst) {
2427                 ir_value *ifld;
2428                 ast_expression *subtype;
2429                 field->isconst = true;
2430                 subtype = field->expression.next;
2431                 ifld = ir_builder_create_field(ir, field->name, subtype->expression.vtype);
2432                 if (subtype->expression.vtype == TYPE_FIELD)
2433                     ifld->fieldtype = subtype->expression.next->expression.vtype;
2434                 else if (subtype->expression.vtype == TYPE_FUNCTION)
2435                     ifld->outtype = subtype->expression.next->expression.vtype;
2436                 (void)!ir_value_set_field(field->ir_v, ifld);
2437             }
2438         }
2439         for (i = 0; i < parser->globals_count; ++i) {
2440             if (!ast_istype(parser->globals[i].var, ast_value))
2441                 continue;
2442             if (!ast_global_codegen((ast_value*)(parser->globals[i].var), ir)) {
2443                 printf("failed to generate global %s\n", parser->globals[i].name);
2444                 ir_builder_delete(ir);
2445                 return false;
2446             }
2447         }
2448         for (i = 0; i < parser->functions_count; ++i) {
2449             if (!ast_function_codegen(parser->functions[i], ir)) {
2450                 printf("failed to generate function %s\n", parser->functions[i]->name);
2451                 ir_builder_delete(ir);
2452                 return false;
2453             }
2454             if (!ir_function_finalize(parser->functions[i]->ir_func)) {
2455                 printf("failed to finalize function %s\n", parser->functions[i]->name);
2456                 ir_builder_delete(ir);
2457                 return false;
2458             }
2459         }
2460
2461         if (opts_dump)
2462             ir_builder_dump(ir, printf);
2463
2464         if (!ir_builder_generate(ir, output)) {
2465             printf("*** failed to generate output file\n");
2466             ir_builder_delete(ir);
2467             return false;
2468         }
2469
2470         ir_builder_delete(ir);
2471         return true;
2472     }
2473
2474     printf("*** there were compile errors\n");
2475     return false;
2476 }