parser.c

   1 #include <stdio.h>
   2 #include <stdarg.h>
   3
   4 #include "gmqcc.h"
   5 #include "lexer.h"
   6
   7 typedef struct {
   8     lex_file *lex;
   9     int      tok;
  10
  11     MEM_VECTOR_MAKE(ast_value*, globals);
  12     MEM_VECTOR_MAKE(ast_function*, functions);
  13     MEM_VECTOR_MAKE(ast_value*, imm_float);
  14
  15     ast_function *function;
  16     MEM_VECTOR_MAKE(ast_value*, locals);
  17     size_t blocklocal;
  18 } parser_t;
  19
  20 MEM_VEC_FUNCTIONS(parser_t, ast_value*, globals)
  21 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_float)
  22 MEM_VEC_FUNCTIONS(parser_t, ast_value*, locals)
  23 MEM_VEC_FUNCTIONS(parser_t, ast_function*, functions)
  24
  25 void parseerror(parser_t *parser, const char *fmt, ...)
  26 {
  27         va_list ap;
  28
  29     if (parser)
  30             printf("error %s:%lu: ", parser->lex->tok->ctx.file, (unsigned long)parser->lex->tok->ctx.line);
  31         else
  32             printf("error: ");
  33
  34         va_start(ap, fmt);
  35         vprintf(fmt, ap);
  36         va_end(ap);
  37
  38         printf("\n");
  39 }
  40
  41 bool parser_next(parser_t *parser)
  42 {
  43     /* lex_do kills the previous token */
  44     parser->tok = lex_do(parser->lex);
  45     if (parser->tok == TOKEN_EOF || parser->tok >= TOKEN_ERROR)
  46         return false;
  47     return true;
  48 }
  49
  50 /* lift a token out of the parser so it's not destroyed by parser_next */
  51 token *parser_lift(parser_t *parser)
  52 {
  53     token *tok = parser->lex->tok;
  54     parser->lex->tok = NULL;
  55     return tok;
  56 }
  57
  58 #define parser_tokval(p) (p->lex->tok->value)
  59 #define parser_token(p)  (p->lex->tok)
  60 #define parser_ctx(p)    (p->lex->tok->ctx)
  61
  62 ast_value* parser_const_float(parser_t *parser, double d)
  63 {
  64     size_t i;
  65     ast_value *out;
  66     for (i = 0; i < parser->imm_float_count; ++i) {
  67         if (parser->imm_float[i]->constval.vfloat == d)
  68             return parser->imm_float[i];
  69     }
  70     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_FLOAT);
  71     out->isconst = true;
  72     out->constval.vfloat = d;
  73     if (!parser_t_imm_float_add(parser, out)) {
  74         ast_value_delete(out);
  75         return NULL;
  76     }
  77     return out;
  78 }
  79
  80 ast_value* parser_find_global(parser_t *parser, const char *name)
  81 {
  82     size_t i;
  83     for (i = 0; i < parser->globals_count; ++i) {
  84         if (!strcmp(parser->globals[i]->name, name))
  85             return parser->globals[i];
  86     }
  87     return NULL;
  88 }
  89
  90 ast_value* parser_find_local(parser_t *parser, const char *name, size_t upto)
  91 {
  92     size_t i;
  93     ast_value *fun;
  94     for (i = parser->locals_count; i > upto;) {
  95         --i;
  96         if (!strcmp(parser->locals[i]->name, name))
  97             return parser->locals[i];
  98     }
  99     fun = parser->function->vtype;
 100     for (i = 0; i < fun->params_count; ++i) {
 101         if (!strcmp(fun->params[i]->name, name))
 102             return fun->params[i];
 103     }
 104     return NULL;
 105 }
 106
 107 ast_value* parser_find_var(parser_t *parser, const char *name)
 108 {
 109     ast_value *v;
 110     v         = parser_find_local(parser, name, 0);
 111     if (!v) v = parser_find_global(parser, name);
 112     return v;
 113 }
 114
 115 typedef struct {
 116     MEM_VECTOR_MAKE(ast_value*, p);
 117 } paramlist_t;
 118 MEM_VEC_FUNCTIONS(paramlist_t, ast_value*, p)
 119
 120 static ast_value *parser_parse_type(parser_t *parser, int basetype, bool *isfunc)
 121 {
 122     paramlist_t params;
 123     ast_value *var;
 124     lex_ctx   ctx = parser_ctx(parser);
 125     int vtype = basetype;
 126     int temptype;
 127     size_t i;
 128
 129     MEM_VECTOR_INIT(&params, p);
 130
 131     *isfunc = false;
 132
 133     if (parser->tok == '(') {
 134         *isfunc = true;
 135         while (true) {
 136             ast_value *param;
 137             bool dummy;
 138
 139             if (!parser_next(parser))
 140                 goto on_error;
 141
 142             if (parser->tok == ')')
 143                 break;
 144
 145             temptype = parser_token(parser)->constval.t;
 146             if (!parser_next(parser))
 147                 goto on_error;
 148
 149             param = parser_parse_type(parser, temptype, &dummy);
 150             (void)dummy;
 151
 152             if (!param)
 153                 goto on_error;
 154
 155             if (parser->tok == TOKEN_IDENT) {
 156                 /* named parameter */
 157                 if (!ast_value_set_name(param, parser_tokval(parser)))
 158                     goto on_error;
 159                 if (!parser_next(parser))
 160                     goto on_error;
 161             }
 162
 163             if (!paramlist_t_p_add(&params, param)) {
 164                 parseerror(parser, "Out of memory while parsing typename");
 165                 goto on_error;
 166             }
 167
 168             if (parser->tok == ',')
 169                 continue;
 170             if (parser->tok == ')')
 171                 break;
 172             parseerror(parser, "Unexpected token");
 173             goto on_error;
 174         }
 175         if (!parser_next(parser))
 176             goto on_error;
 177     }
 178
 179     var = ast_value_new(ctx, "<unnamed>", vtype);
 180     if (!var)
 181         goto on_error;
 182     MEM_VECTOR_MOVE(&params, p, var, params);
 183     return var;
 184 on_error:
 185     for (i = 0; i < params.p_count; ++i)
 186         ast_value_delete(params.p[i]);
 187     MEM_VECTOR_CLEAR(&params, p);
 188     return NULL;
 189 }
 190
 191 typedef struct
 192 {
 193     size_t etype; /* 0 = expression, others are operators */
 194     int             paren;
 195     size_t          off;
 196     ast_expression *out;
 197     ast_value      *value; /* need to know if we can assign */
 198     ast_block      *block; /* for commas and function calls */
 199     lex_ctx ctx;
 200 } sy_elem;
 201 typedef struct
 202 {
 203     MEM_VECTOR_MAKE(sy_elem, out);
 204     MEM_VECTOR_MAKE(sy_elem, ops);
 205 } shunt;
 206 MEM_VEC_FUNCTIONS(shunt, sy_elem, out)
 207 MEM_VEC_FUNCTIONS(shunt, sy_elem, ops)
 208
 209 static sy_elem syexp(lex_ctx ctx, ast_expression *v) {
 210     sy_elem e;
 211     e.etype = 0;
 212     e.out   = v;
 213     e.value = NULL;
 214     e.block = NULL;
 215     e.ctx   = ctx;
 216     e.paren = 0;
 217     return e;
 218 }
 219 static sy_elem syval(lex_ctx ctx, ast_value *v) {
 220     sy_elem e;
 221     e.etype = 0;
 222     e.out   = (ast_expression*)v;
 223     e.value = v;
 224     e.block = NULL;
 225     e.ctx   = ctx;
 226     e.paren = 0;
 227     return e;
 228 }
 229
 230 static sy_elem syblock(lex_ctx ctx, ast_block *v) {
 231     sy_elem e;
 232     e.etype = 0;
 233     e.out   = (ast_expression*)v;
 234     e.value = NULL;
 235     e.block = v;
 236     e.ctx   = ctx;
 237     e.paren = 0;
 238     return e;
 239 }
 240
 241 static sy_elem syop(lex_ctx ctx, const oper_info *op) {
 242     sy_elem e;
 243     e.etype = 1 + (op - operators);
 244     e.out   = NULL;
 245     e.value = NULL;
 246     e.block = NULL;
 247     e.ctx   = ctx;
 248     e.paren = 0;
 249     return e;
 250 }
 251
 252 static sy_elem syparen(lex_ctx ctx, int p, size_t off) {
 253     sy_elem e;
 254     e.etype = 0;
 255     e.off   = off;
 256     e.out   = NULL;
 257     e.value = NULL;
 258     e.block = NULL;
 259     e.ctx   = ctx;
 260     e.paren = p;
 261     return e;
 262 }
 263
 264 static bool parser_sy_pop(parser_t *parser, shunt *sy)
 265 {
 266     const oper_info *op;
 267     lex_ctx ctx;
 268     ast_expression *out = NULL;
 269     ast_expression *exprs[3];
 270     ast_value      *vars[3];
 271     ast_block      *blocks[3];
 272     size_t i;
 273
 274     if (!sy->ops_count) {
 275         parseerror(parser, "internal error: missing operator");
 276         return false;
 277     }
 278
 279     if (sy->ops[sy->ops_count-1].paren) {
 280         parseerror(parser, "unmatched parenthesis");
 281         return false;
 282     }
 283
 284     op = &operators[sy->ops[sy->ops_count-1].etype - 1];
 285     ctx = sy->ops[sy->ops_count-1].ctx;
 286
 287     if (sy->out_count < op->operands) {
 288         parseerror(parser, "internal error: not enough operands: %i", sy->out_count);
 289         return false;
 290     }
 291
 292     sy->ops_count--;
 293
 294     sy->out_count -= op->operands;
 295     for (i = 0; i < op->operands; ++i) {
 296         exprs[i]  = sy->out[sy->out_count+i].out;
 297         vars[i]   = sy->out[sy->out_count+i].value;
 298         blocks[i] = sy->out[sy->out_count+i].block;
 299     }
 300
 301     if (blocks[0] && !blocks[0]->exprs_count && op->id != opid1(',')) {
 302         parseerror(parser, "internal error: operator cannot be applied on empty blocks");
 303         return false;
 304     }
 305
 306     switch (op->id)
 307     {
 308         default:
 309             parseerror(parser, "internal error: unhandled operand");
 310             return false;
 311
 312         case opid1(','):
 313             if (blocks[0]) {
 314                 if (!ast_block_exprs_add(blocks[0], exprs[1]))
 315                     return false;
 316             } else {
 317                 blocks[0] = ast_block_new(ctx);
 318                 if (!ast_block_exprs_add(blocks[0], exprs[0]) ||
 319                     !ast_block_exprs_add(blocks[0], exprs[1]))
 320                 {
 321                     return false;
 322                 }
 323             }
 324             if (!ast_block_set_type(blocks[0], exprs[1]))
 325                 return false;
 326
 327             sy->out[sy->out_count++] = syblock(ctx, blocks[0]);
 328             return true;
 329
 330         case opid1('+'):
 331             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
 332                 parseerror(parser, "Cannot add type %s and %s",
 333                            type_name[exprs[0]->expression.vtype],
 334                            type_name[exprs[1]->expression.vtype]);
 335                 return false;
 336             }
 337             switch (exprs[0]->expression.vtype) {
 338                 case TYPE_FLOAT:
 339                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_F, exprs[0], exprs[1]);
 340                     break;
 341                 case TYPE_VECTOR:
 342                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_V, exprs[0], exprs[1]);
 343                     break;
 344                 default:
 345                     parseerror(parser, "Cannot add type %s and %s",
 346                                type_name[exprs[0]->expression.vtype],
 347                                type_name[exprs[1]->expression.vtype]);
 348                     return false;
 349             };
 350             break;
 351         case opid1('-'):
 352             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
 353                 parseerror(parser, "Cannot subtract type %s from %s",
 354                            type_name[exprs[1]->expression.vtype],
 355                            type_name[exprs[0]->expression.vtype]);
 356                 return false;
 357             }
 358             switch (exprs[0]->expression.vtype) {
 359                 case TYPE_FLOAT:
 360                     out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_F, exprs[0], exprs[1]);
 361                     break;
 362                 case TYPE_VECTOR:
 363                     out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_V, exprs[0], exprs[1]);
 364                     break;
 365                 default:
 366                     parseerror(parser, "Cannot add type %s from %s",
 367                                type_name[exprs[1]->expression.vtype],
 368                                type_name[exprs[0]->expression.vtype]);
 369                     return false;
 370             };
 371             break;
 372         case opid1('*'):
 373             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype &&
 374                 exprs[0]->expression.vtype != TYPE_VECTOR &&
 375                 exprs[0]->expression.vtype != TYPE_FLOAT &&
 376                 exprs[1]->expression.vtype != TYPE_VECTOR &&
 377                 exprs[1]->expression.vtype != TYPE_FLOAT)
 378             {
 379                 parseerror(parser, "Cannot multiply type %s from %s",
 380                            type_name[exprs[1]->expression.vtype],
 381                            type_name[exprs[0]->expression.vtype]);
 382                 return false;
 383             }
 384             switch (exprs[0]->expression.vtype) {
 385                 case TYPE_FLOAT:
 386                     if (exprs[1]->expression.vtype == TYPE_VECTOR)
 387                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_FV, exprs[0], exprs[1]);
 388                     else
 389                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_F, exprs[0], exprs[1]);
 390                     break;
 391                 case TYPE_VECTOR:
 392                     if (exprs[1]->expression.vtype == TYPE_FLOAT)
 393                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_VF, exprs[0], exprs[1]);
 394                     else
 395                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_V, exprs[0], exprs[1]);
 396                     break;
 397                 default:
 398                     parseerror(parser, "Cannot add type %s from %s",
 399                                type_name[exprs[1]->expression.vtype],
 400                                type_name[exprs[0]->expression.vtype]);
 401                     return false;
 402             };
 403             break;
 404         case opid1('/'):
 405             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype ||
 406                 exprs[0]->expression.vtype != TYPE_FLOAT)
 407             {
 408                 parseerror(parser, "Cannot divide types %s and %s",
 409                            type_name[exprs[0]->expression.vtype],
 410                            type_name[exprs[1]->expression.vtype]);
 411                 return false;
 412             }
 413             out = (ast_expression*)ast_binary_new(ctx, INSTR_DIV_F, exprs[0], exprs[1]);
 414             break;
 415
 416
 417         case opid1('='):
 418             if (!vars[0]) {
 419                 parseerror(parser, "Cannot assign to non-variable");
 420                 return false;
 421             }
 422             out = (ast_expression*)ast_store_new(ctx,
 423                                                  type_store_instr[vars[0]->expression.vtype],
 424                                                  vars[0], exprs[1]);
 425             break;
 426     }
 427
 428     if (!out) {
 429         parseerror(parser, "failed to apply operand %s", op->op);
 430         return false;
 431     }
 432
 433     sy->out[sy->out_count++] = syexp(ctx, out);
 434     return true;
 435 }
 436
 437 static bool parser_close_call(parser_t *parser, shunt *sy)
 438 {
 439     /* was a function call */
 440     ast_expression *fun;
 441     ast_call       *call;
 442
 443     size_t          fid;
 444     size_t          paramcount;
 445
 446     sy->ops_count--;
 447     fid = sy->ops[sy->ops_count].off;
 448
 449     /* out[fid] is the function
 450      * everything above is parameters...
 451      * 0 params = nothing
 452      * 1 params = ast_expression
 453      * more = ast_block
 454      */
 455
 456     if (sy->out_count < 1 || sy->out_count <= fid) {
 457         parseerror(parser, "internal error: function call needs function and parameter list...");
 458         return false;
 459     }
 460
 461     fun = sy->out[fid].out;
 462
 463     call = ast_call_new(sy->ops[sy->ops_count].ctx, fun);
 464     if (!call) {
 465         parseerror(parser, "out of memory");
 466         return false;
 467     }
 468
 469     printf("fid = %i, out_count = %i\n", (int)fid, (int)sy->out_count);
 470
 471     if (fid+1 == sy->out_count) {
 472         /* no arguments */
 473         paramcount = 0;
 474     } else if (fid+2 == sy->out_count) {
 475         ast_block *params;
 476         sy->out_count--;
 477         params = sy->out[sy->out_count].block;
 478         if (!params) {
 479             /* 1 param */
 480             paramcount = 1;
 481             if (!ast_call_params_add(call, sy->out[sy->out_count].out)) {
 482                 ast_delete(sy->out[sy->out_count].out);
 483                 parseerror(parser, "out of memory");
 484                 return false;
 485             }
 486         } else {
 487             paramcount = params->exprs_count;
 488             MEM_VECTOR_MOVE(params, exprs, call, params);
 489             ast_delete(params);
 490         }
 491     } else {
 492         parseerror(parser, "invalid function call");
 493         return false;
 494     }
 495
 496     /* overwrite fid, the function, with a call */
 497     sy->out[fid] = syexp(call->expression.node.context, (ast_expression*)call);
 498
 499     if (fun->expression.vtype != TYPE_FUNCTION) {
 500         parseerror(parser, "not a function");
 501         return false;
 502     }
 503
 504     if (!fun->expression.next) {
 505         parseerror(parser, "could not determine function parameters");
 506         return false;
 507     } else {
 508         /*
 509         ast_value *v = (ast_value*)(fun->expression.next);
 510         if (v->params_count != paramcount) {
 511             parseerror(parser, "expected %i parameters, got %i", (int)v->params_count, paramcount);
 512             return false;
 513         }
 514         */
 515     }
 516
 517     return true;
 518 }
 519
 520 static bool parser_close_paren(parser_t *parser, shunt *sy, bool functions_only)
 521 {
 522     if (!sy->ops_count) {
 523         parseerror(parser, "unmatched closing paren");
 524         return false;
 525     }
 526     if (sy->ops[sy->ops_count-1].paren == 1) {
 527         parseerror(parser, "empty parenthesis expression");
 528         return false;
 529     }
 530     while (sy->ops_count) {
 531         if (sy->ops[sy->ops_count-1].paren == 'f') {
 532             if (!parser_close_call(parser, sy))
 533                 return false;
 534             break;
 535         }
 536         if (sy->ops[sy->ops_count-1].paren == 1) {
 537             sy->ops_count--;
 538             return !functions_only;
 539         }
 540         if (!parser_sy_pop(parser, sy))
 541             return false;
 542     }
 543     return true;
 544 }
 545
 546 static ast_expression* parser_expression(parser_t *parser)
 547 {
 548     ast_expression *expr = NULL;
 549     shunt sy;
 550     bool wantop = false;
 551
 552     MEM_VECTOR_INIT(&sy, out);
 553     MEM_VECTOR_INIT(&sy, ops);
 554
 555     while (true)
 556     {
 557         if (!wantop)
 558         {
 559             bool nextwant = true;
 560             if (parser->tok == TOKEN_IDENT)
 561             {
 562                 /* variable */
 563                 ast_value *var = parser_find_var(parser, parser_tokval(parser));
 564                 if (!var) {
 565                     parseerror(parser, "unexpected ident: %s", parser_tokval(parser));
 566                     goto onerr;
 567                 }
 568                 if (!shunt_out_add(&sy, syval(parser_ctx(parser), var))) {
 569                     parseerror(parser, "out of memory");
 570                     goto onerr;
 571                 }
 572             }
 573             else if (parser->tok == TOKEN_FLOATCONST) {
 574                 ast_value *val = parser_const_float(parser, (parser_token(parser)->constval.f));
 575                 if (!val)
 576                     return false;
 577                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
 578                     parseerror(parser, "out of memory");
 579                     goto onerr;
 580                 }
 581             }
 582             else if (parser->tok == TOKEN_INTCONST) {
 583                 ast_value *val = parser_const_float(parser, (double)(parser_token(parser)->constval.i));
 584                 if (!val)
 585                     return false;
 586                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
 587                     parseerror(parser, "out of memory");
 588                     goto onerr;
 589                 }
 590             }
 591             else if (parser->tok == '(') {
 592                 nextwant = false; /* not expecting an operator next */
 593                 if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 1, 0))) {
 594                     parseerror(parser, "out of memory");
 595                     goto onerr;
 596                 }
 597             }
 598             else if (parser->tok == ')') {
 599                 /* allowed for function calls */
 600                 if (!parser_close_paren(parser, &sy, true))
 601                     goto onerr;
 602             }
 603             else {
 604                 /* TODO: prefix operators */
 605                 parseerror(parser, "expected statement");
 606                 goto onerr;
 607             }
 608             wantop = nextwant;
 609             parser->lex->flags.noops = !wantop;
 610         } else {
 611             if (parser->tok == '(') {
 612                 /* we expected an operator, this is the function-call operator */
 613                 if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 'f', sy.out_count-1))) {
 614                     parseerror(parser, "out of memory");
 615                     goto onerr;
 616                 }
 617             }
 618             else if (parser->tok == ')') {
 619                 /* we do expect an operator next */
 620                 /* closing an opening paren */
 621                 if (!parser_close_paren(parser, &sy, false))
 622                     goto onerr;
 623             }
 624             else if (parser->tok != TOKEN_OPERATOR) {
 625                 parseerror(parser, "expected operator or end of statement");
 626                 goto onerr;
 627             }
 628             else {
 629                 /* classify the operator */
 630                 /* TODO: suffix operators */
 631                 const oper_info *op;
 632                 const oper_info *olast = NULL;
 633                 size_t o;
 634                 for (o = 0; o < operator_count; ++o) {
 635                     if (!(operators[o].flags & OP_PREFIX) &&
 636                         !(operators[o].flags & OP_SUFFIX) && /* remove this */
 637                         !strcmp(parser_tokval(parser), operators[o].op))
 638                     {
 639                         break;
 640                     }
 641                 }
 642                 if (o == operator_count) {
 643                     /* no operator found... must be the end of the statement */
 644                     break;
 645                 }
 646                 /* found an operator */
 647                 op = &operators[o];
 648
 649                 if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
 650                     olast = &operators[sy.ops[sy.ops_count-1].etype-1];
 651
 652                 while (olast && (
 653                         (op->prec < olast->prec) ||
 654                         (op->assoc == ASSOC_LEFT && op->prec <= olast->prec) ) )
 655                 {
 656                     if (!parser_sy_pop(parser, &sy))
 657                         goto onerr;
 658                     if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
 659                         olast = &operators[sy.ops[sy.ops_count-1].etype-1];
 660                 }
 661
 662                 if (!shunt_ops_add(&sy, syop(parser_ctx(parser), op)))
 663                     goto onerr;
 664             }
 665             wantop = false;
 666             parser->lex->flags.noops = true;
 667         }
 668         if (!parser_next(parser)) {
 669             goto onerr;
 670         }
 671         if (parser->tok == ';') {
 672             break;
 673         }
 674     }
 675     if (!parser_next(parser)) {
 676         parseerror(parser, "Unexpected end of file");
 677         goto onerr;
 678     }
 679
 680     while (sy.ops_count) {
 681         if (!parser_sy_pop(parser, &sy))
 682             goto onerr;
 683     }
 684
 685     parser->lex->flags.noops = true;
 686     if (!sy.out_count) {
 687         parseerror(parser, "empty expression");
 688         expr = NULL;
 689     } else
 690         expr = sy.out[0].out;
 691     MEM_VECTOR_CLEAR(&sy, out);
 692     MEM_VECTOR_CLEAR(&sy, ops);
 693     return expr;
 694
 695 onerr:
 696     parser->lex->flags.noops = true;
 697     MEM_VECTOR_CLEAR(&sy, out);
 698     MEM_VECTOR_CLEAR(&sy, ops);
 699     return NULL;
 700 }
 701
 702 static bool parser_variable(parser_t *parser, ast_block *localblock);
 703 static bool parser_body_do(parser_t *parser, ast_block *block)
 704 {
 705     if (parser->tok == TOKEN_TYPENAME)
 706     {
 707         /* local variable */
 708         if (!parser_variable(parser, block))
 709             return false;
 710         return true;
 711     }
 712     else if (parser->tok == TOKEN_KEYWORD)
 713     {
 714         if (!strcmp(parser_tokval(parser), "return"))
 715         {
 716             ast_expression *exp;
 717             ast_return *ret;
 718
 719             if (!parser_next(parser)) {
 720                 parseerror(parser, "expected return expression");
 721                 return false;
 722             }
 723
 724             exp = parser_expression(parser);
 725             if (!exp)
 726                 return false;
 727             ret = ast_return_new(exp->expression.node.context, exp);
 728             if (!ret) {
 729                 ast_delete(exp);
 730                 return false;
 731             }
 732             if (!ast_block_exprs_add(block, (ast_expression*)ret)) {
 733                 ast_delete(ret);
 734                 return false;
 735             }
 736             return true;
 737         }
 738         parseerror(parser, "Unexpected keyword");
 739         return false;
 740     }
 741     else if (parser->tok == '{')
 742     {
 743         /* a block */
 744         parseerror(parser, "TODO: inner blocks: %s", parser_tokval(parser));
 745         return false;
 746     }
 747     else
 748     {
 749         ast_expression *exp = parser_expression(parser);
 750         if (!exp)
 751             return false;
 752         if (!ast_block_exprs_add(block, exp)) {
 753             ast_delete(exp);
 754             return false;
 755         }
 756         return true;
 757     }
 758 }
 759
 760 static ast_block* parser_parse_block(parser_t *parser)
 761 {
 762     size_t oldblocklocal;
 763     ast_block *block = NULL;
 764
 765     oldblocklocal = parser->blocklocal;
 766     parser->blocklocal = parser->locals_count;
 767
 768     if (!parser_next(parser)) { /* skip the '{' */
 769         parseerror(parser, "expected function body");
 770         goto cleanup;
 771     }
 772
 773     block = ast_block_new(parser_ctx(parser));
 774
 775     while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
 776     {
 777         if (parser->tok == '}')
 778             break;
 779
 780         if (!parser_body_do(parser, block)) {
 781             ast_block_delete(block);
 782             block = NULL;
 783             goto cleanup;
 784         }
 785     }
 786
 787     if (parser->tok != '}') {
 788         ast_block_delete(block);
 789         block = NULL;
 790     } else {
 791         (void)parser_next(parser);
 792     }
 793
 794 cleanup:
 795     parser->blocklocal = oldblocklocal;
 796     return block;
 797 }
 798
 799 static bool parser_variable(parser_t *parser, ast_block *localblock)
 800 {
 801     bool          isfunc = false;
 802     ast_function *func = NULL;
 803     lex_ctx       ctx;
 804     ast_value    *var;
 805
 806     int basetype = parser_token(parser)->constval.t;
 807
 808     while (true)
 809     {
 810         if (!parser_next(parser)) { /* skip basetype or comma */
 811             parseerror(parser, "expected variable declaration");
 812             return false;
 813         }
 814
 815         isfunc = false;
 816         func = NULL;
 817         ctx = parser_ctx(parser);
 818         var = parser_parse_type(parser, basetype, &isfunc);
 819
 820         if (!var)
 821             return false;
 822
 823         if (parser->tok != TOKEN_IDENT) {
 824             parseerror(parser, "expected variable name\n");
 825             return false;
 826         }
 827
 828         if (!localblock && parser_find_global(parser, parser_tokval(parser))) {
 829             ast_value_delete(var);
 830             parseerror(parser, "global already exists: %s\n", parser_tokval(parser));
 831             return false;
 832         }
 833
 834         if (localblock && parser_find_local(parser, parser_tokval(parser), parser->blocklocal)) {
 835             ast_value_delete(var);
 836             parseerror(parser, "local variable already exists: %s\n", parser_tokval(parser));
 837             return false;
 838         }
 839
 840         if (!ast_value_set_name(var, parser_tokval(parser))) {
 841             parseerror(parser, "failed to set variable name\n");
 842             ast_value_delete(var);
 843             return false;
 844         }
 845
 846         if (isfunc) {
 847             /* a function was defined */
 848             ast_value *fval;
 849
 850             /* turn var into a value of TYPE_FUNCTION, with the old var
 851              * as return type
 852              */
 853             fval = ast_value_new(ctx, var->name, TYPE_FUNCTION);
 854             func = ast_function_new(ctx, var->name, fval);
 855             if (!fval || !func) {
 856                 ast_value_delete(var);
 857                 if (fval) ast_value_delete(fval);
 858                 if (func) ast_function_delete(func);
 859                 return false;
 860             }
 861
 862             fval->expression.next = (ast_expression*)var;
 863             MEM_VECTOR_MOVE(var, params, fval, params);
 864
 865             if (!parser_t_functions_add(parser, func)) {
 866                 ast_value_delete(var);
 867                 if (fval) ast_value_delete(fval);
 868                 if (func) ast_function_delete(func);
 869                 return false;
 870             }
 871
 872             var = fval;
 873         }
 874
 875         if ( (!localblock && !parser_t_globals_add(parser, var)) ||
 876              ( localblock && !parser_t_locals_add(parser, var)) )
 877         {
 878             ast_value_delete(var);
 879             return false;
 880         }
 881         if (localblock && !ast_block_locals_add(localblock, var))
 882         {
 883             parser->locals_count--;
 884             ast_value_delete(var);
 885             return false;
 886         }
 887
 888         if (!parser_next(parser)) {
 889             ast_value_delete(var);
 890             return false;
 891         }
 892
 893         if (parser->tok == ';') {
 894             if (!parser_next(parser))
 895                 return parser->tok == TOKEN_EOF;
 896             return true;
 897         }
 898
 899         if (parser->tok == ',') {
 900             /* another var */
 901             continue;
 902         }
 903
 904         if (parser->tok != '=') {
 905             parseerror(parser, "expected '=' or ';'");
 906             return false;
 907         }
 908
 909         if (!parser_next(parser))
 910             return false;
 911
 912         if (parser->tok == '#') {
 913             if (localblock) {
 914                 parseerror(parser, "cannot declare builtins within functions");
 915                 return false;
 916             }
 917             if (!isfunc || !func) {
 918                 parseerror(parser, "unexpected builtin number, '%s' is not a function", var->name);
 919                 return false;
 920             }
 921             if (!parser_next(parser)) {
 922                 parseerror(parser, "expected builtin number");
 923                 return false;
 924             }
 925             if (parser->tok != TOKEN_INTCONST) {
 926                 parseerror(parser, "builtin number must be an integer constant");
 927                 return false;
 928             }
 929             if (parser_token(parser)->constval.i <= 0) {
 930                 parseerror(parser, "builtin number must be positive integer greater than zero");
 931                 return false;
 932             }
 933
 934             func->builtin = -parser_token(parser)->constval.i;
 935         } else if (parser->tok == '{') {
 936             /* function body */
 937             ast_block *block;
 938             ast_function *old = parser->function;
 939
 940             if (localblock) {
 941                 parseerror(parser, "cannot declare functions within functions");
 942                 return false;
 943             }
 944
 945             parser->function = func;
 946             block = parser_parse_block(parser);
 947             parser->function = old;
 948
 949             if (!block)
 950                 return false;
 951
 952             if (!ast_function_blocks_add(func, block)) {
 953                 ast_block_delete(block);
 954                 return false;
 955             }
 956             return true;
 957         } else {
 958             parseerror(parser, "TODO, const assignment");
 959         }
 960
 961         if (!parser_next(parser))
 962             return false;
 963
 964         if (parser->tok == ',') {
 965             /* another */
 966             continue;
 967         }
 968
 969         if (parser->tok != ';') {
 970             parseerror(parser, "expected semicolon");
 971             return false;
 972         }
 973
 974         (void)parser_next(parser);
 975
 976         return true;
 977     }
 978 }
 979
 980 static bool parser_do(parser_t *parser)
 981 {
 982     if (parser->tok == TOKEN_TYPENAME)
 983     {
 984         return parser_variable(parser, NULL);
 985     }
 986     else if (parser->tok == TOKEN_KEYWORD)
 987     {
 988         /* handle 'var' and 'const' */
 989         return false;
 990     }
 991     else if (parser->tok == '.')
 992     {
 993         /* entity-member declaration */
 994         return false;
 995     }
 996     else
 997     {
 998         parseerror(parser, "unexpected token: %s", parser->lex->tok->value);
 999         return false;
1000     }
1001     return true;
1002 }
1003
1004 bool parser_compile(const char *filename)
1005 {
1006     size_t i;
1007     parser_t *parser;
1008     ir_builder *ir;
1009
1010     parser = (parser_t*)mem_a(sizeof(parser_t));
1011     if (!parser)
1012         return false;
1013
1014     memset(parser, 0, sizeof(parser));
1015
1016     MEM_VECTOR_INIT(parser, globals);
1017     MEM_VECTOR_INIT(parser, locals);
1018     parser->lex = lex_open(filename);
1019
1020     if (!parser->lex) {
1021         printf("failed to open file \"%s\"\n", filename);
1022         return false;
1023     }
1024
1025     /* initial lexer/parser state */
1026     parser->lex->flags.noops = true;
1027
1028     if (parser_next(parser))
1029     {
1030         while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
1031         {
1032             if (!parser_do(parser)) {
1033                 if (parser->tok == TOKEN_EOF)
1034                     parseerror(parser, "unexpected eof");
1035                 else
1036                     parseerror(parser, "parse error\n");
1037                 lex_close(parser->lex);
1038                 mem_d(parser);
1039                 return false;
1040             }
1041         }
1042     }
1043
1044     lex_close(parser->lex);
1045
1046     ir = ir_builder_new("gmqcc_out");
1047     if (!ir) {
1048         printf("failed to allocate builder\n");
1049         goto cleanup;
1050     }
1051
1052     for (i = 0; i < parser->imm_float_count; ++i) {
1053         if (!ast_global_codegen(parser->imm_float[i], ir)) {
1054             printf("failed to generate global %s\n", parser->imm_float[i]->name);
1055         }
1056     }
1057     for (i = 0; i < parser->globals_count; ++i) {
1058         if (!ast_global_codegen(parser->globals[i], ir)) {
1059             printf("failed to generate global %s\n", parser->globals[i]->name);
1060         }
1061     }
1062     for (i = 0; i < parser->functions_count; ++i) {
1063         if (!ast_function_codegen(parser->functions[i], ir)) {
1064             printf("failed to generate function %s\n", parser->functions[i]->name);
1065         }
1066         if (!ir_function_finalize(parser->functions[i]->ir_func)) {
1067             printf("failed to finalize function %s\n", parser->functions[i]->name);
1068         }
1069     }
1070
1071     ir_builder_dump(ir, printf);
1072
1073 cleanup:
1074     for (i = 0; i < parser->globals_count; ++i) {
1075         ast_value_delete(parser->globals[i]);
1076     }
1077     MEM_VECTOR_CLEAR(parser, globals);
1078
1079     mem_d(parser);
1080     return true;
1081 }