gmqcc.h

   1 /*
   2  * Copyright (C) 2012, 2013
   3  *     Dale Weiler
   4  *     Wolfgang Bumiller
   5  *
   6  * Permission is hereby granted, free of charge, to any person obtaining a copy of
   7  * this software and associated documentation files (the "Software"), to deal in
   8  * the Software without restriction, including without limitation the rights to
   9  * use, copy, modify, merge, publish, distribute, sublicense, and/or sell copies
  10  * of the Software, and to permit persons to whom the Software is furnished to do
  11  * so, subject to the following conditions:
  12  *
  13  * The above copyright notice and this permission notice shall be included in all
  14  * copies or substantial portions of the Software.
  15  *
  16  * THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
  17  * IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
  18  * FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
  19  * AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
  20  * LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM,
  21  * OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE
  22  * SOFTWARE.
  23  */
  24 #ifndef GMQCC_HDR
  25 #define GMQCC_HDR
  26 #include <stdarg.h>
  27 #include <stddef.h>
  28 #include <time.h>   /* TODO: remove?*/
  29
  30 /*
  31  * Disable some over protective warnings in visual studio because fixing them is a waste
  32  * of my time.
  33  */
  34 #ifdef _MSC_VER
  35 #   pragma warning(disable : 4244 ) /* conversion from 'int' to 'float', possible loss of data */
  36 #endif /*! _MSC_VER */
  37
  38 #define GMQCC_VERSION_MAJOR 0
  39 #define GMQCC_VERSION_MINOR 4
  40 #define GMQCC_VERSION_PATCH 0
  41 #define GMQCC_VERSION_BUILD(J,N,P) (((J)<<16)|((N)<<8)|(P))
  42 #define GMQCC_VERSION \
  43     GMQCC_VERSION_BUILD(GMQCC_VERSION_MAJOR, GMQCC_VERSION_MINOR, GMQCC_VERSION_PATCH)
  44 /* Undefine the following on a release-tag: */
  45 #define GMQCC_VERSION_TYPE_DEVEL
  46
  47 /* Full version string in case we need it */
  48 #ifdef GMQCC_VERSION_TYPE_DEVEL
  49 #    ifdef GMQCC_GITINFO
  50 #        define GMQCC_DEV_VERSION_STRING "git build: " GMQCC_GITINFO "\n"
  51 #    elif defined(GMQCC_VERSION_TYPE_DEVEL)
  52 #        define GMQCC_DEV_VERSION_STRING "development build\n"
  53 #    else
  54 #        define GMQCC_DEV_VERSION_STRING
  55 #    endif /*! GMQCC_GITINGO */
  56 #else
  57 #    define GMQCC_DEV_VERSION_STRING
  58 #endif
  59
  60 #define GMQCC_STRINGIFY(x) #x
  61 #define GMQCC_IND_STRING(x) GMQCC_STRINGIFY(x)
  62 #define GMQCC_FULL_VERSION_STRING \
  63 "GMQCC " \
  64 GMQCC_IND_STRING(GMQCC_VERSION_MAJOR) "." \
  65 GMQCC_IND_STRING(GMQCC_VERSION_MINOR) "." \
  66 GMQCC_IND_STRING(GMQCC_VERSION_PATCH) \
  67 " Built " __DATE__ " " __TIME__ \
  68 "\n" GMQCC_DEV_VERSION_STRING
  69
  70 /*
  71  * We cannot rely on C99 at all, since compilers like MSVC
  72  * simply don't support it.  We define our own boolean type
  73  * as a result (since we cannot include <stdbool.h>). For
  74  * compilers that are in 1999 mode (C99 compliant) we can use
  75  * the language keyword _Bool which can allow for better code
  76  * on GCC and GCC-like compilers, opposed to `int`.
  77  */
  78 #ifndef __cplusplus
  79 #   ifdef  false
  80 #       undef  false
  81 #   endif /*! false */
  82 #   ifdef  true
  83 #       undef true
  84 #   endif /*! true  */
  85 #   define false (unsigned)(0)
  86 #   define true  (unsigned)(1)
  87 #   ifdef __STDC_VERSION__
  88 #       if __STDC_VERSION__ < 199901L && __GNUC__ < 3
  89             typedef int  bool;
  90 #       else
  91             typedef _Bool bool;
  92 #       endif /*! __STDC_VERSION__ < 199901L && __GNUC__ < 3 */
  93 #   else
  94         typedef int bool;
  95 #   endif /*! __STDC_VERSION__ */
  96 #endif /*! __cplusplus      */
  97
  98 /*
  99  * Of some functions which are generated we want to make sure
 100  * that the result isn't ignored. To find such function calls,
 101  * we use this macro.
 102  */
 103 #if defined(__GNUC__) || defined(__CLANG__)
 104 #   define GMQCC_WARN __attribute__((warn_unused_result))
 105 #   define GMQCC_USED __attribute__((used))
 106 #else
 107 #   define GMQCC_WARN
 108 #   define GMQCC_USED
 109 #endif /*! defined(__GNUC__) || defined (__CLANG__) */
 110
 111 /*
 112  * Inline is not supported in < C90, however some compilers
 113  * like gcc and clang might have an inline attribute we can
 114  * use if present.
 115  */
 116 #ifdef __STDC_VERSION__
 117 #    if __STDC_VERSION__ < 199901L
 118 #       if defined(__GNUC__) || defined (__CLANG__)
 119 #           if __GNUC__ < 2
 120 #               define GMQCC_INLINE
 121 #           else
 122 #               define GMQCC_INLINE __attribute__ ((always_inline))
 123 #           endif /*! __GNUC__ < 2 */
 124 #       else
 125 #           define GMQCC_INLINE
 126 #       endif /*! defined(__GNUC__) || defined (__CLANG__) */
 127 #    else
 128 #       define GMQCC_INLINE inline
 129 #    endif /*! __STDC_VERSION < 199901L */
 130 /*
 131  * Visual studio has __forcinline we can use.  So lets use that
 132  * I suspect it also has just __inline of some sort, but our use
 133  * of inline is correct (not guessed), WE WANT IT TO BE INLINE
 134  */
 135 #elif defined(_MSC_VER)
 136 #    define GMQCC_INLINE __forceinline
 137 #else
 138 #    define GMQCC_INLINE
 139 #endif /*! __STDC_VERSION__ */
 140
 141 /*
 142  * noreturn is present in GCC and clang
 143  * it's required for _ast_node_destory otherwise -Wmissing-noreturn
 144  * in clang complains about there being no return since abort() is
 145  * called.
 146  */
 147 #if (defined(__GNUC__) && __GNUC__ >= 2) || defined(__CLANG__)
 148 #    define GMQCC_NORETURN __attribute__ ((noreturn))
 149 #else
 150 #    define GMQCC_NORETURN
 151 #endif /*! (defined(__GNUC__) && __GNUC__ >= 2) || defined (__CLANG__) */
 152
 153 #if (defined(__GNUC__)) || defined(__CLANG__)
 154 #   define GMQCC_LIKELY(X)   __builtin_expect((X), 1)
 155 #   define GMQCC_UNLIKELY(X) __builtin_expect((X), 0)
 156 #else
 157 #   define GMQCC_LIKELY(X)   (X)
 158 #   define GMQCC_UNLIKELY(X) (X)
 159 #endif
 160
 161 #define GMQCC_ARRAY_COUNT(X) (sizeof(X) / sizeof((X)[0]))
 162
 163 #ifndef _MSC_VER
 164 #   include <stdint.h>
 165 #else
 166     typedef unsigned __int8  uint8_t;
 167     typedef unsigned __int16 uint16_t;
 168     typedef unsigned __int32 uint32_t;
 169     typedef unsigned __int64 uint64_t;
 170
 171     typedef __int16          int16_t;
 172     typedef __int32          int32_t;
 173     typedef __int64          int64_t;
 174 #endif /*! _MSC_VER */
 175
 176 /*
 177  * Very roboust way at determining endianess at compile time: this handles
 178  * almost every possible situation.  Otherwise a runtime check has to be
 179  * performed.
 180  */
 181 #define GMQCC_BYTE_ORDER_LITTLE 1234
 182 #define GMQCC_BYTE_ORDER_BIG    4321
 183
 184 #if defined (__GNUC__) || defined (__GNU_LIBRARY__)
 185 #   if defined (__FreeBSD__) || defined (__OpenBSD__)
 186 #       include <sys/endian.h>
 187 #   elif defined (BSD) && (BSD >= 199103) || defined (__DJGPP__) || defined (__CYGWIN32__)
 188 #       include <machine/endian.h>
 189 #   elif defined (__APPLE__)
 190 #       if defined (__BIG_ENDIAN__) && !defined(BIG_ENDIAN)
 191 #           define BIG_ENDIAN
 192 #       elif defined (__LITTLE_ENDIAN__) && !defined (LITTLE_ENDIAN)
 193 #           define LITTLE_ENDIAN
 194 #       endif /*! defined (__BIG_ENDIAN__) && !defined(BIG_ENDIAN) */
 195 #   elif !defined (__MINGW32__)
 196 #       include <endian.h>
 197 #       if !defined (__BEOS__)
 198 #           include <byteswap.h>
 199 #       endif /*! !definde (__BEOS__) */
 200 #   endif /*! defined (__FreeBSD__) || defined (__OpenBSD__) */
 201 #endif /*! defined (__GNUC__) || defined (__GNU_LIBRARY__) */
 202 #if !defined(PLATFORM_BYTE_ORDER)
 203 #   if defined (LITTLE_ENDIAN) || defined (BIG_ENDIAN)
 204 #       if defined (LITTLE_ENDIAN) && !defined(BIG_ENDIAN)
 205 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_LITTLE
 206 #       elif !defined (LITTLE_ENDIAN) && defined (BIG_ENDIAN)
 207 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_BIG
 208 #       elif defined (BYTE_ORDER) && (BYTE_ORDER == LITTLE_ENDIAN)
 209 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_LITTLE
 210 #       elif defined (BYTE_ORDER) && (BYTE_ORDER == BIG_ENDIAN)
 211 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_BIG
 212 #       endif /*! defined (LITTLE_ENDIAN) && !defined(BIG_ENDIAN) */
 213 #   elif defined (_LITTLE_ENDIAN) || defined (_BIG_ENDIAN)
 214 #       if defined (_LITTLE_ENDIAN) && !defined(_BIG_ENDIAN)
 215 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_LITTLE
 216 #       elif !defined (_LITTLE_ENDIAN) && defined (_BIG_ENDIAN)
 217 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_BIG
 218 #       elif defined (_BYTE_ORDER) && (_BYTE_ORDER == _LITTLE_ENDIAN)
 219 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_LITTLE
 220 #       elif defined (_BYTE_ORDER) && (_BYTE_ORDER == _BIG_ENDIAN)
 221 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_BIG
 222 #       endif /*! defined (_LITTLE_ENDIAN) && !defined(_BIG_ENDIAN) */
 223 #   elif defined (__LITTLE_ENDIAN__) || defined (__BIG_ENDIAN__)
 224 #       if defined (__LITTLE_ENDIAN__) && !defined (__BIG_ENDIAN__)
 225 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_LITTLE
 226 #       elif !defined (__LITTLE_ENDIAN__) && defined (__BIG_ENDIAN__)
 227 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_BIG
 228 #       elif defined (__BYTE_ORDER__) && (__BYTE_ORDER__ == __LITTLE_ENDIAN__)
 229 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_LITTLE
 230 #       elif defined (__BYTE_ORDER__) && (__BYTE_ORDER__ == __BIG_ENDIAN__)
 231 #           define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_BIG
 232 #       endif /*! defined (__LITTLE_ENDIAN__) && !defined (__BIG_ENDIAN__) */
 233 #   endif /*! defined(LITTLE_ENDIAN) || defined (BIG_ENDIAN) */
 234 #endif /*! !defined(PLATFORM_BYTE_ORDER) */
 235 #if !defined (PLATFORM_BYTE_ORDER)
 236 #   if   defined (__alpha__) || defined (__alpha)    || defined (i386)       || \
 237          defined (__i386__)  || defined (_M_I86)     || defined (_M_IX86)    || \
 238          defined (__OS2__)   || defined (sun386)     || defined (__TURBOC__) || \
 239          defined (vax)       || defined (vms)        || defined (VMS)        || \
 240          defined (__VMS)     || defined (__x86_64__) || defined (_M_IA64)    || \
 241          defined (_M_X64)    || defined (__i386)     || defined (__x86_64)
 242 #       define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_LITTLE
 243 #   elif defined (AMIGA)     || defined (applec)     || defined (__AS400__)  || \
 244          defined (_CRAY)     || defined (__hppa)     || defined (__hp9000)   || \
 245          defined (ibm370)    || defined (mc68000)    || defined (m68k)       || \
 246          defined (__MRC__)   || defined (__MVS__)    || defined (__MWERKS__) || \
 247          defined (sparc)     || defined (__sparc)    || defined (SYMANTEC_C) || \
 248          defined (__TANDEM)  || defined (THINK_C)    || defined (__VMCMS__)  || \
 249          defined (__PPC__)   || defined (__PPC)      || defined (PPC)
 250 #       define PLATFORM_BYTE_ORDER GMQCC_BYTE_ORDER_BIG
 251 #   else
 252 #       define PLATFORM_BYTE_ORDER -1
 253 #   endif
 254 #endif /*! !defined (PLATFORM_BYTE_ORDER) */
 255
 256 /* stat.c */
 257 void  stat_info          (void);
 258 char *stat_mem_strdup    (const char *, size_t,         const char *, bool);
 259 void *stat_mem_reallocate(void *,       size_t, size_t, const char *, const char *);
 260 void  stat_mem_deallocate(void *);
 261 void *stat_mem_allocate  (size_t, size_t, const char *, const char *);
 262
 263 #define mem_a(SIZE)              stat_mem_allocate  ((SIZE), __LINE__, __FILE__, #SIZE)
 264 #define mem_d(PTRN)              stat_mem_deallocate((void*)(PTRN))
 265 #define mem_r(PTRN, SIZE)        stat_mem_reallocate((void*)(PTRN), (SIZE), __LINE__, __FILE__, #SIZE)
 266 #define mem_af(SIZE, FILE, LINE) stat_mem_allocate  ((SIZE), (LINE), (FILE), #SIZE)
 267
 268 /* TODO: rename to mem variations */
 269 #define util_strdup(SRC)         stat_mem_strdup((char*)(SRC), __LINE__, __FILE__, false)
 270 #define util_strdupe(SRC)        stat_mem_strdup((char*)(SRC), __LINE__, __FILE__, true)
 271
 272 /* util.c */
 273
 274 /*
 275  * Microsoft implements against the spec versions of ctype.h. Which
 276  * means what ever the current set locale is will render the actual
 277  * results of say isalpha('A') wrong for what ever retarded locale
 278  * is used. Simalerly these are also implemented inefficently on
 279  * some toolchains and end up becoming actual library calls. Perhaps
 280  * this is why tools like yacc provide their own? Regardless implementing
 281  * these as functions is equally as silly, the call overhead is not
 282  * justified when this could happen on every character from an input
 283  * stream. We provide our own as macros for absolute inlinability.
 284  */
 285 #define util_isalpha(a) ((((unsigned)(a)|32)-'a') < 26)
 286 #define util_isdigit(a) (((unsigned)(a)-'0') < 10)
 287 #define util_islower(a) (((unsigned)(a)-'a') < 26)
 288 #define util_isupper(a) (((unsigned)(a)-'A') < 26)
 289 #define util_isprint(a) (((unsigned)(a)-0x20) < 0x5F)
 290 #define util_isspace(a) (((a) >= 9 && (a) <= 13) || (a) == ' ')
 291
 292 bool  util_strupper      (const char *);
 293 bool  util_strdigit      (const char *);
 294 void  util_endianswap    (void *, size_t, unsigned int);
 295
 296 size_t util_strtocmd         (const char *, char *, size_t);
 297 size_t util_strtononcmd      (const char *, char *, size_t);
 298 size_t util_optimizationtostr(const char *, char *, size_t);
 299
 300 uint16_t util_crc16(uint16_t crc, const char *data, size_t len);
 301
 302 void     util_seed(uint32_t);
 303 uint32_t util_rand(void);
 304
 305 int      util_asprintf (char **ret, const char *fmt, ...);
 306 int      util_sscanf   (const char *str, const char *format, ...);
 307 char    *util_strncpy  (char *dest, const char *src, size_t n);
 308 char    *util_strncat  (char *dest, const char *src, size_t n);
 309 char    *util_strcat   (char *dest, const char *src);
 310 const char *util_strerror(int err);
 311
 312 const struct tm *util_localtime(const time_t *timer);
 313 const char      *util_ctime    (const time_t *timer);
 314
 315 typedef struct fs_file_s fs_file_t;
 316
 317 bool             util_isatty(fs_file_t *);
 318
 319 /*
 320  * A flexible vector implementation: all vector pointers contain some
 321  * data about themselfs exactly - sizeof(vector_t) behind the pointer
 322  * this data is represented in the structure below.  Doing this allows
 323  * us to use the array [] to access individual elements from the vector
 324  * opposed to using set/get methods.
 325  */
 326 typedef struct {
 327     size_t  allocated;
 328     size_t  used;
 329
 330     /* can be extended now! whoot */
 331 } vector_t;
 332
 333 /* hidden interface */
 334 void _util_vec_grow(void **a, size_t i, size_t s);
 335 #define GMQCC_VEC_WILLGROW(X,Y) ( \
 336     ((!(X) || vec_meta(X)->used + Y >= vec_meta(X)->allocated)) ? \
 337         (void)_util_vec_grow(((void**)&(X)), (Y), sizeof(*(X))) : \
 338         (void)0                                                   \
 339 )
 340
 341 /* exposed interface */
 342 #define vec_meta(A)       (((vector_t*)((void*)A)) - 1)
 343 #define vec_free(A)       ((void)((A) ? (mem_d((void*)vec_meta(A)), (A) = NULL) : 0))
 344 #define vec_push(A,V)     (GMQCC_VEC_WILLGROW((A),1), (A)[vec_meta(A)->used++] = (V))
 345 #define vec_size(A)       ((A) ? vec_meta(A)->used : 0)
 346 #define vec_add(A,N)      (GMQCC_VEC_WILLGROW((A),(N)), vec_meta(A)->used += (N), &(A)[vec_meta(A)->used-(N)])
 347 #define vec_last(A)       ((A)[vec_meta(A)->used - 1])
 348 #define vec_pop(A)        ((void)(vec_meta(A)->used -= 1))
 349 #define vec_shrinkto(A,N) ((void)(vec_meta(A)->used  = (N)))
 350 #define vec_shrinkby(A,N) ((void)(vec_meta(A)->used -= (N)))
 351 #define vec_append(A,N,S) ((void)(memcpy(vec_add((A), (N)), (S), (N) * sizeof(*(S)))))
 352 #define vec_remove(A,I,N) ((void)(memmove((A)+(I),(A)+((I)+(N)),sizeof(*(A))*(vec_meta(A)->used-(I)-(N))),vec_meta(A)->used-=(N)))
 353
 354 typedef struct hash_table_s {
 355     size_t                size;
 356     struct hash_node_t **table;
 357 } hash_table_t, *ht;
 358
 359 /*
 360  * hashtable implementation:
 361  *
 362  * Note:
 363  *      This was designed for pointers:  you manage the life of the object yourself
 364  *      if you do use this for non-pointers please be warned that the object may not
 365  *      be valid if the duration of it exceeds (i.e on stack).  So you need to allocate
 366  *      yourself, or put those in global scope to ensure duration is for the whole
 367  *      runtime.
 368  *
 369  * util_htnew(size)                             -- to make a new hashtable
 370  * util_htset(table, key, value, sizeof(value)) -- to set something in the table
 371  * util_htget(table, key)                       -- to get something from the table
 372  * util_htdel(table)                            -- to delete the table
 373  *
 374  * example of use:
 375  *
 376  * ht    foo  = util_htnew(1024);
 377  * int   data = 100;
 378  * char *test = "hello world\n";
 379  * util_htset(foo, "foo", (void*)&data);
 380  * util_gtset(foo, "bar", (void*)test);
 381  *
 382  * printf("foo: %d, bar %s",
 383  *     *((int *)util_htget(foo, "foo")),
 384  *      ((char*)util_htget(foo, "bar"))
 385  * );
 386  *
 387  * util_htdel(foo);
 388  */
 389 hash_table_t *util_htnew (size_t size);
 390 void          util_htrem (hash_table_t *ht, void (*callback)(void *data));
 391 void          util_htset (hash_table_t *ht, const char *key, void *value);
 392 void          util_htdel (hash_table_t *ht);
 393 size_t        util_hthash(hash_table_t *ht, const char *key);
 394 void          util_htseth(hash_table_t *ht, const char *key, size_t hash, void *value);
 395 void          util_htrmh (hash_table_t *ht, const char *key, size_t bin, void (*cb)(void*));
 396 void          util_htrm  (hash_table_t *ht, const char *key, void (*cb)(void*));
 397
 398 void         *util_htget (hash_table_t *ht, const char *key);
 399 void         *util_htgeth(hash_table_t *ht, const char *key, size_t hash);
 400
 401 int           util_snprintf(char *str, size_t, const char *fmt, ...);
 402
 403
 404 /* fs.c */
 405 #define FS_FILE_SEEK_SET  0
 406 #define FS_FILE_SEEK_CUR  1
 407 #define FS_FILE_SEEK_END  2
 408 #define FS_FILE_EOF      -1
 409
 410 typedef struct fs_dir_s  fs_dir_t;
 411 /*typedef struct fs_file_s fs_file_t;*/
 412 typedef struct dirent    fs_dirent_t;
 413
 414 void           fs_file_close  (fs_file_t *);
 415 int            fs_file_error  (fs_file_t *);
 416 int            fs_file_getc   (fs_file_t *);
 417 int            fs_file_printf (fs_file_t *, const char *, ...);
 418 int            fs_file_puts   (fs_file_t *, const char *);
 419 int            fs_file_seek   (fs_file_t *, long int, int);
 420 long           fs_file_tell   (fs_file_t *);
 421 int            fs_file_flush  (fs_file_t *);
 422
 423 size_t         fs_file_read   (void *,        size_t, size_t, fs_file_t *);
 424 size_t         fs_file_write  (const void *,  size_t, size_t, fs_file_t *);
 425
 426 fs_file_t     *fs_file_open   (const char *, const char *);
 427 int            fs_file_getline(char  **, size_t *, fs_file_t *);
 428
 429 int            fs_dir_make    (const char *);
 430 fs_dir_t      *fs_dir_open    (const char *);
 431 int            fs_dir_close   (fs_dir_t *);
 432 fs_dirent_t   *fs_dir_read    (fs_dir_t *);
 433
 434
 435 /* correct.c */
 436 typedef struct correct_trie_s {
 437     void                  *value;
 438     struct correct_trie_s *entries;
 439 } correct_trie_t;
 440
 441 correct_trie_t* correct_trie_new(void);
 442
 443 typedef struct {
 444     char   ***edits;
 445     size_t  **lens;
 446 } correction_t;
 447
 448 void  correct_del (correct_trie_t*, size_t **);
 449 void  correct_add (correct_trie_t*, size_t ***, const char *);
 450 char *correct_str (correction_t *, correct_trie_t*, const char *);
 451 void  correct_init(correction_t *);
 452 void  correct_free(correction_t *);
 453
 454
 455 /* code.c */
 456
 457 /* Note: if you change the order, fix type_sizeof in ir.c */
 458 enum {
 459     TYPE_VOID     ,
 460     TYPE_STRING   ,
 461     TYPE_FLOAT    ,
 462     TYPE_VECTOR   ,
 463     TYPE_ENTITY   ,
 464     TYPE_FIELD    ,
 465     TYPE_FUNCTION ,
 466     TYPE_POINTER  ,
 467     TYPE_INTEGER  ,
 468     TYPE_VARIANT  ,
 469     TYPE_STRUCT   ,
 470     TYPE_UNION    ,
 471     TYPE_ARRAY    ,
 472
 473     TYPE_NIL      , /* it's its own type / untyped */
 474     TYPE_NOEXPR   , /* simply invalid in expressions */
 475
 476     TYPE_COUNT
 477 };
 478
 479 /* const/var qualifiers */
 480 #define CV_NONE   0
 481 #define CV_CONST  1
 482 #define CV_VAR   -1
 483 #define CV_WRONG  0x8000 /* magic number to help parsing */
 484
 485 extern const char    *type_name        [TYPE_COUNT];
 486 extern const uint16_t type_store_instr [TYPE_COUNT];
 487 extern const uint16_t field_store_instr[TYPE_COUNT];
 488
 489 /*
 490  * could use type_store_instr + INSTR_STOREP_F - INSTR_STORE_F
 491  * but this breaks when TYPE_INTEGER is added, since with the enhanced
 492  * instruction set, the old ones are left untouched, thus the _I instructions
 493  * are at a seperate place.
 494  */
 495 extern const uint16_t type_storep_instr[TYPE_COUNT];
 496 extern const uint16_t type_eq_instr    [TYPE_COUNT];
 497 extern const uint16_t type_ne_instr    [TYPE_COUNT];
 498 extern const uint16_t type_not_instr   [TYPE_COUNT];
 499
 500 typedef struct {
 501     uint32_t offset;      /* Offset in file of where data begins  */
 502     uint32_t length;      /* Length of section (how many of)      */
 503 } prog_section_t;
 504
 505 typedef struct {
 506     uint32_t       version;      /* Program version (6)     */
 507     uint16_t       crc16;
 508     uint16_t       skip;
 509
 510     prog_section_t statements;   /* prog_section_statement  */
 511     prog_section_t defs;         /* prog_section_def        */
 512     prog_section_t fields;       /* prog_section_field      */
 513     prog_section_t functions;    /* prog_section_function   */
 514     prog_section_t strings;
 515     prog_section_t globals;
 516     uint32_t       entfield;     /* Number of entity fields */
 517 } prog_header_t;
 518
 519 /*
 520  * Each paramater incerements by 3 since vector types hold
 521  * 3 components (x,y,z).
 522  */
 523 #define OFS_NULL      0
 524 #define OFS_RETURN    1
 525 #define OFS_PARM0     (OFS_RETURN+3)
 526 #define OFS_PARM1     (OFS_PARM0 +3)
 527 #define OFS_PARM2     (OFS_PARM1 +3)
 528 #define OFS_PARM3     (OFS_PARM2 +3)
 529 #define OFS_PARM4     (OFS_PARM3 +3)
 530 #define OFS_PARM5     (OFS_PARM4 +3)
 531 #define OFS_PARM6     (OFS_PARM5 +3)
 532 #define OFS_PARM7     (OFS_PARM6 +3)
 533
 534 typedef struct {
 535     uint16_t opcode;
 536
 537     /* operand 1 */
 538     union {
 539         int16_t  s1; /* signed   */
 540         uint16_t u1; /* unsigned */
 541     } o1;
 542     /* operand 2 */
 543     union {
 544         int16_t  s1; /* signed   */
 545         uint16_t u1; /* unsigned */
 546     } o2;
 547     /* operand 3 */
 548     union {
 549         int16_t  s1; /* signed   */
 550         uint16_t u1; /* unsigned */
 551     } o3;
 552
 553     /*
 554      * This is the same as the structure in darkplaces
 555      * {
 556      *     unsigned short op;
 557      *     short          a,b,c;
 558      * }
 559      * But this one is more sane to work with, and the
 560      * type sizes are guranteed.
 561      */
 562 } prog_section_statement_t;
 563
 564 typedef struct {
 565     /*
 566      * The types:
 567      * 0 = ev_void
 568      * 1 = ev_string
 569      * 2 = ev_float
 570      * 3 = ev_vector
 571      * 4 = ev_entity
 572      * 5 = ev_field
 573      * 6 = ev_function
 574      * 7 = ev_pointer -- engine only
 575      * 8 = ev_bad     -- engine only
 576      */
 577     uint16_t type;
 578     uint16_t offset;
 579     uint32_t name;
 580 } prog_section_both_t;
 581
 582 typedef prog_section_both_t prog_section_def_t;
 583 typedef prog_section_both_t prog_section_field_t;
 584
 585 /* this is ORed to the type */
 586 #define DEF_SAVEGLOBAL (1<<15)
 587 #define DEF_TYPEMASK   ((1<<15)-1)
 588
 589 typedef struct {
 590     int32_t   entry;      /* in statement table for instructions  */
 591     uint32_t  firstlocal; /* First local in local table           */
 592     uint32_t  locals;     /* Total ints of params + locals        */
 593     uint32_t  profile;    /* Always zero (engine uses this)       */
 594     uint32_t  name;       /* name of function in string table     */
 595     uint32_t  file;       /* file of the source file              */
 596     int32_t   nargs;      /* number of arguments                  */
 597     uint8_t   argsize[8]; /* size of arguments (keep 8 always?)   */
 598 } prog_section_function_t;
 599
 600 /*
 601  * Instructions
 602  * These are the external instructions supported by the interperter
 603  * this is what things compile to (from the C code).
 604  */
 605 enum {
 606     INSTR_DONE,
 607     INSTR_MUL_F,
 608     INSTR_MUL_V,
 609     INSTR_MUL_FV, /* NOTE: the float operands must NOT be at the same locations: A != C */
 610     INSTR_MUL_VF, /* and here: B != C */
 611     INSTR_DIV_F,
 612     INSTR_ADD_F,
 613     INSTR_ADD_V,
 614     INSTR_SUB_F,
 615     INSTR_SUB_V,
 616     INSTR_EQ_F,
 617     INSTR_EQ_V,
 618     INSTR_EQ_S,
 619     INSTR_EQ_E,
 620     INSTR_EQ_FNC,
 621     INSTR_NE_F,
 622     INSTR_NE_V,
 623     INSTR_NE_S,
 624     INSTR_NE_E,
 625     INSTR_NE_FNC,
 626     INSTR_LE,
 627     INSTR_GE,
 628     INSTR_LT,
 629     INSTR_GT,
 630     INSTR_LOAD_F,
 631     INSTR_LOAD_V,
 632     INSTR_LOAD_S,
 633     INSTR_LOAD_ENT,
 634     INSTR_LOAD_FLD,
 635     INSTR_LOAD_FNC,
 636     INSTR_ADDRESS,
 637     INSTR_STORE_F,
 638     INSTR_STORE_V,
 639     INSTR_STORE_S,
 640     INSTR_STORE_ENT,
 641     INSTR_STORE_FLD,
 642     INSTR_STORE_FNC,
 643     INSTR_STOREP_F,
 644     INSTR_STOREP_V,
 645     INSTR_STOREP_S,
 646     INSTR_STOREP_ENT,
 647     INSTR_STOREP_FLD,
 648     INSTR_STOREP_FNC,
 649     INSTR_RETURN,
 650     INSTR_NOT_F,
 651     INSTR_NOT_V,
 652     INSTR_NOT_S,
 653     INSTR_NOT_ENT,
 654     INSTR_NOT_FNC,
 655     INSTR_IF,
 656     INSTR_IFNOT,
 657     INSTR_CALL0,
 658     INSTR_CALL1,
 659     INSTR_CALL2,
 660     INSTR_CALL3,
 661     INSTR_CALL4,
 662     INSTR_CALL5,
 663     INSTR_CALL6,
 664     INSTR_CALL7,
 665     INSTR_CALL8,
 666     INSTR_STATE,
 667     INSTR_GOTO,
 668     INSTR_AND,
 669     INSTR_OR,
 670     INSTR_BITAND,
 671     INSTR_BITOR,
 672
 673     /*
 674      * Virtual instructions used by the IR
 675      * Keep at the end!
 676      */
 677     VINSTR_END,
 678     VINSTR_PHI,
 679     VINSTR_JUMP,
 680     VINSTR_COND,
 681
 682     /* A never returning CALL.
 683      * Creating this causes IR blocks to be marked as 'final'.
 684      * No-Return-Call
 685      */
 686     VINSTR_NRCALL,
 687
 688     /* Emulated instructions. */
 689     VINSTR_BITAND_V, /* BITAND_V must be the first emulated bitop */
 690     VINSTR_BITAND_VF,
 691     VINSTR_BITOR_V,
 692     VINSTR_BITOR_VF,
 693     VINSTR_BITXOR,
 694     VINSTR_BITXOR_V,
 695     VINSTR_BITXOR_VF,
 696     VINSTR_CROSS,
 697     VINSTR_NEG_F,
 698     VINSTR_NEG_V
 699 };
 700
 701 /* TODO: elide */
 702 extern const char *util_instr_str[VINSTR_END];
 703
 704
 705 typedef float    qcfloat_t;
 706 typedef int32_t  qcint_t;
 707 typedef uint32_t qcuint_t;
 708
 709 typedef struct {
 710     prog_section_statement_t *statements;
 711     int                      *linenums;
 712     int                      *columnnums;
 713     prog_section_def_t       *defs;
 714     prog_section_field_t     *fields;
 715     prog_section_function_t  *functions;
 716     int                      *globals;
 717     char                     *chars;
 718     uint16_t                  crc;
 719     uint32_t                  entfields;
 720     ht                        string_cache;
 721     qcint_t                   string_cached_empty;
 722 } code_t;
 723
 724 /*
 725  * A shallow copy of a lex_file to remember where which ast node
 726  * came from.
 727  */
 728 typedef struct {
 729     const char *file;
 730     size_t      line;
 731     size_t      column;
 732 } lex_ctx_t;
 733
 734 /*
 735  * code_write          -- writes out the compiled file
 736  * code_init           -- prepares the code file
 737  * code_genstrin       -- generates string for code
 738  * code_alloc_field    -- allocated a field
 739  * code_push_statement -- keeps statements and linenumbers together
 740  * code_pop_statement  -- keeps statements and linenumbers together
 741  */
 742 bool      code_write         (code_t *, const char *filename, const char *lno);
 743 GMQCC_WARN
 744 code_t   *code_init          (void);
 745 void      code_cleanup       (code_t *);
 746 uint32_t  code_genstring     (code_t *, const char *string);
 747 qcint_t   code_alloc_field   (code_t *, size_t qcsize);
 748 void      code_push_statement(code_t *, prog_section_statement_t *stmt, lex_ctx_t ctx);
 749 void      code_pop_statement (code_t *);
 750
 751
 752 /* conout.c */
 753 enum {
 754     CON_BLACK   = 30,
 755     CON_RED,
 756     CON_GREEN,
 757     CON_BROWN,
 758     CON_BLUE,
 759     CON_MAGENTA,
 760     CON_CYAN ,
 761     CON_WHITE
 762 };
 763
 764 /* message level */
 765 enum {
 766     LVL_MSG,
 767     LVL_WARNING,
 768     LVL_ERROR
 769 };
 770
 771 fs_file_t *con_default_out(void);
 772 fs_file_t *con_default_err(void);
 773
 774 void con_vprintmsg (int level, const char *name, size_t line, size_t column, const char *msgtype, const char *msg, va_list ap);
 775 void con_printmsg  (int level, const char *name, size_t line, size_t column, const char *msgtype, const char *msg, ...);
 776 void con_cvprintmsg(lex_ctx_t ctx, int lvl, const char *msgtype, const char *msg, va_list ap);
 777 void con_cprintmsg (lex_ctx_t ctx, int lvl, const char *msgtype, const char *msg, ...);
 778
 779 void con_close (void);
 780 void con_init  (void);
 781 void con_reset (void);
 782 void con_color (int);
 783 int  con_change(const char *, const char *);
 784 int  con_verr  (const char *, va_list);
 785 int  con_vout  (const char *, va_list);
 786 int  con_err   (const char *, ...);
 787 int  con_out   (const char *, ...);
 788
 789 /* error/warning interface */
 790 extern size_t compile_errors;
 791 extern size_t compile_Werrors;
 792 extern size_t compile_warnings;
 793
 794 void /********/ compile_error   (lex_ctx_t ctx, /*LVL_ERROR*/ const char *msg, ...);
 795 void /********/ vcompile_error  (lex_ctx_t ctx, /*LVL_ERROR*/ const char *msg, va_list ap);
 796 bool GMQCC_WARN compile_warning (lex_ctx_t ctx, int warntype, const char *fmt, ...);
 797 bool GMQCC_WARN vcompile_warning(lex_ctx_t ctx, int warntype, const char *fmt, va_list ap);
 798 void            compile_show_werrors(void);
 799
 800 /* ir.c */
 801 /* TODO: cleanup */
 802 enum store_types {
 803     store_global,
 804     store_local,  /* local, assignable for now, should get promoted later */
 805     store_param,  /* parameters, they are locals with a fixed position */
 806     store_value,  /* unassignable */
 807     store_return  /* unassignable, at OFS_RETURN */
 808 };
 809
 810 typedef struct {
 811     qcfloat_t x, y, z;
 812 } vec3_t;
 813
 814 /* exec.c */
 815
 816 /* TODO: cleanup */
 817 /*
 818  * Darkplaces has (or will have) a 64 bit prog loader
 819  * where the 32 bit qc program is autoconverted on load.
 820  * Since we may want to support that as well, let's redefine
 821  * float and int here.
 822  */
 823 typedef union {
 824     qcint_t   _int;
 825     qcint_t    string;
 826     qcint_t    function;
 827     qcint_t    edict;
 828     qcfloat_t _float;
 829     qcfloat_t vector[3];
 830     qcint_t   ivector[3];
 831 } qcany_t;
 832
 833 typedef char qcfloat_t_size_is_correct [sizeof(qcfloat_t) == 4 ?1:-1];
 834 typedef char qcint_t_size_is_correct   [sizeof(qcint_t)   == 4 ?1:-1];
 835
 836 enum {
 837     VMERR_OK,
 838     VMERR_TEMPSTRING_ALLOC,
 839     VMERR_END
 840 };
 841
 842 #define VM_JUMPS_DEFAULT 1000000
 843
 844 /* execute-flags */
 845 #define VMXF_DEFAULT 0x0000     /* default flags - nothing */
 846 #define VMXF_TRACE   0x0001     /* trace: print statements before executing */
 847 #define VMXF_PROFILE 0x0002     /* profile: increment the profile counters */
 848
 849 struct qc_program_s;
 850 typedef int (*prog_builtin_t)(struct qc_program_s *prog);
 851
 852 typedef struct {
 853     qcint_t                    stmt;
 854     size_t                   localsp;
 855     prog_section_function_t *function;
 856 } qc_exec_stack_t;
 857
 858 typedef struct qc_program_s {
 859     char                    *filename;
 860     prog_section_statement_t *code;
 861     prog_section_def_t       *defs;
 862     prog_section_def_t       *fields;
 863     prog_section_function_t  *functions;
 864     char                    *strings;
 865     qcint_t                   *globals;
 866     qcint_t                   *entitydata;
 867     bool                    *entitypool;
 868
 869     const char*             *function_stack;
 870
 871     uint16_t crc16;
 872
 873     size_t tempstring_start;
 874     size_t tempstring_at;
 875
 876     qcint_t  vmerror;
 877
 878     size_t *profile;
 879
 880     prog_builtin_t *builtins;
 881     size_t          builtins_count;
 882
 883     /* size_t ip; */
 884     qcint_t  entities;
 885     size_t entityfields;
 886     bool   allowworldwrites;
 887
 888     qcint_t         *localstack;
 889     qc_exec_stack_t *stack;
 890     size_t statement;
 891
 892     size_t xflags;
 893
 894     int    argc; /* current arg count for debugging */
 895 } qc_program_t;
 896
 897 qc_program_t*       prog_load      (const char *filename, bool ignoreversion);
 898 void                prog_delete    (qc_program_t *prog);
 899 bool                prog_exec      (qc_program_t *prog, prog_section_function_t *func, size_t flags, long maxjumps);
 900 const char*         prog_getstring (qc_program_t *prog, qcint_t str);
 901 prog_section_def_t* prog_entfield  (qc_program_t *prog, qcint_t off);
 902 prog_section_def_t* prog_getdef    (qc_program_t *prog, qcint_t off);
 903 qcany_t*            prog_getedict  (qc_program_t *prog, qcint_t e);
 904 qcint_t               prog_tempstring(qc_program_t *prog, const char *_str);
 905
 906
 907 /* parser.c */
 908 struct parser_s;
 909 struct parser_s *parser_create        (void);
 910 bool             parser_compile_file  (struct parser_s *parser, const char *);
 911 bool             parser_compile_string(struct parser_s *parser, const char *, const char *, size_t);
 912 bool             parser_finish        (struct parser_s *parser, const char *);
 913 void             parser_cleanup       (struct parser_s *parser);
 914
 915 /* ftepp.c */
 916 struct ftepp_s;
 917 struct ftepp_s *ftepp_create           (void);
 918 bool            ftepp_preprocess_file  (struct ftepp_s *ftepp, const char *filename);
 919 bool            ftepp_preprocess_string(struct ftepp_s *ftepp, const char *name, const char *str);
 920 void            ftepp_finish           (struct ftepp_s *ftepp);
 921 const char     *ftepp_get              (struct ftepp_s *ftepp);
 922 void            ftepp_flush            (struct ftepp_s *ftepp);
 923 void            ftepp_add_define       (struct ftepp_s *ftepp, const char *source, const char *name);
 924 void            ftepp_add_macro        (struct ftepp_s *ftepp, const char *name,   const char *value);
 925
 926 /* main.c */
 927
 928 #if 1
 929 /* Helpers to allow for a whole lot of flags. Otherwise we'd limit
 930  * to 32 or 64 -f options...
 931  */
 932 typedef struct {
 933     size_t  idx; /* index into an array of 32 bit words */
 934     uint8_t bit; /* bit index for the 8 bit group idx points to */
 935 } longbit;
 936 #define LONGBIT(bit) { ((bit)/32), ((bit)%32) }
 937 #define LONGBIT_SET(B, I) ((B).idx = (I)/32, (B).bit = ((I)%32))
 938 #else
 939 typedef uint32_t longbit;
 940 #define LONGBIT(bit) (bit)
 941 #define LONGBIT_SET(B, I) ((B) = (I))
 942 #endif
 943
 944 /* utf.8 */
 945 typedef long utf8ch_t;
 946 int utf8_from(char *, utf8ch_t);
 947 int utf8_to(utf8ch_t *, const unsigned char *, size_t);
 948
 949 /* opts.c */
 950 typedef struct {
 951     const char *name;
 952     longbit     bit;
 953 } opts_flag_def_t;
 954
 955 bool opts_setflag  (const char *, bool);
 956 bool opts_setwarn  (const char *, bool);
 957 bool opts_setwerror(const char *, bool);
 958 bool opts_setoptim (const char *, bool);
 959
 960 void opts_init         (const char *, int, size_t);
 961 void opts_set          (uint32_t   *, size_t, bool);
 962 void opts_setoptimlevel(unsigned int);
 963 void opts_ini_init     (const char *);
 964
 965 /* Saner flag handling */
 966 void opts_backup_non_Wall(void);
 967 void opts_restore_non_Wall(void);
 968 void opts_backup_non_Werror_all(void);
 969 void opts_restore_non_Werror_all(void);
 970
 971
 972 enum {
 973 # define GMQCC_TYPE_FLAGS
 974 # define GMQCC_DEFINE_FLAG(X) X,
 975 #  include "opts.def"
 976     COUNT_FLAGS
 977 };
 978
 979 enum {
 980 # define GMQCC_TYPE_WARNS
 981 # define GMQCC_DEFINE_FLAG(X) WARN_##X,
 982 #  include "opts.def"
 983     COUNT_WARNINGS
 984 };
 985
 986 enum {
 987 # define GMQCC_TYPE_OPTIMIZATIONS
 988 # define GMQCC_DEFINE_FLAG(NAME, MIN_O) OPTIM_##NAME,
 989 #  include "opts.def"
 990     COUNT_OPTIMIZATIONS
 991 };
 992
 993 enum {
 994 #   define GMQCC_TYPE_OPTIONS
 995 #   define GMQCC_DEFINE_FLAG(X) OPTION_##X,
 996 #   include "opts.def"
 997     OPTION_COUNT
 998 };
 999
1000 extern const opts_flag_def_t opts_flag_list[COUNT_FLAGS+1];
1001 extern const opts_flag_def_t opts_warn_list[COUNT_WARNINGS+1];
1002 extern const opts_flag_def_t opts_opt_list[COUNT_OPTIMIZATIONS+1];
1003 extern const unsigned int    opts_opt_oflag[COUNT_OPTIMIZATIONS+1];
1004 extern unsigned int          opts_optimizationcount[COUNT_OPTIMIZATIONS];
1005
1006 /* other options: */
1007 typedef enum {
1008     COMPILER_QCC,     /* circa  QuakeC */
1009     COMPILER_FTEQCC,  /* fteqcc QuakeC */
1010     COMPILER_QCCX,    /* qccx   QuakeC */
1011     COMPILER_GMQCC    /* this   QuakeC */
1012 } opts_std_t;
1013
1014 typedef struct {
1015     union {
1016         bool     b;
1017         uint16_t u16;
1018         uint32_t u32;
1019
1020         union {
1021             char       *p;
1022             const char *c;
1023         } str;
1024     } data;
1025
1026     bool allocated;
1027 } opt_value_t;
1028
1029
1030 typedef struct {
1031     opt_value_t  options      [OPTION_COUNT];
1032     uint32_t     flags        [1 + (COUNT_FLAGS         / 32)];
1033     uint32_t     warn         [1 + (COUNT_WARNINGS      / 32)];
1034     uint32_t     werror       [1 + (COUNT_WARNINGS      / 32)];
1035     uint32_t     warn_backup  [1 + (COUNT_WARNINGS      / 32)];
1036     uint32_t     werror_backup[1 + (COUNT_WARNINGS      / 32)];
1037     uint32_t     optimization [1 + (COUNT_OPTIMIZATIONS / 32)];
1038     bool         optimizeoff; /* True when -O0 */
1039 } opts_cmd_t;
1040
1041 extern opts_cmd_t opts;
1042
1043 #define OPTS_GENERIC(f,i)    (!! (((f)[(i)/32]) & (1<< (unsigned)((i)%32))))
1044 #define OPTS_FLAG(i)         OPTS_GENERIC(opts.flags,        (i))
1045 #define OPTS_WARN(i)         OPTS_GENERIC(opts.warn,         (i))
1046 #define OPTS_WERROR(i)       OPTS_GENERIC(opts.werror,       (i))
1047 #define OPTS_OPTIMIZATION(i) OPTS_GENERIC(opts.optimization, (i))
1048 #define OPTS_OPTION_DUPED(X) (opts.options[X].allocated)
1049 #define OPTS_OPTION_BOOL(X) (opts.options[X].data.b)
1050 #define OPTS_OPTION_U16(X)  (opts.options[X].data.u16)
1051 #define OPTS_OPTION_U32(X)  (opts.options[X].data.u32)
1052 #define OPTS_OPTION_DUP(X) *(OPTS_OPTION_DUPED(X)=true, &(opts.options[X].data.str.p))
1053 #define OPTS_OPTION_STR(X)  (opts.options[X].data.str.c)
1054
1055 #endif /*! GMQCC_HDR */