usr.bin/make/var.c

   1 /*-
   2  * Copyright (c) 1988, 1989, 1990, 1993
   3  *      The Regents of the University of California.  All rights reserved.
   4  * Copyright (c) 1989 by Berkeley Softworks
   5  * All rights reserved.
   6  *
   7  * This code is derived from software contributed to Berkeley by
   8  * Adam de Boor.
   9  *
  10  * Redistribution and use in source and binary forms, with or without
  11  * modification, are permitted provided that the following conditions
  12  * are met:
  13  * 1. Redistributions of source code must retain the above copyright
  14  *    notice, this list of conditions and the following disclaimer.
  15  * 2. Redistributions in binary form must reproduce the above copyright
  16  *    notice, this list of conditions and the following disclaimer in the
  17  *    documentation and/or other materials provided with the distribution.
  18  * 3. All advertising materials mentioning features or use of this software
  19  *    must display the following acknowledgement:
  20  *      This product includes software developed by the University of
  21  *      California, Berkeley and its contributors.
  22  * 4. Neither the name of the University nor the names of its contributors
  23  *    may be used to endorse or promote products derived from this software
  24  *    without specific prior written permission.
  25  *
  26  * THIS SOFTWARE IS PROVIDED BY THE REGENTS AND CONTRIBUTORS ``AS IS'' AND
  27  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  28  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  29  * ARE DISCLAIMED.  IN NO EVENT SHALL THE REGENTS OR CONTRIBUTORS BE LIABLE
  30  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  31  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  32  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  33  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  34  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  35  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  36  * SUCH DAMAGE.
  37  *
  38  * @(#)var.c    8.3 (Berkeley) 3/19/94
  39  * $FreeBSD: src/usr.bin/make/var.c,v 1.16.2.3 2002/02/27 14:18:57 cjc Exp $
  40  * $DragonFly: src/usr.bin/make/var.c,v 1.89 2005/02/14 09:55:58 okumoto Exp $
  41  */
  42
  43 /*-
  44  * var.c --
  45  *      Variable-handling functions
  46  *
  47  * Interface:
  48  *      Var_Set             Set the value of a variable in the given
  49  *                          context. The variable is created if it doesn't
  50  *                          yet exist. The value and variable name need not
  51  *                          be preserved.
  52  *
  53  *      Var_Append          Append more characters to an existing variable
  54  *                          in the given context. The variable needn't
  55  *                          exist already -- it will be created if it doesn't.
  56  *                          A space is placed between the old value and the
  57  *                          new one.
  58  *
  59  *      Var_Exists          See if a variable exists.
  60  *
  61  *      Var_Value           Return the value of a variable in a context or
  62  *                          NULL if the variable is undefined.
  63  *
  64  *      Var_Subst           Substitute named variable, or all variables if
  65  *                          NULL in a string using
  66  *                          the given context as the top-most one. If the
  67  *                          third argument is non-zero, Parse_Error is
  68  *                          called if any variables are undefined.
  69  *
  70  *      Var_Parse           Parse a variable expansion from a string and
  71  *                          return the result and the number of characters
  72  *                          consumed.
  73  *
  74  *      Var_Delete          Delete a variable in a context.
  75  *
  76  *      Var_Init            Initialize this module.
  77  *
  78  * Debugging:
  79  *      Var_Dump            Print out all variables defined in the given
  80  *                          context.
  81  *
  82  * XXX: There's a lot of duplication in these functions.
  83  */
  84
  85 #include <ctype.h>
  86 #include <stdlib.h>
  87 #include <string.h>
  88
  89 #include "buf.h"
  90 #include "config.h"
  91 #include "globals.h"
  92 #include "GNode.h"
  93 #include "make.h"
  94 #include "nonints.h"
  95 #include "parse.h"
  96 #include "str.h"
  97 #include "targ.h"
  98 #include "util.h"
  99 #include "var.h"
 100
 101 /*
 102  * This is a harmless return value for Var_Parse that can be used by Var_Subst
 103  * to determine if there was an error in parsing -- easier than returning
 104  * a flag, as things outside this module don't give a hoot.
 105  */
 106 char    var_Error[] = "";
 107
 108 /*
 109  * Similar to var_Error, but returned when the 'err' flag for Var_Parse is
 110  * set false. Why not just use a constant? Well, gcc likes to condense
 111  * identical string instances...
 112  */
 113 static char     varNoError[] = "";
 114
 115 /*
 116  * Internally, variables are contained in four different contexts.
 117  *      1) the environment. They may not be changed. If an environment
 118  *          variable is appended-to, the result is placed in the global
 119  *          context.
 120  *      2) the global context. Variables set in the Makefile are located in
 121  *          the global context. It is the penultimate context searched when
 122  *          substituting.
 123  *      3) the command-line context. All variables set on the command line
 124  *         are placed in this context. They are UNALTERABLE once placed here.
 125  *      4) the local context. Each target has associated with it a context
 126  *         list. On this list are located the structures describing such
 127  *         local variables as $(@) and $(*)
 128  * The four contexts are searched in the reverse order from which they are
 129  * listed.
 130  */
 131 GNode          *VAR_GLOBAL;   /* variables from the makefile */
 132 GNode          *VAR_CMD;      /* variables defined on the command-line */
 133
 134 #define FIND_CMD        0x1   /* look in VAR_CMD when searching */
 135 #define FIND_GLOBAL     0x2   /* look in VAR_GLOBAL as well */
 136 #define FIND_ENV        0x4   /* look in the environment also */
 137
 138 #define OPEN_PAREN              '('
 139 #define CLOSE_PAREN             ')'
 140 #define OPEN_BRACE              '{'
 141 #define CLOSE_BRACE             '}'
 142
 143 static char *VarGetPattern(GNode *, int, char **, int, int *, size_t *,
 144                            VarPattern *);
 145 static int VarPrintVar(void *, void *);
 146
 147 /*
 148  * Create a Var object.
 149  *
 150  * @param name          Name of variable.
 151  * @param value         Value of variable.
 152  * @param flags         Flags set on variable.
 153  */
 154 static Var *
 155 VarCreate(const char name[], const char value[], int flags)
 156 {
 157         Var *v;
 158
 159         v = emalloc(sizeof(Var));
 160         v->name = estrdup(name);
 161         v->val  = Buf_Init(0);
 162         v->flags        = flags;
 163
 164         if (value != NULL) {
 165                 Buf_Append(v->val, value);
 166         }
 167         return (v);
 168 }
 169
 170 /*
 171  * Destroy a Var object.
 172  *
 173  * @param v     Object to destroy.
 174  * @param f     true if internal buffer in Buffer object is to be
 175  *              removed.
 176  */
 177 static void
 178 VarDestroy(Var *v, Boolean f)
 179 {
 180
 181         Buf_Destroy(v->val, f);
 182         free(v->name);
 183         free(v);
 184 }
 185
 186 /*-
 187  *-----------------------------------------------------------------------
 188  * VarCmp  --
 189  *      See if the given variable matches the named one. Called from
 190  *      Lst_Find when searching for a variable of a given name.
 191  *
 192  * Results:
 193  *      0 if they match. non-zero otherwise.
 194  *
 195  * Side Effects:
 196  *      none
 197  *-----------------------------------------------------------------------
 198  */
 199 static int
 200 VarCmp(const void *v, const void *name)
 201 {
 202
 203     return (strcmp(name, ((const Var *)v)->name));
 204 }
 205
 206 /*-
 207  *-----------------------------------------------------------------------
 208  * VarPossiblyExpand --
 209  *      Expand a variable name's embedded variables in the given context.
 210  *
 211  * Results:
 212  *      The contents of name, possibly expanded.
 213  *-----------------------------------------------------------------------
 214  */
 215 static char *
 216 VarPossiblyExpand(const char *name, GNode *ctxt)
 217 {
 218         char   *tmp;
 219
 220         /*
 221          * XXX make a temporary copy of the name because Var_Subst insists
 222          * on writing into the string.
 223          */
 224         tmp = estrdup(name);
 225         if (strchr(name, '$') != NULL) {
 226                 Buffer  *buf;
 227                 char    *str;
 228
 229                 buf = Var_Subst(NULL, tmp, ctxt, 0);
 230                 str = Buf_GetAll(buf, NULL);
 231                 Buf_Destroy(buf, FALSE);
 232
 233                 return(str);
 234         } else {
 235                 return(tmp);
 236         }
 237 }
 238
 239 /*-
 240  *-----------------------------------------------------------------------
 241  * VarFind --
 242  *      Find the given variable in the given context and any other contexts
 243  *      indicated.
 244  *
 245  *      Flags:
 246  *              FIND_GLOBAL     set means look in the VAR_GLOBAL context too
 247  *              FIND_CMD        set means to look in the VAR_CMD context too
 248  *              FIND_ENV        set means to look in the environment
 249  *
 250  * Results:
 251  *      A pointer to the structure describing the desired variable or
 252  *      NULL if the variable does not exist.
 253  *
 254  * Side Effects:
 255  *      None
 256  *-----------------------------------------------------------------------
 257  */
 258 static Var *
 259 VarFind(const char *name, GNode *ctxt, int flags)
 260 {
 261         Boolean localCheckEnvFirst;
 262         LstNode *var;
 263         char    *env;
 264
 265         /*
 266          * If the variable name begins with a '.', it could very well be one of
 267          * the local ones.  We check the name against all the local variables
 268          * and substitute the short version in for 'name' if it matches one of
 269          * them.
 270          */
 271         if (name[0] == '.') {
 272                 switch (name[1]) {
 273                 case 'A':
 274                         if (!strcmp(name, ".ALLSRC"))
 275                                 name = ALLSRC;
 276                         if (!strcmp(name, ".ARCHIVE"))
 277                                 name = ARCHIVE;
 278                         break;
 279                 case 'I':
 280                         if (!strcmp(name, ".IMPSRC"))
 281                                 name = IMPSRC;
 282                         break;
 283                 case 'M':
 284                         if (!strcmp(name, ".MEMBER"))
 285                                 name = MEMBER;
 286                         break;
 287                 case 'O':
 288                         if (!strcmp(name, ".OODATE"))
 289                                 name = OODATE;
 290                         break;
 291                 case 'P':
 292                         if (!strcmp(name, ".PREFIX"))
 293                                 name = PREFIX;
 294                         break;
 295                 case 'T':
 296                         if (!strcmp(name, ".TARGET"))
 297                                 name = TARGET;
 298                         break;
 299                 default:
 300                         break;
 301                 }
 302         }
 303
 304         /*
 305          * Note whether this is one of the specific variables we were told
 306          * through the -E flag to use environment-variable-override for.
 307          */
 308         if (Lst_Find(&envFirstVars, name, (CompareProc *)strcmp) != NULL) {
 309                 localCheckEnvFirst = TRUE;
 310         } else {
 311                 localCheckEnvFirst = FALSE;
 312         }
 313
 314         /*
 315          * First look for the variable in the given context. If it's not there,
 316          * look for it in VAR_CMD, VAR_GLOBAL and the environment,
 317          * in that order, depending on the FIND_* flags in 'flags'
 318          */
 319         var = Lst_Find(&ctxt->context, name, VarCmp);
 320         if (var != NULL) {
 321                 /* got it */
 322                 return (Lst_Datum(var));
 323         }
 324
 325         /* not there - try command line context */
 326         if ((flags & FIND_CMD) && (ctxt != VAR_CMD)) {
 327                 var = Lst_Find(&VAR_CMD->context, name, VarCmp);
 328                 if (var != NULL)
 329                         return (Lst_Datum(var));
 330         }
 331
 332         /* not there - try global context, but only if not -e/-E */
 333         if ((flags & FIND_GLOBAL) && (ctxt != VAR_GLOBAL) &&
 334             !checkEnvFirst && !localCheckEnvFirst) {
 335                 var = Lst_Find(&VAR_GLOBAL->context, name, VarCmp);
 336                 if (var != NULL)
 337                         return (Lst_Datum(var));
 338         }
 339
 340         if (!(flags & FIND_ENV))
 341                 /* we were not told to look into the environment */
 342                 return (NULL);
 343
 344         /* look in the environment */
 345         if ((env = getenv(name)) != NULL) {
 346                 /* craft this variable from the environment value */
 347                 return (VarCreate(name, env, VAR_FROM_ENV));
 348         }
 349
 350         /* deferred check for the environment (in case of -e/-E) */
 351         if ((checkEnvFirst || localCheckEnvFirst) &&
 352             (flags & FIND_GLOBAL) && (ctxt != VAR_GLOBAL)) {
 353                 var = Lst_Find(&VAR_GLOBAL->context, name, VarCmp);
 354                 if (var != NULL)
 355                         return (Lst_Datum(var));
 356         }
 357         return (NULL);
 358 }
 359
 360 /*-
 361  *-----------------------------------------------------------------------
 362  * VarAdd  --
 363  *      Add a new variable of name name and value val to the given context.
 364  *
 365  * Results:
 366  *      None
 367  *
 368  * Side Effects:
 369  *      The new variable is placed at the front of the given context
 370  *      The name and val arguments are duplicated so they may
 371  *      safely be freed.
 372  *-----------------------------------------------------------------------
 373  */
 374 static void
 375 VarAdd(const char *name, const char *val, GNode *ctxt)
 376 {
 377
 378     Lst_AtFront(&ctxt->context, VarCreate(name, val, 0));
 379
 380     DEBUGF(VAR, ("%s:%s = %s\n", ctxt->name, name, val));
 381 }
 382
 383 /*-
 384  *-----------------------------------------------------------------------
 385  * Var_Delete --
 386  *      Remove a variable from a context.
 387  *
 388  * Results:
 389  *      None.
 390  *
 391  * Side Effects:
 392  *      The Var structure is removed and freed.
 393  *
 394  *-----------------------------------------------------------------------
 395  */
 396 void
 397 Var_Delete(const char *name, GNode *ctxt)
 398 {
 399     LstNode *ln;
 400
 401     DEBUGF(VAR, ("%s:delete %s\n", ctxt->name, name));
 402     ln = Lst_Find(&ctxt->context, name, VarCmp);
 403     if (ln != NULL) {
 404         VarDestroy(Lst_Datum(ln), TRUE);
 405         Lst_Remove(&ctxt->context, ln);
 406     }
 407 }
 408
 409 /*-
 410  *-----------------------------------------------------------------------
 411  * Var_Set --
 412  *      Set the variable name to the value val in the given context.
 413  *
 414  * Results:
 415  *      None.
 416  *
 417  * Side Effects:
 418  *      If the variable doesn't yet exist, a new record is created for it.
 419  *      Else the old value is freed and the new one stuck in its place
 420  *
 421  * Notes:
 422  *      The variable is searched for only in its context before being
 423  *      created in that context. I.e. if the context is VAR_GLOBAL,
 424  *      only VAR_GLOBAL->context is searched. Likewise if it is VAR_CMD, only
 425  *      VAR_CMD->context is searched. This is done to avoid the literally
 426  *      thousands of unnecessary strcmp's that used to be done to
 427  *      set, say, $(@) or $(<).
 428  *-----------------------------------------------------------------------
 429  */
 430 void
 431 Var_Set(const char *name, const char *val, GNode *ctxt)
 432 {
 433     Var         *v;
 434     char        *n;
 435
 436     /*
 437      * We only look for a variable in the given context since anything set
 438      * here will override anything in a lower context, so there's not much
 439      * point in searching them all just to save a bit of memory...
 440      */
 441     n = VarPossiblyExpand(name, ctxt);
 442     v = VarFind(n, ctxt, 0);
 443     if (v == NULL) {
 444         VarAdd(n, val, ctxt);
 445     } else {
 446         Buf_Clear(v->val);
 447         Buf_Append(v->val, val);
 448
 449         DEBUGF(VAR, ("%s:%s = %s\n", ctxt->name, n, val));
 450     }
 451     /*
 452      * Any variables given on the command line are automatically exported
 453      * to the environment (as per POSIX standard)
 454      */
 455     if (ctxt == VAR_CMD || (v != (Var *)NULL && (v->flags & VAR_TO_ENV))) {
 456         setenv(n, val, 1);
 457     }
 458     free(n);
 459 }
 460
 461 /*
 462  * Var_SetEnv --
 463  *      Set the VAR_TO_ENV flag on a variable
 464  */
 465 void
 466 Var_SetEnv(const char *name, GNode *ctxt)
 467 {
 468     Var *v;
 469
 470     v = VarFind(name, ctxt, FIND_CMD|FIND_GLOBAL|FIND_ENV);
 471     if (v) {
 472         if ((v->flags & VAR_TO_ENV) == 0) {
 473             v->flags |= VAR_TO_ENV;
 474             setenv(v->name, Buf_GetAll(v->val, NULL), 1);
 475         }
 476     } else {
 477         Error("Cannot set environment flag on non-existant variable %s", name);
 478     }
 479 }
 480
 481 /*-
 482  *-----------------------------------------------------------------------
 483  * Var_Append --
 484  *      The variable of the given name has the given value appended to it in
 485  *      the given context.
 486  *
 487  * Results:
 488  *      None
 489  *
 490  * Side Effects:
 491  *      If the variable doesn't exist, it is created. Else the strings
 492  *      are concatenated (with a space in between).
 493  *
 494  * Notes:
 495  *      Only if the variable is being sought in the global context is the
 496  *      environment searched.
 497  *      XXX: Knows its calling circumstances in that if called with ctxt
 498  *      an actual target, it will only search that context since only
 499  *      a local variable could be being appended to. This is actually
 500  *      a big win and must be tolerated.
 501  *-----------------------------------------------------------------------
 502  */
 503 void
 504 Var_Append(const char *name, const char *val, GNode *ctxt)
 505 {
 506     Var         *v;
 507     char        *n;
 508
 509     n = VarPossiblyExpand(name, ctxt);
 510     v = VarFind(n, ctxt, (ctxt == VAR_GLOBAL) ? FIND_ENV : 0);
 511
 512     if (v == NULL) {
 513         VarAdd(n, val, ctxt);
 514     } else {
 515         Buf_AddByte(v->val, (Byte)' ');
 516         Buf_Append(v->val, val);
 517
 518         DEBUGF(VAR, ("%s:%s = %s\n", ctxt->name, n,
 519                (char *)Buf_GetAll(v->val, (size_t *)NULL)));
 520
 521         if (v->flags & VAR_FROM_ENV) {
 522             /*
 523              * If the original variable came from the environment, we
 524              * have to install it in the global context (we could place
 525              * it in the environment, but then we should provide a way to
 526              * export other variables...)
 527              */
 528             v->flags &= ~VAR_FROM_ENV;
 529             Lst_AtFront(&ctxt->context, v);
 530         }
 531     }
 532     free(n);
 533 }
 534
 535 /*-
 536  *-----------------------------------------------------------------------
 537  * Var_Exists --
 538  *      See if the given variable exists.
 539  *
 540  * Results:
 541  *      TRUE if it does, FALSE if it doesn't
 542  *
 543  * Side Effects:
 544  *      None.
 545  *
 546  *-----------------------------------------------------------------------
 547  */
 548 Boolean
 549 Var_Exists(const char *name, GNode *ctxt)
 550 {
 551     Var         *v;
 552     char        *n;
 553
 554     n = VarPossiblyExpand(name, ctxt);
 555     v = VarFind(n, ctxt, FIND_CMD|FIND_GLOBAL|FIND_ENV);
 556     free(n);
 557
 558     if (v == NULL) {
 559         return (FALSE);
 560     } else if (v->flags & VAR_FROM_ENV) {
 561         VarDestroy(v, TRUE);
 562     }
 563     return (TRUE);
 564 }
 565
 566 /*-
 567  *-----------------------------------------------------------------------
 568  * Var_Value --
 569  *      Return the value of the named variable in the given context
 570  *
 571  * Results:
 572  *      The value if the variable exists, NULL if it doesn't
 573  *
 574  * Side Effects:
 575  *      None
 576  *-----------------------------------------------------------------------
 577  */
 578 char *
 579 Var_Value(const char *name, GNode *ctxt, char **frp)
 580 {
 581     Var         *v;
 582     char        *n;
 583
 584     n = VarPossiblyExpand(name, ctxt);
 585     v = VarFind(n, ctxt, FIND_ENV | FIND_GLOBAL | FIND_CMD);
 586     free(n);
 587     *frp = NULL;
 588     if (v != NULL) {
 589         char *p = (char *)Buf_GetAll(v->val, (size_t *)NULL);
 590
 591         if (v->flags & VAR_FROM_ENV) {
 592             VarDestroy(v, FALSE);
 593             *frp = p;
 594         }
 595         return (p);
 596     } else {
 597         return (NULL);
 598     }
 599 }
 600
 601 /*-
 602  *-----------------------------------------------------------------------
 603  * VarModify --
 604  *      Modify each of the words of the passed string using the given
 605  *      function. Used to implement all modifiers.
 606  *
 607  * Results:
 608  *      A string of all the words modified appropriately.
 609  *
 610  * Side Effects:
 611  *      None.
 612  *
 613  *-----------------------------------------------------------------------
 614  */
 615 static char *
 616 VarModify(char *str, VarModifyProc *modProc, void *datum)
 617 {
 618     Buffer        *buf;             /* Buffer for the new string */
 619     Boolean       addSpace;         /* TRUE if need to add a space to the
 620                                      * buffer before adding the trimmed
 621                                      * word */
 622     char **av;                      /* word list [first word does not count] */
 623     int ac, i;
 624
 625     buf = Buf_Init(0);
 626     addSpace = FALSE;
 627
 628     av = brk_string(str, &ac, FALSE);
 629
 630     for (i = 1; i < ac; i++)
 631         addSpace = (*modProc)(av[i], addSpace, buf, datum);
 632
 633     Buf_AddByte(buf, '\0');
 634     str = (char *)Buf_GetAll(buf, (size_t *)NULL);
 635     Buf_Destroy(buf, FALSE);
 636     return (str);
 637 }
 638
 639 /*-
 640  *-----------------------------------------------------------------------
 641  * VarSortWords --
 642  *      Sort the words in the string.
 643  *
 644  * Input:
 645  *      str             String whose words should be sorted
 646  *      cmp             A comparison function to control the ordering
 647  *
 648  * Results:
 649  *      A string containing the words sorted
 650  *
 651  * Side Effects:
 652  *      None.
 653  *
 654  *-----------------------------------------------------------------------
 655  */
 656 static char *
 657 VarSortWords(char *str, int (*cmp)(const void *, const void *))
 658 {
 659         Buffer *buf;
 660         char **av;
 661         int ac, i;
 662
 663         buf = Buf_Init(0);
 664         av = brk_string(str, &ac, FALSE);
 665         qsort(av + 1, ac - 1, sizeof(char *), cmp);
 666         for (i = 1; i < ac; i++) {
 667                 Buf_Append(buf, av[i]);
 668                 Buf_AddByte(buf, (Byte)((i < ac - 1) ? ' ' : '\0'));
 669         }
 670         str = (char *)Buf_GetAll(buf, (size_t *)NULL);
 671         Buf_Destroy(buf, FALSE);
 672         return (str);
 673 }
 674
 675 static int
 676 SortIncreasing(const void *l, const void *r)
 677 {
 678
 679         return (strcmp(*(const char* const*)l, *(const char* const*)r));
 680 }
 681
 682 /*-
 683  *-----------------------------------------------------------------------
 684  * VarGetPattern --
 685  *      Pass through the tstr looking for 1) escaped delimiters,
 686  *      '$'s and backslashes (place the escaped character in
 687  *      uninterpreted) and 2) unescaped $'s that aren't before
 688  *      the delimiter (expand the variable substitution unless flags
 689  *      has VAR_NOSUBST set).
 690  *      Return the expanded string or NULL if the delimiter was missing
 691  *      If pattern is specified, handle escaped ampersands, and replace
 692  *      unescaped ampersands with the lhs of the pattern.
 693  *
 694  * Results:
 695  *      A string of all the words modified appropriately.
 696  *      If length is specified, return the string length of the buffer
 697  *      If flags is specified and the last character of the pattern is a
 698  *      $ set the VAR_MATCH_END bit of flags.
 699  *
 700  * Side Effects:
 701  *      None.
 702  *-----------------------------------------------------------------------
 703  */
 704 static char *
 705 VarGetPattern(GNode *ctxt, int err, char **tstr, int delim, int *flags,
 706     size_t *length, VarPattern *pattern)
 707 {
 708     char *cp;
 709     Buffer *buf = Buf_Init(0);
 710     size_t junk;
 711
 712     if (length == NULL)
 713         length = &junk;
 714
 715 #define IS_A_MATCH(cp, delim) \
 716     ((cp[0] == '\\') && ((cp[1] == delim) ||  \
 717      (cp[1] == '\\') || (cp[1] == '$') || (pattern && (cp[1] == '&'))))
 718
 719     /*
 720      * Skim through until the matching delimiter is found;
 721      * pick up variable substitutions on the way. Also allow
 722      * backslashes to quote the delimiter, $, and \, but don't
 723      * touch other backslashes.
 724      */
 725     for (cp = *tstr; *cp && (*cp != delim); cp++) {
 726         if (IS_A_MATCH(cp, delim)) {
 727             Buf_AddByte(buf, (Byte)cp[1]);
 728             cp++;
 729         } else if (*cp == '$') {
 730             if (cp[1] == delim) {
 731                 if (flags == NULL)
 732                     Buf_AddByte(buf, (Byte)*cp);
 733                 else
 734                     /*
 735                      * Unescaped $ at end of pattern => anchor
 736                      * pattern at end.
 737                      */
 738                     *flags |= VAR_MATCH_END;
 739             } else {
 740                 if (flags == NULL || (*flags & VAR_NOSUBST) == 0) {
 741                     char   *cp2;
 742                     size_t len;
 743                     Boolean freeIt;
 744
 745                     /*
 746                      * If unescaped dollar sign not before the
 747                      * delimiter, assume it's a variable
 748                      * substitution and recurse.
 749                      */
 750                     cp2 = Var_Parse(cp, ctxt, err, &len, &freeIt);
 751                     Buf_Append(buf, cp2);
 752                     if (freeIt)
 753                         free(cp2);
 754                     cp += len - 1;
 755                 } else {
 756                     char *cp2 = &cp[1];
 757
 758                     if (*cp2 == OPEN_PAREN || *cp2 == OPEN_BRACE) {
 759                         /*
 760                          * Find the end of this variable reference
 761                          * and suck it in without further ado.
 762                          * It will be interperated later.
 763                          */
 764                         int have = *cp2;
 765                         int want = (*cp2 == OPEN_PAREN) ? CLOSE_PAREN : CLOSE_BRACE;
 766                         int depth = 1;
 767
 768                         for (++cp2; *cp2 != '\0' && depth > 0; ++cp2) {
 769                             if (cp2[-1] != '\\') {
 770                                 if (*cp2 == have)
 771                                     ++depth;
 772                                 if (*cp2 == want)
 773                                     --depth;
 774                             }
 775                         }
 776                         Buf_AppendRange(buf, cp, cp2);
 777                         cp = --cp2;
 778                     } else
 779                         Buf_AddByte(buf, (Byte)*cp);
 780                 }
 781             }
 782         }
 783         else if (pattern && *cp == '&')
 784             Buf_AddBytes(buf, pattern->leftLen, (Byte *)pattern->lhs);
 785         else
 786             Buf_AddByte(buf, (Byte)*cp);
 787     }
 788
 789     Buf_AddByte(buf, (Byte)'\0');
 790
 791     if (*cp != delim) {
 792         *tstr = cp;
 793         *length = 0;
 794         return (NULL);
 795     } else {
 796         *tstr = ++cp;
 797         cp = (char *)Buf_GetAll(buf, length);
 798         *length -= 1;   /* Don't count the NULL */
 799         Buf_Destroy(buf, FALSE);
 800         return (cp);
 801     }
 802 }
 803
 804 /*-
 805  *-----------------------------------------------------------------------
 806  * Var_Quote --
 807  *      Quote shell meta-characters in the string
 808  *
 809  * Results:
 810  *      The quoted string
 811  *
 812  * Side Effects:
 813  *      None.
 814  *
 815  *-----------------------------------------------------------------------
 816  */
 817 char *
 818 Var_Quote(const char *str)
 819 {
 820     Buffer       *buf;
 821     /* This should cover most shells :-( */
 822     static char meta[] = "\n \t'`\";&<>()|*?{}[]\\$!#^~";
 823     char          *ret;
 824
 825     buf = Buf_Init(MAKE_BSIZE);
 826     for (; *str; str++) {
 827         if (strchr(meta, *str) != NULL)
 828             Buf_AddByte(buf, (Byte)'\\');
 829         Buf_AddByte(buf, (Byte)*str);
 830     }
 831     Buf_AddByte(buf, (Byte)'\0');
 832     ret = Buf_GetAll(buf, NULL);
 833     Buf_Destroy(buf, FALSE);
 834     return (ret);
 835 }
 836
 837 /*-
 838  *-----------------------------------------------------------------------
 839  * VarREError --
 840  *      Print the error caused by a regcomp or regexec call.
 841  *
 842  * Results:
 843  *      None.
 844  *
 845  * Side Effects:
 846  *      An error gets printed.
 847  *
 848  *-----------------------------------------------------------------------
 849  */
 850 void
 851 VarREError(int err, regex_t *pat, const char *str)
 852 {
 853     char *errbuf;
 854     int errlen;
 855
 856     errlen = regerror(err, pat, 0, 0);
 857     errbuf = emalloc(errlen);
 858     regerror(err, pat, errbuf, errlen);
 859     Error("%s: %s", str, errbuf);
 860     free(errbuf);
 861 }
 862
 863 /*-
 864  *-----------------------------------------------------------------------
 865  * Var_Parse --
 866  *      Given the start of a variable invocation, extract the variable
 867  *      name and find its value, then modify it according to the
 868  *      specification.
 869  *
 870  * Results:
 871  *      The (possibly-modified) value of the variable or var_Error if the
 872  *      specification is invalid. The length of the specification is
 873  *      placed in *lengthPtr (for invalid specifications, this is just
 874  *      2 to skip the '$' and the following letter, or 1 if '$' was the
 875  *      last character in the string).
 876  *      A Boolean in *freePtr telling whether the returned string should
 877  *      be freed by the caller.
 878  *
 879  * Side Effects:
 880  *      None.
 881  *
 882  * Assumption:
 883  *      It is assumed that Var_Parse() is called with str[0] == '$'.
 884  *
 885  *-----------------------------------------------------------------------
 886  */
 887 char *
 888 Var_Parse(char *foo, GNode *ctxt, Boolean err, size_t *lengthPtr,
 889     Boolean *freePtr)
 890 {
 891     const char  *input = foo;
 892     char        *rw_str = foo;
 893
 894     char        *tstr;          /* Pointer into str */
 895     Var         *v;             /* Variable in invocation */
 896     Boolean     haveModifier;   /* TRUE if have modifiers for the variable */
 897     char        endc;           /* Ending character when variable in parens
 898                                  * or braces */
 899     char        startc;         /* Starting character when variable in parens
 900                                  * or braces */
 901     Boolean     dynamic;        /* TRUE if the variable is local and we're
 902                                  * expanding it in a non-local context. This
 903                                  * is done to support dynamic sources. The
 904                                  * result is just the invocation, unaltered */
 905
 906
 907     if (input[1] == '\0') {
 908         /*
 909          * Error, there is only a dollar sign in the input string.
 910          */
 911         *freePtr = FALSE;
 912         *lengthPtr = 1;
 913         return (err ? var_Error : varNoError);
 914
 915     } else if (input[1] == OPEN_PAREN || input[1] == OPEN_BRACE) {
 916         /*
 917          * Check if brackets contain a variable name.
 918          */
 919         int     vlen;   /* length of variable name, after embedded variable
 920                          * expansion */
 921
 922         /* build up expanded variable name in this buffer */
 923         Buffer  *buf = Buf_Init(MAKE_BSIZE);
 924
 925         /*
 926          * Skip to the end character or a colon, whichever comes first,
 927          * replacing embedded variables as we go.
 928          */
 929         startc = input[1];
 930         endc = (startc == OPEN_PAREN) ? CLOSE_PAREN : CLOSE_BRACE;
 931         tstr = rw_str + 2;
 932
 933         while (*tstr != '\0' && *tstr != endc && *tstr != ':') {
 934             if (*tstr == '$') {
 935                 size_t  rlen;
 936                 Boolean rfree;
 937                 char    *rval;
 938
 939                 rval = Var_Parse(tstr, ctxt, err, &rlen, &rfree);
 940                 if (rval == var_Error) {
 941                         Fatal("Error expanding embedded variable.");
 942                 }
 943                 if (rval != NULL) {
 944                         Buf_Append(buf, rval);
 945                         if (rfree)
 946                                 free(rval);
 947                 }
 948                 tstr += rlen - 1;
 949             } else {
 950                 Buf_AddByte(buf, (Byte)*tstr);
 951             }
 952             tstr++;
 953         }
 954
 955         if (*tstr == '\0') {
 956             /*
 957              * If we never did find the end character, return NULL
 958              * right now, setting the length to be the distance to
 959              * the end of the string, since that's what make does.
 960              */
 961             *freePtr = FALSE;
 962             *lengthPtr = tstr - input;
 963             return (var_Error);
 964         }
 965
 966         haveModifier = (*tstr == ':');
 967         *tstr = '\0';                   /* modify input string */
 968
 969         rw_str = Buf_GetAll(buf, (size_t *)NULL);       /* REPLACE str */
 970         vlen = strlen(rw_str);
 971
 972         v = VarFind(rw_str, ctxt, FIND_ENV | FIND_GLOBAL | FIND_CMD);
 973
 974         if ((v == NULL) &&
 975             (ctxt != VAR_CMD) && (ctxt != VAR_GLOBAL) &&
 976             (vlen == 2) && (rw_str[1] == 'F' || rw_str[1] == 'D'))
 977         {
 978             /*
 979              * Check for bogus D and F forms of local variables since we're
 980              * in a local context and the name is the right length.
 981              */
 982             if (strchr("!%*<>@", rw_str[0]) != NULL) {
 983                 char    name[2];
 984                 char    *val;
 985
 986                 /*
 987                  * Well, it's local -- go look for it.
 988                  */
 989                 name[0] = rw_str[0];
 990                 name[1] = '\0';
 991
 992                 v = VarFind(name, ctxt, 0);
 993                 if (v != NULL && !haveModifier) {
 994                     /*
 995                      * No need for nested expansion or anything, as we're
 996                      * the only one who sets these things and we sure don't
 997                      * put nested invocations in them...
 998                      */
 999                     val = (char *)Buf_GetAll(v->val, (size_t *)NULL);
1000
1001                     if (rw_str[1] == 'D') {
1002                         val = VarModify(val, VarHead, (void *)NULL);
1003                     } else {
1004                         val = VarModify(val, VarTail, (void *)NULL);
1005                     }
1006                     /*
1007                      * Resulting string is dynamically allocated, so
1008                      * tell caller to free it.
1009                      */
1010                     *freePtr = TRUE;
1011                     *lengthPtr = tstr - input + 1;
1012                     *tstr = endc;
1013                     Buf_Destroy(buf, TRUE);
1014                     return (val);
1015                 }
1016             }
1017         }
1018
1019         if (v == NULL) {
1020             if (((ctxt == VAR_CMD) || (ctxt == VAR_GLOBAL)) &&
1021                 ((vlen == 1) ||
1022                  ((vlen == 2) && (rw_str[1] == 'F' || rw_str[1] == 'D'))))
1023             {
1024                 /*
1025                  * If substituting a local variable in a non-local context,
1026                  * assume it's for dynamic source stuff. We have to handle
1027                  * this specially and return the longhand for the variable
1028                  * with the dollar sign escaped so it makes it back to the
1029                  * caller. Only four of the local variables are treated
1030                  * specially as they are the only four that will be set
1031                  * when dynamic sources are expanded.
1032                  */
1033                 if (strchr("!%*@", rw_str[0]) != NULL) {
1034                     dynamic = TRUE;
1035                 } else {
1036                     dynamic = FALSE;
1037                 }
1038             } else if (((ctxt == VAR_CMD) || (ctxt == VAR_GLOBAL)) &&
1039                        (vlen > 2) &&
1040                        (rw_str[0] == '.') &&
1041                        isupper((unsigned char)rw_str[1]))
1042             {
1043                 int     len;
1044
1045                 len = vlen - 1;
1046                 if ((strncmp(rw_str, ".TARGET", len) == 0) ||
1047                     (strncmp(rw_str, ".ARCHIVE", len) == 0) ||
1048                     (strncmp(rw_str, ".PREFIX", len) == 0) ||
1049                     (strncmp(rw_str, ".MEMBER", len) == 0))
1050                 {
1051                     dynamic = TRUE;
1052                 } else {
1053                     dynamic = FALSE;
1054                 }
1055             } else {
1056                 dynamic = FALSE;
1057             }
1058
1059             if (haveModifier) {
1060                 /*
1061                  * Still need to get to the end of the variable specification,
1062                  * so kludge up a Var structure for the modifications
1063                  */
1064                 v = VarCreate(rw_str, NULL, VAR_JUNK);
1065
1066             } else {
1067                 /*
1068                  * No modifiers -- have specification length so we can return
1069                  * now.
1070                  */
1071                 if (dynamic) {
1072                     char        *result;
1073                     size_t      rlen = tstr - input + 1;
1074
1075                     result = emalloc(rlen + 1);
1076                     strncpy(result, input, rlen);
1077                     result[rlen] = '\0';
1078
1079                     *freePtr = TRUE;
1080                     *lengthPtr = rlen;
1081                     *tstr = endc;
1082
1083                     Buf_Destroy(buf, TRUE);
1084                     return (result);
1085                 } else {
1086                     *freePtr = FALSE;
1087                     *lengthPtr = tstr - input + 1;
1088                     *tstr = endc;
1089
1090                     Buf_Destroy(buf, TRUE);
1091                     return (err ? var_Error : varNoError);
1092                 }
1093             }
1094         } else {
1095             dynamic = FALSE;
1096         }
1097         *freePtr = FALSE;
1098         Buf_Destroy(buf, TRUE);
1099
1100     } else {
1101         /*
1102          * If it's not bounded by braces of some sort, life is much simpler.
1103          * We just need to check for the first character and return the
1104          * value if it exists.
1105          */
1106         char      name[2];
1107
1108         name[0] = input[1];
1109         name[1] = '\0';
1110
1111         v = VarFind(name, ctxt, FIND_ENV | FIND_GLOBAL | FIND_CMD);
1112         if (v == NULL) {
1113             if ((ctxt == VAR_CMD) || (ctxt == VAR_GLOBAL)) {
1114                 /*
1115                  * If substituting a local variable in a non-local context,
1116                  * assume it's for dynamic source stuff. We have to handle
1117                  * this specially and return the longhand for the variable
1118                  * with the dollar sign escaped so it makes it back to the
1119                  * caller. Only four of the local variables are treated
1120                  * specially as they are the only four that will be set
1121                  * when dynamic sources are expanded.
1122                  */
1123                 /* XXX: It looks like $% and $! are reversed here */
1124                 *freePtr = FALSE;
1125                 *lengthPtr = 2;
1126                 switch (input[1]) {
1127                     case '@':
1128                         return ("$(.TARGET)");
1129                     case '%':
1130                         return ("$(.ARCHIVE)");
1131                     case '*':
1132                         return ("$(.PREFIX)");
1133                     case '!':
1134                         return ("$(.MEMBER)");
1135                     default:
1136                         return (err ? var_Error : varNoError);
1137                 }
1138             } else {
1139                 *freePtr = FALSE;
1140                 *lengthPtr = 2;
1141                 return (err ? var_Error : varNoError);
1142             }
1143         } else {
1144             dynamic = FALSE;
1145             *freePtr = FALSE;
1146             *lengthPtr = 2;
1147             haveModifier = FALSE;
1148             startc = '\0';
1149             endc = input[1];
1150             tstr = rw_str + 1;
1151         }
1152     }
1153
1154         /*
1155          * Make sure this variable is fully expanded.
1156          * XXX This section really should be its own function.
1157          */
1158         {
1159                 if (v->flags & VAR_IN_USE) {
1160                         Fatal("Variable %s is recursive.", v->name);
1161                         /* NOTREACHED */
1162                 } else {
1163                         v->flags |= VAR_IN_USE;
1164                 }
1165
1166                 /*
1167                  * Before doing any modification, we have to make sure the
1168                  * value has been fully expanded. If it looks like recursion
1169                  * might be necessary (there's a dollar sign somewhere in the
1170                  * variable's value) we just call Var_Subst to do any other
1171                  * substitutions that are necessary. Note that the value
1172                  * returned by Var_Subst will have been
1173                  * dynamically-allocated, so it will need freeing when we
1174                  * return.
1175                  */
1176                 rw_str = (char *)Buf_GetAll(v->val, (size_t *)NULL);
1177                 if (strchr(rw_str, '$') != NULL) {
1178                         Buffer *buf;
1179
1180                         buf = Var_Subst(NULL, rw_str, ctxt, err);
1181                         rw_str = Buf_GetAll(buf, NULL);
1182                         Buf_Destroy(buf, FALSE);
1183
1184                         *freePtr = TRUE;
1185                 }
1186                 v->flags &= ~VAR_IN_USE;
1187         }
1188
1189     /*
1190      * Now we need to apply any modifiers the user wants applied.
1191      * These are:
1192      *            :M<pattern>   words which match the given <pattern>.
1193      *                          <pattern> is of the standard file
1194      *                          wildcarding form.
1195      *            :S<d><pat1><d><pat2><d>[g]
1196      *                          Substitute <pat2> for <pat1> in the value
1197      *            :C<d><pat1><d><pat2><d>[g]
1198      *                          Substitute <pat2> for regex <pat1> in the value
1199      *            :H            Substitute the head of each word
1200      *            :T            Substitute the tail of each word
1201      *            :E            Substitute the extension (minus '.') of
1202      *                          each word
1203      *            :R            Substitute the root of each word
1204      *                          (pathname minus the suffix).
1205      *            :lhs=rhs      Like :S, but the rhs goes to the end of
1206      *                          the invocation.
1207      *            :U            Converts variable to upper-case.
1208      *            :L            Converts variable to lower-case.
1209      */
1210     if (haveModifier) {
1211         char    *cp;
1212         /*
1213          * Skip initial colon while putting it back.
1214          */
1215         *tstr++ = ':';
1216         while (*tstr != endc) {
1217             char        *newStr;    /* New value to return */
1218             char        termc;      /* Character which terminated scan */
1219
1220             DEBUGF(VAR, ("Applying :%c to \"%s\"\n", *tstr, rw_str));
1221             switch (*tstr) {
1222                 case 'N':
1223                 case 'M':
1224                 {
1225                     char    *pattern;
1226                     char    *cp2;
1227                     Boolean copy;
1228
1229                     copy = FALSE;
1230                     for (cp = tstr + 1;
1231                          *cp != '\0' && *cp != ':' && *cp != endc;
1232                          cp++)
1233                     {
1234                         if (*cp == '\\' && (cp[1] == ':' || cp[1] == endc)) {
1235                             copy = TRUE;
1236                             cp++;
1237                         }
1238                     }
1239                     termc = *cp;
1240                     *cp = '\0';
1241                     if (copy) {
1242                         /*
1243                          * Need to compress the \:'s out of the pattern, so
1244                          * allocate enough room to hold the uncompressed
1245                          * pattern (note that cp started at tstr+1, so
1246                          * cp - tstr takes the null byte into account) and
1247                          * compress the pattern into the space.
1248                          */
1249                         pattern = emalloc(cp - tstr);
1250                         for (cp2 = pattern, cp = tstr + 1;
1251                              *cp != '\0';
1252                              cp++, cp2++)
1253                         {
1254                             if ((*cp == '\\') &&
1255                                 (cp[1] == ':' || cp[1] == endc)) {
1256                                     cp++;
1257                             }
1258                             *cp2 = *cp;
1259                         }
1260                         *cp2 = '\0';
1261                     } else {
1262                         pattern = &tstr[1];
1263                     }
1264                     if (*tstr == 'M' || *tstr == 'm') {
1265                         newStr = VarModify(rw_str, VarMatch, pattern);
1266                     } else {
1267                         newStr = VarModify(rw_str, VarNoMatch, pattern);
1268                     }
1269                     if (copy) {
1270                         free(pattern);
1271                     }
1272                     break;
1273                 }
1274                 case 'S':
1275                 {
1276                     VarPattern      pattern;
1277                     char            del;
1278                     Buffer          *buf;       /* Buffer for patterns */
1279
1280                     pattern.flags = 0;
1281                     del = tstr[1];
1282                     tstr += 2;
1283
1284                     /*
1285                      * If pattern begins with '^', it is anchored to the
1286                      * start of the word -- skip over it and flag pattern.
1287                      */
1288                     if (*tstr == '^') {
1289                         pattern.flags |= VAR_MATCH_START;
1290                         tstr += 1;
1291                     }
1292
1293                     buf = Buf_Init(0);
1294
1295                     /*
1296                      * Pass through the lhs looking for 1) escaped delimiters,
1297                      * '$'s and backslashes (place the escaped character in
1298                      * uninterpreted) and 2) unescaped $'s that aren't before
1299                      * the delimiter (expand the variable substitution).
1300                      * The result is left in the Buffer buf.
1301                      */
1302                     for (cp = tstr; *cp != '\0' && *cp != del; cp++) {
1303                         if ((*cp == '\\') &&
1304                             ((cp[1] == del) ||
1305                              (cp[1] == '$') ||
1306                              (cp[1] == '\\')))
1307                         {
1308                             Buf_AddByte(buf, (Byte)cp[1]);
1309                             cp++;
1310                         } else if (*cp == '$') {
1311                             if (cp[1] != del) {
1312                                 /*
1313                                  * If unescaped dollar sign not before the
1314                                  * delimiter, assume it's a variable
1315                                  * substitution and recurse.
1316                                  */
1317                                 char        *cp2;
1318                                 size_t len;
1319                                 Boolean     freeIt;
1320
1321                                 cp2 = Var_Parse(cp, ctxt, err, &len, &freeIt);
1322                                 Buf_Append(buf, cp2);
1323                                 if (freeIt) {
1324                                     free(cp2);
1325                                 }
1326                                 cp += len - 1;
1327                             } else {
1328                                 /*
1329                                  * Unescaped $ at end of pattern => anchor
1330                                  * pattern at end.
1331                                  */
1332                                 pattern.flags |= VAR_MATCH_END;
1333                             }
1334                         } else {
1335                             Buf_AddByte(buf, (Byte)*cp);
1336                         }
1337                     }
1338
1339                     Buf_AddByte(buf, (Byte)'\0');
1340
1341                     /*
1342                      * If lhs didn't end with the delimiter, complain and
1343                      * exit.
1344                      */
1345                     if (*cp != del) {
1346                         Fatal("Unclosed substitution for %s (%c missing)",
1347                               v->name, del);
1348                     }
1349
1350                     /*
1351                      * Fetch pattern and destroy buffer, but preserve the data
1352                      * in it, since that's our lhs. Note that Buf_GetAll
1353                      * will return the actual number of bytes, which includes
1354                      * the null byte, so we have to decrement the length by
1355                      * one.
1356                      */
1357                     pattern.lhs = (char *)Buf_GetAll(buf, &pattern.leftLen);
1358                     pattern.leftLen--;
1359                     Buf_Destroy(buf, FALSE);
1360
1361                     /*
1362                      * Now comes the replacement string. Three things need to
1363                      * be done here: 1) need to compress escaped delimiters and
1364                      * ampersands and 2) need to replace unescaped ampersands
1365                      * with the l.h.s. (since this isn't regexp, we can do
1366                      * it right here) and 3) expand any variable substitutions.
1367                      */
1368                     buf = Buf_Init(0);
1369
1370                     tstr = cp + 1;
1371                     for (cp = tstr; *cp != '\0' && *cp != del; cp++) {
1372                         if ((*cp == '\\') &&
1373                             ((cp[1] == del) ||
1374                              (cp[1] == '&') ||
1375                              (cp[1] == '\\') ||
1376                              (cp[1] == '$')))
1377                         {
1378                             Buf_AddByte(buf, (Byte)cp[1]);
1379                             cp++;
1380                         } else if ((*cp == '$') && (cp[1] != del)) {
1381                             char    *cp2;
1382                             size_t len;
1383                             Boolean freeIt;
1384
1385                             cp2 = Var_Parse(cp, ctxt, err, &len, &freeIt);
1386                             Buf_Append(buf, cp2);
1387                             cp += len - 1;
1388                             if (freeIt) {
1389                                 free(cp2);
1390                             }
1391                         } else if (*cp == '&') {
1392                             Buf_AddBytes(buf, pattern.leftLen,
1393                                          (Byte *)pattern.lhs);
1394                         } else {
1395                             Buf_AddByte(buf, (Byte)*cp);
1396                         }
1397                     }
1398
1399                     Buf_AddByte(buf, (Byte)'\0');
1400
1401                     /*
1402                      * If didn't end in delimiter character, complain
1403                      */
1404                     if (*cp != del) {
1405                         Fatal("Unclosed substitution for %s (%c missing)",
1406                               v->name, del);
1407                     }
1408
1409                     pattern.rhs = (char *)Buf_GetAll(buf, &pattern.rightLen);
1410                     pattern.rightLen--;
1411                     Buf_Destroy(buf, FALSE);
1412
1413                     /*
1414                      * Check for global substitution. If 'g' after the final
1415                      * delimiter, substitution is global and is marked that
1416                      * way.
1417                      */
1418                     cp++;
1419                     if (*cp == 'g') {
1420                         pattern.flags |= VAR_SUB_GLOBAL;
1421                         cp++;
1422                     }
1423
1424                     /*
1425                      * Global substitution of the empty string causes an
1426                      * infinite number of matches, unless anchored by '^'
1427                      * (start of string) or '$' (end of string). Catch the
1428                      * infinite substitution here.
1429                      * Note that flags can only contain the 3 bits we're
1430                      * interested in so we don't have to mask unrelated
1431                      * bits. We can test for equality.
1432                      */
1433                     if (!pattern.leftLen && pattern.flags == VAR_SUB_GLOBAL)
1434                         Fatal("Global substitution of the empty string");
1435
1436                     termc = *cp;
1437                     newStr = VarModify(rw_str, VarSubstitute, &pattern);
1438                     /*
1439                      * Free the two strings.
1440                      */
1441                     free(pattern.lhs);
1442                     free(pattern.rhs);
1443                     break;
1444                 }
1445                 case 'C':
1446                 {
1447                     int         delim;
1448                     VarREPattern    pattern;
1449                     char           *re;
1450                     int             error;
1451
1452                     pattern.flags = 0;
1453                     delim = tstr[1];
1454                     tstr += 2;
1455
1456                     cp = tstr;
1457
1458                     if ((re = VarGetPattern(ctxt, err, &cp, delim, NULL,
1459                         NULL, NULL)) == NULL) {
1460                         /* was: goto cleanup */
1461                         *lengthPtr = cp - input + 1;
1462                         if (*freePtr)
1463                             free(rw_str);
1464                         if (delim != '\0')
1465                             Fatal("Unclosed substitution for %s (%c missing)",
1466                                   v->name, delim);
1467                         return (var_Error);
1468                     }
1469
1470                     if ((pattern.replace = VarGetPattern(ctxt, err, &cp,
1471                         delim, NULL, NULL, NULL)) == NULL){
1472                         free(re);
1473
1474                         /* was: goto cleanup */
1475                         *lengthPtr = cp - input + 1;
1476                         if (*freePtr)
1477                             free(rw_str);
1478                         if (delim != '\0')
1479                             Fatal("Unclosed substitution for %s (%c missing)",
1480                                   v->name, delim);
1481                         return (var_Error);
1482                     }
1483
1484                     for (;; cp++) {
1485                         switch (*cp) {
1486                         case 'g':
1487                             pattern.flags |= VAR_SUB_GLOBAL;
1488                             continue;
1489                         case '1':
1490                             pattern.flags |= VAR_SUB_ONE;
1491                             continue;
1492                         default:
1493                             break;
1494                         }
1495                         break;
1496                     }
1497
1498                     termc = *cp;
1499
1500                     error = regcomp(&pattern.re, re, REG_EXTENDED);
1501                     free(re);
1502                     if (error)  {
1503                         *lengthPtr = cp - input + 1;
1504                         VarREError(error, &pattern.re, "RE substitution error");
1505                         free(pattern.replace);
1506                         return (var_Error);
1507                     }
1508
1509                     pattern.nsub = pattern.re.re_nsub + 1;
1510                     if (pattern.nsub < 1)
1511                         pattern.nsub = 1;
1512                     if (pattern.nsub > 10)
1513                         pattern.nsub = 10;
1514                     pattern.matches = emalloc(pattern.nsub *
1515                                               sizeof(regmatch_t));
1516                     newStr = VarModify(rw_str, VarRESubstitute, &pattern);
1517                     regfree(&pattern.re);
1518                     free(pattern.replace);
1519                     free(pattern.matches);
1520                     break;
1521                 }
1522                 case 'L':
1523                     if (tstr[1] == endc || tstr[1] == ':') {
1524                         Buffer *buf;
1525                         buf = Buf_Init(MAKE_BSIZE);
1526                         for (cp = rw_str; *cp ; cp++)
1527                             Buf_AddByte(buf, (Byte)tolower(*cp));
1528
1529                         Buf_AddByte(buf, (Byte)'\0');
1530                         newStr = (char *)Buf_GetAll(buf, (size_t *)NULL);
1531                         Buf_Destroy(buf, FALSE);
1532
1533                         cp = tstr + 1;
1534                         termc = *cp;
1535                         break;
1536                     }
1537                     /* FALLTHROUGH */
1538                 case 'O':
1539                     if (tstr[1] == endc || tstr[1] == ':') {
1540                         newStr = VarSortWords(rw_str, SortIncreasing);
1541                         cp = tstr + 1;
1542                         termc = *cp;
1543                         break;
1544                     }
1545                     /* FALLTHROUGH */
1546                 case 'Q':
1547                     if (tstr[1] == endc || tstr[1] == ':') {
1548                         newStr = Var_Quote(rw_str);
1549                         cp = tstr + 1;
1550                         termc = *cp;
1551                         break;
1552                     }
1553                     /*FALLTHRU*/
1554                 case 'T':
1555                     if (tstr[1] == endc || tstr[1] == ':') {
1556                         newStr = VarModify(rw_str, VarTail, (void *)NULL);
1557                         cp = tstr + 1;
1558                         termc = *cp;
1559                         break;
1560                     }
1561                     /*FALLTHRU*/
1562                 case 'U':
1563                     if (tstr[1] == endc || tstr[1] == ':') {
1564                         Buffer *buf;
1565                         buf = Buf_Init(MAKE_BSIZE);
1566                         for (cp = rw_str; *cp ; cp++)
1567                             Buf_AddByte(buf, (Byte)toupper(*cp));
1568
1569                         Buf_AddByte(buf, (Byte)'\0');
1570                         newStr = (char *)Buf_GetAll(buf, (size_t *)NULL);
1571                         Buf_Destroy(buf, FALSE);
1572
1573                         cp = tstr + 1;
1574                         termc = *cp;
1575                         break;
1576                     }
1577                     /* FALLTHROUGH */
1578                 case 'H':
1579                     if (tstr[1] == endc || tstr[1] == ':') {
1580                         newStr = VarModify(rw_str, VarHead, (void *)NULL);
1581                         cp = tstr + 1;
1582                         termc = *cp;
1583                         break;
1584                     }
1585                     /*FALLTHRU*/
1586                 case 'E':
1587                     if (tstr[1] == endc || tstr[1] == ':') {
1588                         newStr = VarModify(rw_str, VarSuffix, (void *)NULL);
1589                         cp = tstr + 1;
1590                         termc = *cp;
1591                         break;
1592                     }
1593                     /*FALLTHRU*/
1594                 case 'R':
1595                     if (tstr[1] == endc || tstr[1] == ':') {
1596                         newStr = VarModify(rw_str, VarRoot, (void *)NULL);
1597                         cp = tstr + 1;
1598                         termc = *cp;
1599                         break;
1600                     }
1601                     /*FALLTHRU*/
1602 #ifdef SUNSHCMD
1603                 case 's':
1604                     if (tstr[1] == 'h' && (tstr[2] == endc || tstr[2] == ':')) {
1605                         const char *error;
1606                         Buffer *buf;
1607
1608                         buf = Cmd_Exec(rw_str, &error);
1609                         newStr = Buf_GetAll(buf, NULL);
1610                         Buf_Destroy(buf, FALSE);
1611
1612                         if (error)
1613                             Error(error, rw_str);
1614                         cp = tstr + 2;
1615                         termc = *cp;
1616                         break;
1617                     }
1618                     /*FALLTHRU*/
1619 #endif
1620                 default:
1621                 {
1622 #ifdef SYSVVARSUB
1623                     /*
1624                      * This can either be a bogus modifier or a System-V
1625                      * substitution command.
1626                      */
1627                     VarPattern  pattern;
1628                     Boolean     eqFound;
1629                     int         cnt;
1630
1631                     pattern.flags = 0;
1632                     eqFound = FALSE;
1633                     /*
1634                      * First we make a pass through the string trying
1635                      * to verify it is a SYSV-make-style translation:
1636                      * it must be: <string1>=<string2>)
1637                      */
1638                     cp = tstr;
1639                     cnt = 1;
1640                     while (*cp != '\0' && cnt) {
1641                         if (*cp == '=') {
1642                             eqFound = TRUE;
1643                             /* continue looking for endc */
1644                         }
1645                         else if (*cp == endc)
1646                             cnt--;
1647                         else if (*cp == startc)
1648                             cnt++;
1649                         if (cnt)
1650                             cp++;
1651                     }
1652                     if (*cp == endc && eqFound) {
1653                         int delim;
1654
1655                         /*
1656                          * Now we break this sucker into the lhs and
1657                          * rhs. We must null terminate them of course.
1658                          */
1659                         cp = tstr;
1660
1661                         delim = '=';
1662                         if ((pattern.lhs = VarGetPattern(ctxt,
1663                             err, &cp, delim, &pattern.flags, &pattern.leftLen,
1664                             NULL)) == NULL) {
1665                                 /* was: goto cleanup */
1666                                 *lengthPtr = cp - input + 1;
1667                                 if (*freePtr)
1668                                     free(rw_str);
1669                                 if (delim != '\0')
1670                                     Fatal("Unclosed substitution for %s (%c missing)",
1671                                           v->name, delim);
1672                                 return (var_Error);
1673                         }
1674
1675                         delim = endc;
1676                         if ((pattern.rhs = VarGetPattern(ctxt,
1677                             err, &cp, delim, NULL, &pattern.rightLen,
1678                             &pattern)) == NULL) {
1679                                 /* was: goto cleanup */
1680                                 *lengthPtr = cp - input + 1;
1681                                 if (*freePtr)
1682                                     free(rw_str);
1683                                 if (delim != '\0')
1684                                     Fatal("Unclosed substitution for %s (%c missing)",
1685                                           v->name, delim);
1686                                 return (var_Error);
1687                         }
1688
1689                         /*
1690                          * SYSV modifications happen through the whole
1691                          * string. Note the pattern is anchored at the end.
1692                          */
1693                         termc = *--cp;
1694                         delim = '\0';
1695                         newStr = VarModify(rw_str, VarSYSVMatch, &pattern);
1696
1697                         free(pattern.lhs);
1698                         free(pattern.rhs);
1699
1700                         termc = endc;
1701                     } else
1702 #endif
1703                     {
1704                         Error("Unknown modifier '%c'\n", *tstr);
1705                         for (cp = tstr+1;
1706                              *cp != ':' && *cp != endc && *cp != '\0';
1707                              cp++)
1708                                  continue;
1709                         termc = *cp;
1710                         newStr = var_Error;
1711                     }
1712                 }
1713             }
1714             DEBUGF(VAR, ("Result is \"%s\"\n", newStr));
1715
1716             if (*freePtr) {
1717                 free(rw_str);
1718             }
1719             rw_str = newStr;
1720             if (rw_str != var_Error) {
1721                 *freePtr = TRUE;
1722             } else {
1723                 *freePtr = FALSE;
1724             }
1725             if (termc == '\0') {
1726                 Error("Unclosed variable specification for %s", v->name);
1727             } else if (termc == ':') {
1728                 *cp++ = termc;
1729             } else {
1730                 *cp = termc;
1731             }
1732             tstr = cp;
1733         }
1734         *lengthPtr = tstr - input + 1;
1735     } else {
1736         *lengthPtr = tstr - input + 1;
1737         *tstr = endc;
1738     }
1739
1740     if (v->flags & VAR_FROM_ENV) {
1741         Boolean   destroy = FALSE;
1742
1743         if (rw_str != (char *)Buf_GetAll(v->val, (size_t *)NULL)) {
1744             destroy = TRUE;
1745         } else {
1746             /*
1747              * Returning the value unmodified, so tell the caller to free
1748              * the thing.
1749              */
1750             *freePtr = TRUE;
1751         }
1752         VarDestroy(v, destroy);
1753     } else if (v->flags & VAR_JUNK) {
1754         /*
1755          * Perform any free'ing needed and set *freePtr to FALSE so the caller
1756          * doesn't try to free a static pointer.
1757          */
1758         if (*freePtr) {
1759             free(rw_str);
1760         }
1761         *freePtr = FALSE;
1762         VarDestroy(v, TRUE);
1763         if (dynamic) {
1764             rw_str = emalloc(*lengthPtr + 1);
1765             strncpy(rw_str, input, *lengthPtr);
1766             rw_str[*lengthPtr] = '\0';
1767             *freePtr = TRUE;
1768         } else {
1769             rw_str = err ? var_Error : varNoError;
1770         }
1771     }
1772     return (rw_str);
1773 }
1774
1775 /*-
1776  *-----------------------------------------------------------------------
1777  * Var_Subst  --
1778  *      Substitute for all variables in the given string in the given context
1779  *      If undefErr is TRUE, Parse_Error will be called when an undefined
1780  *      variable is encountered.
1781  *
1782  * Results:
1783  *      The resulting string.
1784  *
1785  * Side Effects:
1786  *      None. The old string must be freed by the caller
1787  *-----------------------------------------------------------------------
1788  */
1789 Buffer *
1790 Var_Subst(const char *var, const char *str, GNode *ctxt, Boolean undefErr)
1791 {
1792     Boolean     errorReported;
1793     Buffer      *buf;           /* Buffer for forming things */
1794
1795     /*
1796      * Set TRUE if an error has already been reported to prevent a
1797      * plethora of messages when recursing.
1798      */
1799     errorReported = FALSE;
1800
1801     buf = Buf_Init(0);
1802     while (*str) {
1803         if (var == NULL && (str[0] == '$') && (str[1] == '$')) {
1804             /*
1805              * A dollar sign may be escaped either with another dollar sign.
1806              * In such a case, we skip over the escape character and store the
1807              * dollar sign into the buffer directly.
1808              */
1809             Buf_AddByte(buf, (Byte)str[0]);
1810             str += 2;
1811
1812         } else if (str[0] == '$') {
1813             char        *val;   /* Value to substitute for a variable */
1814             size_t      length; /* Length of the variable invocation */
1815             Boolean     doFree; /* Set true if val should be freed */
1816             /*
1817              * Variable invocation.
1818              */
1819             if (var != NULL) {
1820                 int expand;
1821                 for (;;) {
1822                     if (str[1] == OPEN_PAREN || str[1] == OPEN_BRACE) {
1823                         size_t          ln;
1824                         const char      *p = str + 2;
1825
1826                         /*
1827                          * Scan up to the end of the variable name.
1828                          */
1829                         while (*p != '\0' &&
1830                                *p != ':' &&
1831                                *p != CLOSE_PAREN &&
1832                                *p != CLOSE_BRACE &&
1833                                *p != '$') {
1834                             ++p;
1835                         }
1836
1837                         /*
1838                          * A variable inside the variable. We cannot expand
1839                          * the external variable yet, so we try again with
1840                          * the nested one
1841                          */
1842                         if (*p == '$') {
1843                             Buf_AppendRange(buf, str, p);
1844                             str = p;
1845                             continue;
1846                         }
1847
1848                         ln = p - (str + 2);
1849                         if (var[ln] == '\0' && strncmp(var, str + 2, ln) == 0) {
1850                             expand = TRUE;
1851                         } else {
1852                             /*
1853                              * Not the variable we want to expand, scan
1854                              * until the next variable
1855                              */
1856                             while (*p != '$' && *p != '\0')
1857                                 ++p;
1858
1859                             Buf_AppendRange(buf, str, p);
1860                             str = p;
1861                             expand = FALSE;
1862                         }
1863                     } else {
1864                         /*
1865                          * Single letter variable name
1866                          */
1867                         if (var[1] == '\0' && var[0] == str[1]) {
1868                             expand = TRUE;
1869                         } else {
1870                             Buf_AddBytes(buf, 2, (const Byte *)str);
1871                             str += 2;
1872                             expand = FALSE;
1873                         }
1874                     }
1875                     break;
1876                 }
1877                 if (!expand)
1878                     continue;
1879             }
1880
1881             val = Var_Parse(str, ctxt, undefErr, &length, &doFree);
1882
1883             /*
1884              * When we come down here, val should either point to the
1885              * value of this variable, suitably modified, or be NULL.
1886              * Length should be the total length of the potential
1887              * variable invocation (from $ to end character...)
1888              */
1889             if (val == var_Error || val == varNoError) {
1890                 /*
1891                  * If performing old-time variable substitution, skip over
1892                  * the variable and continue with the substitution. Otherwise,
1893                  * store the dollar sign and advance str so we continue with
1894                  * the string...
1895                  */
1896                 if (oldVars) {
1897                     str += length;
1898                 } else if (undefErr) {
1899                     /*
1900                      * If variable is undefined, complain and skip the
1901                      * variable. The complaint will stop us from doing anything
1902                      * when the file is parsed.
1903                      */
1904                     if (!errorReported) {
1905                         Parse_Error(PARSE_FATAL,
1906                                      "Undefined variable \"%.*s\"",length,str);
1907                     }
1908                     str += length;
1909                     errorReported = TRUE;
1910                 } else {
1911                     Buf_AddByte(buf, (Byte)*str);
1912                     str += 1;
1913                 }
1914             } else {
1915                 /*
1916                  * We've now got a variable structure to store in. But first,
1917                  * advance the string pointer.
1918                  */
1919                 str += length;
1920
1921                 /*
1922                  * Copy all the characters from the variable value straight
1923                  * into the new string.
1924                  */
1925                 Buf_Append(buf, val);
1926                 if (doFree) {
1927                     free(val);
1928                 }
1929             }
1930         } else {
1931             /*
1932              * Skip as many characters as possible -- either to the end of
1933              * the string or to the next dollar sign (variable invocation).
1934              */
1935             const char *cp = str;
1936
1937             do {
1938                 str++;
1939             } while (str[0] != '$' && str[0] != '\0');
1940
1941             Buf_AppendRange(buf, cp, str);
1942         }
1943     }
1944
1945     return (buf);
1946 }
1947
1948 /*-
1949  *-----------------------------------------------------------------------
1950  * Var_GetTail --
1951  *      Return the tail from each of a list of words. Used to set the
1952  *      System V local variables.
1953  *
1954  * Results:
1955  *      The resulting string.
1956  *
1957  * Side Effects:
1958  *      None.
1959  *
1960  *-----------------------------------------------------------------------
1961  */
1962 char *
1963 Var_GetTail(char *file)
1964 {
1965
1966     return (VarModify(file, VarTail, (void *)NULL));
1967 }
1968
1969 /*-
1970  *-----------------------------------------------------------------------
1971  * Var_GetHead --
1972  *      Find the leading components of a (list of) filename(s).
1973  *      XXX: VarHead does not replace foo by ., as (sun) System V make
1974  *      does.
1975  *
1976  * Results:
1977  *      The leading components.
1978  *
1979  * Side Effects:
1980  *      None.
1981  *
1982  *-----------------------------------------------------------------------
1983  */
1984 char *
1985 Var_GetHead(char *file)
1986 {
1987
1988     return (VarModify(file, VarHead, (void *)NULL));
1989 }
1990
1991 /*-
1992  *-----------------------------------------------------------------------
1993  * Var_Init --
1994  *      Initialize the module
1995  *
1996  * Results:
1997  *      None
1998  *
1999  * Side Effects:
2000  *      The VAR_CMD and VAR_GLOBAL contexts are created
2001  *-----------------------------------------------------------------------
2002  */
2003 void
2004 Var_Init(void)
2005 {
2006
2007     VAR_GLOBAL = Targ_NewGN("Global");
2008     VAR_CMD = Targ_NewGN("Command");
2009 }
2010
2011 /****************** PRINT DEBUGGING INFO *****************/
2012 static int
2013 VarPrintVar(void *vp, void *dummy __unused)
2014 {
2015     Var    *v = (Var *) vp;
2016
2017     printf("%-16s = %s\n", v->name, (char *)Buf_GetAll(v->val, (size_t *)NULL));
2018     return (0);
2019 }
2020
2021 /*-
2022  *-----------------------------------------------------------------------
2023  * Var_Dump --
2024  *      print all variables in a context
2025  *-----------------------------------------------------------------------
2026  */
2027 void
2028 Var_Dump(GNode *ctxt)
2029 {
2030
2031     Lst_ForEach(&ctxt->context, VarPrintVar, (void *)NULL);
2032 }