contrib/perl5/regcomp.c

   1 /*    regcomp.c
   2  */
   3
   4 /*
   5  * "A fair jaw-cracker dwarf-language must be."  --Samwise Gamgee
   6  */
   7
   8 /* NOTE: this is derived from Henry Spencer's regexp code, and should not
   9  * confused with the original package (see point 3 below).  Thanks, Henry!
  10  */
  11
  12 /* Additional note: this code is very heavily munged from Henry's version
  13  * in places.  In some spots I've traded clarity for efficiency, so don't
  14  * blame Henry for some of the lack of readability.
  15  */
  16
  17 /* The names of the functions have been changed from regcomp and
  18  * regexec to  pregcomp and pregexec in order to avoid conflicts
  19  * with the POSIX routines of the same names.
  20 */
  21
  22 #ifdef PERL_EXT_RE_BUILD
  23 /* need to replace pregcomp et al, so enable that */
  24 #  ifndef PERL_IN_XSUB_RE
  25 #    define PERL_IN_XSUB_RE
  26 #  endif
  27 /* need access to debugger hooks */
  28 #  ifndef DEBUGGING
  29 #    define DEBUGGING
  30 #  endif
  31 #endif
  32
  33 #ifdef PERL_IN_XSUB_RE
  34 /* We *really* need to overwrite these symbols: */
  35 #  define Perl_pregcomp my_regcomp
  36 #  define Perl_regdump my_regdump
  37 #  define Perl_regprop my_regprop
  38 /* *These* symbols are masked to allow static link. */
  39 #  define Perl_pregfree my_regfree
  40 #  define Perl_regnext my_regnext
  41 #endif
  42
  43 /*SUPPRESS 112*/
  44 /*
  45  * pregcomp and pregexec -- regsub and regerror are not used in perl
  46  *
  47  *      Copyright (c) 1986 by University of Toronto.
  48  *      Written by Henry Spencer.  Not derived from licensed software.
  49  *
  50  *      Permission is granted to anyone to use this software for any
  51  *      purpose on any computer system, and to redistribute it freely,
  52  *      subject to the following restrictions:
  53  *
  54  *      1. The author is not responsible for the consequences of use of
  55  *              this software, no matter how awful, even if they arise
  56  *              from defects in it.
  57  *
  58  *      2. The origin of this software must not be misrepresented, either
  59  *              by explicit claim or by omission.
  60  *
  61  *      3. Altered versions must be plainly marked as such, and must not
  62  *              be misrepresented as being the original software.
  63  *
  64  *
  65  ****    Alterations to Henry's code are...
  66  ****
  67  ****    Copyright (c) 1991-1999, Larry Wall
  68  ****
  69  ****    You may distribute under the terms of either the GNU General Public
  70  ****    License or the Artistic License, as specified in the README file.
  71
  72  *
  73  * Beware that some of this code is subtly aware of the way operator
  74  * precedence is structured in regular expressions.  Serious changes in
  75  * regular-expression syntax might require a total rethink.
  76  */
  77 #include "EXTERN.h"
  78 #include "perl.h"
  79
  80 #ifndef PERL_IN_XSUB_RE
  81 #  include "INTERN.h"
  82 #endif
  83
  84 #define REG_COMP_C
  85 #include "regcomp.h"
  86
  87 #ifdef op
  88 #undef op
  89 #endif /* op */
  90
  91 #ifdef MSDOS
  92 # if defined(BUGGY_MSC6)
  93  /* MSC 6.00A breaks on op/regexp.t test 85 unless we turn this off */
  94  # pragma optimize("a",off)
  95  /* But MSC 6.00A is happy with 'w', for aliases only across function calls*/
  96  # pragma optimize("w",on )
  97 # endif /* BUGGY_MSC6 */
  98 #endif /* MSDOS */
  99
 100 #ifndef STATIC
 101 #define STATIC  static
 102 #endif
 103
 104 #define ISMULT1(c)      ((c) == '*' || (c) == '+' || (c) == '?')
 105 #define ISMULT2(s)      ((*s) == '*' || (*s) == '+' || (*s) == '?' || \
 106         ((*s) == '{' && regcurly(s)))
 107 #ifdef atarist
 108 #define PERL_META       "^$.[()|?+*\\"
 109 #else
 110 #define META    "^$.[()|?+*\\"
 111 #endif
 112
 113 #ifdef SPSTART
 114 #undef SPSTART          /* dratted cpp namespace... */
 115 #endif
 116 /*
 117  * Flags to be passed up and down.
 118  */
 119 #define WORST           0       /* Worst case. */
 120 #define HASWIDTH        0x1     /* Known to match non-null strings. */
 121 #define SIMPLE          0x2     /* Simple enough to be STAR/PLUS operand. */
 122 #define SPSTART         0x4     /* Starts with * or +. */
 123 #define TRYAGAIN        0x8     /* Weeded out a declaration. */
 124
 125 /*
 126  * Forward declarations for pregcomp()'s friends.
 127  */
 128
 129 #ifndef PERL_OBJECT
 130 static regnode *reg _((I32, I32 *));
 131 static regnode *reganode _((U8, U32));
 132 static regnode *regatom _((I32 *));
 133 static regnode *regbranch _((I32 *, I32));
 134 static void regc _((U8, char *));
 135 static regnode *regclass _((void));
 136 STATIC I32 regcurly _((char *));
 137 static regnode *reg_node _((U8));
 138 static regnode *regpiece _((I32 *));
 139 static void reginsert _((U8, regnode *));
 140 static void regoptail _((regnode *, regnode *));
 141 static void regtail _((regnode *, regnode *));
 142 static char* regwhite _((char *, char *));
 143 static char* nextchar _((void));
 144 static void re_croak2 _((const char* pat1,const char* pat2,...)) __attribute__((noreturn));
 145 #endif
 146
 147 /* Length of a variant. */
 148
 149 #ifndef PERL_OBJECT
 150 typedef struct {
 151     I32 len_min;
 152     I32 len_delta;
 153     I32 pos_min;
 154     I32 pos_delta;
 155     SV *last_found;
 156     I32 last_end;                       /* min value, <0 unless valid. */
 157     I32 last_start_min;
 158     I32 last_start_max;
 159     SV **longest;                       /* Either &l_fixed, or &l_float. */
 160     SV *longest_fixed;
 161     I32 offset_fixed;
 162     SV *longest_float;
 163     I32 offset_float_min;
 164     I32 offset_float_max;
 165     I32 flags;
 166 } scan_data_t;
 167 #endif
 168
 169 static scan_data_t zero_scan_data = { 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0 };
 170
 171 #define SF_BEFORE_EOL           (SF_BEFORE_SEOL|SF_BEFORE_MEOL)
 172 #define SF_BEFORE_SEOL          0x1
 173 #define SF_BEFORE_MEOL          0x2
 174 #define SF_FIX_BEFORE_EOL       (SF_FIX_BEFORE_SEOL|SF_FIX_BEFORE_MEOL)
 175 #define SF_FL_BEFORE_EOL        (SF_FL_BEFORE_SEOL|SF_FL_BEFORE_MEOL)
 176
 177 #ifdef NO_UNARY_PLUS
 178 #  define SF_FIX_SHIFT_EOL      (0+2)
 179 #  define SF_FL_SHIFT_EOL               (0+4)
 180 #else
 181 #  define SF_FIX_SHIFT_EOL      (+2)
 182 #  define SF_FL_SHIFT_EOL               (+4)
 183 #endif
 184
 185 #define SF_FIX_BEFORE_SEOL      (SF_BEFORE_SEOL << SF_FIX_SHIFT_EOL)
 186 #define SF_FIX_BEFORE_MEOL      (SF_BEFORE_MEOL << SF_FIX_SHIFT_EOL)
 187
 188 #define SF_FL_BEFORE_SEOL       (SF_BEFORE_SEOL << SF_FL_SHIFT_EOL)
 189 #define SF_FL_BEFORE_MEOL       (SF_BEFORE_MEOL << SF_FL_SHIFT_EOL) /* 0x20 */
 190 #define SF_IS_INF               0x40
 191 #define SF_HAS_PAR              0x80
 192 #define SF_IN_PAR               0x100
 193 #define SF_HAS_EVAL             0x200
 194 #define SCF_DO_SUBSTR           0x400
 195
 196 STATIC void
 197 scan_commit(scan_data_t *data)
 198 {
 199     STRLEN l = SvCUR(data->last_found);
 200     STRLEN old_l = SvCUR(*data->longest);
 201
 202     if ((l >= old_l) && ((l > old_l) || (data->flags & SF_BEFORE_EOL))) {
 203         sv_setsv(*data->longest, data->last_found);
 204         if (*data->longest == data->longest_fixed) {
 205             data->offset_fixed = l ? data->last_start_min : data->pos_min;
 206             if (data->flags & SF_BEFORE_EOL)
 207                 data->flags
 208                     |= ((data->flags & SF_BEFORE_EOL) << SF_FIX_SHIFT_EOL);
 209             else
 210                 data->flags &= ~SF_FIX_BEFORE_EOL;
 211         } else {
 212             data->offset_float_min = l ? data->last_start_min : data->pos_min;
 213             data->offset_float_max = (l
 214                                       ? data->last_start_max
 215                                       : data->pos_min + data->pos_delta);
 216             if (data->flags & SF_BEFORE_EOL)
 217                 data->flags
 218                     |= ((data->flags & SF_BEFORE_EOL) << SF_FL_SHIFT_EOL);
 219             else
 220                 data->flags &= ~SF_FL_BEFORE_EOL;
 221         }
 222     }
 223     SvCUR_set(data->last_found, 0);
 224     data->last_end = -1;
 225     data->flags &= ~SF_BEFORE_EOL;
 226 }
 227
 228 /* Stops at toplevel WHILEM as well as at `last'. At end *scanp is set
 229    to the position after last scanned or to NULL. */
 230
 231 STATIC I32
 232 study_chunk(regnode **scanp, I32 *deltap, regnode *last, scan_data_t *data, U32 flags)
 233                         /* scanp: Start here (read-write). */
 234                         /* deltap: Write maxlen-minlen here. */
 235                         /* last: Stop before this one. */
 236 {
 237     dTHR;
 238     I32 min = 0, pars = 0, code;
 239     regnode *scan = *scanp, *next;
 240     I32 delta = 0;
 241     int is_inf = (flags & SCF_DO_SUBSTR) && (data->flags & SF_IS_INF);
 242     int is_inf_internal = 0;            /* The studied chunk is infinite */
 243     I32 is_par = OP(scan) == OPEN ? ARG(scan) : 0;
 244     scan_data_t data_fake;
 245
 246     while (scan && OP(scan) != END && scan < last) {
 247         /* Peephole optimizer: */
 248
 249         if (regkind[(U8)OP(scan)] == EXACT) {
 250             regnode *n = regnext(scan);
 251             U32 stringok = 1;
 252 #ifdef DEBUGGING
 253             regnode *stop = scan;
 254 #endif
 255
 256             next = scan + (*OPERAND(scan) + 2 - 1)/sizeof(regnode) + 2;
 257             /* Skip NOTHING, merge EXACT*. */
 258             while (n &&
 259                    ( regkind[(U8)OP(n)] == NOTHING ||
 260                      (stringok && (OP(n) == OP(scan))))
 261                    && NEXT_OFF(n)
 262                    && NEXT_OFF(scan) + NEXT_OFF(n) < I16_MAX) {
 263                 if (OP(n) == TAIL || n > next)
 264                     stringok = 0;
 265                 if (regkind[(U8)OP(n)] == NOTHING) {
 266                     NEXT_OFF(scan) += NEXT_OFF(n);
 267                     next = n + NODE_STEP_REGNODE;
 268 #ifdef DEBUGGING
 269                     if (stringok)
 270                         stop = n;
 271 #endif
 272                     n = regnext(n);
 273                 } else {
 274                     int oldl = *OPERAND(scan);
 275                     regnode *nnext = regnext(n);
 276
 277                     if (oldl + *OPERAND(n) > U8_MAX)
 278                         break;
 279                     NEXT_OFF(scan) += NEXT_OFF(n);
 280                     *OPERAND(scan) += *OPERAND(n);
 281                     next = n + (*OPERAND(n) + 2 - 1)/sizeof(regnode) + 2;
 282                     /* Now we can overwrite *n : */
 283                     Move(OPERAND(n) + 1, OPERAND(scan) + oldl + 1,
 284                          *OPERAND(n) + 1, char);
 285 #ifdef DEBUGGING
 286                     if (stringok)
 287                         stop = next - 1;
 288 #endif
 289                     n = nnext;
 290                 }
 291             }
 292 #ifdef DEBUGGING
 293             /* Allow dumping */
 294             n = scan + (*OPERAND(scan) + 2 - 1)/sizeof(regnode) + 2;
 295             while (n <= stop) {
 296                 /* Purify reports a benign UMR here sometimes, because we
 297                  * don't initialize the OP() slot of a node when that node
 298                  * is occupied by just the trailing null of the string in
 299                  * an EXACT node */
 300                 if (regkind[(U8)OP(n)] != NOTHING || OP(n) == NOTHING) {
 301                     OP(n) = OPTIMIZED;
 302                     NEXT_OFF(n) = 0;
 303                 }
 304                 n++;
 305             }
 306 #endif
 307
 308         }
 309         if (OP(scan) != CURLYX) {
 310             int max = (reg_off_by_arg[OP(scan)]
 311                        ? I32_MAX
 312                        /* I32 may be smaller than U16 on CRAYs! */
 313                        : (I32_MAX < U16_MAX ? I32_MAX : U16_MAX));
 314             int off = (reg_off_by_arg[OP(scan)] ? ARG(scan) : NEXT_OFF(scan));
 315             int noff;
 316             regnode *n = scan;
 317
 318             /* Skip NOTHING and LONGJMP. */
 319             while ((n = regnext(n))
 320                    && ((regkind[(U8)OP(n)] == NOTHING && (noff = NEXT_OFF(n)))
 321                        || ((OP(n) == LONGJMP) && (noff = ARG(n))))
 322                    && off + noff < max)
 323                 off += noff;
 324             if (reg_off_by_arg[OP(scan)])
 325                 ARG(scan) = off;
 326             else
 327                 NEXT_OFF(scan) = off;
 328         }
 329         if (OP(scan) == BRANCH || OP(scan) == BRANCHJ
 330                    || OP(scan) == IFTHEN || OP(scan) == SUSPEND) {
 331             next = regnext(scan);
 332             code = OP(scan);
 333
 334             if (OP(next) == code || code == IFTHEN || code == SUSPEND) {
 335                 I32 max1 = 0, min1 = I32_MAX, num = 0;
 336
 337                 if (flags & SCF_DO_SUBSTR)
 338                     scan_commit(data);
 339                 while (OP(scan) == code) {
 340                     I32 deltanext, minnext;
 341
 342                     num++;
 343                     data_fake.flags = 0;
 344                     next = regnext(scan);
 345                     scan = NEXTOPER(scan);
 346                     if (code != BRANCH)
 347                         scan = NEXTOPER(scan);
 348                     /* We suppose the run is continuous, last=next...*/
 349                     minnext = study_chunk(&scan, &deltanext, next,
 350                                           &data_fake, 0);
 351                     if (min1 > minnext)
 352                         min1 = minnext;
 353                     if (max1 < minnext + deltanext)
 354                         max1 = minnext + deltanext;
 355                     if (deltanext == I32_MAX)
 356                         is_inf = is_inf_internal = 1;
 357                     scan = next;
 358                     if (data_fake.flags & (SF_HAS_PAR|SF_IN_PAR))
 359                         pars++;
 360                     if (data && (data_fake.flags & SF_HAS_EVAL))
 361                         data->flags |= SF_HAS_EVAL;
 362                     if (code == SUSPEND)
 363                         break;
 364                 }
 365                 if (code == IFTHEN && num < 2) /* Empty ELSE branch */
 366                     min1 = 0;
 367                 if (flags & SCF_DO_SUBSTR) {
 368                     data->pos_min += min1;
 369                     data->pos_delta += max1 - min1;
 370                     if (max1 != min1 || is_inf)
 371                         data->longest = &(data->longest_float);
 372                 }
 373                 min += min1;
 374                 delta += max1 - min1;
 375             } else if (code == BRANCHJ) /* single branch is optimized. */
 376                 scan = NEXTOPER(NEXTOPER(scan));
 377             else                        /* single branch is optimized. */
 378                 scan = NEXTOPER(scan);
 379             continue;
 380         } else if (OP(scan) == EXACT) {
 381             min += *OPERAND(scan);
 382             if (flags & SCF_DO_SUBSTR) { /* Update longest substr. */
 383                 I32 l = *OPERAND(scan);
 384
 385                 /* The code below prefers earlier match for fixed
 386                    offset, later match for variable offset.  */
 387                 if (data->last_end == -1) { /* Update the start info. */
 388                     data->last_start_min = data->pos_min;
 389                     data->last_start_max = is_inf
 390                         ? I32_MAX : data->pos_min + data->pos_delta;
 391                 }
 392                 sv_catpvn(data->last_found, (char *)(OPERAND(scan)+1), l);
 393                 data->last_end = data->pos_min + l;
 394                 data->pos_min += l; /* As in the first entry. */
 395                 data->flags &= ~SF_BEFORE_EOL;
 396             }
 397         } else if (regkind[(U8)OP(scan)] == EXACT) {
 398             if (flags & SCF_DO_SUBSTR)
 399                 scan_commit(data);
 400             min += *OPERAND(scan);
 401             if (data && (flags & SCF_DO_SUBSTR))
 402                 data->pos_min += *OPERAND(scan);
 403         } else if (strchr(varies,OP(scan))) {
 404             I32 mincount, maxcount, minnext, deltanext, pos_before, fl;
 405             regnode *oscan = scan;
 406
 407             switch (regkind[(U8)OP(scan)]) {
 408             case WHILEM:
 409                 scan = NEXTOPER(scan);
 410                 goto finish;
 411             case PLUS:
 412                 if (flags & SCF_DO_SUBSTR) {
 413                     next = NEXTOPER(scan);
 414                     if (OP(next) == EXACT) {
 415                         mincount = 1;
 416                         maxcount = REG_INFTY;
 417                         next = regnext(scan);
 418                         scan = NEXTOPER(scan);
 419                         goto do_curly;
 420                     }
 421                 }
 422                 if (flags & SCF_DO_SUBSTR)
 423                     data->pos_min++;
 424                 min++;
 425                 /* Fall through. */
 426             case STAR:
 427                 is_inf = is_inf_internal = 1;
 428                 scan = regnext(scan);
 429                 if (flags & SCF_DO_SUBSTR) {
 430                     scan_commit(data);
 431                     data->longest = &(data->longest_float);
 432                 }
 433                 goto optimize_curly_tail;
 434             case CURLY:
 435                 mincount = ARG1(scan);
 436                 maxcount = ARG2(scan);
 437                 next = regnext(scan);
 438                 scan = NEXTOPER(scan) + EXTRA_STEP_2ARGS;
 439               do_curly:
 440                 if (flags & SCF_DO_SUBSTR) {
 441                     if (mincount == 0) scan_commit(data);
 442                     pos_before = data->pos_min;
 443                 }
 444                 if (data) {
 445                     fl = data->flags;
 446                     data->flags &= ~(SF_HAS_PAR|SF_IN_PAR|SF_HAS_EVAL);
 447                     if (is_inf)
 448                         data->flags |= SF_IS_INF;
 449                 }
 450                 /* This will finish on WHILEM, setting scan, or on NULL: */
 451                 minnext = study_chunk(&scan, &deltanext, last, data,
 452                                       mincount == 0
 453                                         ? (flags & ~SCF_DO_SUBSTR) : flags);
 454                 if (!scan)              /* It was not CURLYX, but CURLY. */
 455                     scan = next;
 456                 if (PL_dowarn && (minnext + deltanext == 0)
 457                     && !(data->flags & (SF_HAS_PAR|SF_IN_PAR))
 458                     && maxcount <= 10000) /* Complement check for big count */
 459                     warn("Strange *+?{} on zero-length expression");
 460                 min += minnext * mincount;
 461                 is_inf_internal |= (maxcount == REG_INFTY
 462                                     && (minnext + deltanext) > 0
 463                                    || deltanext == I32_MAX);
 464                 is_inf |= is_inf_internal;
 465                 delta += (minnext + deltanext) * maxcount - minnext * mincount;
 466
 467                 /* Try powerful optimization CURLYX => CURLYN. */
 468                 if (  OP(oscan) == CURLYX && data
 469                       && data->flags & SF_IN_PAR
 470                       && !(data->flags & SF_HAS_EVAL)
 471                       && !deltanext && minnext == 1 ) {
 472                     /* Try to optimize to CURLYN.  */
 473                     regnode *nxt = NEXTOPER(oscan) + EXTRA_STEP_2ARGS;
 474                     regnode *nxt1 = nxt, *nxt2;
 475
 476                     /* Skip open. */
 477                     nxt = regnext(nxt);
 478                     if (!strchr(simple,OP(nxt))
 479                         && !(regkind[(U8)OP(nxt)] == EXACT
 480                              && *OPERAND(nxt) == 1))
 481                         goto nogo;
 482                     nxt2 = nxt;
 483                     nxt = regnext(nxt);
 484                     if (OP(nxt) != CLOSE)
 485                         goto nogo;
 486                     /* Now we know that nxt2 is the only contents: */
 487                     oscan->flags = ARG(nxt);
 488                     OP(oscan) = CURLYN;
 489                     OP(nxt1) = NOTHING; /* was OPEN. */
 490 #ifdef DEBUGGING
 491                     OP(nxt1 + 1) = OPTIMIZED; /* was count. */
 492                     NEXT_OFF(nxt1+ 1) = 0; /* just for consistancy. */
 493                     NEXT_OFF(nxt2) = 0; /* just for consistancy with CURLY. */
 494                     OP(nxt) = OPTIMIZED;        /* was CLOSE. */
 495                     OP(nxt + 1) = OPTIMIZED; /* was count. */
 496                     NEXT_OFF(nxt+ 1) = 0; /* just for consistancy. */
 497 #endif
 498                 }
 499               nogo:
 500
 501                 /* Try optimization CURLYX => CURLYM. */
 502                 if (  OP(oscan) == CURLYX && data
 503                       && !(data->flags & SF_HAS_PAR)
 504                       && !(data->flags & SF_HAS_EVAL)
 505                       && !deltanext  ) {
 506                     /* XXXX How to optimize if data == 0? */
 507                     /* Optimize to a simpler form.  */
 508                     regnode *nxt = NEXTOPER(oscan) + EXTRA_STEP_2ARGS; /* OPEN */
 509                     regnode *nxt2;
 510
 511                     OP(oscan) = CURLYM;
 512                     while ( (nxt2 = regnext(nxt)) /* skip over embedded stuff*/
 513                             && (OP(nxt2) != WHILEM))
 514                         nxt = nxt2;
 515                     OP(nxt2)  = SUCCEED; /* Whas WHILEM */
 516                     /* Need to optimize away parenths. */
 517                     if (data->flags & SF_IN_PAR) {
 518                         /* Set the parenth number.  */
 519                         regnode *nxt1 = NEXTOPER(oscan) + EXTRA_STEP_2ARGS; /* OPEN*/
 520
 521                         if (OP(nxt) != CLOSE)
 522                             FAIL("panic opt close");
 523                         oscan->flags = ARG(nxt);
 524                         OP(nxt1) = OPTIMIZED;   /* was OPEN. */
 525                         OP(nxt) = OPTIMIZED;    /* was CLOSE. */
 526 #ifdef DEBUGGING
 527                         OP(nxt1 + 1) = OPTIMIZED; /* was count. */
 528                         OP(nxt + 1) = OPTIMIZED; /* was count. */
 529                         NEXT_OFF(nxt1 + 1) = 0; /* just for consistancy. */
 530                         NEXT_OFF(nxt + 1) = 0; /* just for consistancy. */
 531 #endif
 532 #if 0
 533                         while ( nxt1 && (OP(nxt1) != WHILEM)) {
 534                             regnode *nnxt = regnext(nxt1);
 535
 536                             if (nnxt == nxt) {
 537                                 if (reg_off_by_arg[OP(nxt1)])
 538                                     ARG_SET(nxt1, nxt2 - nxt1);
 539                                 else if (nxt2 - nxt1 < U16_MAX)
 540                                     NEXT_OFF(nxt1) = nxt2 - nxt1;
 541                                 else
 542                                     OP(nxt) = NOTHING;  /* Cannot beautify */
 543                             }
 544                             nxt1 = nnxt;
 545                         }
 546 #endif
 547                         /* Optimize again: */
 548                         study_chunk(&nxt1, &deltanext, nxt, NULL, 0);
 549                     } else
 550                         oscan->flags = 0;
 551                 }
 552                 if (data && fl & (SF_HAS_PAR|SF_IN_PAR))
 553                     pars++;
 554                 if (flags & SCF_DO_SUBSTR) {
 555                     SV *last_str = Nullsv;
 556                     int counted = mincount != 0;
 557
 558                     if (data->last_end > 0 && mincount != 0) { /* Ends with a string. */
 559                         I32 b = pos_before >= data->last_start_min
 560                             ? pos_before : data->last_start_min;
 561                         STRLEN l;
 562                         char *s = SvPV(data->last_found, l);
 563
 564                         l -= b - data->last_start_min;
 565                         /* Get the added string: */
 566                         last_str = newSVpv(s  +  b - data->last_start_min, l);
 567                         if (deltanext == 0 && pos_before == b) {
 568                             /* What was added is a constant string */
 569                             if (mincount > 1) {
 570                                 SvGROW(last_str, (mincount * l) + 1);
 571                                 repeatcpy(SvPVX(last_str) + l,
 572                                           SvPVX(last_str), l, mincount - 1);
 573                                 SvCUR(last_str) *= mincount;
 574                                 /* Add additional parts. */
 575                                 SvCUR_set(data->last_found,
 576                                           SvCUR(data->last_found) - l);
 577                                 sv_catsv(data->last_found, last_str);
 578                                 data->last_end += l * (mincount - 1);
 579                             }
 580                         }
 581                     }
 582                     /* It is counted once already... */
 583                     data->pos_min += minnext * (mincount - counted);
 584                     data->pos_delta += - counted * deltanext +
 585                         (minnext + deltanext) * maxcount - minnext * mincount;
 586                     if (mincount != maxcount) {
 587                         scan_commit(data);
 588                         if (mincount && last_str) {
 589                             sv_setsv(data->last_found, last_str);
 590                             data->last_end = data->pos_min;
 591                             data->last_start_min =
 592                                 data->pos_min - SvCUR(last_str);
 593                             data->last_start_max = is_inf
 594                                 ? I32_MAX
 595                                 : data->pos_min + data->pos_delta
 596                                 - SvCUR(last_str);
 597                         }
 598                         data->longest = &(data->longest_float);
 599                     }
 600                     SvREFCNT_dec(last_str);
 601                 }
 602                 if (data && (fl & SF_HAS_EVAL))
 603                     data->flags |= SF_HAS_EVAL;
 604               optimize_curly_tail:
 605                 if (OP(oscan) != CURLYX) {
 606                     while (regkind[(U8)OP(next = regnext(oscan))] == NOTHING
 607                            && NEXT_OFF(next))
 608                         NEXT_OFF(oscan) += NEXT_OFF(next);
 609                 }
 610                 continue;
 611             default:                    /* REF only? */
 612                 if (flags & SCF_DO_SUBSTR) {
 613                     scan_commit(data);
 614                     data->longest = &(data->longest_float);
 615                 }
 616                 is_inf = is_inf_internal = 1;
 617                 break;
 618             }
 619         } else if (strchr(simple,OP(scan))) {
 620             if (flags & SCF_DO_SUBSTR) {
 621                 scan_commit(data);
 622                 data->pos_min++;
 623             }
 624             min++;
 625         } else if (regkind[(U8)OP(scan)] == EOL && flags & SCF_DO_SUBSTR) {
 626             data->flags |= (OP(scan) == MEOL
 627                             ? SF_BEFORE_MEOL
 628                             : SF_BEFORE_SEOL);
 629         } else if (regkind[(U8)OP(scan)] == BRANCHJ
 630                    && (scan->flags || data)
 631                    && (OP(scan) == IFMATCH || OP(scan) == UNLESSM)) {
 632             I32 deltanext, minnext;
 633             regnode *nscan;
 634
 635             data_fake.flags = 0;
 636             next = regnext(scan);
 637             nscan = NEXTOPER(NEXTOPER(scan));
 638             minnext = study_chunk(&nscan, &deltanext, last, &data_fake, 0);
 639             if (scan->flags) {
 640                 if (deltanext) {
 641                     FAIL("variable length lookbehind not implemented");
 642                 } else if (minnext > U8_MAX) {
 643                     FAIL2("lookbehind longer than %d not implemented", U8_MAX);
 644                 }
 645                 scan->flags = minnext;
 646             }
 647             if (data && data_fake.flags & (SF_HAS_PAR|SF_IN_PAR))
 648                 pars++;
 649             if (data && (data_fake.flags & SF_HAS_EVAL))
 650                 data->flags |= SF_HAS_EVAL;
 651         } else if (OP(scan) == OPEN) {
 652             pars++;
 653         } else if (OP(scan) == CLOSE && ARG(scan) == is_par) {
 654             next = regnext(scan);
 655
 656             if ( next && (OP(next) != WHILEM) && next < last)
 657                 is_par = 0;             /* Disable optimization */
 658         } else if (OP(scan) == EVAL) {
 659                 if (data)
 660                     data->flags |= SF_HAS_EVAL;
 661         }
 662         /* Else: zero-length, ignore. */
 663         scan = regnext(scan);
 664     }
 665
 666   finish:
 667     *scanp = scan;
 668     *deltap = is_inf_internal ? I32_MAX : delta;
 669     if (flags & SCF_DO_SUBSTR && is_inf)
 670         data->pos_delta = I32_MAX - data->pos_min;
 671     if (is_par > U8_MAX)
 672         is_par = 0;
 673     if (is_par && pars==1 && data) {
 674         data->flags |= SF_IN_PAR;
 675         data->flags &= ~SF_HAS_PAR;
 676     } else if (pars && data) {
 677         data->flags |= SF_HAS_PAR;
 678         data->flags &= ~SF_IN_PAR;
 679     }
 680     return min;
 681 }
 682
 683 STATIC I32
 684 add_data(I32 n, char *s)
 685 {
 686     dTHR;
 687     if (PL_regcomp_rx->data) {
 688         Renewc(PL_regcomp_rx->data,
 689                sizeof(*PL_regcomp_rx->data) + sizeof(void*) * (PL_regcomp_rx->data->count + n - 1),
 690                char, struct reg_data);
 691         Renew(PL_regcomp_rx->data->what, PL_regcomp_rx->data->count + n, U8);
 692         PL_regcomp_rx->data->count += n;
 693     } else {
 694         Newc(1207, PL_regcomp_rx->data, sizeof(*PL_regcomp_rx->data) + sizeof(void*) * (n - 1),
 695              char, struct reg_data);
 696         New(1208, PL_regcomp_rx->data->what, n, U8);
 697         PL_regcomp_rx->data->count = n;
 698     }
 699     Copy(s, PL_regcomp_rx->data->what + PL_regcomp_rx->data->count - n, n, U8);
 700     return PL_regcomp_rx->data->count - n;
 701 }
 702
 703 /*
 704  - pregcomp - compile a regular expression into internal code
 705  *
 706  * We can't allocate space until we know how big the compiled form will be,
 707  * but we can't compile it (and thus know how big it is) until we've got a
 708  * place to put the code.  So we cheat:  we compile it twice, once with code
 709  * generation turned off and size counting turned on, and once "for real".
 710  * This also means that we don't allocate space until we are sure that the
 711  * thing really will compile successfully, and we never have to move the
 712  * code and thus invalidate pointers into it.  (Note that it has to be in
 713  * one piece because free() must be able to free it all.) [NB: not true in perl]
 714  *
 715  * Beware that the optimization-preparation code in here knows about some
 716  * of the structure of the compiled regexp.  [I'll say.]
 717  */
 718 regexp *
 719 pregcomp(char *exp, char *xend, PMOP *pm)
 720 {
 721     dTHR;
 722     register regexp *r;
 723     regnode *scan;
 724     SV **longest;
 725     SV *longest_fixed;
 726     SV *longest_float;
 727     regnode *first;
 728     I32 flags;
 729     I32 minlen = 0;
 730     I32 sawplus = 0;
 731     I32 sawopen = 0;
 732
 733     if (exp == NULL)
 734         FAIL("NULL regexp argument");
 735
 736     PL_regprecomp = savepvn(exp, xend - exp);
 737     DEBUG_r(PerlIO_printf(Perl_debug_log, "compiling RE `%*s'\n",
 738                           xend - exp, PL_regprecomp));
 739     PL_regflags = pm->op_pmflags;
 740     PL_regsawback = 0;
 741
 742     PL_regseen = 0;
 743     PL_seen_zerolen = *exp == '^' ? -1 : 0;
 744     PL_seen_evals = 0;
 745     PL_extralen = 0;
 746
 747     /* First pass: determine size, legality. */
 748     PL_regcomp_parse = exp;
 749     PL_regxend = xend;
 750     PL_regnaughty = 0;
 751     PL_regnpar = 1;
 752     PL_regsize = 0L;
 753     PL_regcode = &PL_regdummy;
 754     regc((U8)MAGIC, (char*)PL_regcode);
 755     if (reg(0, &flags) == NULL) {
 756         Safefree(PL_regprecomp);
 757         PL_regprecomp = Nullch;
 758         return(NULL);
 759     }
 760     DEBUG_r(PerlIO_printf(Perl_debug_log, "size %d ", PL_regsize));
 761
 762     DEBUG_r(
 763         if (!PL_colorset) {
 764             int i = 0;
 765             char *s = PerlEnv_getenv("TERMCAP_COLORS");
 766
 767             PL_colorset = 1;
 768             if (s) {
 769                 PL_colors[0] = s = savepv(s);
 770                 while (++i < 4) {
 771                     s = strchr(s, '\t');
 772                     if (!s)
 773                         FAIL("Not enough TABs in TERMCAP_COLORS");
 774                     *s = '\0';
 775                     PL_colors[i] = ++s;
 776                 }
 777             } else {
 778                 while (i < 4)
 779                     PL_colors[i++] = "";
 780             }
 781             /* Reset colors: */
 782             PerlIO_printf(Perl_debug_log, "%s%s%s%s",
 783                           PL_colors[0],PL_colors[1],PL_colors[2],PL_colors[3]);
 784         }
 785         );
 786
 787     /* Small enough for pointer-storage convention?
 788        If extralen==0, this means that we will not need long jumps. */
 789     if (PL_regsize >= 0x10000L && PL_extralen)
 790         PL_regsize += PL_extralen;
 791     else
 792         PL_extralen = 0;
 793
 794     /* Allocate space and initialize. */
 795     Newc(1001, r, sizeof(regexp) + (unsigned)PL_regsize * sizeof(regnode),
 796          char, regexp);
 797     if (r == NULL)
 798         FAIL("regexp out of space");
 799     r->refcnt = 1;
 800     r->prelen = xend - exp;
 801     r->precomp = PL_regprecomp;
 802     r->subbeg = r->subbase = NULL;
 803     r->nparens = PL_regnpar - 1;                /* set early to validate backrefs */
 804     PL_regcomp_rx = r;
 805
 806     /* Second pass: emit code. */
 807     PL_regcomp_parse = exp;
 808     PL_regxend = xend;
 809     PL_regnaughty = 0;
 810     PL_regnpar = 1;
 811     PL_regcode = r->program;
 812     /* Store the count of eval-groups for security checks: */
 813     PL_regcode->next_off = ((PL_seen_evals > U16_MAX) ? U16_MAX : PL_seen_evals);
 814     regc((U8)MAGIC, (char*) PL_regcode++);
 815     r->data = 0;
 816     if (reg(0, &flags) == NULL)
 817         return(NULL);
 818
 819     /* Dig out information for optimizations. */
 820     r->reganch = pm->op_pmflags & PMf_COMPILETIME;
 821     pm->op_pmflags = PL_regflags;
 822     r->regstclass = NULL;
 823     r->naughty = PL_regnaughty >= 10;   /* Probably an expensive pattern. */
 824     scan = r->program + 1;              /* First BRANCH. */
 825
 826     /* XXXX To minimize changes to RE engine we always allocate
 827        3-units-long substrs field. */
 828     Newz(1004, r->substrs, 1, struct reg_substr_data);
 829
 830     if (OP(scan) != BRANCH) {   /* Only one top-level choice. */
 831         scan_data_t data;
 832         I32 fake;
 833         STRLEN longest_float_length, longest_fixed_length;
 834
 835         StructCopy(&zero_scan_data, &data, scan_data_t);
 836         first = scan;
 837         /* Skip introductions and multiplicators >= 1. */
 838         while ((OP(first) == OPEN && (sawopen = 1)) ||
 839             (OP(first) == BRANCH && OP(regnext(first)) != BRANCH) ||
 840             (OP(first) == PLUS) ||
 841             (OP(first) == MINMOD) ||
 842             (regkind[(U8)OP(first)] == CURLY && ARG1(first) > 0) ) {
 843                 if (OP(first) == PLUS)
 844                     sawplus = 1;
 845                 else
 846                     first += regarglen[(U8)OP(first)];
 847                 first = NEXTOPER(first);
 848         }
 849
 850         /* Starting-point info. */
 851       again:
 852         if (OP(first) == EXACT);        /* Empty, get anchored substr later. */
 853         else if (strchr(simple+2,OP(first)))
 854             r->regstclass = first;
 855         else if (regkind[(U8)OP(first)] == BOUND ||
 856                  regkind[(U8)OP(first)] == NBOUND)
 857             r->regstclass = first;
 858         else if (regkind[(U8)OP(first)] == BOL) {
 859             r->reganch |= (OP(first) == MBOL ? ROPT_ANCH_MBOL: ROPT_ANCH_BOL);
 860             first = NEXTOPER(first);
 861             goto again;
 862         }
 863         else if (OP(first) == GPOS) {
 864             r->reganch |= ROPT_ANCH_GPOS;
 865             first = NEXTOPER(first);
 866             goto again;
 867         }
 868         else if ((OP(first) == STAR &&
 869             regkind[(U8)OP(NEXTOPER(first))] == ANY) &&
 870             !(r->reganch & ROPT_ANCH) )
 871         {
 872             /* turn .* into ^.* with an implied $*=1 */
 873             r->reganch |= ROPT_ANCH_BOL | ROPT_IMPLICIT;
 874             first = NEXTOPER(first);
 875             goto again;
 876         }
 877         if (sawplus && (!sawopen || !PL_regsawback))
 878             r->reganch |= ROPT_SKIP;    /* x+ must match 1st of run */
 879
 880         /* Scan is after the zeroth branch, first is atomic matcher. */
 881         DEBUG_r(PerlIO_printf(Perl_debug_log, "first at %d\n",
 882                               first - scan + 1));
 883         /*
 884         * If there's something expensive in the r.e., find the
 885         * longest literal string that must appear and make it the
 886         * regmust.  Resolve ties in favor of later strings, since
 887         * the regstart check works with the beginning of the r.e.
 888         * and avoiding duplication strengthens checking.  Not a
 889         * strong reason, but sufficient in the absence of others.
 890         * [Now we resolve ties in favor of the earlier string if
 891         * it happens that c_offset_min has been invalidated, since the
 892         * earlier string may buy us something the later one won't.]
 893         */
 894         minlen = 0;
 895
 896         data.longest_fixed = newSVpv("",0);
 897         data.longest_float = newSVpv("",0);
 898         data.last_found = newSVpv("",0);
 899         data.longest = &(data.longest_fixed);
 900         first = scan;
 901
 902         minlen = study_chunk(&first, &fake, scan + PL_regsize, /* Up to end */
 903                              &data, SCF_DO_SUBSTR);
 904         if ( PL_regnpar == 1 && data.longest == &(data.longest_fixed)
 905              && data.last_start_min == 0 && data.last_end > 0
 906              && !PL_seen_zerolen
 907              && (!(PL_regseen & REG_SEEN_GPOS) || (r->reganch & ROPT_ANCH_GPOS)))
 908             r->reganch |= ROPT_CHECK_ALL;
 909         scan_commit(&data);
 910         SvREFCNT_dec(data.last_found);
 911
 912         longest_float_length = SvCUR(data.longest_float);
 913         if (longest_float_length
 914             || (data.flags & SF_FL_BEFORE_EOL
 915                 && (!(data.flags & SF_FL_BEFORE_MEOL)
 916                     || (PL_regflags & PMf_MULTILINE)))) {
 917             if (SvCUR(data.longest_fixed)
 918                 && data.offset_fixed == data.offset_float_min
 919                 && SvCUR(data.longest_fixed) == SvCUR(data.longest_float))
 920                 goto remove_float;              /* Like in (a)+. */
 921
 922             r->float_substr = data.longest_float;
 923             r->float_min_offset = data.offset_float_min;
 924             r->float_max_offset = data.offset_float_max;
 925             fbm_compile(r->float_substr, 0);
 926             BmUSEFUL(r->float_substr) = 100;
 927             if (data.flags & SF_FL_BEFORE_EOL /* Cannot have SEOL and MULTI */
 928                 && (!(data.flags & SF_FL_BEFORE_MEOL)
 929                     || (PL_regflags & PMf_MULTILINE)))
 930                 SvTAIL_on(r->float_substr);
 931         } else {
 932           remove_float:
 933             r->float_substr = Nullsv;
 934             SvREFCNT_dec(data.longest_float);
 935             longest_float_length = 0;
 936         }
 937
 938         longest_fixed_length = SvCUR(data.longest_fixed);
 939         if (longest_fixed_length
 940             || (data.flags & SF_FIX_BEFORE_EOL /* Cannot have SEOL and MULTI */
 941                 && (!(data.flags & SF_FIX_BEFORE_MEOL)
 942                     || (PL_regflags & PMf_MULTILINE)))) {
 943             r->anchored_substr = data.longest_fixed;
 944             r->anchored_offset = data.offset_fixed;
 945             fbm_compile(r->anchored_substr, 0);
 946             BmUSEFUL(r->anchored_substr) = 100;
 947             if (data.flags & SF_FIX_BEFORE_EOL /* Cannot have SEOL and MULTI */
 948                 && (!(data.flags & SF_FIX_BEFORE_MEOL)
 949                     || (PL_regflags & PMf_MULTILINE)))
 950                 SvTAIL_on(r->anchored_substr);
 951         } else {
 952             r->anchored_substr = Nullsv;
 953             SvREFCNT_dec(data.longest_fixed);
 954             longest_fixed_length = 0;
 955         }
 956
 957         /* A temporary algorithm prefers floated substr to fixed one to dig more info. */
 958         if (longest_fixed_length > longest_float_length) {
 959             r->check_substr = r->anchored_substr;
 960             r->check_offset_min = r->check_offset_max = r->anchored_offset;
 961             if (r->reganch & ROPT_ANCH_SINGLE)
 962                 r->reganch |= ROPT_NOSCAN;
 963         } else {
 964             r->check_substr = r->float_substr;
 965             r->check_offset_min = data.offset_float_min;
 966             r->check_offset_max = data.offset_float_max;
 967         }
 968     } else {
 969         /* Several toplevels. Best we can is to set minlen. */
 970         I32 fake;
 971
 972         DEBUG_r(PerlIO_printf(Perl_debug_log, "\n"));
 973         scan = r->program + 1;
 974         minlen = study_chunk(&scan, &fake, scan + PL_regsize, NULL, 0);
 975         r->check_substr = r->anchored_substr = r->float_substr = Nullsv;
 976     }
 977
 978     r->minlen = minlen;
 979     if (PL_regseen & REG_SEEN_GPOS)
 980         r->reganch |= ROPT_GPOS_SEEN;
 981     if (PL_regseen & REG_SEEN_LOOKBEHIND)
 982         r->reganch |= ROPT_LOOKBEHIND_SEEN;
 983     if (PL_regseen & REG_SEEN_EVAL)
 984         r->reganch |= ROPT_EVAL_SEEN;
 985     Newz(1002, r->startp, PL_regnpar, char*);
 986     Newz(1002, r->endp, PL_regnpar, char*);
 987     DEBUG_r(regdump(r));
 988     return(r);
 989 }
 990
 991 /*
 992  - reg - regular expression, i.e. main body or parenthesized thing
 993  *
 994  * Caller must absorb opening parenthesis.
 995  *
 996  * Combining parenthesis handling with the base level of regular expression
 997  * is a trifle forced, but the need to tie the tails of the branches to what
 998  * follows makes it hard to avoid.
 999  */
1000 STATIC regnode *
1001 reg(I32 paren, I32 *flagp)
1002     /* paren: Parenthesized? 0=top, 1=(, inside: changed to letter. */
1003 {
1004     dTHR;
1005     register regnode *ret;              /* Will be the head of the group. */
1006     register regnode *br;
1007     register regnode *lastbr;
1008     register regnode *ender = 0;
1009     register I32 parno = 0;
1010     I32 flags, oregflags = PL_regflags, have_branch = 0, open = 0;
1011     char c;
1012
1013     *flagp = 0;                         /* Tentatively. */
1014
1015     /* Make an OPEN node, if parenthesized. */
1016     if (paren) {
1017         if (*PL_regcomp_parse == '?') {
1018             U16 posflags = 0, negflags = 0;
1019             U16 *flagsp = &posflags;
1020
1021             PL_regcomp_parse++;
1022             paren = *PL_regcomp_parse++;
1023             ret = NULL;                 /* For look-ahead/behind. */
1024             switch (paren) {
1025             case '<':
1026                 PL_regseen |= REG_SEEN_LOOKBEHIND;
1027                 if (*PL_regcomp_parse == '!')
1028                     paren = ',';
1029                 if (*PL_regcomp_parse != '=' && *PL_regcomp_parse != '!')
1030                     goto unknown;
1031                 PL_regcomp_parse++;
1032             case '=':
1033             case '!':
1034                 PL_seen_zerolen++;
1035             case ':':
1036             case '>':
1037                 break;
1038             case '$':
1039             case '@':
1040                 FAIL2("Sequence (?%c...) not implemented", (int)paren);
1041                 break;
1042             case '#':
1043                 while (*PL_regcomp_parse && *PL_regcomp_parse != ')')
1044                     PL_regcomp_parse++;
1045                 if (*PL_regcomp_parse != ')')
1046                     FAIL("Sequence (?#... not terminated");
1047                 nextchar();
1048                 *flagp = TRYAGAIN;
1049                 return NULL;
1050             case '{':
1051             {
1052                 dTHR;
1053                 I32 count = 1, n = 0;
1054                 char c;
1055                 char *s = PL_regcomp_parse;
1056                 SV *sv;
1057                 OP_4tree *sop, *rop;
1058
1059                 PL_seen_zerolen++;
1060                 PL_regseen |= REG_SEEN_EVAL;
1061                 while (count && (c = *PL_regcomp_parse)) {
1062                     if (c == '\\' && PL_regcomp_parse[1])
1063                         PL_regcomp_parse++;
1064                     else if (c == '{')
1065                         count++;
1066                     else if (c == '}')
1067                         count--;
1068                     PL_regcomp_parse++;
1069                 }
1070                 if (*PL_regcomp_parse != ')')
1071                     FAIL("Sequence (?{...}) not terminated or not {}-balanced");
1072                 if (!SIZE_ONLY) {
1073                     AV *av;
1074
1075                     if (PL_regcomp_parse - 1 - s)
1076                         sv = newSVpv(s, PL_regcomp_parse - 1 - s);
1077                     else
1078                         sv = newSVpv("", 0);
1079
1080                     rop = sv_compile_2op(sv, &sop, "re", &av);
1081
1082                     n = add_data(3, "nso");
1083                     PL_regcomp_rx->data->data[n] = (void*)rop;
1084                     PL_regcomp_rx->data->data[n+1] = (void*)av;
1085                     PL_regcomp_rx->data->data[n+2] = (void*)sop;
1086                     SvREFCNT_dec(sv);
1087                 } else {                /* First pass */
1088                     if (PL_reginterp_cnt < ++PL_seen_evals && PL_curcop != &PL_compiling)
1089                         /* No compiled RE interpolated, has runtime
1090                            components ===> unsafe.  */
1091                         FAIL("Eval-group not allowed at runtime, use re 'eval'");
1092                     if (PL_tainted)
1093                         FAIL("Eval-group in insecure regular expression");
1094                 }
1095
1096                 nextchar();
1097                 return reganode(EVAL, n);
1098             }
1099             case '(':
1100             {
1101                 if (PL_regcomp_parse[0] == '?') {
1102                     if (PL_regcomp_parse[1] == '=' || PL_regcomp_parse[1] == '!'
1103                         || PL_regcomp_parse[1] == '<'
1104                         || PL_regcomp_parse[1] == '{') { /* Lookahead or eval. */
1105                         I32 flag;
1106
1107                         ret = reg_node(LOGICAL);
1108                         regtail(ret, reg(1, &flag));
1109                         goto insert_if;
1110                     }
1111                 } else if (PL_regcomp_parse[0] >= '1' && PL_regcomp_parse[0] <= '9' ) {
1112                     parno = atoi(PL_regcomp_parse++);
1113
1114                     while (isDIGIT(*PL_regcomp_parse))
1115                         PL_regcomp_parse++;
1116                     ret = reganode(GROUPP, parno);
1117                     if ((c = *nextchar()) != ')')
1118                         FAIL2("Switch (?(number%c not recognized", c);
1119                   insert_if:
1120                     regtail(ret, reganode(IFTHEN, 0));
1121                     br = regbranch(&flags, 1);
1122                     if (br == NULL)
1123                         br = reganode(LONGJMP, 0);
1124                     else
1125                         regtail(br, reganode(LONGJMP, 0));
1126                     c = *nextchar();
1127                     if (flags&HASWIDTH)
1128                         *flagp |= HASWIDTH;
1129                     if (c == '|') {
1130                         lastbr = reganode(IFTHEN, 0); /* Fake one for optimizer. */
1131                         regbranch(&flags, 1);
1132                         regtail(ret, lastbr);
1133                         if (flags&HASWIDTH)
1134                             *flagp |= HASWIDTH;
1135                         c = *nextchar();
1136                     } else
1137                         lastbr = NULL;
1138                     if (c != ')')
1139                         FAIL("Switch (?(condition)... contains too many branches");
1140                     ender = reg_node(TAIL);
1141                     regtail(br, ender);
1142                     if (lastbr) {
1143                         regtail(lastbr, ender);
1144                         regtail(NEXTOPER(NEXTOPER(lastbr)), ender);
1145                     } else
1146                         regtail(ret, ender);
1147                     return ret;
1148                 } else {
1149                     FAIL2("Unknown condition for (?(%.2s", PL_regcomp_parse);
1150                 }
1151             }
1152             case 0:
1153                 FAIL("Sequence (? incomplete");
1154                 break;
1155             default:
1156                 --PL_regcomp_parse;
1157               parse_flags:
1158                 while (*PL_regcomp_parse && strchr("iogcmsx", *PL_regcomp_parse)) {
1159                     if (*PL_regcomp_parse != 'o')
1160                         pmflag(flagsp, *PL_regcomp_parse);
1161                     ++PL_regcomp_parse;
1162                 }
1163                 if (*PL_regcomp_parse == '-') {
1164                     flagsp = &negflags;
1165                     ++PL_regcomp_parse;
1166                     goto parse_flags;
1167                 }
1168                 PL_regflags |= posflags;
1169                 PL_regflags &= ~negflags;
1170                 if (*PL_regcomp_parse == ':') {
1171                     PL_regcomp_parse++;
1172                     paren = ':';
1173                     break;
1174                 }
1175               unknown:
1176                 if (*PL_regcomp_parse != ')')
1177                     FAIL2("Sequence (?%c...) not recognized", *PL_regcomp_parse);
1178                 nextchar();
1179                 *flagp = TRYAGAIN;
1180                 return NULL;
1181             }
1182         }
1183         else {
1184             parno = PL_regnpar;
1185             PL_regnpar++;
1186             ret = reganode(OPEN, parno);
1187             open = 1;
1188         }
1189     } else
1190         ret = NULL;
1191
1192     /* Pick up the branches, linking them together. */
1193     br = regbranch(&flags, 1);
1194     if (br == NULL)
1195         return(NULL);
1196     if (*PL_regcomp_parse == '|') {
1197         if (!SIZE_ONLY && PL_extralen) {
1198             reginsert(BRANCHJ, br);
1199         } else
1200             reginsert(BRANCH, br);
1201         have_branch = 1;
1202         if (SIZE_ONLY)
1203             PL_extralen += 1;           /* For BRANCHJ-BRANCH. */
1204     } else if (paren == ':') {
1205         *flagp |= flags&SIMPLE;
1206     }
1207     if (open) {                         /* Starts with OPEN. */
1208         regtail(ret, br);               /* OPEN -> first. */
1209     } else if (paren != '?')            /* Not Conditional */
1210         ret = br;
1211     if (flags&HASWIDTH)
1212         *flagp |= HASWIDTH;
1213     *flagp |= flags&SPSTART;
1214     lastbr = br;
1215     while (*PL_regcomp_parse == '|') {
1216         if (!SIZE_ONLY && PL_extralen) {
1217             ender = reganode(LONGJMP,0);
1218             regtail(NEXTOPER(NEXTOPER(lastbr)), ender); /* Append to the previous. */
1219         }
1220         if (SIZE_ONLY)
1221             PL_extralen += 2;           /* Account for LONGJMP. */
1222         nextchar();
1223         br = regbranch(&flags, 0);
1224         if (br == NULL)
1225             return(NULL);
1226         regtail(lastbr, br);            /* BRANCH -> BRANCH. */
1227         lastbr = br;
1228         if (flags&HASWIDTH)
1229             *flagp |= HASWIDTH;
1230         *flagp |= flags&SPSTART;
1231     }
1232
1233     if (have_branch || paren != ':') {
1234         /* Make a closing node, and hook it on the end. */
1235         switch (paren) {
1236         case ':':
1237             ender = reg_node(TAIL);
1238             break;
1239         case 1:
1240             ender = reganode(CLOSE, parno);
1241             break;
1242         case '<':
1243         case ',':
1244         case '=':
1245         case '!':
1246             *flagp &= ~HASWIDTH;
1247             /* FALL THROUGH */
1248         case '>':
1249             ender = reg_node(SUCCEED);
1250             break;
1251         case 0:
1252             ender = reg_node(END);
1253             break;
1254         }
1255         regtail(lastbr, ender);
1256
1257         if (have_branch) {
1258             /* Hook the tails of the branches to the closing node. */
1259             for (br = ret; br != NULL; br = regnext(br)) {
1260                 regoptail(br, ender);
1261             }
1262         }
1263     }
1264
1265     {
1266         char *p;
1267         static char parens[] = "=!<,>";
1268
1269         if (paren && (p = strchr(parens, paren))) {
1270             int node = ((p - parens) % 2) ? UNLESSM : IFMATCH;
1271             int flag = (p - parens) > 1;
1272
1273             if (paren == '>')
1274                 node = SUSPEND, flag = 0;
1275             reginsert(node,ret);
1276             ret->flags = flag;
1277             regtail(ret, reg_node(TAIL));
1278         }
1279     }
1280
1281     /* Check for proper termination. */
1282     if (paren && (PL_regcomp_parse >= PL_regxend || *nextchar() != ')')) {
1283         FAIL("unmatched () in regexp");
1284     } else if (!paren && PL_regcomp_parse < PL_regxend) {
1285         if (*PL_regcomp_parse == ')') {
1286             FAIL("unmatched () in regexp");
1287         } else
1288             FAIL("junk on end of regexp");      /* "Can't happen". */
1289         /* NOTREACHED */
1290     }
1291     if (paren != 0) {
1292         PL_regflags = oregflags;
1293     }
1294
1295     return(ret);
1296 }
1297
1298 /*
1299  - regbranch - one alternative of an | operator
1300  *
1301  * Implements the concatenation operator.
1302  */
1303 STATIC regnode *
1304 regbranch(I32 *flagp, I32 first)
1305 {
1306     dTHR;
1307     register regnode *ret;
1308     register regnode *chain = NULL;
1309     register regnode *latest;
1310     I32 flags = 0, c = 0;
1311
1312     if (first)
1313         ret = NULL;
1314     else {
1315         if (!SIZE_ONLY && PL_extralen)
1316             ret = reganode(BRANCHJ,0);
1317         else
1318             ret = reg_node(BRANCH);
1319     }
1320
1321     if (!first && SIZE_ONLY)
1322         PL_extralen += 1;                       /* BRANCHJ */
1323
1324     *flagp = WORST;                     /* Tentatively. */
1325
1326     PL_regcomp_parse--;
1327     nextchar();
1328     while (PL_regcomp_parse < PL_regxend && *PL_regcomp_parse != '|' && *PL_regcomp_parse != ')') {
1329         flags &= ~TRYAGAIN;
1330         latest = regpiece(&flags);
1331         if (latest == NULL) {
1332             if (flags & TRYAGAIN)
1333                 continue;
1334             return(NULL);
1335         } else if (ret == NULL)
1336             ret = latest;
1337         *flagp |= flags&HASWIDTH;
1338         if (chain == NULL)      /* First piece. */
1339             *flagp |= flags&SPSTART;
1340         else {
1341             PL_regnaughty++;
1342             regtail(chain, latest);
1343         }
1344         chain = latest;
1345         c++;
1346     }
1347     if (chain == NULL) {        /* Loop ran zero times. */
1348         chain = reg_node(NOTHING);
1349         if (ret == NULL)
1350             ret = chain;
1351     }
1352     if (c == 1) {
1353         *flagp |= flags&SIMPLE;
1354     }
1355
1356     return(ret);
1357 }
1358
1359 /*
1360  - regpiece - something followed by possible [*+?]
1361  *
1362  * Note that the branching code sequences used for ? and the general cases
1363  * of * and + are somewhat optimized:  they use the same NOTHING node as
1364  * both the endmarker for their branch list and the body of the last branch.
1365  * It might seem that this node could be dispensed with entirely, but the
1366  * endmarker role is not redundant.
1367  */
1368 STATIC regnode *
1369 regpiece(I32 *flagp)
1370 {
1371     dTHR;
1372     register regnode *ret;
1373     register char op;
1374     register char *next;
1375     I32 flags;
1376     char *origparse = PL_regcomp_parse;
1377     char *maxpos;
1378     I32 min;
1379     I32 max = REG_INFTY;
1380
1381     ret = regatom(&flags);
1382     if (ret == NULL) {
1383         if (flags & TRYAGAIN)
1384             *flagp |= TRYAGAIN;
1385         return(NULL);
1386     }
1387
1388     op = *PL_regcomp_parse;
1389
1390     if (op == '{' && regcurly(PL_regcomp_parse)) {
1391         next = PL_regcomp_parse + 1;
1392         maxpos = Nullch;
1393         while (isDIGIT(*next) || *next == ',') {
1394             if (*next == ',') {
1395                 if (maxpos)
1396                     break;
1397                 else
1398                     maxpos = next;
1399             }
1400             next++;
1401         }
1402         if (*next == '}') {             /* got one */
1403             if (!maxpos)
1404                 maxpos = next;
1405             PL_regcomp_parse++;
1406             min = atoi(PL_regcomp_parse);
1407             if (*maxpos == ',')
1408                 maxpos++;
1409             else
1410                 maxpos = PL_regcomp_parse;
1411             max = atoi(maxpos);
1412             if (!max && *maxpos != '0')
1413                 max = REG_INFTY;                /* meaning "infinity" */
1414             else if (max >= REG_INFTY)
1415                 FAIL2("Quantifier in {,} bigger than %d", REG_INFTY - 1);
1416             PL_regcomp_parse = next;
1417             nextchar();
1418
1419         do_curly:
1420             if ((flags&SIMPLE)) {
1421                 PL_regnaughty += 2 + PL_regnaughty / 2;
1422                 reginsert(CURLY, ret);
1423             }
1424             else {
1425                 PL_regnaughty += 4 + PL_regnaughty;     /* compound interest */
1426                 regtail(ret, reg_node(WHILEM));
1427                 if (!SIZE_ONLY && PL_extralen) {
1428                     reginsert(LONGJMP,ret);
1429                     reginsert(NOTHING,ret);
1430                     NEXT_OFF(ret) = 3;  /* Go over LONGJMP. */
1431                 }
1432                 reginsert(CURLYX,ret);
1433                 if (!SIZE_ONLY && PL_extralen)
1434                     NEXT_OFF(ret) = 3;  /* Go over NOTHING to LONGJMP. */
1435                 regtail(ret, reg_node(NOTHING));
1436                 if (SIZE_ONLY)
1437                     PL_extralen += 3;
1438             }
1439             ret->flags = 0;
1440
1441             if (min > 0)
1442                 *flagp = WORST;
1443             if (max > 0)
1444                 *flagp |= HASWIDTH;
1445             if (max && max < min)
1446                 FAIL("Can't do {n,m} with n > m");
1447             if (!SIZE_ONLY) {
1448                 ARG1_SET(ret, min);
1449                 ARG2_SET(ret, max);
1450             }
1451
1452             goto nest_check;
1453         }
1454     }
1455
1456     if (!ISMULT1(op)) {
1457         *flagp = flags;
1458         return(ret);
1459     }
1460
1461 #if 0                           /* Now runtime fix should be reliable. */
1462     if (!(flags&HASWIDTH) && op != '?')
1463       FAIL("regexp *+ operand could be empty");
1464 #endif
1465
1466     nextchar();
1467
1468     *flagp = (op != '+') ? (WORST|SPSTART|HASWIDTH) : (WORST|HASWIDTH);
1469
1470     if (op == '*' && (flags&SIMPLE)) {
1471         reginsert(STAR, ret);
1472         ret->flags = 0;
1473         PL_regnaughty += 4;
1474     }
1475     else if (op == '*') {
1476         min = 0;
1477         goto do_curly;
1478     } else if (op == '+' && (flags&SIMPLE)) {
1479         reginsert(PLUS, ret);
1480         ret->flags = 0;
1481         PL_regnaughty += 3;
1482     }
1483     else if (op == '+') {
1484         min = 1;
1485         goto do_curly;
1486     } else if (op == '?') {
1487         min = 0; max = 1;
1488         goto do_curly;
1489     }
1490   nest_check:
1491     if (PL_dowarn && !SIZE_ONLY && !(flags&HASWIDTH) && max > 10000) {
1492         warn("%.*s matches null string many times",
1493             PL_regcomp_parse - origparse, origparse);
1494     }
1495
1496     if (*PL_regcomp_parse == '?') {
1497         nextchar();
1498         reginsert(MINMOD, ret);
1499         regtail(ret, ret + NODE_STEP_REGNODE);
1500     }
1501     if (ISMULT2(PL_regcomp_parse))
1502         FAIL("nested *?+ in regexp");
1503
1504     return(ret);
1505 }
1506
1507 /*
1508  - regatom - the lowest level
1509  *
1510  * Optimization:  gobbles an entire sequence of ordinary characters so that
1511  * it can turn them into a single node, which is smaller to store and
1512  * faster to run.  Backslashed characters are exceptions, each becoming a
1513  * separate node; the code is simpler that way and it's not worth fixing.
1514  *
1515  * [Yes, it is worth fixing, some scripts can run twice the speed.]
1516  */
1517 STATIC regnode *
1518 regatom(I32 *flagp)
1519 {
1520     dTHR;
1521     register regnode *ret = 0;
1522     I32 flags;
1523
1524     *flagp = WORST;             /* Tentatively. */
1525
1526 tryagain:
1527     switch (*PL_regcomp_parse) {
1528     case '^':
1529         PL_seen_zerolen++;
1530         nextchar();
1531         if (PL_regflags & PMf_MULTILINE)
1532             ret = reg_node(MBOL);
1533         else if (PL_regflags & PMf_SINGLELINE)
1534             ret = reg_node(SBOL);
1535         else
1536             ret = reg_node(BOL);
1537         break;
1538     case '$':
1539         if (PL_regcomp_parse[1])
1540             PL_seen_zerolen++;
1541         nextchar();
1542         if (PL_regflags & PMf_MULTILINE)
1543             ret = reg_node(MEOL);
1544         else if (PL_regflags & PMf_SINGLELINE)
1545             ret = reg_node(SEOL);
1546         else
1547             ret = reg_node(EOL);
1548         break;
1549     case '.':
1550         nextchar();
1551         if (PL_regflags & PMf_SINGLELINE)
1552             ret = reg_node(SANY);
1553         else
1554             ret = reg_node(ANY);
1555         PL_regnaughty++;
1556         *flagp |= HASWIDTH|SIMPLE;
1557         break;
1558     case '[':
1559         PL_regcomp_parse++;
1560         ret = regclass();
1561         *flagp |= HASWIDTH|SIMPLE;
1562         break;
1563     case '(':
1564         nextchar();
1565         ret = reg(1, &flags);
1566         if (ret == NULL) {
1567                 if (flags & TRYAGAIN)
1568                     goto tryagain;
1569                 return(NULL);
1570         }
1571         *flagp |= flags&(HASWIDTH|SPSTART|SIMPLE);
1572         break;
1573     case '|':
1574     case ')':
1575         if (flags & TRYAGAIN) {
1576             *flagp |= TRYAGAIN;
1577             return NULL;
1578         }
1579         FAIL2("internal urp in regexp at /%s/", PL_regcomp_parse);
1580                                 /* Supposed to be caught earlier. */
1581         break;
1582     case '{':
1583         if (!regcurly(PL_regcomp_parse)) {
1584             PL_regcomp_parse++;
1585             goto defchar;
1586         }
1587         /* FALL THROUGH */
1588     case '?':
1589     case '+':
1590     case '*':
1591         FAIL("?+*{} follows nothing in regexp");
1592         break;
1593     case '\\':
1594         switch (*++PL_regcomp_parse) {
1595         case 'A':
1596             PL_seen_zerolen++;
1597             ret = reg_node(SBOL);
1598             *flagp |= SIMPLE;
1599             nextchar();
1600             break;
1601         case 'G':
1602             ret = reg_node(GPOS);
1603             PL_regseen |= REG_SEEN_GPOS;
1604             *flagp |= SIMPLE;
1605             nextchar();
1606             break;
1607         case 'Z':
1608             ret = reg_node(SEOL);
1609             *flagp |= SIMPLE;
1610             nextchar();
1611             break;
1612         case 'z':
1613             ret = reg_node(EOS);
1614             *flagp |= SIMPLE;
1615             PL_seen_zerolen++;          /* Do not optimize RE away */
1616             nextchar();
1617             break;
1618         case 'w':
1619             ret = reg_node((PL_regflags & PMf_LOCALE) ? ALNUML : ALNUM);
1620             *flagp |= HASWIDTH|SIMPLE;
1621             nextchar();
1622             break;
1623         case 'W':
1624             ret = reg_node((PL_regflags & PMf_LOCALE) ? NALNUML : NALNUM);
1625             *flagp |= HASWIDTH|SIMPLE;
1626             nextchar();
1627             break;
1628         case 'b':
1629             PL_seen_zerolen++;
1630             ret = reg_node((PL_regflags & PMf_LOCALE) ? BOUNDL : BOUND);
1631             *flagp |= SIMPLE;
1632             nextchar();
1633             break;
1634         case 'B':
1635             PL_seen_zerolen++;
1636             ret = reg_node((PL_regflags & PMf_LOCALE) ? NBOUNDL : NBOUND);
1637             *flagp |= SIMPLE;
1638             nextchar();
1639             break;
1640         case 's':
1641             ret = reg_node((PL_regflags & PMf_LOCALE) ? SPACEL : SPACE);
1642             *flagp |= HASWIDTH|SIMPLE;
1643             nextchar();
1644             break;
1645         case 'S':
1646             ret = reg_node((PL_regflags & PMf_LOCALE) ? NSPACEL : NSPACE);
1647             *flagp |= HASWIDTH|SIMPLE;
1648             nextchar();
1649             break;
1650         case 'd':
1651             ret = reg_node(DIGIT);
1652             *flagp |= HASWIDTH|SIMPLE;
1653             nextchar();
1654             break;
1655         case 'D':
1656             ret = reg_node(NDIGIT);
1657             *flagp |= HASWIDTH|SIMPLE;
1658             nextchar();
1659             break;
1660         case 'n':
1661         case 'r':
1662         case 't':
1663         case 'f':
1664         case 'e':
1665         case 'a':
1666         case 'x':
1667         case 'c':
1668         case '0':
1669             goto defchar;
1670         case '1': case '2': case '3': case '4':
1671         case '5': case '6': case '7': case '8': case '9':
1672             {
1673                 I32 num = atoi(PL_regcomp_parse);
1674
1675                 if (num > 9 && num >= PL_regnpar)
1676                     goto defchar;
1677                 else {
1678                     if (!SIZE_ONLY && num > PL_regcomp_rx->nparens)
1679                         FAIL("reference to nonexistent group");
1680                     PL_regsawback = 1;
1681                     ret = reganode((PL_regflags & PMf_FOLD)
1682                                    ? ((PL_regflags & PMf_LOCALE) ? REFFL : REFF)
1683                                    : REF, num);
1684                     *flagp |= HASWIDTH;
1685                     while (isDIGIT(*PL_regcomp_parse))
1686                         PL_regcomp_parse++;
1687                     PL_regcomp_parse--;
1688                     nextchar();
1689                 }
1690             }
1691             break;
1692         case '\0':
1693             if (PL_regcomp_parse >= PL_regxend)
1694                 FAIL("trailing \\ in regexp");
1695             /* FALL THROUGH */
1696         default:
1697             goto defchar;
1698         }
1699         break;
1700
1701     case '#':
1702         if (PL_regflags & PMf_EXTENDED) {
1703             while (PL_regcomp_parse < PL_regxend && *PL_regcomp_parse != '\n') PL_regcomp_parse++;
1704             if (PL_regcomp_parse < PL_regxend)
1705                 goto tryagain;
1706         }
1707         /* FALL THROUGH */
1708
1709     default: {
1710             register I32 len;
1711             register U8 ender;
1712             register char *p;
1713             char *oldp, *s;
1714             I32 numlen;
1715
1716             PL_regcomp_parse++;
1717
1718         defchar:
1719             ret = reg_node((PL_regflags & PMf_FOLD)
1720                           ? ((PL_regflags & PMf_LOCALE) ? EXACTFL : EXACTF)
1721                           : EXACT);
1722             s = (char *) OPERAND(ret);
1723             regc(0, s++);               /* save spot for len */
1724             for (len = 0, p = PL_regcomp_parse - 1;
1725               len < 127 && p < PL_regxend;
1726               len++)
1727             {
1728                 oldp = p;
1729
1730                 if (PL_regflags & PMf_EXTENDED)
1731                     p = regwhite(p, PL_regxend);
1732                 switch (*p) {
1733                 case '^':
1734                 case '$':
1735                 case '.':
1736                 case '[':
1737                 case '(':
1738                 case ')':
1739                 case '|':
1740                     goto loopdone;
1741                 case '\\':
1742                     switch (*++p) {
1743                     case 'A':
1744                     case 'G':
1745                     case 'Z':
1746                     case 'z':
1747                     case 'w':
1748                     case 'W':
1749                     case 'b':
1750                     case 'B':
1751                     case 's':
1752                     case 'S':
1753                     case 'd':
1754                     case 'D':
1755                         --p;
1756                         goto loopdone;
1757                     case 'n':
1758                         ender = '\n';
1759                         p++;
1760                         break;
1761                     case 'r':
1762                         ender = '\r';
1763                         p++;
1764                         break;
1765                     case 't':
1766                         ender = '\t';
1767                         p++;
1768                         break;
1769                     case 'f':
1770                         ender = '\f';
1771                         p++;
1772                         break;
1773                     case 'e':
1774                         ender = '\033';
1775                         p++;
1776                         break;
1777                     case 'a':
1778                         ender = '\007';
1779                         p++;
1780                         break;
1781                     case 'x':
1782                         ender = scan_hex(++p, 2, &numlen);
1783                         p += numlen;
1784                         break;
1785                     case 'c':
1786                         p++;
1787                         ender = UCHARAT(p++);
1788                         ender = toCTRL(ender);
1789                         break;
1790                     case '0': case '1': case '2': case '3':case '4':
1791                     case '5': case '6': case '7': case '8':case '9':
1792                         if (*p == '0' ||
1793                           (isDIGIT(p[1]) && atoi(p) >= PL_regnpar) ) {
1794                             ender = scan_oct(p, 3, &numlen);
1795                             p += numlen;
1796                         }
1797                         else {
1798                             --p;
1799                             goto loopdone;
1800                         }
1801                         break;
1802                     case '\0':
1803                         if (p >= PL_regxend)
1804                             FAIL("trailing \\ in regexp");
1805                         /* FALL THROUGH */
1806                     default:
1807                         ender = *p++;
1808                         break;
1809                     }
1810                     break;
1811                 default:
1812                     ender = *p++;
1813                     break;
1814                 }
1815                 if (PL_regflags & PMf_EXTENDED)
1816                     p = regwhite(p, PL_regxend);
1817                 if (ISMULT2(p)) { /* Back off on ?+*. */
1818                     if (len)
1819                         p = oldp;
1820                     else {
1821                         len++;
1822                         regc(ender, s++);
1823                     }
1824                     break;
1825                 }
1826                 regc(ender, s++);
1827             }
1828         loopdone:
1829             PL_regcomp_parse = p - 1;
1830             nextchar();
1831             if (len < 0)
1832                 FAIL("internal disaster in regexp");
1833             if (len > 0)
1834                 *flagp |= HASWIDTH;
1835             if (len == 1)
1836                 *flagp |= SIMPLE;
1837             if (!SIZE_ONLY)
1838                 *OPERAND(ret) = len;
1839             regc('\0', s++);
1840             if (SIZE_ONLY) {
1841                 PL_regsize += (len + 2 + sizeof(regnode) - 1) / sizeof(regnode);
1842             } else {
1843                 PL_regcode += (len + 2 + sizeof(regnode) - 1) / sizeof(regnode);
1844             }
1845         }
1846         break;
1847     }
1848
1849     return(ret);
1850 }
1851
1852 STATIC char *
1853 regwhite(char *p, char *e)
1854 {
1855     while (p < e) {
1856         if (isSPACE(*p))
1857             ++p;
1858         else if (*p == '#') {
1859             do {
1860                 p++;
1861             } while (p < e && *p != '\n');
1862         }
1863         else
1864             break;
1865     }
1866     return p;
1867 }
1868
1869 STATIC regnode *
1870 regclass(void)
1871 {
1872     dTHR;
1873     register char *opnd, *s;
1874     register I32 Class;
1875     register I32 lastclass = 1234;
1876     register I32 range = 0;
1877     register regnode *ret;
1878     register I32 def;
1879     I32 numlen;
1880
1881     s = opnd = (char *) OPERAND(PL_regcode);
1882     ret = reg_node(ANYOF);
1883     for (Class = 0; Class < 33; Class++)
1884         regc(0, s++);
1885     if (*PL_regcomp_parse == '^') {     /* Complement of range. */
1886         PL_regnaughty++;
1887         PL_regcomp_parse++;
1888         if (!SIZE_ONLY)
1889             *opnd |= ANYOF_INVERT;
1890     }
1891     if (!SIZE_ONLY) {
1892         PL_regcode += ANY_SKIP;
1893         if (PL_regflags & PMf_FOLD)
1894             *opnd |= ANYOF_FOLD;
1895         if (PL_regflags & PMf_LOCALE)
1896             *opnd |= ANYOF_LOCALE;
1897     } else {
1898         PL_regsize += ANY_SKIP;
1899     }
1900     if (*PL_regcomp_parse == ']' || *PL_regcomp_parse == '-')
1901         goto skipcond;          /* allow 1st char to be ] or - */
1902     while (PL_regcomp_parse < PL_regxend && *PL_regcomp_parse != ']') {
1903        skipcond:
1904         Class = UCHARAT(PL_regcomp_parse++);
1905         if (Class == '[' && PL_regcomp_parse + 1 < PL_regxend &&
1906             /* I smell either [: or [= or [. -- POSIX has been here, right? */
1907             (*PL_regcomp_parse == ':' || *PL_regcomp_parse == '=' || *PL_regcomp_parse == '.')) {
1908             char  posixccc = *PL_regcomp_parse;
1909             char* posixccs = PL_regcomp_parse++;
1910
1911             while (PL_regcomp_parse < PL_regxend && *PL_regcomp_parse != posixccc)
1912                 PL_regcomp_parse++;
1913             if (PL_regcomp_parse == PL_regxend)
1914                 /* Grandfather lone [:, [=, [. */
1915                 PL_regcomp_parse = posixccs;
1916             else {
1917                 PL_regcomp_parse++; /* skip over the posixccc */
1918                 if (*PL_regcomp_parse == ']') {
1919                     /* Not Implemented Yet.
1920                      * (POSIX Extended Character Classes, that is)
1921                      * The text between e.g. [: and :] would start
1922                      * at posixccs + 1 and stop at regcomp_parse - 2. */
1923                     if (PL_dowarn && !SIZE_ONLY)
1924                         warn("Character class syntax [%c %c] is reserved for future extensions", posixccc, posixccc);
1925                     PL_regcomp_parse++; /* skip over the ending ] */
1926                 }
1927             }
1928         }
1929         if (Class == '\\') {
1930             Class = UCHARAT(PL_regcomp_parse++);
1931             switch (Class) {
1932             case 'w':
1933                 if (!SIZE_ONLY) {
1934                     if (PL_regflags & PMf_LOCALE)
1935                         *opnd |= ANYOF_ALNUML;
1936                     else {
1937                         for (Class = 0; Class < 256; Class++)
1938                             if (isALNUM(Class))
1939                                 ANYOF_SET(opnd, Class);
1940                     }
1941                 }
1942                 lastclass = 1234;
1943                 continue;
1944             case 'W':
1945                 if (!SIZE_ONLY) {
1946                     if (PL_regflags & PMf_LOCALE)
1947                         *opnd |= ANYOF_NALNUML;
1948                     else {
1949                         for (Class = 0; Class < 256; Class++)
1950                             if (!isALNUM(Class))
1951                                 ANYOF_SET(opnd, Class);
1952                     }
1953                 }
1954                 lastclass = 1234;
1955                 continue;
1956             case 's':
1957                 if (!SIZE_ONLY) {
1958                     if (PL_regflags & PMf_LOCALE)
1959                         *opnd |= ANYOF_SPACEL;
1960                     else {
1961                         for (Class = 0; Class < 256; Class++)
1962                             if (isSPACE(Class))
1963                                 ANYOF_SET(opnd, Class);
1964                     }
1965                 }
1966                 lastclass = 1234;
1967                 continue;
1968             case 'S':
1969                 if (!SIZE_ONLY) {
1970                     if (PL_regflags & PMf_LOCALE)
1971                         *opnd |= ANYOF_NSPACEL;
1972                     else {
1973                         for (Class = 0; Class < 256; Class++)
1974                             if (!isSPACE(Class))
1975                                 ANYOF_SET(opnd, Class);
1976                     }
1977                 }
1978                 lastclass = 1234;
1979                 continue;
1980             case 'd':
1981                 if (!SIZE_ONLY) {
1982                     for (Class = '0'; Class <= '9'; Class++)
1983                         ANYOF_SET(opnd, Class);
1984                 }
1985                 lastclass = 1234;
1986                 continue;
1987             case 'D':
1988                 if (!SIZE_ONLY) {
1989                     for (Class = 0; Class < '0'; Class++)
1990                         ANYOF_SET(opnd, Class);
1991                     for (Class = '9' + 1; Class < 256; Class++)
1992                         ANYOF_SET(opnd, Class);
1993                 }
1994                 lastclass = 1234;
1995                 continue;
1996             case 'n':
1997                 Class = '\n';
1998                 break;
1999             case 'r':
2000                 Class = '\r';
2001                 break;
2002             case 't':
2003                 Class = '\t';
2004                 break;
2005             case 'f':
2006                 Class = '\f';
2007                 break;
2008             case 'b':
2009                 Class = '\b';
2010                 break;
2011             case 'e':
2012                 Class = '\033';
2013                 break;
2014             case 'a':
2015                 Class = '\007';
2016                 break;
2017             case 'x':
2018                 Class = scan_hex(PL_regcomp_parse, 2, &numlen);
2019                 PL_regcomp_parse += numlen;
2020                 break;
2021             case 'c':
2022                 Class = UCHARAT(PL_regcomp_parse++);
2023                 Class = toCTRL(Class);
2024                 break;
2025             case '0': case '1': case '2': case '3': case '4':
2026             case '5': case '6': case '7': case '8': case '9':
2027                 Class = scan_oct(--PL_regcomp_parse, 3, &numlen);
2028                 PL_regcomp_parse += numlen;
2029                 break;
2030             }
2031         }
2032         if (range) {
2033             if (lastclass > Class)
2034                 FAIL("invalid [] range in regexp");
2035             range = 0;
2036         }
2037         else {
2038             lastclass = Class;
2039             if (*PL_regcomp_parse == '-' && PL_regcomp_parse+1 < PL_regxend &&
2040               PL_regcomp_parse[1] != ']') {
2041                 PL_regcomp_parse++;
2042                 range = 1;
2043                 continue;       /* do it next time */
2044             }
2045         }
2046         if (!SIZE_ONLY) {
2047 #ifndef ASCIIish
2048             register I32 i;
2049             if ((isLOWER(lastclass) && isLOWER(Class)) ||
2050                 (isUPPER(lastclass) && isUPPER(Class))) {
2051                 if (isLOWER(lastclass)) {
2052                     for (i = lastclass; i <= Class; i++)
2053                         if (isLOWER(i))
2054                             ANYOF_SET(opnd, i);
2055                 } else {
2056                     for (i = lastclass; i <= Class; i++)
2057                         if (isUPPER(i))
2058                             ANYOF_SET(opnd, i);
2059                 }
2060             }
2061             else
2062 #endif
2063                 for ( ; lastclass <= Class; lastclass++)
2064                     ANYOF_SET(opnd, lastclass);
2065         }
2066         lastclass = Class;
2067     }
2068     if (*PL_regcomp_parse != ']')
2069         FAIL("unmatched [] in regexp");
2070     nextchar();
2071     /* optimize case-insensitive simple patterns (e.g. /[a-z]/i) */
2072     if (!SIZE_ONLY && (*opnd & (0xFF ^ ANYOF_INVERT)) == ANYOF_FOLD) {
2073         for (Class = 0; Class < 256; ++Class) {
2074             if (ANYOF_TEST(opnd, Class)) {
2075                 I32 cf = fold[Class];
2076                 ANYOF_SET(opnd, cf);
2077             }
2078         }
2079         *opnd &= ~ANYOF_FOLD;
2080     }
2081     /* optimize inverted simple patterns (e.g. [^a-z]) */
2082     if (!SIZE_ONLY && (*opnd & 0xFF) == ANYOF_INVERT) {
2083         for (Class = 0; Class < 32; ++Class)
2084             opnd[1 + Class] ^= 0xFF;
2085         *opnd = 0;
2086     }
2087     return ret;
2088 }
2089
2090 STATIC char*
2091 nextchar(void)
2092 {
2093     dTHR;
2094     char* retval = PL_regcomp_parse++;
2095
2096     for (;;) {
2097         if (*PL_regcomp_parse == '(' && PL_regcomp_parse[1] == '?' &&
2098                 PL_regcomp_parse[2] == '#') {
2099             while (*PL_regcomp_parse && *PL_regcomp_parse != ')')
2100                 PL_regcomp_parse++;
2101             PL_regcomp_parse++;
2102             continue;
2103         }
2104         if (PL_regflags & PMf_EXTENDED) {
2105             if (isSPACE(*PL_regcomp_parse)) {
2106                 PL_regcomp_parse++;
2107                 continue;
2108             }
2109             else if (*PL_regcomp_parse == '#') {
2110                 while (*PL_regcomp_parse && *PL_regcomp_parse != '\n')
2111                     PL_regcomp_parse++;
2112                 PL_regcomp_parse++;
2113                 continue;
2114             }
2115         }
2116         return retval;
2117     }
2118 }
2119
2120 /*
2121 - reg_node - emit a node
2122 */
2123 STATIC regnode *                        /* Location. */
2124 reg_node(U8 op)
2125 {
2126     dTHR;
2127     register regnode *ret;
2128     register regnode *ptr;
2129
2130     ret = PL_regcode;
2131     if (SIZE_ONLY) {
2132         SIZE_ALIGN(PL_regsize);
2133         PL_regsize += 1;
2134         return(ret);
2135     }
2136
2137     NODE_ALIGN_FILL(ret);
2138     ptr = ret;
2139     FILL_ADVANCE_NODE(ptr, op);
2140     PL_regcode = ptr;
2141
2142     return(ret);
2143 }
2144
2145 /*
2146 - reganode - emit a node with an argument
2147 */
2148 STATIC regnode *                        /* Location. */
2149 reganode(U8 op, U32 arg)
2150 {
2151     dTHR;
2152     register regnode *ret;
2153     register regnode *ptr;
2154
2155     ret = PL_regcode;
2156     if (SIZE_ONLY) {
2157         SIZE_ALIGN(PL_regsize);
2158         PL_regsize += 2;
2159         return(ret);
2160     }
2161
2162     NODE_ALIGN_FILL(ret);
2163     ptr = ret;
2164     FILL_ADVANCE_NODE_ARG(ptr, op, arg);
2165     PL_regcode = ptr;
2166
2167     return(ret);
2168 }
2169
2170 /*
2171 - regc - emit (if appropriate) a byte of code
2172 */
2173 STATIC void
2174 regc(U8 b, char* s)
2175 {
2176     dTHR;
2177     if (!SIZE_ONLY)
2178         *s = b;
2179 }
2180
2181 /*
2182 - reginsert - insert an operator in front of already-emitted operand
2183 *
2184 * Means relocating the operand.
2185 */
2186 STATIC void
2187 reginsert(U8 op, regnode *opnd)
2188 {
2189     dTHR;
2190     register regnode *src;
2191     register regnode *dst;
2192     register regnode *place;
2193     register int offset = regarglen[(U8)op];
2194
2195 /* (regkind[(U8)op] == CURLY ? EXTRA_STEP_2ARGS : 0); */
2196
2197     if (SIZE_ONLY) {
2198         PL_regsize += NODE_STEP_REGNODE + offset;
2199         return;
2200     }
2201
2202     src = PL_regcode;
2203     PL_regcode += NODE_STEP_REGNODE + offset;
2204     dst = PL_regcode;
2205     while (src > opnd)
2206         StructCopy(--src, --dst, regnode);
2207
2208     place = opnd;               /* Op node, where operand used to be. */
2209     src = NEXTOPER(place);
2210     FILL_ADVANCE_NODE(place, op);
2211     Zero(src, offset, regnode);
2212 }
2213
2214 /*
2215 - regtail - set the next-pointer at the end of a node chain of p to val.
2216 */
2217 STATIC void
2218 regtail(regnode *p, regnode *val)
2219 {
2220     dTHR;
2221     register regnode *scan;
2222     register regnode *temp;
2223     register I32 offset;
2224
2225     if (SIZE_ONLY)
2226         return;
2227
2228     /* Find last node. */
2229     scan = p;
2230     for (;;) {
2231         temp = regnext(scan);
2232         if (temp == NULL)
2233             break;
2234         scan = temp;
2235     }
2236
2237     if (reg_off_by_arg[OP(scan)]) {
2238         ARG_SET(scan, val - scan);
2239     } else {
2240         NEXT_OFF(scan) = val - scan;
2241     }
2242 }
2243
2244 /*
2245 - regoptail - regtail on operand of first argument; nop if operandless
2246 */
2247 STATIC void
2248 regoptail(regnode *p, regnode *val)
2249 {
2250     dTHR;
2251     /* "Operandless" and "op != BRANCH" are synonymous in practice. */
2252     if (p == NULL || SIZE_ONLY)
2253         return;
2254     if (regkind[(U8)OP(p)] == BRANCH) {
2255         regtail(NEXTOPER(p), val);
2256     } else if ( regkind[(U8)OP(p)] == BRANCHJ) {
2257         regtail(NEXTOPER(NEXTOPER(p)), val);
2258     } else
2259         return;
2260 }
2261
2262 /*
2263  - regcurly - a little FSA that accepts {\d+,?\d*}
2264  */
2265 STATIC I32
2266 regcurly(register char *s)
2267 {
2268     if (*s++ != '{')
2269         return FALSE;
2270     if (!isDIGIT(*s))
2271         return FALSE;
2272     while (isDIGIT(*s))
2273         s++;
2274     if (*s == ',')
2275         s++;
2276     while (isDIGIT(*s))
2277         s++;
2278     if (*s != '}')
2279         return FALSE;
2280     return TRUE;
2281 }
2282
2283
2284 STATIC regnode *
2285 dumpuntil(regnode *start, regnode *node, regnode *last, SV* sv, I32 l)
2286 {
2287 #ifdef DEBUGGING
2288     register char op = EXACT;   /* Arbitrary non-END op. */
2289     register regnode *next, *onode;
2290
2291     while (op != END && (!last || node < last)) {
2292         /* While that wasn't END last time... */
2293
2294         NODE_ALIGN(node);
2295         op = OP(node);
2296         if (op == CLOSE)
2297             l--;
2298         next = regnext(node);
2299         /* Where, what. */
2300         if (OP(node) == OPTIMIZED)
2301             goto after_print;
2302         regprop(sv, node);
2303         PerlIO_printf(Perl_debug_log, "%4d:%*s%s", node - start,
2304                       2*l + 1, "", SvPVX(sv));
2305         if (next == NULL)               /* Next ptr. */
2306             PerlIO_printf(Perl_debug_log, "(0)");
2307         else
2308             PerlIO_printf(Perl_debug_log, "(%d)", next - start);
2309         (void)PerlIO_putc(Perl_debug_log, '\n');
2310       after_print:
2311         if (regkind[(U8)op] == BRANCHJ) {
2312             register regnode *nnode = (OP(next) == LONGJMP
2313                                        ? regnext(next)
2314                                        : next);
2315             if (last && nnode > last)
2316                 nnode = last;
2317             node = dumpuntil(start, NEXTOPER(NEXTOPER(node)), nnode, sv, l + 1);
2318         } else if (regkind[(U8)op] == BRANCH) {
2319             node = dumpuntil(start, NEXTOPER(node), next, sv, l + 1);
2320         } else if ( op == CURLY) {   /* `next' might be very big: optimizer */
2321             node = dumpuntil(start, NEXTOPER(node) + EXTRA_STEP_2ARGS,
2322                              NEXTOPER(node) + EXTRA_STEP_2ARGS + 1, sv, l + 1);
2323         } else if (regkind[(U8)op] == CURLY && op != CURLYX) {
2324             node = dumpuntil(start, NEXTOPER(node) + EXTRA_STEP_2ARGS,
2325                              next, sv, l + 1);
2326         } else if ( op == PLUS || op == STAR) {
2327             node = dumpuntil(start, NEXTOPER(node), NEXTOPER(node) + 1, sv, l + 1);
2328         } else if (op == ANYOF) {
2329             node = NEXTOPER(node);
2330             node += ANY_SKIP;
2331         } else if (regkind[(U8)op] == EXACT) {
2332             /* Literal string, where present. */
2333             node += ((*OPERAND(node)) + 2 + sizeof(regnode) - 1) / sizeof(regnode);
2334             node = NEXTOPER(node);
2335         } else {
2336             node = NEXTOPER(node);
2337             node += regarglen[(U8)op];
2338         }
2339         if (op == CURLYX || op == OPEN)
2340             l++;
2341         else if (op == WHILEM)
2342             l--;
2343     }
2344 #endif  /* DEBUGGING */
2345     return node;
2346 }
2347
2348 /*
2349  - regdump - dump a regexp onto Perl_debug_log in vaguely comprehensible form
2350  */
2351 void
2352 regdump(regexp *r)
2353 {
2354 #ifdef DEBUGGING
2355     dTHR;
2356     SV *sv = sv_newmortal();
2357
2358     (void)dumpuntil(r->program, r->program + 1, NULL, sv, 0);
2359
2360     /* Header fields of interest. */
2361     if (r->anchored_substr)
2362         PerlIO_printf(Perl_debug_log, "anchored `%s%s%s'%s at %d ",
2363                       PL_colors[0],
2364                       SvPVX(r->anchored_substr),
2365                       PL_colors[1],
2366                       SvTAIL(r->anchored_substr) ? "$" : "",
2367                       r->anchored_offset);
2368     if (r->float_substr)
2369         PerlIO_printf(Perl_debug_log, "floating `%s%s%s'%s at %d..%u ",
2370                       PL_colors[0],
2371                       SvPVX(r->float_substr),
2372                       PL_colors[1],
2373                       SvTAIL(r->float_substr) ? "$" : "",
2374                       r->float_min_offset, r->float_max_offset);
2375     if (r->check_substr)
2376         PerlIO_printf(Perl_debug_log,
2377                       r->check_substr == r->float_substr
2378                       ? "(checking floating" : "(checking anchored");
2379     if (r->reganch & ROPT_NOSCAN)
2380         PerlIO_printf(Perl_debug_log, " noscan");
2381     if (r->reganch & ROPT_CHECK_ALL)
2382         PerlIO_printf(Perl_debug_log, " isall");
2383     if (r->check_substr)
2384         PerlIO_printf(Perl_debug_log, ") ");
2385
2386     if (r->regstclass) {
2387         regprop(sv, r->regstclass);
2388         PerlIO_printf(Perl_debug_log, "stclass `%s' ", SvPVX(sv));
2389     }
2390     if (r->reganch & ROPT_ANCH) {
2391         PerlIO_printf(Perl_debug_log, "anchored");
2392         if (r->reganch & ROPT_ANCH_BOL)
2393             PerlIO_printf(Perl_debug_log, "(BOL)");
2394         if (r->reganch & ROPT_ANCH_MBOL)
2395             PerlIO_printf(Perl_debug_log, "(MBOL)");
2396         if (r->reganch & ROPT_ANCH_GPOS)
2397             PerlIO_printf(Perl_debug_log, "(GPOS)");
2398         PerlIO_putc(Perl_debug_log, ' ');
2399     }
2400     if (r->reganch & ROPT_GPOS_SEEN)
2401         PerlIO_printf(Perl_debug_log, "GPOS ");
2402     if (r->reganch & ROPT_SKIP)
2403         PerlIO_printf(Perl_debug_log, "plus ");
2404     if (r->reganch & ROPT_IMPLICIT)
2405         PerlIO_printf(Perl_debug_log, "implicit ");
2406     PerlIO_printf(Perl_debug_log, "minlen %ld ", (long) r->minlen);
2407     if (r->reganch & ROPT_EVAL_SEEN)
2408         PerlIO_printf(Perl_debug_log, "with eval ");
2409     PerlIO_printf(Perl_debug_log, "\n");
2410 #endif  /* DEBUGGING */
2411 }
2412
2413 /*
2414 - regprop - printable representation of opcode
2415 */
2416 void
2417 regprop(SV *sv, regnode *o)
2418 {
2419 #ifdef DEBUGGING
2420     dTHR;
2421     register char *p = 0;
2422
2423     sv_setpvn(sv, "", 0);
2424     switch (OP(o)) {
2425     case BOL:
2426         p = "BOL";
2427         break;
2428     case MBOL:
2429         p = "MBOL";
2430         break;
2431     case SBOL:
2432         p = "SBOL";
2433         break;
2434     case EOL:
2435         p = "EOL";
2436         break;
2437     case EOS:
2438         p = "EOS";
2439         break;
2440     case MEOL:
2441         p = "MEOL";
2442         break;
2443     case SEOL:
2444         p = "SEOL";
2445         break;
2446     case ANY:
2447         p = "ANY";
2448         break;
2449     case SANY:
2450         p = "SANY";
2451         break;
2452     case ANYOF:
2453         p = "ANYOF";
2454         break;
2455     case BRANCH:
2456         p = "BRANCH";
2457         break;
2458     case EXACT:
2459         sv_catpvf(sv, "EXACT <%s%s%s>", PL_colors[0], OPERAND(o) + 1, PL_colors[1]);
2460         break;
2461     case EXACTF:
2462         sv_catpvf(sv, "EXACTF <%s%s%s>", PL_colors[0], OPERAND(o) + 1, PL_colors[1]);
2463         break;
2464     case EXACTFL:
2465         sv_catpvf(sv, "EXACTFL <%s%s%s>", PL_colors[0], OPERAND(o) + 1, PL_colors[1]);
2466         break;
2467     case NOTHING:
2468         p = "NOTHING";
2469         break;
2470     case TAIL:
2471         p = "TAIL";
2472         break;
2473     case BACK:
2474         p = "BACK";
2475         break;
2476     case END:
2477         p = "END";
2478         break;
2479     case BOUND:
2480         p = "BOUND";
2481         break;
2482     case BOUNDL:
2483         p = "BOUNDL";
2484         break;
2485     case NBOUND:
2486         p = "NBOUND";
2487         break;
2488     case NBOUNDL:
2489         p = "NBOUNDL";
2490         break;
2491     case CURLY:
2492         sv_catpvf(sv, "CURLY {%d,%d}", ARG1(o), ARG2(o));
2493         break;
2494     case CURLYM:
2495         sv_catpvf(sv, "CURLYM[%d] {%d,%d}", o->flags, ARG1(o), ARG2(o));
2496         break;
2497     case CURLYN:
2498         sv_catpvf(sv, "CURLYN[%d] {%d,%d}", o->flags, ARG1(o), ARG2(o));
2499         break;
2500     case CURLYX:
2501         sv_catpvf(sv, "CURLYX {%d,%d}", ARG1(o), ARG2(o));
2502         break;
2503     case REF:
2504         sv_catpvf(sv, "REF%d", ARG(o));
2505         break;
2506     case REFF:
2507         sv_catpvf(sv, "REFF%d", ARG(o));
2508         break;
2509     case REFFL:
2510         sv_catpvf(sv, "REFFL%d", ARG(o));
2511         break;
2512     case OPEN:
2513         sv_catpvf(sv, "OPEN%d", ARG(o));
2514         break;
2515     case CLOSE:
2516         sv_catpvf(sv, "CLOSE%d", ARG(o));
2517         p = NULL;
2518         break;
2519     case STAR:
2520         p = "STAR";
2521         break;
2522     case PLUS:
2523         p = "PLUS";
2524         break;
2525     case MINMOD:
2526         p = "MINMOD";
2527         break;
2528     case GPOS:
2529         p = "GPOS";
2530         break;
2531     case UNLESSM:
2532         sv_catpvf(sv, "UNLESSM[-%d]", o->flags);
2533         break;
2534     case IFMATCH:
2535         sv_catpvf(sv, "IFMATCH[-%d]", o->flags);
2536         break;
2537     case SUCCEED:
2538         p = "SUCCEED";
2539         break;
2540     case WHILEM:
2541         p = "WHILEM";
2542         break;
2543     case DIGIT:
2544         p = "DIGIT";
2545         break;
2546     case NDIGIT:
2547         p = "NDIGIT";
2548         break;
2549     case ALNUM:
2550         p = "ALNUM";
2551         break;
2552     case NALNUM:
2553         p = "NALNUM";
2554         break;
2555     case SPACE:
2556         p = "SPACE";
2557         break;
2558     case NSPACE:
2559         p = "NSPACE";
2560         break;
2561     case ALNUML:
2562         p = "ALNUML";
2563         break;
2564     case NALNUML:
2565         p = "NALNUML";
2566         break;
2567     case SPACEL:
2568         p = "SPACEL";
2569         break;
2570     case NSPACEL:
2571         p = "NSPACEL";
2572         break;
2573     case EVAL:
2574         p = "EVAL";
2575         break;
2576     case LONGJMP:
2577         p = "LONGJMP";
2578         break;
2579     case BRANCHJ:
2580         p = "BRANCHJ";
2581         break;
2582     case IFTHEN:
2583         p = "IFTHEN";
2584         break;
2585     case GROUPP:
2586         sv_catpvf(sv, "GROUPP%d", ARG(o));
2587         break;
2588     case LOGICAL:
2589         p = "LOGICAL";
2590         break;
2591     case SUSPEND:
2592         p = "SUSPEND";
2593         break;
2594     case RENUM:
2595         p = "RENUM";
2596         break;
2597     case OPTIMIZED:
2598         p = "OPTIMIZED";
2599         break;
2600     default:
2601         FAIL("corrupted regexp opcode");
2602     }
2603     if (p)
2604         sv_catpv(sv, p);
2605 #endif  /* DEBUGGING */
2606 }
2607
2608 void
2609 pregfree(struct regexp *r)
2610 {
2611     dTHR;
2612     if (!r || (--r->refcnt > 0))
2613         return;
2614     if (r->precomp)
2615         Safefree(r->precomp);
2616     if (r->subbase)
2617         Safefree(r->subbase);
2618     if (r->substrs) {
2619         if (r->anchored_substr)
2620             SvREFCNT_dec(r->anchored_substr);
2621         if (r->float_substr)
2622             SvREFCNT_dec(r->float_substr);
2623         Safefree(r->substrs);
2624     }
2625     if (r->data) {
2626         int n = r->data->count;
2627         while (--n >= 0) {
2628             switch (r->data->what[n]) {
2629             case 's':
2630                 SvREFCNT_dec((SV*)r->data->data[n]);
2631                 break;
2632             case 'o':
2633                 op_free((OP_4tree*)r->data->data[n]);
2634                 break;
2635             case 'n':
2636                 break;
2637             default:
2638                 FAIL2("panic: regfree data code '%c'", r->data->what[n]);
2639             }
2640         }
2641         Safefree(r->data->what);
2642         Safefree(r->data);
2643     }
2644     Safefree(r->startp);
2645     Safefree(r->endp);
2646     Safefree(r);
2647 }
2648
2649 /*
2650  - regnext - dig the "next" pointer out of a node
2651  *
2652  * [Note, when REGALIGN is defined there are two places in regmatch()
2653  * that bypass this code for speed.]
2654  */
2655 regnode *
2656 regnext(register regnode *p)
2657 {
2658     dTHR;
2659     register I32 offset;
2660
2661     if (p == &PL_regdummy)
2662         return(NULL);
2663
2664     offset = (reg_off_by_arg[OP(p)] ? ARG(p) : NEXT_OFF(p));
2665     if (offset == 0)
2666         return(NULL);
2667
2668     return(p+offset);
2669 }
2670
2671 STATIC void
2672 re_croak2(const char* pat1,const char* pat2,...)
2673 {
2674     va_list args;
2675     STRLEN l1 = strlen(pat1);
2676     STRLEN l2 = strlen(pat2);
2677     char buf[512];
2678     char *message;
2679
2680     if (l1 > 510)
2681         l1 = 510;
2682     if (l1 + l2 > 510)
2683         l2 = 510 - l1;
2684     Copy(pat1, buf, l1 , char);
2685     Copy(pat2, buf + l1, l2 , char);
2686     buf[l1 + l2] = '\n';
2687     buf[l1 + l2 + 1] = '\0';
2688     va_start(args, pat2);
2689     message = mess(buf, &args);
2690     va_end(args);
2691     l1 = strlen(message);
2692     if (l1 > 512)
2693         l1 = 512;
2694     Copy(message, buf, l1 , char);
2695     buf[l1] = '\0';                     /* Overwrite \n */
2696     croak("%s", buf);
2697 }