sys/dev/serial/sio/sio.c

   1 /*-
   2  * (MPSAFE)
   3  *
   4  * Copyright (c) 1991 The Regents of the University of California.
   5  * All rights reserved.
   6  *
   7  * Redistribution and use in source and binary forms, with or without
   8  * modification, are permitted provided that the following conditions
   9  * are met:
  10  * 1. Redistributions of source code must retain the above copyright
  11  *    notice, this list of conditions and the following disclaimer.
  12  * 2. Redistributions in binary form must reproduce the above copyright
  13  *    notice, this list of conditions and the following disclaimer in the
  14  *    documentation and/or other materials provided with the distribution.
  15  * 3. Neither the name of the University nor the names of its contributors
  16  *    may be used to endorse or promote products derived from this software
  17  *    without specific prior written permission.
  18  *
  19  * THIS SOFTWARE IS PROVIDED BY THE REGENTS AND CONTRIBUTORS ``AS IS'' AND
  20  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  21  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  22  * ARE DISCLAIMED.  IN NO EVENT SHALL THE REGENTS OR CONTRIBUTORS BE LIABLE
  23  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  24  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  25  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  26  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  27  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  28  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  29  * SUCH DAMAGE.
  30  *
  31  * $FreeBSD: src/sys/isa/sio.c,v 1.291.2.35 2003/05/18 08:51:15 murray Exp $
  32  *      from: @(#)com.c 7.5 (Berkeley) 5/16/91
  33  *      from: i386/isa sio.c,v 1.234
  34  */
  35
  36 #include "opt_comconsole.h"
  37 #include "opt_compat.h"
  38 #include "opt_ddb.h"
  39 #include "opt_sio.h"
  40 #include "use_pci.h"
  41 #include "use_puc.h"
  42
  43 /*
  44  * Serial driver, based on 386BSD-0.1 com driver.
  45  * Mostly rewritten to use pseudo-DMA.
  46  * Works for National Semiconductor NS8250-NS16550AF UARTs.
  47  * COM driver, based on HP dca driver.
  48  *
  49  * Changes for PC-Card integration:
  50  *      - Added PC-Card driver table and handlers
  51  */
  52 #include <sys/param.h>
  53 #include <sys/systm.h>
  54 #include <sys/reboot.h>
  55 #include <sys/malloc.h>
  56 #include <sys/tty.h>
  57 #include <sys/proc.h>
  58 #include <sys/priv.h>
  59 #include <sys/module.h>
  60 #include <sys/conf.h>
  61 #include <sys/dkstat.h>
  62 #include <sys/fcntl.h>
  63 #include <sys/interrupt.h>
  64 #include <sys/kernel.h>
  65 #include <sys/syslog.h>
  66 #include <sys/sysctl.h>
  67 #include <sys/bus.h>
  68 #include <sys/rman.h>
  69 #include <sys/timepps.h>
  70 #include <sys/thread2.h>
  71 #include <sys/devfs.h>
  72 #include <sys/consio.h>
  73
  74 #include <machine/limits.h>
  75
  76 #include <bus/isa/isareg.h>
  77 #include <bus/isa/isavar.h>
  78 #if NPCI > 0
  79 #include <bus/pci/pcireg.h>
  80 #include <bus/pci/pcivar.h>
  81 #endif
  82 #if NPUC > 0
  83 #include <dev/misc/puc/pucvar.h>
  84 #endif
  85 #include <machine/lock.h>
  86
  87 #include <machine/clock.h>
  88
  89 #include "sioreg.h"
  90 #include "sio_private.h"
  91
  92 #ifdef COM_ESP
  93 #include "../ic_layer/esp.h"
  94 #endif
  95
  96 #define LOTS_OF_EVENTS  64      /* helps separate urgent events from input */
  97
  98 #define CALLOUT_MASK            0x80
  99 #define CONTROL_MASK            0x60
 100 #define CONTROL_INIT_STATE      0x20
 101 #define CONTROL_LOCK_STATE      0x40
 102 #define DEV_TO_UNIT(dev)        (MINOR_TO_UNIT(minor(dev)))
 103 #define MINOR_TO_UNIT(mynor)    ((((mynor) & ~0xffffU) >> (8 + 3)) \
 104                                  | ((mynor) & 0x1f))
 105 #define UNIT_TO_MINOR(unit)     ((((unit) & ~0x1fU) << (8 + 3)) \
 106                                  | ((unit) & 0x1f))
 107
 108 #define com_scr         7       /* scratch register for 16450-16550 (R/W) */
 109
 110 #define sio_getreg(com, off) \
 111         (bus_space_read_1((com)->bst, (com)->bsh, (off)))
 112 #define sio_setreg(com, off, value) \
 113         (bus_space_write_1((com)->bst, (com)->bsh, (off), (value)))
 114
 115 /*
 116  * com state bits.
 117  * (CS_BUSY | CS_TTGO) and (CS_BUSY | CS_TTGO | CS_ODEVREADY) must be higher
 118  * than the other bits so that they can be tested as a group without masking
 119  * off the low bits.
 120  *
 121  * The following com and tty flags correspond closely:
 122  *      CS_BUSY         = TS_BUSY (maintained by comstart(), siopoll() and
 123  *                                 comstop())
 124  *      CS_TTGO         = ~TS_TTSTOP (maintained by comparam() and comstart())
 125  *      CS_CTS_OFLOW    = CCTS_OFLOW (maintained by comparam())
 126  *      CS_RTS_IFLOW    = CRTS_IFLOW (maintained by comparam())
 127  * TS_FLUSH is not used.
 128  * XXX I think TIOCSETA doesn't clear TS_TTSTOP when it clears IXON.
 129  * XXX CS_*FLOW should be CF_*FLOW in com->flags (control flags not state).
 130  */
 131 #define CS_BUSY         0x80    /* output in progress */
 132 #define CS_TTGO         0x40    /* output not stopped by XOFF */
 133 #define CS_ODEVREADY    0x20    /* external device h/w ready (CTS) */
 134 #define CS_CHECKMSR     1       /* check of MSR scheduled */
 135 #define CS_CTS_OFLOW    2       /* use CTS output flow control */
 136 #define CS_DTR_OFF      0x10    /* DTR held off */
 137 #define CS_ODONE        4       /* output completed */
 138 #define CS_RTS_IFLOW    8       /* use RTS input flow control */
 139 #define CSE_BUSYCHECK   1       /* siobusycheck() scheduled */
 140
 141 static  char const * const      error_desc[] = {
 142 #define CE_OVERRUN                      0
 143         "silo overflow",
 144 #define CE_INTERRUPT_BUF_OVERFLOW       1
 145         "interrupt-level buffer overflow",
 146 #define CE_TTY_BUF_OVERFLOW             2
 147         "tty-level buffer overflow",
 148 };
 149
 150 #ifdef COM_ESP
 151 static  int     espattach       (struct com_s *com, Port_t esp_port);
 152 #endif
 153 static  int     sio_isa_attach  (device_t dev);
 154
 155 static  timeout_t siobusycheck;
 156 static  u_int   siodivisor      (u_long rclk, speed_t speed);
 157 static  timeout_t siodtrwakeup;
 158 static  void    comhardclose    (struct com_s *com);
 159 static  void    sioinput        (struct com_s *com);
 160 static  void    siointr1        (struct com_s *com);
 161 static  void    siointr         (void *arg);
 162 static  int     commctl         (struct com_s *com, int bits, int how);
 163 static  int     comparam        (struct tty *tp, struct termios *t);
 164 static  inthand2_t siopoll;
 165 static  int     sio_isa_probe   (device_t dev);
 166 static  void    siosettimeout   (void);
 167 static  int     siosetwater     (struct com_s *com, speed_t speed);
 168 static  void    comstart        (struct tty *tp);
 169 static  void    comstop         (struct tty *tp, int rw);
 170 static  timeout_t comwakeup;
 171 static  void    disc_optim      (struct tty     *tp, struct termios *t,
 172                                      struct com_s *com);
 173
 174 #if NPCI > 0
 175 static  int     sio_pci_attach (device_t dev);
 176 static  void    sio_pci_kludge_unit (device_t dev);
 177 static  int     sio_pci_probe (device_t dev);
 178 #endif /* NPCI > 0 */
 179
 180 #if NPUC > 0
 181 static  int     sio_puc_attach (device_t dev);
 182 static  int     sio_puc_probe (device_t dev);
 183 #endif /* NPUC > 0 */
 184
 185 static char driver_name[] = "sio";
 186
 187 /* table and macro for fast conversion from a unit number to its com struct */
 188 devclass_t      sio_devclass;
 189 #define com_addr(unit)  ((struct com_s *) \
 190                          devclass_get_softc(sio_devclass, unit))
 191
 192 static device_method_t sio_isa_methods[] = {
 193         /* Device interface */
 194         DEVMETHOD(device_probe,         sio_isa_probe),
 195         DEVMETHOD(device_attach,        sio_isa_attach),
 196
 197         DEVMETHOD_END
 198 };
 199
 200 static driver_t sio_isa_driver = {
 201         driver_name,
 202         sio_isa_methods,
 203         sizeof(struct com_s),
 204 };
 205
 206 #if NPCI > 0
 207 static device_method_t sio_pci_methods[] = {
 208         /* Device interface */
 209         DEVMETHOD(device_probe,         sio_pci_probe),
 210         DEVMETHOD(device_attach,        sio_pci_attach),
 211
 212         DEVMETHOD_END
 213 };
 214
 215 static driver_t sio_pci_driver = {
 216         driver_name,
 217         sio_pci_methods,
 218         sizeof(struct com_s),
 219 };
 220 #endif /* NPCI > 0 */
 221
 222 #if NPUC > 0
 223 static device_method_t sio_puc_methods[] = {
 224         /* Device interface */
 225         DEVMETHOD(device_probe,         sio_puc_probe),
 226         DEVMETHOD(device_attach,        sio_puc_attach),
 227
 228         DEVMETHOD_END
 229 };
 230
 231 static driver_t sio_puc_driver = {
 232         driver_name,
 233         sio_puc_methods,
 234         sizeof(struct com_s),
 235 };
 236 #endif /* NPUC > 0 */
 237
 238 static  d_open_t        sioopen;
 239 static  d_close_t       sioclose;
 240 static  d_read_t        sioread;
 241 static  d_write_t       siowrite;
 242 static  d_ioctl_t       sioioctl;
 243
 244 static struct dev_ops sio_ops = {
 245         { driver_name, 0, D_TTY },
 246         .d_open =       sioopen,
 247         .d_close =      sioclose,
 248         .d_read =       sioread,
 249         .d_write =      siowrite,
 250         .d_ioctl =      sioioctl,
 251         .d_kqfilter =   ttykqfilter,
 252         .d_revoke =     ttyrevoke
 253 };
 254
 255 int     comconsole = -1;
 256 static  volatile speed_t        comdefaultrate = CONSPEED;
 257 static  u_long                  comdefaultrclk = DEFAULT_RCLK;
 258 SYSCTL_ULONG(_machdep, OID_AUTO, conrclk, CTLFLAG_RW, &comdefaultrclk, 0, "");
 259 static  u_int   com_events;     /* input chars + weighted output completions */
 260 static  Port_t  siocniobase;
 261 static  int     siocnunit;
 262 static  Port_t  siogdbiobase;
 263 static  int     siogdbunit = -1;
 264 static  bool_t  sio_registered;
 265 static  int     sio_timeout;
 266 static  int     sio_timeouts_until_log;
 267 static  struct  callout sio_timeout_handle;
 268 static  int     sio_numunits;
 269
 270 #ifdef COM_ESP
 271 /* XXX configure this properly. */
 272 static  Port_t  likely_com_ports[] = { 0x3f8, 0x2f8, 0x3e8, 0x2e8, };
 273 static  Port_t  likely_esp_ports[] = { 0x140, 0x180, 0x280, 0 };
 274 #endif
 275
 276 /*
 277  * handle sysctl read/write requests for console speed
 278  *
 279  * In addition to setting comdefaultrate for I/O through /dev/console,
 280  * also set the initial and lock values for the /dev/ttyXX device
 281  * if there is one associated with the console.  Finally, if the /dev/tty
 282  * device has already been open, change the speed on the open running port
 283  * itself.
 284  */
 285
 286 static int
 287 sysctl_machdep_comdefaultrate(SYSCTL_HANDLER_ARGS)
 288 {
 289         int error;
 290         speed_t newspeed;
 291         struct com_s *com;
 292         struct tty *tp;
 293
 294         lwkt_gettoken(&tty_token);
 295         newspeed = comdefaultrate;
 296
 297         error = sysctl_handle_opaque(oidp, &newspeed, sizeof newspeed, req);
 298         if (error || !req->newptr) {
 299                 lwkt_reltoken(&tty_token);
 300                 return (error);
 301         }
 302
 303         comdefaultrate = newspeed;
 304
 305         if (comconsole < 0) {   /* serial console not selected? */
 306                 lwkt_reltoken(&tty_token);
 307                 return (0);
 308         }
 309
 310         com = com_addr(comconsole);
 311         if (com == NULL) {
 312                 lwkt_reltoken(&tty_token);
 313                 return (ENXIO);
 314         }
 315
 316         /*
 317          * set the initial and lock rates for /dev/ttydXX and /dev/cuaXX
 318          * (note, the lock rates really are boolean -- if non-zero, disallow
 319          *  speed changes)
 320          */
 321         com->it_in.c_ispeed  = com->it_in.c_ospeed =
 322         com->lt_in.c_ispeed  = com->lt_in.c_ospeed =
 323         com->it_out.c_ispeed = com->it_out.c_ospeed =
 324         com->lt_out.c_ispeed = com->lt_out.c_ospeed = comdefaultrate;
 325
 326         /*
 327          * if we're open, change the running rate too
 328          */
 329         tp = com->tp;
 330         if (tp && (tp->t_state & TS_ISOPEN)) {
 331                 tp->t_termios.c_ispeed =
 332                 tp->t_termios.c_ospeed = comdefaultrate;
 333                 crit_enter();
 334                 error = comparam(tp, &tp->t_termios);
 335                 crit_exit();
 336         }
 337         lwkt_reltoken(&tty_token);
 338         return error;
 339 }
 340
 341 SYSCTL_PROC(_machdep, OID_AUTO, conspeed, CTLTYPE_INT | CTLFLAG_RW,
 342             0, 0, sysctl_machdep_comdefaultrate, "I", "");
 343
 344 #if NPCI > 0
 345 struct pci_ids {
 346         u_int32_t       type;
 347         const char      *desc;
 348         int             rid;
 349 };
 350
 351 static struct pci_ids pci_ids[] = {
 352         { 0x100812b9, "3COM PCI FaxModem", 0x10 },
 353         { 0x2000131f, "CyberSerial (1-port) 16550", 0x10 },
 354         { 0x01101407, "Koutech IOFLEX-2S PCI Dual Port Serial", 0x10 },
 355         { 0x01111407, "Koutech IOFLEX-2S PCI Dual Port Serial", 0x10 },
 356         { 0x048011c1, "Lucent kermit based PCI Modem", 0x14 },
 357         { 0x95211415, "Oxford Semiconductor PCI Dual Port Serial", 0x10 },
 358         { 0x7101135e, "SeaLevel Ultra 530.PCI Single Port Serial", 0x18 },
 359         { 0x0000151f, "SmartLink 5634PCV SurfRider", 0x10 },
 360         { 0x98459710, "Netmos Nm9845 PCI Bridge with Dual UART", 0x10 },
 361         { 0x8c3d8086, "Intel Lynx Point KT Controller", 0x10 },
 362         { 0x9c3d8086, "Intel Lynx Point-LP HECI KT", 0x10 },
 363         { 0x8cbd8086, "Intel Wildcat Point KT Controller", 0x10 },
 364         { 0x9cbd8086, "Intel Wildcat Point-LP KT Controller", 0x10 },
 365         { 0x00000000, NULL, 0 }
 366 };
 367
 368 static int
 369 sio_pci_attach(device_t dev)
 370 {
 371         u_int32_t       type;
 372         struct pci_ids  *id;
 373
 374         type = pci_get_devid(dev);
 375         id = pci_ids;
 376         while (id->type && id->type != type)
 377                 id++;
 378         if (id->desc == NULL)
 379                 return (ENXIO);
 380         sio_pci_kludge_unit(dev);
 381         return (sioattach(dev, id->rid, 0UL));
 382 }
 383
 384 /*
 385  * Don't cut and paste this to other drivers.  It is a horrible kludge
 386  * which will fail to work and also be unnecessary in future versions.
 387  */
 388 static void
 389 sio_pci_kludge_unit(device_t dev)
 390 {
 391         devclass_t      dc;
 392         int             err;
 393         int             start;
 394         int             unit;
 395
 396         unit = 0;
 397         start = 0;
 398         while (resource_int_value("sio", unit, "port", &start) == 0 &&
 399             start > 0)
 400                 unit++;
 401         if (device_get_unit(dev) < unit) {
 402                 dc = device_get_devclass(dev);
 403                 while (devclass_get_device(dc, unit))
 404                         unit++;
 405                 device_printf(dev, "moving to sio%d\n", unit);
 406                 err = device_set_unit(dev, unit);       /* EVIL DO NOT COPY */
 407                 if (err)
 408                         device_printf(dev, "error moving device %d\n", err);
 409         }
 410 }
 411
 412 static int
 413 sio_pci_probe(device_t dev)
 414 {
 415         u_int32_t       type;
 416         struct pci_ids  *id;
 417
 418         type = pci_get_devid(dev);
 419         id = pci_ids;
 420         while (id->type && id->type != type)
 421                 id++;
 422         if (id->desc == NULL)
 423                 return (ENXIO);
 424         device_set_desc(dev, id->desc);
 425         return (sioprobe(dev, id->rid, 0UL));
 426 }
 427 #endif /* NPCI > 0 */
 428
 429 #if NPUC > 0
 430 static int
 431 sio_puc_attach(device_t dev)
 432 {
 433         uintptr_t rclk;
 434
 435         if (BUS_READ_IVAR(device_get_parent(dev), dev, PUC_IVAR_FREQ,
 436             &rclk) != 0)
 437                 rclk = DEFAULT_RCLK;
 438         return (sioattach(dev, 0, rclk));
 439 }
 440
 441 static int
 442 sio_puc_probe(device_t dev)
 443 {
 444         uintptr_t rclk;
 445
 446         if (BUS_READ_IVAR(device_get_parent(dev), dev, PUC_IVAR_FREQ,
 447             &rclk) != 0)
 448                 rclk = DEFAULT_RCLK;
 449         return (sioprobe(dev, 0, rclk));
 450 }
 451 #endif /* NPUC */
 452
 453 static struct isa_pnp_id sio_ids[] = {
 454         {0x0005d041, "Standard PC COM port"},   /* PNP0500 */
 455         {0x0105d041, "16550A-compatible COM port"},     /* PNP0501 */
 456         {0x0205d041, "Multiport serial device (non-intelligent 16550)"}, /* PNP0502 */
 457         {0x1005d041, "Generic IRDA-compatible device"}, /* PNP0510 */
 458         {0x1105d041, "Generic IRDA-compatible device"}, /* PNP0511 */
 459         /* Devices that do not have a compatid */
 460         {0x12206804, NULL},     /* ACH2012 - 5634BTS 56K Video Ready Modem */
 461         {0x7602a904, NULL},     /* AEI0276 - 56K v.90 Fax Modem (LKT) */
 462         {0x00007905, NULL},     /* AKY0000 - 56K Plug&Play Modem */
 463         {0x21107905, NULL},     /* AKY1021 - 56K Plug&Play Modem */
 464         {0x01405407, NULL},     /* AZT4001 - AZT3000 PnP SOUND DEVICE, MODEM */
 465         {0x56039008, NULL},     /* BDP0356 - Best Data 56x2 */
 466         {0x56159008, NULL},     /* BDP1556 - B.D. Smart One 56SPS,Voice Modem*/
 467         {0x36339008, NULL},     /* BDP3336 - Best Data Prods. 336F */
 468         {0x0014490a, NULL},     /* BRI1400 - Boca 33.6 PnP */
 469         {0x0015490a, NULL},     /* BRI1500 - Internal Fax Data */
 470         {0x0034490a, NULL},     /* BRI3400 - Internal ACF Modem */
 471         {0x0094490a, NULL},     /* BRI9400 - Boca K56Flex PnP */
 472         {0x00b4490a, NULL},     /* BRIB400 - Boca 56k PnP */
 473         {0x0030320d, NULL},     /* CIR3000 - Cirrus Logic V43 */
 474         {0x0100440e, NULL},     /* CRD0001 - Cardinal MVP288IV ? */
 475         {0x01308c0e, NULL},     /* CTL3001 - Creative Labs Phoneblaster */
 476         {0x36033610, NULL},     /* DAV0336 - DAVICOM 336PNP MODEM */
 477         {0x01009416, NULL},     /* ETT0001 - E-Tech Bullet 33k6 PnP */
 478         {0x0000aa1a, NULL},     /* FUJ0000 - FUJITSU Modem 33600 PNP/I2 */
 479         {0x1200c31e, NULL},     /* GVC0012 - VF1128HV-R9 (win modem?) */
 480         {0x0303c31e, NULL},     /* GVC0303 - MaxTech 33.6 PnP D/F/V */
 481         {0x0505c31e, NULL},     /* GVC0505 - GVC 56k Faxmodem */
 482         {0x0116c31e, NULL},     /* GVC1601 - Rockwell V.34 Plug & Play Modem */
 483         {0x0050c31e, NULL},     /* GVC5000 - some GVC modem */
 484         {0x3800f91e, NULL},     /* GWY0038 - Telepath with v.90 */
 485         {0x9062f91e, NULL},     /* GWY6290 - Telepath with x2 Technology */
 486         {0x8100e425, NULL},     /* IOD0081 - I-O DATA DEVICE,INC. IFML-560 */
 487         {0x21002534, NULL},     /* MAE0021 - Jetstream Int V.90 56k Voice Series 2*/
 488         {0x0000f435, NULL},     /* MOT0000 - Motorola ModemSURFR 33.6 Intern */
 489         {0x5015f435, NULL},     /* MOT1550 - Motorola ModemSURFR 56K Modem */
 490         {0xf015f435, NULL},     /* MOT15F0 - Motorola VoiceSURFR 56K Modem */
 491         {0x6045f435, NULL},     /* MOT4560 - Motorola ? */
 492         {0x61e7a338, NULL},     /* NECE761 - 33.6Modem */
 493         {0x08804f3f, NULL},     /* OZO8008 - Zoom  (33.6k Modem) */
 494         {0x0f804f3f, NULL},     /* OZO800f - Zoom 2812 (56k Modem) */
 495         {0x39804f3f, NULL},     /* OZO8039 - Zoom 56k flex */
 496         {0x00914f3f, NULL},     /* OZO9100 - Zoom 2919 (K56 Faxmodem) */
 497         {0x3024a341, NULL},     /* PMC2430 - Pace 56 Voice Internal Modem */
 498         {0x1000eb49, NULL},     /* ROK0010 - Rockwell ? */
 499         {0x1200b23d, NULL},     /* RSS0012 - OMRON ME5614ISA */
 500         {0x5002734a, NULL},     /* RSS0250 - 5614Jx3(G) Internal Modem */
 501         {0x6202734a, NULL},     /* RSS0262 - 5614Jx3[G] V90+K56Flex Modem */
 502         {0x1010104d, NULL},     /* SHP1010 - Rockwell 33600bps Modem */
 503         {0xc100ad4d, NULL},     /* SMM00C1 - Leopard 56k PnP */
 504         {0x9012b04e, NULL},     /* SUP1290 - Supra ? */
 505         {0x1013b04e, NULL},     /* SUP1310 - SupraExpress 336i PnP */
 506         {0x8013b04e, NULL},     /* SUP1380 - SupraExpress 288i PnP Voice */
 507         {0x8113b04e, NULL},     /* SUP1381 - SupraExpress 336i PnP Voice */
 508         {0x5016b04e, NULL},     /* SUP1650 - Supra 336i Sp Intl */
 509         {0x7016b04e, NULL},     /* SUP1670 - Supra 336i V+ Intl */
 510         {0x7420b04e, NULL},     /* SUP2070 - Supra ? */
 511         {0x8020b04e, NULL},     /* SUP2080 - Supra ? */
 512         {0x8420b04e, NULL},     /* SUP2084 - SupraExpress 56i PnP */
 513         {0x7121b04e, NULL},     /* SUP2171 - SupraExpress 56i Sp? */
 514         {0x8024b04e, NULL},     /* SUP2480 - Supra ? */
 515         {0x01007256, NULL},     /* USR0001 - U.S. Robotics Inc., Sportster W */
 516         {0x02007256, NULL},     /* USR0002 - U.S. Robotics Inc. Sportster 33. */
 517         {0x04007256, NULL},     /* USR0004 - USR Sportster 14.4k */
 518         {0x06007256, NULL},     /* USR0006 - USR Sportster 33.6k */
 519         {0x11007256, NULL},     /* USR0011 - USR ? */
 520         {0x01017256, NULL},     /* USR0101 - USR ? */
 521         {0x30207256, NULL},     /* USR2030 - U.S.Robotics Inc. Sportster 560 */
 522         {0x50207256, NULL},     /* USR2050 - U.S.Robotics Inc. Sportster 33. */
 523         {0x70207256, NULL},     /* USR2070 - U.S.Robotics Inc. Sportster 560 */
 524         {0x30307256, NULL},     /* USR3030 - U.S. Robotics 56K FAX INT */
 525         {0x31307256, NULL},     /* USR3031 - U.S. Robotics 56K FAX INT */
 526         {0x50307256, NULL},     /* USR3050 - U.S. Robotics 56K FAX INT */
 527         {0x70307256, NULL},     /* USR3070 - U.S. Robotics 56K Voice INT */
 528         {0x90307256, NULL},     /* USR3090 - USR ? */
 529         {0x70917256, NULL},     /* USR9170 - U.S. Robotics 56K FAX INT */
 530         {0x90917256, NULL},     /* USR9190 - USR 56k Voice INT */
 531         {0x0300695c, NULL},     /* WCI0003 - Fax/Voice/Modem/Speakphone/Asvd */
 532         {0x01a0896a, NULL},     /* ZTIA001 - Zoom Internal V90 Faxmodem */
 533         {0x61f7896a, NULL},     /* ZTIF761 - Zoom ComStar 33.6 */
 534         {0}
 535 };
 536
 537
 538
 539 static int
 540 sio_isa_probe(device_t dev)
 541 {
 542         /* Check isapnp ids */
 543         if (ISA_PNP_PROBE(device_get_parent(dev), dev, sio_ids) == ENXIO)
 544                 return (ENXIO);
 545         return (sioprobe(dev, 0, 0UL));
 546 }
 547
 548 int
 549 sioprobe(device_t dev, int xrid, u_long rclk)
 550 {
 551 #if 0
 552         static bool_t   already_init;
 553         device_t        xdev;
 554 #endif
 555         struct com_s    *com;
 556         u_int           divisor;
 557         bool_t          failures[10];
 558         int             fn;
 559         device_t        idev;
 560         Port_t          iobase;
 561         intrmask_t      irqmap[4];
 562         intrmask_t      irqs;
 563         u_char          mcr_image;
 564         int             result;
 565         u_long          xirq;
 566         u_int           flags = device_get_flags(dev);
 567         int             rid;
 568         struct resource *port;
 569
 570         rid = xrid;
 571         port = bus_alloc_resource(dev, SYS_RES_IOPORT, &rid,
 572                                   0, ~0, IO_COMSIZE, RF_ACTIVE);
 573         if (!port)
 574                 return (ENXIO);
 575
 576         lwkt_gettoken(&tty_token);
 577         com = device_get_softc(dev);
 578         com->bst = rman_get_bustag(port);
 579         com->bsh = rman_get_bushandle(port);
 580         if (rclk == 0)
 581                 rclk = DEFAULT_RCLK;
 582         com->rclk = rclk;
 583
 584 #if 0
 585         /*
 586          * XXX this is broken - when we are first called, there are no
 587          * previously configured IO ports.  We could hard code
 588          * 0x3f8, 0x2f8, 0x3e8, 0x2e8 etc but that's probably worse.
 589          * This code has been doing nothing since the conversion since
 590          * "count" is zero the first time around.
 591          */
 592         if (!already_init) {
 593                 /*
 594                  * Turn off MCR_IENABLE for all likely serial ports.  An unused
 595                  * port with its MCR_IENABLE gate open will inhibit interrupts
 596                  * from any used port that shares the interrupt vector.
 597                  * XXX the gate enable is elsewhere for some multiports.
 598                  */
 599                 device_t *devs;
 600                 int count, i, xioport;
 601
 602                 devclass_get_devices(sio_devclass, &devs, &count);
 603                 for (i = 0; i < count; i++) {
 604                         xdev = devs[i];
 605                         if (device_is_enabled(xdev) &&
 606                             bus_get_resource(xdev, SYS_RES_IOPORT, 0, &xioport,
 607                                              NULL) == 0)
 608                                 outb(xioport + com_mcr, 0);
 609                 }
 610                 kfree(devs, M_TEMP);
 611                 already_init = TRUE;
 612         }
 613 #endif
 614
 615         if (COM_LLCONSOLE(flags)) {
 616                 kprintf("sio%d: reserved for low-level i/o\n",
 617                        device_get_unit(dev));
 618                 bus_release_resource(dev, SYS_RES_IOPORT, rid, port);
 619                 lwkt_reltoken(&tty_token);
 620                 return (ENXIO);
 621         }
 622
 623         /*
 624          * If the device is on a multiport card and has an AST/4
 625          * compatible interrupt control register, initialize this
 626          * register and prepare to leave MCR_IENABLE clear in the mcr.
 627          * Otherwise, prepare to set MCR_IENABLE in the mcr.
 628          * Point idev to the device struct giving the correct id_irq.
 629          * This is the struct for the master device if there is one.
 630          */
 631         idev = dev;
 632         mcr_image = MCR_IENABLE;
 633 #ifdef COM_MULTIPORT
 634         if (COM_ISMULTIPORT(flags)) {
 635                 Port_t xiobase;
 636                 u_long io;
 637
 638                 idev = devclass_get_device(sio_devclass, COM_MPMASTER(flags));
 639                 if (idev == NULL) {
 640                         kprintf("sio%d: master device %d not configured\n",
 641                                device_get_unit(dev), COM_MPMASTER(flags));
 642                         idev = dev;
 643                 }
 644                 if (!COM_NOTAST4(flags)) {
 645                         if (bus_get_resource(idev, SYS_RES_IOPORT, 0, &io,
 646                                              NULL) == 0) {
 647                                 xiobase = io;
 648                                 if (bus_get_resource(idev, SYS_RES_IRQ, 0,
 649                                     NULL, NULL) == 0)
 650                                         outb(xiobase + com_scr, 0x80);
 651                                 else
 652                                         outb(xiobase + com_scr, 0);
 653                         }
 654                         mcr_image = 0;
 655                 }
 656         }
 657 #endif /* COM_MULTIPORT */
 658         if (bus_get_resource(idev, SYS_RES_IRQ, 0, NULL, NULL) != 0)
 659                 mcr_image = 0;
 660
 661         bzero(failures, sizeof failures);
 662         iobase = rman_get_start(port);
 663
 664         /*
 665          * We don't want to get actual interrupts, just masked ones.
 666          * Interrupts from this line should already be masked in the ICU,
 667          * but mask them in the processor as well in case there are some
 668          * (misconfigured) shared interrupts.
 669          */
 670         com_lock();
 671 /* EXTRA DELAY? */
 672
 673         /*
 674          * For the TI16754 chips, set prescaler to 1 (4 is often the
 675          * default after-reset value) as otherwise it's impossible to
 676          * get highest baudrates.
 677          */
 678         if (COM_TI16754(flags)) {
 679                 u_char cfcr, efr;
 680
 681                 cfcr = sio_getreg(com, com_cfcr);
 682                 sio_setreg(com, com_cfcr, CFCR_EFR_ENABLE);
 683                 efr = sio_getreg(com, com_efr);
 684                 /* Unlock extended features to turn off prescaler. */
 685                 sio_setreg(com, com_efr, efr | EFR_EFE);
 686                 /* Disable EFR. */
 687                 sio_setreg(com, com_cfcr, (cfcr != CFCR_EFR_ENABLE) ? cfcr : 0);
 688                 /* Turn off prescaler. */
 689                 sio_setreg(com, com_mcr,
 690                            sio_getreg(com, com_mcr) & ~MCR_PRESCALE);
 691                 sio_setreg(com, com_cfcr, CFCR_EFR_ENABLE);
 692                 sio_setreg(com, com_efr, efr);
 693                 sio_setreg(com, com_cfcr, cfcr);
 694         }
 695
 696         /*
 697          * Initialize the speed and the word size and wait long enough to
 698          * drain the maximum of 16 bytes of junk in device output queues.
 699          * The speed is undefined after a master reset and must be set
 700          * before relying on anything related to output.  There may be
 701          * junk after a (very fast) soft reboot and (apparently) after
 702          * master reset.
 703          * XXX what about the UART bug avoided by waiting in comparam()?
 704          * We don't want to to wait long enough to drain at 2 bps.
 705          */
 706         if (iobase == siocniobase) {
 707                 DELAY((16 + 1) * 1000000 / (comdefaultrate / 10));
 708         } else {
 709                 sio_setreg(com, com_cfcr, CFCR_DLAB | CFCR_8BITS);
 710                 divisor = siodivisor(rclk, SIO_TEST_SPEED);
 711                 sio_setreg(com, com_dlbl, divisor & 0xff);
 712                 sio_setreg(com, com_dlbh, divisor >> 8);
 713                 sio_setreg(com, com_cfcr, CFCR_8BITS);
 714                 DELAY((16 + 1) * 1000000 / (SIO_TEST_SPEED / 10));
 715         }
 716
 717         /*
 718          * Make sure we can drain the receiver.  If we can't, the serial
 719          * port may not exist.
 720          */
 721         for (fn = 0; fn < 256; ++fn) {
 722                 if ((sio_getreg(com, com_lsr) & LSR_RXRDY) == 0)
 723                         break;
 724                 (void)sio_getreg(com, com_data);
 725         }
 726         if (fn == 256) {
 727                 com_unlock();
 728                 lwkt_reltoken(&tty_token);
 729                 kprintf("sio%d: can't drain, serial port might "
 730                         "not exist, disabling\n", device_get_unit(dev));
 731                 return (ENXIO);
 732         }
 733
 734         /*
 735          * Enable the interrupt gate and disable device interupts.  This
 736          * should leave the device driving the interrupt line low and
 737          * guarantee an edge trigger if an interrupt can be generated.
 738          */
 739 /* EXTRA DELAY? */
 740         sio_setreg(com, com_mcr, mcr_image);
 741         sio_setreg(com, com_ier, 0);
 742         DELAY(1000);            /* XXX */
 743         irqmap[0] = isa_irq_pending();
 744
 745         /*
 746          * Attempt to set loopback mode so that we can send a null byte
 747          * without annoying any external device.
 748          */
 749 /* EXTRA DELAY? */
 750         sio_setreg(com, com_mcr, mcr_image | MCR_LOOPBACK);
 751
 752         /*
 753          * Attempt to generate an output interrupt.  On 8250's, setting
 754          * IER_ETXRDY generates an interrupt independent of the current
 755          * setting and independent of whether the THR is empty.  On 16450's,
 756          * setting IER_ETXRDY generates an interrupt independent of the
 757          * current setting.  On 16550A's, setting IER_ETXRDY only
 758          * generates an interrupt when IER_ETXRDY is not already set.
 759          */
 760         sio_setreg(com, com_ier, IER_ETXRDY);
 761
 762         /*
 763          * On some 16x50 incompatibles, setting IER_ETXRDY doesn't generate
 764          * an interrupt.  They'd better generate one for actually doing
 765          * output.  Loopback may be broken on the same incompatibles but
 766          * it's unlikely to do more than allow the null byte out.
 767          */
 768         sio_setreg(com, com_data, 0);
 769         DELAY((1 + 2) * 1000000 / (SIO_TEST_SPEED / 10));
 770
 771         /*
 772          * Turn off loopback mode so that the interrupt gate works again
 773          * (MCR_IENABLE was hidden).  This should leave the device driving
 774          * an interrupt line high.  It doesn't matter if the interrupt
 775          * line oscillates while we are not looking at it, since interrupts
 776          * are disabled.
 777          */
 778 /* EXTRA DELAY? */
 779         sio_setreg(com, com_mcr, mcr_image);
 780
 781         /*
 782          * Some pcmcia cards have the "TXRDY bug", so we check everyone
 783          * for IIR_TXRDY implementation ( Palido 321s, DC-1S... )
 784          */
 785         if (COM_NOPROBE(flags)) {
 786                 /* Reading IIR register twice */
 787                 for (fn = 0; fn < 2; fn ++) {
 788                         DELAY(10000);
 789                         failures[6] = sio_getreg(com, com_iir);
 790                 }
 791                 /* Check IIR_TXRDY clear ? */
 792                 result = 0;
 793                 if (failures[6] & IIR_TXRDY) {
 794                         /* Nop, Double check with clearing IER */
 795                         sio_setreg(com, com_ier, 0);
 796                         if (sio_getreg(com, com_iir) & IIR_NOPEND) {
 797                                 /* Ok. we're familia this gang */
 798                                 SET_FLAG(dev, COM_C_IIR_TXRDYBUG);
 799                         } else {
 800                                 /* Unknown, Just omit this chip.. XXX */
 801                                 result = ENXIO;
 802                                 sio_setreg(com, com_mcr, 0);
 803                         }
 804                 } else {
 805                         /* OK. this is well-known guys */
 806                         CLR_FLAG(dev, COM_C_IIR_TXRDYBUG);
 807                 }
 808                 sio_setreg(com, com_ier, 0);
 809                 sio_setreg(com, com_cfcr, CFCR_8BITS);
 810                 com_unlock();
 811                 bus_release_resource(dev, SYS_RES_IOPORT, rid, port);
 812                 lwkt_reltoken(&tty_token);
 813                 return (iobase == siocniobase ? 0 : result);
 814         }
 815
 816         /*
 817          * Check that
 818          *      o the CFCR, IER and MCR in UART hold the values written to them
 819          *        (the values happen to be all distinct - this is good for
 820          *        avoiding false positive tests from bus echoes).
 821          *      o an output interrupt is generated and its vector is correct.
 822          *      o the interrupt goes away when the IIR in the UART is read.
 823          */
 824 /* EXTRA DELAY? */
 825         failures[0] = sio_getreg(com, com_cfcr) - CFCR_8BITS;
 826         failures[1] = sio_getreg(com, com_ier) - IER_ETXRDY;
 827         failures[2] = sio_getreg(com, com_mcr) - mcr_image;
 828         DELAY(10000);           /* Some internal modems need this time */
 829         irqmap[1] = isa_irq_pending();
 830         failures[4] = (sio_getreg(com, com_iir) & IIR_IMASK) - IIR_TXRDY;
 831         DELAY(1000);            /* XXX */
 832         irqmap[2] = isa_irq_pending();
 833         failures[6] = (sio_getreg(com, com_iir) & IIR_IMASK) - IIR_NOPEND;
 834
 835         /*
 836          * Turn off all device interrupts and check that they go off properly.
 837          * Leave MCR_IENABLE alone.  For ports without a master port, it gates
 838          * the OUT2 output of the UART to
 839          * the ICU input.  Closing the gate would give a floating ICU input
 840          * (unless there is another device driving it) and spurious interrupts.
 841          * (On the system that this was first tested on, the input floats high
 842          * and gives a (masked) interrupt as soon as the gate is closed.)
 843          */
 844         sio_setreg(com, com_ier, 0);
 845         sio_setreg(com, com_cfcr, CFCR_8BITS);  /* dummy to avoid bus echo */
 846         failures[7] = sio_getreg(com, com_ier);
 847         DELAY(1000);            /* XXX */
 848         irqmap[3] = isa_irq_pending();
 849         failures[9] = (sio_getreg(com, com_iir) & IIR_IMASK) - IIR_NOPEND;
 850
 851         com_unlock();
 852
 853         irqs = irqmap[1] & ~irqmap[0];
 854         if (bus_get_resource(idev, SYS_RES_IRQ, 0, &xirq, NULL) == 0 &&
 855             ((1 << xirq) & irqs) == 0)
 856                 kprintf(
 857                 "sio%d: configured irq %ld not in bitmap of probed irqs %#x\n",
 858                     device_get_unit(dev), xirq, irqs);
 859         if (bootverbose)
 860                 kprintf("sio%d: irq maps: %#x %#x %#x %#x\n",
 861                     device_get_unit(dev),
 862                     irqmap[0], irqmap[1], irqmap[2], irqmap[3]);
 863
 864         result = 0;
 865         for (fn = 0; fn < sizeof failures; ++fn)
 866                 if (failures[fn]) {
 867                         sio_setreg(com, com_mcr, 0);
 868                         result = ENXIO;
 869                         if (bootverbose) {
 870                                 kprintf("sio%d: probe failed test(s):",
 871                                     device_get_unit(dev));
 872                                 for (fn = 0; fn < sizeof failures; ++fn)
 873                                         if (failures[fn])
 874                                                 kprintf(" %d", fn);
 875                                 kprintf("\n");
 876                         }
 877                         break;
 878                 }
 879         bus_release_resource(dev, SYS_RES_IOPORT, rid, port);
 880         lwkt_reltoken(&tty_token);
 881         return (iobase == siocniobase ? 0 : result);
 882 }
 883
 884 #ifdef COM_ESP
 885 static int
 886 espattach(struct com_s *com, Port_t esp_port)
 887 {
 888         u_char  dips;
 889         u_char  val;
 890
 891         /*
 892          * Check the ESP-specific I/O port to see if we're an ESP
 893          * card.  If not, return failure immediately.
 894          */
 895         if ((inb(esp_port) & 0xf3) == 0) {
 896                 kprintf(" port 0x%x is not an ESP board?\n", esp_port);
 897                 return (0);
 898         }
 899
 900         lwkt_gettoken(&tty_token);
 901         /*
 902          * We've got something that claims to be a Hayes ESP card.
 903          * Let's hope so.
 904          */
 905
 906         /* Get the dip-switch configuration */
 907         outb(esp_port + ESP_CMD1, ESP_GETDIPS);
 908         dips = inb(esp_port + ESP_STATUS1);
 909
 910         /*
 911          * Bits 0,1 of dips say which COM port we are.
 912          */
 913         if (rman_get_start(com->ioportres) == likely_com_ports[dips & 0x03])
 914                 kprintf(" : ESP");
 915         else {
 916                 kprintf(" esp_port has com %d\n", dips & 0x03);
 917                 lwkt_reltoken(&tty_token);
 918                 return (0);
 919         }
 920
 921         /*
 922          * Check for ESP version 2.0 or later:  bits 4,5,6 = 010.
 923          */
 924         outb(esp_port + ESP_CMD1, ESP_GETTEST);
 925         val = inb(esp_port + ESP_STATUS1);      /* clear reg 1 */
 926         val = inb(esp_port + ESP_STATUS2);
 927         if ((val & 0x70) < 0x20) {
 928                 kprintf("-old (%o)", val & 0x70);
 929                 lwkt_reltoken(&tty_token);
 930                 return (0);
 931         }
 932
 933         /*
 934          * Check for ability to emulate 16550:  bit 7 == 1
 935          */
 936         if ((dips & 0x80) == 0) {
 937                 kprintf(" slave");
 938                 lwkt_reltoken(&tty_token);
 939                 return (0);
 940         }
 941
 942         /*
 943          * Okay, we seem to be a Hayes ESP card.  Whee.
 944          */
 945         com->esp = TRUE;
 946         com->esp_port = esp_port;
 947         lwkt_reltoken(&tty_token);
 948         return (1);
 949 }
 950 #endif /* COM_ESP */
 951
 952 static int
 953 sio_isa_attach(device_t dev)
 954 {
 955         return (sioattach(dev, 0, 0UL));
 956 }
 957
 958 int
 959 sioattach(device_t dev, int xrid, u_long rclk)
 960 {
 961         struct com_s    *com;
 962 #ifdef COM_ESP
 963         Port_t          *espp;
 964 #endif
 965         Port_t          iobase;
 966         int             minorbase;
 967         int             unit;
 968         u_int           flags;
 969         int             rid;
 970         struct resource *port;
 971         int             ret;
 972         static int      did_init;
 973
 974         lwkt_gettoken(&tty_token);
 975         if (did_init == 0) {
 976                 did_init = 1;
 977                 callout_init_mp(&sio_timeout_handle);
 978         }
 979
 980         rid = xrid;
 981         port = bus_alloc_resource(dev, SYS_RES_IOPORT, &rid,
 982                                   0, ~0, IO_COMSIZE, RF_ACTIVE);
 983         if (!port) {
 984                 lwkt_reltoken(&tty_token);
 985                 return (ENXIO);
 986         }
 987
 988         iobase = rman_get_start(port);
 989         unit = device_get_unit(dev);
 990         com = device_get_softc(dev);
 991         flags = device_get_flags(dev);
 992
 993         if (unit >= sio_numunits)
 994                 sio_numunits = unit + 1;
 995         /*
 996          * sioprobe() has initialized the device registers as follows:
 997          *      o cfcr = CFCR_8BITS.
 998          *        It is most important that CFCR_DLAB is off, so that the
 999          *        data port is not hidden when we enable interrupts.
1000          *      o ier = 0.
1001          *        Interrupts are only enabled when the line is open.
1002          *      o mcr = MCR_IENABLE, or 0 if the port has AST/4 compatible
1003          *        interrupt control register or the config specifies no irq.
1004          *        Keeping MCR_DTR and MCR_RTS off might stop the external
1005          *        device from sending before we are ready.
1006          */
1007         bzero(com, sizeof *com);
1008         com->unit = unit;
1009         com->ioportres = port;
1010         com->bst = rman_get_bustag(port);
1011         com->bsh = rman_get_bushandle(port);
1012         com->cfcr_image = CFCR_8BITS;
1013         com->dtr_wait = 3 * hz;
1014         callout_init_mp(&com->dtr_ch);
1015         callout_init_mp(&com->busy_ch);
1016         com->loses_outints = COM_LOSESOUTINTS(flags) != 0;
1017         com->no_irq = bus_get_resource(dev, SYS_RES_IRQ, 0, NULL, NULL) != 0;
1018         com->tx_fifo_size = 1;
1019         com->obufs[0].l_head = com->obuf1;
1020         com->obufs[1].l_head = com->obuf2;
1021
1022         com->data_port = iobase + com_data;
1023         com->int_id_port = iobase + com_iir;
1024         com->modem_ctl_port = iobase + com_mcr;
1025         com->mcr_image = inb(com->modem_ctl_port);
1026         com->line_status_port = iobase + com_lsr;
1027         com->modem_status_port = iobase + com_msr;
1028         com->intr_ctl_port = iobase + com_ier;
1029
1030         if (rclk == 0)
1031                 rclk = DEFAULT_RCLK;
1032         com->rclk = rclk;
1033
1034         /*
1035          * We don't use all the flags from <sys/ttydefaults.h> since they
1036          * are only relevant for logins.  It's important to have echo off
1037          * initially so that the line doesn't start blathering before the
1038          * echo flag can be turned off.
1039          */
1040         com->it_in.c_iflag = 0;
1041         com->it_in.c_oflag = 0;
1042         com->it_in.c_cflag = TTYDEF_CFLAG;
1043         com->it_in.c_lflag = 0;
1044         if (unit == comconsole) {
1045                 com->it_in.c_iflag = TTYDEF_IFLAG;
1046                 com->it_in.c_oflag = TTYDEF_OFLAG;
1047                 com->it_in.c_cflag = TTYDEF_CFLAG | CLOCAL;
1048                 com->it_in.c_lflag = TTYDEF_LFLAG;
1049                 com->lt_out.c_cflag = com->lt_in.c_cflag = CLOCAL;
1050                 com->lt_out.c_ispeed = com->lt_out.c_ospeed =
1051                 com->lt_in.c_ispeed = com->lt_in.c_ospeed =
1052                 com->it_in.c_ispeed = com->it_in.c_ospeed = comdefaultrate;
1053         } else
1054                 com->it_in.c_ispeed = com->it_in.c_ospeed = TTYDEF_SPEED;
1055         if (siosetwater(com, com->it_in.c_ispeed) != 0) {
1056                 /*
1057                  * Leave i/o resources allocated if this is a `cn'-level
1058                  * console, so that other devices can't snarf them.
1059                  */
1060                 if (iobase != siocniobase)
1061                         bus_release_resource(dev, SYS_RES_IOPORT, rid, port);
1062                 lwkt_reltoken(&tty_token);
1063                 return (ENOMEM);
1064         }
1065         termioschars(&com->it_in);
1066         com->it_out = com->it_in;
1067
1068         /* attempt to determine UART type */
1069         kprintf("sio%d: type", unit);
1070
1071
1072 #ifdef COM_MULTIPORT
1073         if (!COM_ISMULTIPORT(flags) && !COM_IIR_TXRDYBUG(flags))
1074 #else
1075         if (!COM_IIR_TXRDYBUG(flags))
1076 #endif
1077         {
1078                 u_char  scr;
1079                 u_char  scr1;
1080                 u_char  scr2;
1081
1082                 scr = sio_getreg(com, com_scr);
1083                 sio_setreg(com, com_scr, 0xa5);
1084                 scr1 = sio_getreg(com, com_scr);
1085                 sio_setreg(com, com_scr, 0x5a);
1086                 scr2 = sio_getreg(com, com_scr);
1087                 sio_setreg(com, com_scr, scr);
1088                 if (scr1 != 0xa5 || scr2 != 0x5a) {
1089                         kprintf(" 8250");
1090                         goto determined_type;
1091                 }
1092         }
1093         sio_setreg(com, com_fifo, FIFO_ENABLE | FIFO_RX_HIGH);
1094         DELAY(100);
1095         com->st16650a = 0;
1096         switch (inb(com->int_id_port) & IIR_FIFO_MASK) {
1097         case FIFO_RX_LOW:
1098                 kprintf(" 16450");
1099                 break;
1100         case FIFO_RX_MEDL:
1101                 kprintf(" 16450?");
1102                 break;
1103         case FIFO_RX_MEDH:
1104                 kprintf(" 16550?");
1105                 break;
1106         case FIFO_RX_HIGH:
1107                 if (COM_NOFIFO(flags)) {
1108                         kprintf(" 16550A fifo disabled");
1109                 } else {
1110                         com->hasfifo = TRUE;
1111                         if (COM_ST16650A(flags)) {
1112                                 com->st16650a = 1;
1113                                 com->tx_fifo_size = 32;
1114                                 kprintf(" ST16650A");
1115                         } else if (COM_TI16754(flags)) {
1116                                 com->tx_fifo_size = 64;
1117                                 kprintf(" TI16754");
1118                         } else {
1119                                 com->tx_fifo_size = COM_FIFOSIZE(flags);
1120                                 kprintf(" 16550A");
1121                         }
1122                 }
1123 #ifdef COM_ESP
1124                 for (espp = likely_esp_ports; *espp != 0; espp++)
1125                         if (espattach(com, *espp)) {
1126                                 com->tx_fifo_size = 1024;
1127                                 break;
1128                         }
1129 #endif
1130                 if (!com->st16650a && !COM_TI16754(flags)) {
1131                         if (!com->tx_fifo_size)
1132                                 com->tx_fifo_size = 16;
1133                         else
1134                                 kprintf(" lookalike with %d bytes FIFO",
1135                                     com->tx_fifo_size);
1136                 }
1137
1138                 break;
1139         }
1140
1141 #ifdef COM_ESP
1142         if (com->esp) {
1143                 /*
1144                  * Set 16550 compatibility mode.
1145                  * We don't use the ESP_MODE_SCALE bit to increase the
1146                  * fifo trigger levels because we can't handle large
1147                  * bursts of input.
1148                  * XXX flow control should be set in comparam(), not here.
1149                  */
1150                 outb(com->esp_port + ESP_CMD1, ESP_SETMODE);
1151                 outb(com->esp_port + ESP_CMD2, ESP_MODE_RTS | ESP_MODE_FIFO);
1152
1153                 /* Set RTS/CTS flow control. */
1154                 outb(com->esp_port + ESP_CMD1, ESP_SETFLOWTYPE);
1155                 outb(com->esp_port + ESP_CMD2, ESP_FLOW_RTS);
1156                 outb(com->esp_port + ESP_CMD2, ESP_FLOW_CTS);
1157
1158                 /* Set flow-control levels. */
1159                 outb(com->esp_port + ESP_CMD1, ESP_SETRXFLOW);
1160                 outb(com->esp_port + ESP_CMD2, HIBYTE(768));
1161                 outb(com->esp_port + ESP_CMD2, LOBYTE(768));
1162                 outb(com->esp_port + ESP_CMD2, HIBYTE(512));
1163                 outb(com->esp_port + ESP_CMD2, LOBYTE(512));
1164         }
1165 #endif /* COM_ESP */
1166         sio_setreg(com, com_fifo, 0);
1167 determined_type: ;
1168
1169 #ifdef COM_MULTIPORT
1170         if (COM_ISMULTIPORT(flags)) {
1171                 device_t masterdev;
1172
1173                 com->multiport = TRUE;
1174                 kprintf(" (multiport");
1175                 if (unit == COM_MPMASTER(flags))
1176                         kprintf(" master");
1177                 kprintf(")");
1178                 masterdev = devclass_get_device(sio_devclass,
1179                     COM_MPMASTER(flags));
1180                 com->no_irq = (masterdev == NULL || bus_get_resource(masterdev,
1181                     SYS_RES_IRQ, 0, NULL, NULL) != 0);
1182          }
1183 #endif /* COM_MULTIPORT */
1184         if (unit == comconsole)
1185                 kprintf(", console");
1186         if (COM_IIR_TXRDYBUG(flags))
1187                 kprintf(" with a bogus IIR_TXRDY register");
1188         kprintf("\n");
1189
1190         if (!sio_registered) {
1191                 register_swi(SWI_TTY, siopoll, NULL ,"swi_siopoll", NULL, -1);
1192                 sio_registered = TRUE;
1193         }
1194         minorbase = UNIT_TO_MINOR(unit);
1195         make_dev(&sio_ops, minorbase,
1196             UID_ROOT, GID_WHEEL, 0600, "ttyd%r", unit);
1197         make_dev(&sio_ops, minorbase | CONTROL_INIT_STATE,
1198             UID_ROOT, GID_WHEEL, 0600, "ttyid%r", unit);
1199         make_dev(&sio_ops, minorbase | CONTROL_LOCK_STATE,
1200             UID_ROOT, GID_WHEEL, 0600, "ttyld%r", unit);
1201         make_dev(&sio_ops, minorbase | CALLOUT_MASK,
1202             UID_UUCP, GID_DIALER, 0660, "cuaa%r", unit);
1203         make_dev(&sio_ops, minorbase | CALLOUT_MASK | CONTROL_INIT_STATE,
1204             UID_UUCP, GID_DIALER, 0660, "cuaia%r", unit);
1205         make_dev(&sio_ops, minorbase | CALLOUT_MASK | CONTROL_LOCK_STATE,
1206             UID_UUCP, GID_DIALER, 0660, "cuala%r", unit);
1207         com->flags = flags;
1208         com->pps.ppscap = PPS_CAPTUREASSERT | PPS_CAPTURECLEAR;
1209         pps_init(&com->pps);
1210
1211         rid = 0;
1212         com->irqres = bus_alloc_resource(dev, SYS_RES_IRQ, &rid, 0ul, ~0ul, 1,
1213             RF_ACTIVE);
1214         if (com->irqres) {
1215                 ret = BUS_SETUP_INTR(device_get_parent(dev), dev,
1216                                      com->irqres, INTR_MPSAFE, siointr, com,
1217                                      &com->cookie, NULL, NULL);
1218                 if (ret)
1219                         device_printf(dev, "could not activate interrupt\n");
1220 #if defined(DDB)
1221                 /*
1222                  * Enable interrupts for early break-to-debugger support
1223                  * on the console.
1224                  */
1225                 if (ret == 0 && unit == comconsole &&
1226                     (break_to_debugger || alt_break_to_debugger)) {
1227                         inb(siocniobase + com_data);
1228                         outb(siocniobase + com_ier,
1229                              IER_ERXRDY | IER_ERLS | IER_EMSC);
1230                 }
1231 #endif
1232         }
1233
1234         lwkt_reltoken(&tty_token);
1235         return (0);
1236 }
1237
1238 static int
1239 sioopen(struct dev_open_args *ap)
1240 {
1241         cdev_t dev = ap->a_head.a_dev;
1242         struct com_s    *com;
1243         int             error;
1244         int             mynor;
1245         struct tty      *tp;
1246         int             unit;
1247
1248         mynor = minor(dev);
1249         unit = MINOR_TO_UNIT(mynor);
1250         com = com_addr(unit);
1251         if (com == NULL)
1252                 return (ENXIO);
1253         if (com->gone)
1254                 return (ENXIO);
1255         if (mynor & CONTROL_MASK)
1256                 return (0);
1257         lwkt_gettoken(&tty_token);
1258         tp = dev->si_tty = com->tp = ttymalloc(com->tp);
1259         crit_enter();
1260         /*
1261          * We jump to this label after all non-interrupted sleeps to pick
1262          * up any changes of the device state.
1263          */
1264 open_top:
1265         while (com->state & CS_DTR_OFF) {
1266                 error = tsleep(&com->dtr_wait, PCATCH, "siodtr", 0);
1267                 if (com_addr(unit) == NULL) {
1268                         crit_exit();
1269                         lwkt_reltoken(&tty_token);
1270                         return (ENXIO);
1271                 }
1272                 if (error != 0 || com->gone)
1273                         goto out;
1274         }
1275         if (tp->t_state & TS_ISOPEN) {
1276                 /*
1277                  * The device is open, so everything has been initialized.
1278                  * Handle conflicts.
1279                  */
1280                 if (mynor & CALLOUT_MASK) {
1281                         if (!com->active_out) {
1282                                 error = EBUSY;
1283                                 goto out;
1284                         }
1285                 } else {
1286                         if (com->active_out) {
1287                                 if (ap->a_oflags & O_NONBLOCK) {
1288                                         error = EBUSY;
1289                                         goto out;
1290                                 }
1291                                 error = tsleep(&com->active_out,
1292                                                PCATCH, "siobi", 0);
1293                                 if (com_addr(unit) == NULL) {
1294                                         crit_exit();
1295                                         lwkt_reltoken(&tty_token);
1296                                         return (ENXIO);
1297                                 }
1298                                 if (error != 0 || com->gone)
1299                                         goto out;
1300                                 goto open_top;
1301                         }
1302                 }
1303                 if (tp->t_state & TS_XCLUDE && priv_check_cred(ap->a_cred, PRIV_ROOT, 0)) {
1304                         error = EBUSY;
1305                         goto out;
1306                 }
1307         } else {
1308                 /*
1309                  * The device isn't open, so there are no conflicts.
1310                  * Initialize it.  Initialization is done twice in many
1311                  * cases: to preempt sleeping callin opens if we are
1312                  * callout, and to complete a callin open after DCD rises.
1313                  */
1314                 tp->t_oproc = comstart;
1315                 tp->t_param = comparam;
1316                 tp->t_stop = comstop;
1317                 tp->t_dev = dev;
1318                 tp->t_termios = mynor & CALLOUT_MASK
1319                                 ? com->it_out : com->it_in;
1320                 (void)commctl(com, TIOCM_DTR | TIOCM_RTS, DMSET);
1321                 com->poll = com->no_irq;
1322                 com->poll_output = com->loses_outints;
1323                 ++com->wopeners;
1324                 error = comparam(tp, &tp->t_termios);
1325                 --com->wopeners;
1326                 if (error != 0)
1327                         goto out;
1328                 /*
1329                  * XXX we should goto open_top if comparam() slept.
1330                  */
1331                 if (com->hasfifo) {
1332                         /*
1333                          * (Re)enable and drain fifos.
1334                          *
1335                          * Certain SMC chips cause problems if the fifos
1336                          * are enabled while input is ready.  Turn off the
1337                          * fifo if necessary to clear the input.  We test
1338                          * the input ready bit after enabling the fifos
1339                          * since we've already enabled them in comparam()
1340                          * and to handle races between enabling and fresh
1341                          * input.
1342                          */
1343                         while (TRUE) {
1344                                 sio_setreg(com, com_fifo,
1345                                            FIFO_RCV_RST | FIFO_XMT_RST
1346                                            | com->fifo_image);
1347                                 /*
1348                                  * XXX the delays are for superstitious
1349                                  * historical reasons.  It must be less than
1350                                  * the character time at the maximum
1351                                  * supported speed (87 usec at 115200 bps
1352                                  * 8N1).  Otherwise we might loop endlessly
1353                                  * if data is streaming in.  We used to use
1354                                  * delays of 100.  That usually worked
1355                                  * because DELAY(100) used to usually delay
1356                                  * for about 85 usec instead of 100.
1357                                  */
1358                                 DELAY(50);
1359                                 if (!(inb(com->line_status_port) & LSR_RXRDY))
1360                                         break;
1361                                 sio_setreg(com, com_fifo, 0);
1362                                 DELAY(50);
1363                                 (void) inb(com->data_port);
1364                         }
1365                 }
1366
1367                 com_lock();
1368                 (void) inb(com->line_status_port);
1369                 (void) inb(com->data_port);
1370                 com->prev_modem_status = com->last_modem_status
1371                     = inb(com->modem_status_port);
1372                 if (COM_IIR_TXRDYBUG(com->flags)) {
1373                         outb(com->intr_ctl_port, IER_ERXRDY | IER_ERLS
1374                                                 | IER_EMSC);
1375                 } else {
1376                         outb(com->intr_ctl_port, IER_ERXRDY | IER_ETXRDY
1377                                                 | IER_ERLS | IER_EMSC);
1378                 }
1379                 com_unlock();
1380                 /*
1381                  * Handle initial DCD.  Callout devices get a fake initial
1382                  * DCD (trapdoor DCD).  If we are callout, then any sleeping
1383                  * callin opens get woken up and resume sleeping on "siobi"
1384                  * instead of "siodcd".
1385                  */
1386                 /*
1387                  * XXX `mynor & CALLOUT_MASK' should be
1388                  * `tp->t_cflag & (SOFT_CARRIER | TRAPDOOR_CARRIER) where
1389                  * TRAPDOOR_CARRIER is the default initial state for callout
1390                  * devices and SOFT_CARRIER is like CLOCAL except it hides
1391                  * the true carrier.
1392                  */
1393                 if (com->prev_modem_status & MSR_DCD || mynor & CALLOUT_MASK)
1394                         (*linesw[tp->t_line].l_modem)(tp, 1);
1395         }
1396         /*
1397          * Wait for DCD if necessary.
1398          */
1399         if (!(tp->t_state & TS_CARR_ON) && !(mynor & CALLOUT_MASK)
1400             && !(tp->t_cflag & CLOCAL) && !(ap->a_oflags & O_NONBLOCK)) {
1401                 ++com->wopeners;
1402                 error = tsleep(TSA_CARR_ON(tp), PCATCH, "siodcd", 0);
1403                 if (com_addr(unit) == NULL) {
1404                         crit_exit();
1405                         lwkt_reltoken(&tty_token);
1406                         return (ENXIO);
1407                 }
1408                 --com->wopeners;
1409                 if (error != 0 || com->gone)
1410                         goto out;
1411                 goto open_top;
1412         }
1413         error = (*linesw[tp->t_line].l_open)(dev, tp);
1414         disc_optim(tp, &tp->t_termios, com);
1415         if (tp->t_state & TS_ISOPEN && mynor & CALLOUT_MASK)
1416                 com->active_out = TRUE;
1417         siosettimeout();
1418 out:
1419         crit_exit();
1420         if (!(tp->t_state & TS_ISOPEN) && com->wopeners == 0)
1421                 comhardclose(com);
1422         lwkt_reltoken(&tty_token);
1423         return (error);
1424 }
1425
1426 static int
1427 sioclose(struct dev_close_args *ap)
1428 {
1429         cdev_t dev = ap->a_head.a_dev;
1430         struct com_s    *com;
1431         int             mynor;
1432         struct tty      *tp;
1433
1434         mynor = minor(dev);
1435         if (mynor & CONTROL_MASK)
1436                 return (0);
1437         lwkt_gettoken(&tty_token);
1438         com = com_addr(MINOR_TO_UNIT(mynor));
1439         if (com == NULL) {
1440                 lwkt_reltoken(&tty_token);
1441                 return (ENODEV);
1442         }
1443         tp = com->tp;
1444         crit_enter();
1445         (*linesw[tp->t_line].l_close)(tp, ap->a_fflag);
1446         disc_optim(tp, &tp->t_termios, com);
1447         comstop(tp, FREAD | FWRITE);
1448         comhardclose(com);
1449         ttyclose(tp);
1450         siosettimeout();
1451         crit_exit();
1452         if (com->gone) {
1453                 kprintf("sio%d: gone\n", com->unit);
1454                 crit_enter();
1455                 if (com->ibuf != NULL)
1456                         kfree(com->ibuf, M_DEVBUF);
1457                 bzero(tp, sizeof *tp);
1458                 crit_exit();
1459         }
1460         lwkt_reltoken(&tty_token);
1461         return (0);
1462 }
1463
1464 static void
1465 comhardclose(struct com_s *com)
1466 {
1467         struct tty      *tp;
1468         crit_enter();
1469         lwkt_gettoken(&tty_token);
1470         com->poll = FALSE;
1471         com->poll_output = FALSE;
1472         com->do_timestamp = FALSE;
1473         com->do_dcd_timestamp = FALSE;
1474         com->pps.ppsparam.mode = 0;
1475         sio_setreg(com, com_cfcr, com->cfcr_image &= ~CFCR_SBREAK);
1476         tp = com->tp;
1477
1478 #if defined(DDB)
1479         /*
1480          * Leave interrupts enabled and don't clear DTR if this is the
1481          * console. This allows us to detect break-to-debugger events
1482          * while the console device is closed.
1483          */
1484         if (com->unit != comconsole ||
1485             (break_to_debugger == 0 && alt_break_to_debugger == 0))
1486 #endif
1487         {
1488                 sio_setreg(com, com_ier, 0);
1489                 if (tp->t_cflag & HUPCL
1490                     /*
1491                      * XXX we will miss any carrier drop between here and the
1492                      * next open.  Perhaps we should watch DCD even when the
1493                      * port is closed; it is not sufficient to check it at
1494                      * the next open because it might go up and down while
1495                      * we're not watching.
1496                      */
1497                     || (!com->active_out
1498                         && !(com->prev_modem_status & MSR_DCD)
1499                         && !(com->it_in.c_cflag & CLOCAL))
1500                     || !(tp->t_state & TS_ISOPEN)) {
1501                         (void)commctl(com, TIOCM_DTR, DMBIC);
1502                         if (com->dtr_wait != 0 && !(com->state & CS_DTR_OFF)) {
1503                                 callout_reset(&com->dtr_ch, com->dtr_wait,
1504                                                 siodtrwakeup, com);
1505                                 com->state |= CS_DTR_OFF;
1506                         }
1507                 }
1508         }
1509         if (com->hasfifo) {
1510                 /*
1511                  * Disable fifos so that they are off after controlled
1512                  * reboots.  Some BIOSes fail to detect 16550s when the
1513                  * fifos are enabled.
1514                  */
1515                 sio_setreg(com, com_fifo, 0);
1516         }
1517         com->active_out = FALSE;
1518         wakeup(&com->active_out);
1519         wakeup(TSA_CARR_ON(tp));        /* restart any wopeners */
1520         lwkt_reltoken(&tty_token);
1521         crit_exit();
1522 }
1523
1524 static int
1525 sioread(struct dev_read_args *ap)
1526 {
1527         cdev_t dev = ap->a_head.a_dev;
1528         int             mynor, ret;
1529         struct com_s    *com;
1530
1531         lwkt_gettoken(&tty_token);
1532         mynor = minor(dev);
1533         if (mynor & CONTROL_MASK) {
1534                 lwkt_reltoken(&tty_token);
1535                 return (ENODEV);
1536         }
1537         com = com_addr(MINOR_TO_UNIT(mynor));
1538         if (com == NULL || com->gone) {
1539                 lwkt_reltoken(&tty_token);
1540                 return (ENODEV);
1541         }
1542         ret = ((*linesw[com->tp->t_line].l_read)(com->tp, ap->a_uio, ap->a_ioflag));
1543         lwkt_reltoken(&tty_token);
1544         return ret;
1545 }
1546
1547 static int
1548 siowrite(struct dev_write_args *ap)
1549 {
1550         cdev_t dev = ap->a_head.a_dev;
1551         int             mynor;
1552         struct com_s    *com;
1553         int             unit, ret;
1554
1555         lwkt_gettoken(&tty_token);
1556         mynor = minor(dev);
1557         if (mynor & CONTROL_MASK) {
1558                 lwkt_reltoken(&tty_token);
1559                 return (ENODEV);
1560         }
1561
1562         unit = MINOR_TO_UNIT(mynor);
1563         com = com_addr(unit);
1564         if (com == NULL || com->gone) {
1565                 lwkt_reltoken(&tty_token);
1566                 return (ENODEV);
1567         }
1568         /*
1569          * (XXX) We disallow virtual consoles if the physical console is
1570          * a serial port.  This is in case there is a display attached that
1571          * is not the console.  In that situation we don't need/want the X
1572          * server taking over the console.
1573          */
1574         if (constty != NULL && unit == comconsole)
1575                 constty = NULL;
1576         ret = ((*linesw[com->tp->t_line].l_write)(com->tp, ap->a_uio, ap->a_ioflag));
1577         lwkt_reltoken(&tty_token);
1578         return ret;
1579 }
1580
1581 static void
1582 siobusycheck(void *chan)
1583 {
1584         struct com_s    *com;
1585
1586         lwkt_gettoken(&tty_token);
1587         com = (struct com_s *)chan;
1588
1589         /*
1590          * Clear TS_BUSY if low-level output is complete.
1591          * spl locking is sufficient because siointr1() does not set CS_BUSY.
1592          * If siointr1() clears CS_BUSY after we look at it, then we'll get
1593          * called again.  Reading the line status port outside of siointr1()
1594          * is safe because CS_BUSY is clear so there are no output interrupts
1595          * to lose.
1596          */
1597         crit_enter();
1598         if (com->state & CS_BUSY)
1599                 com->extra_state &= ~CSE_BUSYCHECK;     /* False alarm. */
1600         else if ((inb(com->line_status_port) & (LSR_TSRE | LSR_TXRDY))
1601             == (LSR_TSRE | LSR_TXRDY)) {
1602                 com->tp->t_state &= ~TS_BUSY;
1603                 ttwwakeup(com->tp);
1604                 com->extra_state &= ~CSE_BUSYCHECK;
1605         } else {
1606                 callout_reset(&com->busy_ch, hz / 100, siobusycheck, com);
1607         }
1608         crit_exit();
1609         lwkt_reltoken(&tty_token);
1610 }
1611
1612 static u_int
1613 siodivisor(u_long rclk, speed_t speed)
1614 {
1615         long    actual_speed;
1616         u_int   divisor;
1617         int     error;
1618
1619         if (speed == 0 || speed > ((speed_t)-1 - 1) / 8)
1620                 return (0);
1621         divisor = (rclk / (8UL * speed) + 1) / 2;
1622         if (divisor == 0 || divisor >= 65536)
1623                 return (0);
1624         actual_speed = rclk / (16UL * divisor);
1625
1626         /* 10 times error in percent: */
1627         error = ((actual_speed - (long)speed) * 2000 / (long)speed + 1) / 2;
1628
1629         /* 3.0% maximum error tolerance: */
1630         if (error < -30 || error > 30)
1631                 return (0);
1632
1633         return (divisor);
1634 }
1635
1636 static void
1637 siodtrwakeup(void *chan)
1638 {
1639         struct com_s    *com;
1640
1641         lwkt_gettoken(&tty_token);
1642         com = (struct com_s *)chan;
1643         com->state &= ~CS_DTR_OFF;
1644         wakeup(&com->dtr_wait);
1645         lwkt_reltoken(&tty_token);
1646 }
1647
1648 /*
1649  * NOTE: Normally called with tty_token held but might not be when
1650  *       operating as the console.
1651  *
1652  *       Must be called with com_lock
1653  */
1654 static void
1655 sioinput(struct com_s *com)
1656 {
1657         u_char          *buf;
1658         int             incc;
1659         u_char          line_status;
1660         int             recv_data;
1661         struct tty      *tp;
1662
1663         buf = com->ibuf;
1664         tp = com->tp;
1665         if (!(tp->t_state & TS_ISOPEN) || !(tp->t_cflag & CREAD)) {
1666                 com_events -= (com->iptr - com->ibuf);
1667                 com->iptr = com->ibuf;
1668                 return;
1669         }
1670         if (tp->t_state & TS_CAN_BYPASS_L_RINT) {
1671                 /*
1672                  * Avoid the grotesquely inefficient lineswitch routine
1673                  * (ttyinput) in "raw" mode.  It usually takes about 450
1674                  * instructions (that's without canonical processing or echo!).
1675                  * slinput is reasonably fast (usually 40 instructions plus
1676                  * call overhead).
1677                  */
1678                 do {
1679                         com_unlock();
1680                         incc = com->iptr - buf;
1681                         if (tp->t_rawq.c_cc + incc > tp->t_ihiwat
1682                             && (com->state & CS_RTS_IFLOW
1683                                 || tp->t_iflag & IXOFF)
1684                             && !(tp->t_state & TS_TBLOCK))
1685                                 ttyblock(tp);
1686                         com->delta_error_counts[CE_TTY_BUF_OVERFLOW]
1687                                 += b_to_q((char *)buf, incc, &tp->t_rawq);
1688                         buf += incc;
1689                         tk_nin += incc;
1690                         tk_rawcc += incc;
1691                         tp->t_rawcc += incc;
1692                         ttwakeup(tp);
1693                         if (tp->t_state & TS_TTSTOP
1694                             && (tp->t_iflag & IXANY
1695                                 || tp->t_cc[VSTART] == tp->t_cc[VSTOP])) {
1696                                 tp->t_state &= ~TS_TTSTOP;
1697                                 tp->t_lflag &= ~FLUSHO;
1698                                 comstart(tp);
1699                         }
1700                         com_lock();
1701                 } while (buf < com->iptr);
1702         } else {
1703                 do {
1704                         com_unlock();
1705                         line_status = buf[com->ierroff];
1706                         recv_data = *buf++;
1707                         if (line_status
1708                             & (LSR_BI | LSR_FE | LSR_OE | LSR_PE)) {
1709                                 if (line_status & LSR_BI)
1710                                         recv_data |= TTY_BI;
1711                                 if (line_status & LSR_FE)
1712                                         recv_data |= TTY_FE;
1713                                 if (line_status & LSR_OE)
1714                                         recv_data |= TTY_OE;
1715                                 if (line_status & LSR_PE)
1716                                         recv_data |= TTY_PE;
1717                         }
1718                         (*linesw[tp->t_line].l_rint)(recv_data, tp);
1719                         com_lock();
1720                 } while (buf < com->iptr);
1721         }
1722         com_events -= (com->iptr - com->ibuf);
1723         com->iptr = com->ibuf;
1724
1725         /*
1726          * There is now room for another low-level buffer full of input,
1727          * so enable RTS if it is now disabled and there is room in the
1728          * high-level buffer.
1729          */
1730         if ((com->state & CS_RTS_IFLOW) && !(com->mcr_image & MCR_RTS) &&
1731             !(tp->t_state & TS_TBLOCK))
1732                 outb(com->modem_ctl_port, com->mcr_image |= MCR_RTS);
1733 }
1734
1735 void
1736 siointr(void *arg)
1737 {
1738         lwkt_gettoken(&tty_token);
1739 #ifndef COM_MULTIPORT
1740         com_lock();
1741         siointr1((struct com_s *) arg);
1742         com_unlock();
1743 #else /* COM_MULTIPORT */
1744         bool_t          possibly_more_intrs;
1745         int             unit;
1746         struct com_s    *com;
1747
1748         /*
1749          * Loop until there is no activity on any port.  This is necessary
1750          * to get an interrupt edge more than to avoid another interrupt.
1751          * If the IRQ signal is just an OR of the IRQ signals from several
1752          * devices, then the edge from one may be lost because another is
1753          * on.
1754          */
1755         com_lock();
1756         do {
1757                 possibly_more_intrs = FALSE;
1758                 for (unit = 0; unit < sio_numunits; ++unit) {
1759                         com = com_addr(unit);
1760                         /*
1761                          * XXX com_lock();
1762                          * would it work here, or be counter-productive?
1763                          */
1764                         if (com != NULL
1765                             && !com->gone
1766                             && (inb(com->int_id_port) & IIR_IMASK)
1767                                != IIR_NOPEND) {
1768                                 siointr1(com);
1769                                 possibly_more_intrs = TRUE;
1770                         }
1771                         /* XXX com_unlock(); */
1772                 }
1773         } while (possibly_more_intrs);
1774         com_unlock();
1775 #endif /* COM_MULTIPORT */
1776         lwkt_reltoken(&tty_token);
1777 }
1778
1779 /*
1780  * Called with tty_token held and com_lock held.
1781  */
1782 static void
1783 siointr1(struct com_s *com)
1784 {
1785         u_char  line_status;
1786         u_char  modem_status;
1787         u_char  *ioptr;
1788         u_char  recv_data;
1789         u_char  int_ctl;
1790         u_char  int_ctl_new;
1791         sysclock_t count;
1792
1793         int_ctl = inb(com->intr_ctl_port);
1794         int_ctl_new = int_ctl;
1795
1796         while (!com->gone) {
1797                 if (com->pps.ppsparam.mode & PPS_CAPTUREBOTH) {
1798                         modem_status = inb(com->modem_status_port);
1799                         if ((modem_status ^ com->last_modem_status) & MSR_DCD) {
1800                                 count = sys_cputimer->count();
1801                                 pps_event(&com->pps, count,
1802                                     (modem_status & MSR_DCD) ?
1803                                     PPS_CAPTUREASSERT : PPS_CAPTURECLEAR);
1804                         }
1805                 }
1806                 line_status = inb(com->line_status_port);
1807
1808                 /* input event? (check first to help avoid overruns) */
1809                 while (line_status & LSR_RCV_MASK) {
1810                         /* break/unnattached error bits or real input? */
1811                         if (!(line_status & LSR_RXRDY))
1812                                 recv_data = 0;
1813                         else
1814                                 recv_data = inb(com->data_port);
1815 #if defined(DDB)
1816                         /*
1817                          * Solaris implements a new BREAK which is initiated
1818                          * by a character sequence CR ~ ^b which is similar
1819                          * to a familiar pattern used on Sun servers by the
1820                          * Remote Console.
1821                          */
1822 #define KEY_CRTLB       2       /* ^B */
1823 #define KEY_CR          13      /* CR '\r' */
1824 #define KEY_TILDE       126     /* ~ */
1825
1826                         if (com->unit == comconsole && alt_break_to_debugger) {
1827                                 static int brk_state1 = 0, brk_state2 = 0;
1828                                 if (recv_data == KEY_CR) {
1829                                         brk_state1 = recv_data;
1830                                         brk_state2 = 0;
1831                                 } else if (brk_state1 == KEY_CR && (recv_data == KEY_TILDE || recv_data == KEY_CRTLB)) {
1832                                         if (recv_data == KEY_TILDE)
1833                                                 brk_state2 = recv_data;
1834                                         else if (brk_state2 == KEY_TILDE && recv_data == KEY_CRTLB) {
1835                                                         com_unlock();
1836                                                         breakpoint();
1837                                                         com_lock();
1838                                                         brk_state1 = brk_state2 = 0;
1839                                                         goto cont;
1840                                         } else
1841                                                 brk_state2 = 0;
1842                                 } else
1843                                         brk_state1 = 0;
1844                         }
1845 #endif
1846                         if (line_status & (LSR_BI | LSR_FE | LSR_PE)) {
1847                                 /*
1848                                  * Don't store BI if IGNBRK or FE/PE if IGNPAR.
1849                                  * Otherwise, push the work to a higher level
1850                                  * (to handle PARMRK) if we're bypassing.
1851                                  * Otherwise, convert BI/FE and PE+INPCK to 0.
1852                                  *
1853                                  * This makes bypassing work right in the
1854                                  * usual "raw" case (IGNBRK set, and IGNPAR
1855                                  * and INPCK clear).
1856                                  *
1857                                  * Note: BI together with FE/PE means just BI.
1858                                  */
1859                                 if (line_status & LSR_BI) {
1860 #if defined(DDB)
1861                                         if (com->unit == comconsole &&
1862                                             break_to_debugger) {
1863                                                 com_unlock();
1864                                                 breakpoint();
1865                                                 com_lock();
1866                                                 goto cont;
1867                                         }
1868 #endif
1869                                         if (com->tp == NULL
1870                                             || com->tp->t_iflag & IGNBRK)
1871                                                 goto cont;
1872                                 } else {
1873                                         if (com->tp == NULL
1874                                             || com->tp->t_iflag & IGNPAR)
1875                                                 goto cont;
1876                                 }
1877                                 if (com->tp->t_state & TS_CAN_BYPASS_L_RINT
1878                                     && (line_status & (LSR_BI | LSR_FE)
1879                                         || com->tp->t_iflag & INPCK))
1880                                         recv_data = 0;
1881                         }
1882                         ++com->bytes_in;
1883                         if (com->hotchar != 0 && recv_data == com->hotchar)
1884                                 setsofttty();
1885                         ioptr = com->iptr;
1886                         if (ioptr >= com->ibufend)
1887                                 CE_RECORD(com, CE_INTERRUPT_BUF_OVERFLOW);
1888                         else {
1889                                 if (com->do_timestamp)
1890                                         microtime(&com->timestamp);
1891                                 ++com_events;
1892                                 schedsofttty();
1893 #if 0 /* for testing input latency vs efficiency */
1894 if (com->iptr - com->ibuf == 8)
1895         setsofttty();
1896 #endif
1897                                 ioptr[0] = recv_data;
1898                                 ioptr[com->ierroff] = line_status;
1899                                 com->iptr = ++ioptr;
1900                                 if (ioptr == com->ihighwater
1901                                     && com->state & CS_RTS_IFLOW)
1902                                         outb(com->modem_ctl_port,
1903                                              com->mcr_image &= ~MCR_RTS);
1904                                 if (line_status & LSR_OE)
1905                                         CE_RECORD(com, CE_OVERRUN);
1906                         }
1907 cont:
1908                         /*
1909                          * "& 0x7F" is to avoid the gcc-1.40 generating a slow
1910                          * jump from the top of the loop to here
1911                          */
1912                         line_status = inb(com->line_status_port) & 0x7F;
1913                 }
1914
1915                 /* modem status change? (always check before doing output) */
1916                 modem_status = inb(com->modem_status_port);
1917                 if (modem_status != com->last_modem_status) {
1918                         if (com->do_dcd_timestamp
1919                             && !(com->last_modem_status & MSR_DCD)
1920                             && modem_status & MSR_DCD)
1921                                 microtime(&com->dcd_timestamp);
1922
1923                         /*
1924                          * Schedule high level to handle DCD changes.  Note
1925                          * that we don't use the delta bits anywhere.  Some
1926                          * UARTs mess them up, and it's easy to remember the
1927                          * previous bits and calculate the delta.
1928                          */
1929                         com->last_modem_status = modem_status;
1930                         if (!(com->state & CS_CHECKMSR)) {
1931                                 com_events += LOTS_OF_EVENTS;
1932                                 com->state |= CS_CHECKMSR;
1933                                 setsofttty();
1934                         }
1935
1936                         /* handle CTS change immediately for crisp flow ctl */
1937                         if (com->state & CS_CTS_OFLOW) {
1938                                 if (modem_status & MSR_CTS)
1939                                         com->state |= CS_ODEVREADY;
1940                                 else
1941                                         com->state &= ~CS_ODEVREADY;
1942                         }
1943                 }
1944
1945                 /* output queued and everything ready? */
1946                 if ((line_status & LSR_TXRDY)
1947                     && com->state >= (CS_BUSY | CS_TTGO | CS_ODEVREADY)) {
1948                         ioptr = com->obufq.l_head;
1949                         if (com->tx_fifo_size > 1) {
1950                                 u_int   ocount;
1951
1952                                 ocount = com->obufq.l_tail - ioptr;
1953                                 if (ocount > com->tx_fifo_size)
1954                                         ocount = com->tx_fifo_size;
1955                                 com->bytes_out += ocount;
1956                                 do
1957                                         outb(com->data_port, *ioptr++);
1958                                 while (--ocount != 0);
1959                         } else {
1960                                 outb(com->data_port, *ioptr++);
1961                                 ++com->bytes_out;
1962                         }
1963                         com->obufq.l_head = ioptr;
1964                         if (COM_IIR_TXRDYBUG(com->flags)) {
1965                                 int_ctl_new = int_ctl | IER_ETXRDY;
1966                         }
1967                         if (ioptr >= com->obufq.l_tail) {
1968                                 struct lbq      *qp;
1969
1970                                 qp = com->obufq.l_next;
1971                                 qp->l_queued = FALSE;
1972                                 qp = qp->l_next;
1973                                 if (qp != NULL) {
1974                                         com->obufq.l_head = qp->l_head;
1975                                         com->obufq.l_tail = qp->l_tail;
1976                                         com->obufq.l_next = qp;
1977                                 } else {
1978                                         /* output just completed */
1979                                         if (COM_IIR_TXRDYBUG(com->flags)) {
1980                                                 int_ctl_new = int_ctl & ~IER_ETXRDY;
1981                                         }
1982                                         com->state &= ~CS_BUSY;
1983                                 }
1984                                 if (!(com->state & CS_ODONE)) {
1985                                         com_events += LOTS_OF_EVENTS;
1986                                         com->state |= CS_ODONE;
1987                                         setsofttty();   /* handle at high level ASAP */
1988                                 }
1989                         }
1990                         if (COM_IIR_TXRDYBUG(com->flags) && (int_ctl != int_ctl_new)) {
1991                                 outb(com->intr_ctl_port, int_ctl_new);
1992                         }
1993                 }
1994
1995                 /* finished? */
1996 #ifdef COM_MULTIPORT
1997                 return;
1998 #else
1999                 if (inb(com->int_id_port) & IIR_NOPEND)
2000                         return;
2001 #endif
2002         }
2003 }
2004
2005 static int
2006 sioioctl(struct dev_ioctl_args *ap)
2007 {
2008         cdev_t dev = ap->a_head.a_dev;
2009         caddr_t data = ap->a_data;
2010         struct com_s    *com;
2011         int             error;
2012         int             mynor;
2013         struct tty      *tp;
2014 #if defined(COMPAT_43)
2015         u_long          oldcmd;
2016         struct termios  term;
2017 #endif
2018         lwkt_gettoken(&tty_token);
2019         mynor = minor(dev);
2020
2021         com = com_addr(MINOR_TO_UNIT(mynor));
2022         if (com == NULL || com->gone) {
2023                 lwkt_reltoken(&tty_token);
2024                 return (ENODEV);
2025         }
2026         if (mynor & CONTROL_MASK) {
2027                 struct termios  *ct;
2028
2029                 switch (mynor & CONTROL_MASK) {
2030                 case CONTROL_INIT_STATE:
2031                         ct = mynor & CALLOUT_MASK ? &com->it_out : &com->it_in;
2032                         break;
2033                 case CONTROL_LOCK_STATE:
2034                         ct = mynor & CALLOUT_MASK ? &com->lt_out : &com->lt_in;
2035                         break;
2036                 default:
2037                         lwkt_reltoken(&tty_token);
2038                         return (ENODEV);        /* /dev/nodev */
2039                 }
2040                 switch (ap->a_cmd) {
2041                 case TIOCSETA:
2042                         error = priv_check_cred(ap->a_cred, PRIV_ROOT, 0);
2043                         if (error != 0) {
2044                                 lwkt_reltoken(&tty_token);
2045                                 return (error);
2046                         }
2047                         *ct = *(struct termios *)data;
2048                         lwkt_reltoken(&tty_token);
2049                         return (0);
2050                 case TIOCGETA:
2051                         *(struct termios *)data = *ct;
2052                         lwkt_reltoken(&tty_token);
2053                         return (0);
2054                 case TIOCGETD:
2055                         *(int *)data = TTYDISC;
2056                         lwkt_reltoken(&tty_token);
2057                         return (0);
2058                 case TIOCGWINSZ:
2059                         bzero(data, sizeof(struct winsize));
2060                         lwkt_reltoken(&tty_token);
2061                         return (0);
2062                 default:
2063                         lwkt_reltoken(&tty_token);
2064                         return (ENOTTY);
2065                 }
2066         }
2067         tp = com->tp;
2068 #if defined(COMPAT_43)
2069         term = tp->t_termios;
2070         oldcmd = ap->a_cmd;
2071         error = ttsetcompat(tp, &ap->a_cmd, data, &term);
2072         if (error != 0) {
2073                 lwkt_reltoken(&tty_token);
2074                 return (error);
2075         }
2076         if (ap->a_cmd != oldcmd)
2077                 data = (caddr_t)&term;
2078 #endif
2079         if (ap->a_cmd == TIOCSETA || ap->a_cmd == TIOCSETAW ||
2080             ap->a_cmd == TIOCSETAF) {
2081                 int     cc;
2082                 struct termios *dt = (struct termios *)data;
2083                 struct termios *lt = mynor & CALLOUT_MASK
2084                                      ? &com->lt_out : &com->lt_in;
2085
2086                 dt->c_iflag = (tp->t_iflag & lt->c_iflag)
2087                               | (dt->c_iflag & ~lt->c_iflag);
2088                 dt->c_oflag = (tp->t_oflag & lt->c_oflag)
2089                               | (dt->c_oflag & ~lt->c_oflag);
2090                 dt->c_cflag = (tp->t_cflag & lt->c_cflag)
2091                               | (dt->c_cflag & ~lt->c_cflag);
2092                 dt->c_lflag = (tp->t_lflag & lt->c_lflag)
2093                               | (dt->c_lflag & ~lt->c_lflag);
2094                 for (cc = 0; cc < NCCS; ++cc)
2095                         if (lt->c_cc[cc] != 0)
2096                                 dt->c_cc[cc] = tp->t_cc[cc];
2097                 if (lt->c_ispeed != 0)
2098                         dt->c_ispeed = tp->t_ispeed;
2099                 if (lt->c_ospeed != 0)
2100                         dt->c_ospeed = tp->t_ospeed;
2101         }
2102         error = (*linesw[tp->t_line].l_ioctl)(tp, ap->a_cmd, data, ap->a_fflag, ap->a_cred);
2103         if (error != ENOIOCTL) {
2104                 lwkt_reltoken(&tty_token);
2105                 return (error);
2106         }
2107         crit_enter();
2108         error = ttioctl(tp, ap->a_cmd, data, ap->a_fflag);
2109         disc_optim(tp, &tp->t_termios, com);
2110         if (error != ENOIOCTL) {
2111                 crit_exit();
2112                 lwkt_reltoken(&tty_token);
2113                 return (error);
2114         }
2115         switch (ap->a_cmd) {
2116         case TIOCSBRK:
2117                 sio_setreg(com, com_cfcr, com->cfcr_image |= CFCR_SBREAK);
2118                 break;
2119         case TIOCCBRK:
2120                 sio_setreg(com, com_cfcr, com->cfcr_image &= ~CFCR_SBREAK);
2121                 break;
2122         case TIOCSDTR:
2123                 (void)commctl(com, TIOCM_DTR, DMBIS);
2124                 break;
2125         case TIOCCDTR:
2126                 (void)commctl(com, TIOCM_DTR, DMBIC);
2127                 break;
2128         /*
2129          * XXX should disallow changing MCR_RTS if CS_RTS_IFLOW is set.  The
2130          * changes get undone on the next call to comparam().
2131          */
2132         case TIOCMSET:
2133                 (void)commctl(com, *(int *)data, DMSET);
2134                 break;
2135         case TIOCMBIS:
2136                 (void)commctl(com, *(int *)data, DMBIS);
2137                 break;
2138         case TIOCMBIC:
2139                 (void)commctl(com, *(int *)data, DMBIC);
2140                 break;
2141         case TIOCMGET:
2142                 *(int *)data = commctl(com, 0, DMGET);
2143                 break;
2144         case TIOCMSDTRWAIT:
2145                 /* must be root since the wait applies to following logins */
2146                 error = priv_check_cred(ap->a_cred, PRIV_ROOT, 0);
2147                 if (error != 0) {
2148                         crit_exit();
2149                         lwkt_reltoken(&tty_token);
2150                         return (error);
2151                 }
2152                 com->dtr_wait = *(int *)data * hz / 100;
2153                 break;
2154         case TIOCMGDTRWAIT:
2155                 *(int *)data = com->dtr_wait * 100 / hz;
2156                 break;
2157         case TIOCTIMESTAMP:
2158                 com->do_timestamp = TRUE;
2159                 *(struct timeval *)data = com->timestamp;
2160                 break;
2161         case TIOCDCDTIMESTAMP:
2162                 com->do_dcd_timestamp = TRUE;
2163                 *(struct timeval *)data = com->dcd_timestamp;
2164                 break;
2165         default:
2166                 crit_exit();
2167                 error = pps_ioctl(ap->a_cmd, data, &com->pps);
2168                 if (error == ENODEV)
2169                         error = ENOTTY;
2170                 lwkt_reltoken(&tty_token);
2171                 return (error);
2172         }
2173         crit_exit();
2174         lwkt_reltoken(&tty_token);
2175         return (0);
2176 }
2177
2178 static void
2179 siopoll(void *dummy, void *frame)
2180 {
2181         int             unit;
2182
2183         lwkt_gettoken(&tty_token);
2184         if (com_events == 0) {
2185                 lwkt_reltoken(&tty_token);
2186                 return;
2187         }
2188
2189 repeat:
2190         for (unit = 0; unit < sio_numunits; ++unit) {
2191                 struct com_s    *com;
2192                 int             incc;
2193                 struct tty      *tp;
2194
2195                 com = com_addr(unit);
2196                 if (com == NULL)
2197                         continue;
2198                 tp = com->tp;
2199                 if (tp == NULL || com->gone) {
2200                         /*
2201                          * Discard any events related to never-opened or
2202                          * going-away devices.
2203                          */
2204                         com_lock();
2205                         incc = com->iptr - com->ibuf;
2206                         com->iptr = com->ibuf;
2207                         if (com->state & CS_CHECKMSR) {
2208                                 incc += LOTS_OF_EVENTS;
2209                                 com->state &= ~CS_CHECKMSR;
2210                         }
2211                         com_events -= incc;
2212                         com_unlock();
2213                         continue;
2214                 }
2215                 if (com->iptr != com->ibuf) {
2216                         com_lock();
2217                         sioinput(com);
2218                         com_unlock();
2219                 }
2220                 if (com->state & CS_CHECKMSR) {
2221                         u_char  delta_modem_status;
2222
2223                         com_lock();
2224                         delta_modem_status = com->last_modem_status
2225                                              ^ com->prev_modem_status;
2226                         com->prev_modem_status = com->last_modem_status;
2227                         com_events -= LOTS_OF_EVENTS;
2228                         com->state &= ~CS_CHECKMSR;
2229                         com_unlock();
2230                         if (delta_modem_status & MSR_DCD)
2231                                 (*linesw[tp->t_line].l_modem)
2232                                         (tp, com->prev_modem_status & MSR_DCD);
2233                 }
2234                 if (com->state & CS_ODONE) {
2235                         com_lock();
2236                         com_events -= LOTS_OF_EVENTS;
2237                         com->state &= ~CS_ODONE;
2238                         com_unlock();
2239                         if (!(com->state & CS_BUSY)
2240                             && !(com->extra_state & CSE_BUSYCHECK)) {
2241                                 callout_reset(&com->busy_ch, hz / 100,
2242                                                 siobusycheck, com);
2243                                 com->extra_state |= CSE_BUSYCHECK;
2244                         }
2245                         (*linesw[tp->t_line].l_start)(tp);
2246                 }
2247                 if (com_events == 0)
2248                         break;
2249         }
2250         if (com_events >= LOTS_OF_EVENTS)
2251                 goto repeat;
2252         lwkt_reltoken(&tty_token);
2253 }
2254
2255 /*
2256  * Called with tty_token held but no com_lock
2257  */
2258 static int
2259 comparam(struct tty *tp, struct termios *t)
2260 {
2261         u_int           cfcr;
2262         int             cflag;
2263         struct com_s    *com;
2264         u_int           divisor;
2265         u_char          dlbh;
2266         u_char          dlbl;
2267         int             unit;
2268
2269         unit = DEV_TO_UNIT(tp->t_dev);
2270         com = com_addr(unit);
2271         if (com == NULL) {
2272                 return (ENODEV);
2273         }
2274
2275         /* do historical conversions */
2276         if (t->c_ispeed == 0)
2277                 t->c_ispeed = t->c_ospeed;
2278
2279         /* check requested parameters */
2280         if (t->c_ospeed == 0)
2281                 divisor = 0;
2282         else {
2283                 if (t->c_ispeed != t->c_ospeed)
2284                         return (EINVAL);
2285                 divisor = siodivisor(com->rclk, t->c_ispeed);
2286                 if (divisor == 0)
2287                         return (EINVAL);
2288         }
2289
2290         /* parameters are OK, convert them to the com struct and the device */
2291         crit_enter();
2292         if (divisor == 0)
2293                 (void)commctl(com, TIOCM_DTR, DMBIC);   /* hang up line */
2294         else
2295                 (void)commctl(com, TIOCM_DTR, DMBIS);
2296         cflag = t->c_cflag;
2297         switch (cflag & CSIZE) {
2298         case CS5:
2299                 cfcr = CFCR_5BITS;
2300                 break;
2301         case CS6:
2302                 cfcr = CFCR_6BITS;
2303                 break;
2304         case CS7:
2305                 cfcr = CFCR_7BITS;
2306                 break;
2307         default:
2308                 cfcr = CFCR_8BITS;
2309                 break;
2310         }
2311         if (cflag & PARENB) {
2312                 cfcr |= CFCR_PENAB;
2313                 if (!(cflag & PARODD))
2314                         cfcr |= CFCR_PEVEN;
2315         }
2316         if (cflag & CSTOPB)
2317                 cfcr |= CFCR_STOPB;
2318
2319         if (com->hasfifo && divisor != 0) {
2320                 /*
2321                  * Use a fifo trigger level low enough so that the input
2322                  * latency from the fifo is less than about 16 msec and
2323                  * the total latency is less than about 30 msec.  These
2324                  * latencies are reasonable for humans.  Serial comms
2325                  * protocols shouldn't expect anything better since modem
2326                  * latencies are larger.
2327                  *
2328                  * Interrupts can be held up for long periods of time
2329                  * due to inefficiencies in other parts of the kernel,
2330                  * certain video cards, etc.  Setting the FIFO trigger
2331                  * point to MEDH instead of HIGH gives us 694uS of slop
2332                  * (8 character times) instead of 173uS (2 character times)
2333                  * @ 115200 bps.
2334                  */
2335                 com->fifo_image = t->c_ospeed <= 4800
2336                                   ? FIFO_ENABLE : FIFO_ENABLE | FIFO_RX_MEDH;
2337 #ifdef COM_ESP
2338                 /*
2339                  * The Hayes ESP card needs the fifo DMA mode bit set
2340                  * in compatibility mode.  If not, it will interrupt
2341                  * for each character received.
2342                  */
2343                 if (com->esp)
2344                         com->fifo_image |= FIFO_DMA_MODE;
2345 #endif
2346                 sio_setreg(com, com_fifo, com->fifo_image);
2347         }
2348
2349         /*
2350          * This returns with interrupts disabled so that we can complete
2351          * the speed change atomically.  Keeping interrupts disabled is
2352          * especially important while com_data is hidden.
2353          */
2354         (void) siosetwater(com, t->c_ispeed);
2355
2356         if (divisor != 0) {
2357                 sio_setreg(com, com_cfcr, cfcr | CFCR_DLAB);
2358                 /*
2359                  * Only set the divisor registers if they would change,
2360                  * since on some 16550 incompatibles (UMC8669F), setting
2361                  * them while input is arriving them loses sync until
2362                  * data stops arriving.
2363                  */
2364                 dlbl = divisor & 0xFF;
2365                 if (sio_getreg(com, com_dlbl) != dlbl)
2366                         sio_setreg(com, com_dlbl, dlbl);
2367                 dlbh = divisor >> 8;
2368                 if (sio_getreg(com, com_dlbh) != dlbh)
2369                         sio_setreg(com, com_dlbh, dlbh);
2370         }
2371
2372         sio_setreg(com, com_cfcr, com->cfcr_image = cfcr);
2373
2374         if (!(tp->t_state & TS_TTSTOP))
2375                 com->state |= CS_TTGO;
2376
2377         if (cflag & CRTS_IFLOW) {
2378                 if (com->st16650a) {
2379                         sio_setreg(com, com_cfcr, 0xbf);
2380                         sio_setreg(com, com_fifo,
2381                                    sio_getreg(com, com_fifo) | 0x40);
2382                 }
2383                 com->state |= CS_RTS_IFLOW;
2384                 /*
2385                  * If CS_RTS_IFLOW just changed from off to on, the change
2386                  * needs to be propagated to MCR_RTS.  This isn't urgent,
2387                  * so do it later by calling comstart() instead of repeating
2388                  * a lot of code from comstart() here.
2389                  */
2390         } else if (com->state & CS_RTS_IFLOW) {
2391                 com->state &= ~CS_RTS_IFLOW;
2392                 /*
2393                  * CS_RTS_IFLOW just changed from on to off.  Force MCR_RTS
2394                  * on here, since comstart() won't do it later.
2395                  */
2396                 outb(com->modem_ctl_port, com->mcr_image |= MCR_RTS);
2397                 if (com->st16650a) {
2398                         sio_setreg(com, com_cfcr, 0xbf);
2399                         sio_setreg(com, com_fifo,
2400                                    sio_getreg(com, com_fifo) & ~0x40);
2401                 }
2402         }
2403
2404
2405         /*
2406          * Set up state to handle output flow control.
2407          * XXX - worth handling MDMBUF (DCD) flow control at the lowest level?
2408          * Now has 10+ msec latency, while CTS flow has 50- usec latency.
2409          */
2410         com->state |= CS_ODEVREADY;
2411         com->state &= ~CS_CTS_OFLOW;
2412         if (cflag & CCTS_OFLOW) {
2413                 com->state |= CS_CTS_OFLOW;
2414                 if (!(com->last_modem_status & MSR_CTS))
2415                         com->state &= ~CS_ODEVREADY;
2416                 if (com->st16650a) {
2417                         sio_setreg(com, com_cfcr, 0xbf);
2418                         sio_setreg(com, com_fifo,
2419                                    sio_getreg(com, com_fifo) | 0x80);
2420                 }
2421         } else {
2422                 if (com->st16650a) {
2423                         sio_setreg(com, com_cfcr, 0xbf);
2424                         sio_setreg(com, com_fifo,
2425                                    sio_getreg(com, com_fifo) & ~0x80);
2426                 }
2427         }
2428
2429         sio_setreg(com, com_cfcr, com->cfcr_image);
2430
2431         /* XXX shouldn't call functions while intrs are disabled. */
2432         disc_optim(tp, t, com);
2433         /*
2434          * Recover from fiddling with CS_TTGO.  We used to call siointr1()
2435          * unconditionally, but that defeated the careful discarding of
2436          * stale input in sioopen().
2437          */
2438         if (com->state >= (CS_BUSY | CS_TTGO)) {
2439                 com_lock();
2440                 siointr1(com);
2441                 com_unlock();
2442         }
2443         crit_exit();
2444         comstart(tp);
2445         if (com->ibufold != NULL) {
2446                 kfree(com->ibufold, M_DEVBUF);
2447                 com->ibufold = NULL;
2448         }
2449         return (0);
2450 }
2451
2452 /*
2453  * called with tty_token held
2454  */
2455 static int
2456 siosetwater(struct com_s *com, speed_t speed)
2457 {
2458         int             cp4ticks;
2459         u_char          *ibuf;
2460         int             ibufsize;
2461         struct tty      *tp;
2462
2463         /*
2464          * Make the buffer size large enough to handle a softtty interrupt
2465          * latency of about 2 ticks without loss of throughput or data
2466          * (about 3 ticks if input flow control is not used or not honoured,
2467          * but a bit less for CS5-CS7 modes).
2468          */
2469         cp4ticks = speed / 10 / hz * 4;
2470         for (ibufsize = 128; ibufsize < cp4ticks;)
2471                 ibufsize <<= 1;
2472         if (ibufsize == com->ibufsize)
2473                 return (0);
2474
2475         /*
2476          * Allocate input buffer.  The extra factor of 2 in the size is
2477          * to allow for an error byte for each input byte.
2478          */
2479         ibuf = kmalloc(2 * ibufsize, M_DEVBUF, M_WAITOK | M_ZERO);
2480
2481         /* Initialize non-critical variables. */
2482         com->ibufold = com->ibuf;
2483         com->ibufsize = ibufsize;
2484         tp = com->tp;
2485         if (tp != NULL) {
2486                 tp->t_ififosize = 2 * ibufsize;
2487                 tp->t_ispeedwat = (speed_t)-1;
2488                 tp->t_ospeedwat = (speed_t)-1;
2489         }
2490
2491         /*
2492          * Read current input buffer.
2493          */
2494         com_lock();
2495         if (com->iptr != com->ibuf)
2496                 sioinput(com);
2497
2498         /*-
2499          * Initialize critical variables, including input buffer watermarks.
2500          * The external device is asked to stop sending when the buffer
2501          * exactly reaches high water, or when the high level requests it.
2502          * The high level is notified immediately (rather than at a later
2503          * clock tick) when this watermark is reached.
2504          * The buffer size is chosen so the watermark should almost never
2505          * be reached.
2506          * The low watermark is invisibly 0 since the buffer is always
2507          * emptied all at once.
2508          */
2509         com->iptr = com->ibuf = ibuf;
2510         com->ibufend = ibuf + ibufsize;
2511         com->ierroff = ibufsize;
2512         com->ihighwater = ibuf + 3 * ibufsize / 4;
2513         com_unlock();
2514         return (0);
2515 }
2516
2517 static void
2518 comstart(struct tty *tp)
2519 {
2520         struct com_s    *com;
2521         int             unit;
2522
2523         lwkt_gettoken(&tty_token);
2524         unit = DEV_TO_UNIT(tp->t_dev);
2525         com = com_addr(unit);
2526         if (com == NULL) {
2527                 lwkt_reltoken(&tty_token);
2528                 return;
2529         }
2530         crit_enter();
2531         com_lock();
2532         if (tp->t_state & TS_TTSTOP)
2533                 com->state &= ~CS_TTGO;
2534         else
2535                 com->state |= CS_TTGO;
2536         if (tp->t_state & TS_TBLOCK) {
2537                 if (com->mcr_image & MCR_RTS && com->state & CS_RTS_IFLOW)
2538                         outb(com->modem_ctl_port, com->mcr_image &= ~MCR_RTS);
2539         } else {
2540                 if (!(com->mcr_image & MCR_RTS) && com->iptr < com->ihighwater
2541                     && com->state & CS_RTS_IFLOW)
2542                         outb(com->modem_ctl_port, com->mcr_image |= MCR_RTS);
2543         }
2544         com_unlock();
2545         if (tp->t_state & (TS_TIMEOUT | TS_TTSTOP)) {
2546                 ttwwakeup(tp);
2547                 crit_exit();
2548                 lwkt_reltoken(&tty_token);
2549                 return;
2550         }
2551         if (tp->t_outq.c_cc != 0) {
2552                 struct lbq      *qp;
2553                 struct lbq      *next;
2554
2555                 if (!com->obufs[0].l_queued) {
2556                         com->obufs[0].l_tail
2557                             = com->obuf1 + q_to_b(&tp->t_outq, com->obuf1,
2558                                                   sizeof com->obuf1);
2559                         com->obufs[0].l_next = NULL;
2560                         com->obufs[0].l_queued = TRUE;
2561                         com_lock();
2562                         if (com->state & CS_BUSY) {
2563                                 qp = com->obufq.l_next;
2564                                 while ((next = qp->l_next) != NULL)
2565                                         qp = next;
2566                                 qp->l_next = &com->obufs[0];
2567                         } else {
2568                                 com->obufq.l_head = com->obufs[0].l_head;
2569                                 com->obufq.l_tail = com->obufs[0].l_tail;
2570                                 com->obufq.l_next = &com->obufs[0];
2571                                 com->state |= CS_BUSY;
2572                         }
2573                         com_unlock();
2574                 }
2575                 if (tp->t_outq.c_cc != 0 && !com->obufs[1].l_queued) {
2576                         com->obufs[1].l_tail
2577                             = com->obuf2 + q_to_b(&tp->t_outq, com->obuf2,
2578                                                   sizeof com->obuf2);
2579                         com->obufs[1].l_next = NULL;
2580                         com->obufs[1].l_queued = TRUE;
2581                         com_lock();
2582                         if (com->state & CS_BUSY) {
2583                                 qp = com->obufq.l_next;
2584                                 while ((next = qp->l_next) != NULL)
2585                                         qp = next;
2586                                 qp->l_next = &com->obufs[1];
2587                         } else {
2588                                 com->obufq.l_head = com->obufs[1].l_head;
2589                                 com->obufq.l_tail = com->obufs[1].l_tail;
2590                                 com->obufq.l_next = &com->obufs[1];
2591                                 com->state |= CS_BUSY;
2592                         }
2593                         com_unlock();
2594                 }
2595                 tp->t_state |= TS_BUSY;
2596         }
2597         com_lock();
2598         if (com->state >= (CS_BUSY | CS_TTGO))
2599                 siointr1(com);  /* fake interrupt to start output */
2600         com_unlock();
2601         ttwwakeup(tp);
2602         crit_exit();
2603         lwkt_reltoken(&tty_token);
2604 }
2605
2606 static void
2607 comstop(struct tty *tp, int rw)
2608 {
2609         struct com_s    *com;
2610
2611         lwkt_gettoken(&tty_token);
2612         com = com_addr(DEV_TO_UNIT(tp->t_dev));
2613         if (com == NULL || com->gone) {
2614                 lwkt_reltoken(&tty_token);
2615                 return;
2616         }
2617         com_lock();
2618         if (rw & FWRITE) {
2619                 if (com->hasfifo)
2620 #ifdef COM_ESP
2621                     /* XXX avoid h/w bug. */
2622                     if (!com->esp)
2623 #endif
2624                         sio_setreg(com, com_fifo,
2625                                    FIFO_XMT_RST | com->fifo_image);
2626                 com->obufs[0].l_queued = FALSE;
2627                 com->obufs[1].l_queued = FALSE;
2628                 if (com->state & CS_ODONE)
2629                         com_events -= LOTS_OF_EVENTS;
2630                 com->state &= ~(CS_ODONE | CS_BUSY);
2631                 com->tp->t_state &= ~TS_BUSY;
2632         }
2633         if (rw & FREAD) {
2634                 if (com->hasfifo)
2635 #ifdef COM_ESP
2636                     /* XXX avoid h/w bug. */
2637                     if (!com->esp)
2638 #endif
2639                         sio_setreg(com, com_fifo,
2640                                    FIFO_RCV_RST | com->fifo_image);
2641                 com_events -= (com->iptr - com->ibuf);
2642                 com->iptr = com->ibuf;
2643         }
2644         com_unlock();
2645         comstart(tp);
2646         lwkt_reltoken(&tty_token);
2647 }
2648
2649 static int
2650 commctl(struct com_s *com, int bits, int how)
2651 {
2652         int     mcr;
2653         int     msr;
2654
2655         lwkt_gettoken(&tty_token);
2656         if (how == DMGET) {
2657                 bits = TIOCM_LE;        /* XXX - always enabled while open */
2658                 mcr = com->mcr_image;
2659                 if (mcr & MCR_DTR)
2660                         bits |= TIOCM_DTR;
2661                 if (mcr & MCR_RTS)
2662                         bits |= TIOCM_RTS;
2663                 msr = com->prev_modem_status;
2664                 if (msr & MSR_CTS)
2665                         bits |= TIOCM_CTS;
2666                 if (msr & MSR_DCD)
2667                         bits |= TIOCM_CD;
2668                 if (msr & MSR_DSR)
2669                         bits |= TIOCM_DSR;
2670                 /*
2671                  * XXX - MSR_RI is naturally volatile, and we make MSR_TERI
2672                  * more volatile by reading the modem status a lot.  Perhaps
2673                  * we should latch both bits until the status is read here.
2674                  */
2675                 if (msr & (MSR_RI | MSR_TERI))
2676                         bits |= TIOCM_RI;
2677                 lwkt_reltoken(&tty_token);
2678                 return (bits);
2679         }
2680         mcr = 0;
2681         if (bits & TIOCM_DTR)
2682                 mcr |= MCR_DTR;
2683         if (bits & TIOCM_RTS)
2684                 mcr |= MCR_RTS;
2685         if (com->gone) {
2686                 lwkt_reltoken(&tty_token);
2687                 return(0);
2688         }
2689         com_lock();
2690         switch (how) {
2691         case DMSET:
2692                 outb(com->modem_ctl_port,
2693                      com->mcr_image = mcr | (com->mcr_image & MCR_IENABLE));
2694                 break;
2695         case DMBIS:
2696                 outb(com->modem_ctl_port, com->mcr_image |= mcr);
2697                 break;
2698         case DMBIC:
2699                 outb(com->modem_ctl_port, com->mcr_image &= ~mcr);
2700                 break;
2701         }
2702         com_unlock();
2703         lwkt_reltoken(&tty_token);
2704         return (0);
2705 }
2706
2707 /*
2708  * NOTE: Must be called with tty_token held
2709  */
2710 static void
2711 siosettimeout(void)
2712 {
2713         struct com_s    *com;
2714         bool_t          someopen;
2715         int             unit;
2716
2717         ASSERT_LWKT_TOKEN_HELD(&tty_token);
2718         /*
2719          * Set our timeout period to 1 second if no polled devices are open.
2720          * Otherwise set it to max(1/200, 1/hz).
2721          * Enable timeouts iff some device is open.
2722          */
2723         callout_stop(&sio_timeout_handle);
2724         sio_timeout = hz;
2725         someopen = FALSE;
2726         for (unit = 0; unit < sio_numunits; ++unit) {
2727                 com = com_addr(unit);
2728                 if (com != NULL && com->tp != NULL
2729                     && com->tp->t_state & TS_ISOPEN && !com->gone) {
2730                         someopen = TRUE;
2731                         if (com->poll || com->poll_output) {
2732                                 sio_timeout = hz > 200 ? hz / 200 : 1;
2733                                 break;
2734                         }
2735                 }
2736         }
2737         if (someopen) {
2738                 sio_timeouts_until_log = hz / sio_timeout;
2739                 callout_reset(&sio_timeout_handle, sio_timeout,
2740                                 comwakeup, NULL);
2741         } else {
2742                 /* Flush error messages, if any. */
2743                 sio_timeouts_until_log = 1;
2744                 comwakeup(NULL);
2745                 callout_stop(&sio_timeout_handle);
2746         }
2747 }
2748
2749 /*
2750  * NOTE: Must be called with tty_token held
2751  */
2752 static void
2753 comwakeup(void *chan)
2754 {
2755         struct com_s    *com;
2756         int             unit;
2757
2758         /*
2759          * Can be called from a callout too so just get the token
2760          */
2761         lwkt_gettoken(&tty_token);
2762         callout_reset(&sio_timeout_handle, sio_timeout, comwakeup, NULL);
2763
2764         /*
2765          * Recover from lost output interrupts.
2766          * Poll any lines that don't use interrupts.
2767          */
2768         for (unit = 0; unit < sio_numunits; ++unit) {
2769                 com = com_addr(unit);
2770                 if (com != NULL && !com->gone
2771                     && (com->state >= (CS_BUSY | CS_TTGO) || com->poll)) {
2772                         com_lock();
2773                         siointr1(com);
2774                         com_unlock();
2775                 }
2776         }
2777
2778         /*
2779          * Check for and log errors, but not too often.
2780          */
2781         if (--sio_timeouts_until_log > 0) {
2782                 lwkt_reltoken(&tty_token);
2783                 return;
2784         }
2785         sio_timeouts_until_log = hz / sio_timeout;
2786         for (unit = 0; unit < sio_numunits; ++unit) {
2787                 int     errnum;
2788
2789                 com = com_addr(unit);
2790                 if (com == NULL)
2791                         continue;
2792                 if (com->gone)
2793                         continue;
2794                 for (errnum = 0; errnum < CE_NTYPES; ++errnum) {
2795                         u_int   delta;
2796                         u_long  total;
2797
2798                         com_lock();
2799                         delta = com->delta_error_counts[errnum];
2800                         com->delta_error_counts[errnum] = 0;
2801                         com_unlock();
2802                         if (delta == 0)
2803                                 continue;
2804                         total = com->error_counts[errnum] += delta;
2805                         log(LOG_ERR, "sio%d: %u more %s%s (total %lu)\n",
2806                             unit, delta, error_desc[errnum],
2807                             delta == 1 ? "" : "s", total);
2808                 }
2809         }
2810         lwkt_reltoken(&tty_token);
2811 }
2812
2813 static void
2814 disc_optim(struct tty *tp, struct termios *t, struct com_s *com)
2815 {
2816         lwkt_gettoken(&tty_token);
2817         if (!(t->c_iflag & (ICRNL | IGNCR | IMAXBEL | INLCR | ISTRIP | IXON))
2818             && (!(t->c_iflag & BRKINT) || (t->c_iflag & IGNBRK))
2819             && (!(t->c_iflag & PARMRK)
2820                 || (t->c_iflag & (IGNPAR | IGNBRK)) == (IGNPAR | IGNBRK))
2821             && !(t->c_lflag & (ECHO | ICANON | IEXTEN | ISIG | PENDIN))
2822             && linesw[tp->t_line].l_rint == ttyinput)
2823                 tp->t_state |= TS_CAN_BYPASS_L_RINT;
2824         else
2825                 tp->t_state &= ~TS_CAN_BYPASS_L_RINT;
2826         com->hotchar = linesw[tp->t_line].l_hotchar;
2827         lwkt_reltoken(&tty_token);
2828 }
2829
2830 /*
2831  * Following are all routines needed for SIO to act as console
2832  */
2833 #include <sys/cons.h>
2834
2835 struct siocnstate {
2836         u_char  dlbl;
2837         u_char  dlbh;
2838         u_char  ier;
2839         u_char  cfcr;
2840         u_char  mcr;
2841 };
2842
2843 static speed_t siocngetspeed (Port_t, u_long rclk);
2844 #if 0
2845 static void siocnclose  (struct siocnstate *sp, Port_t iobase);
2846 #endif
2847 static void siocnopen   (struct siocnstate *sp, Port_t iobase, int speed);
2848 static void siocntxwait (Port_t iobase);
2849
2850 static cn_probe_t siocnprobe;
2851 static cn_init_t siocninit;
2852 static cn_init_fini_t siocninit_fini;
2853 static cn_checkc_t siocncheckc;
2854 static cn_getc_t siocngetc;
2855 static cn_putc_t siocnputc;
2856
2857 #if defined(__i386__) || defined(__x86_64__)
2858 CONS_DRIVER(sio, siocnprobe, siocninit, siocninit_fini,
2859             NULL, siocngetc, siocncheckc, siocnputc, NULL, NULL);
2860 #endif
2861
2862 /* To get the GDB related variables */
2863 #if DDB > 0
2864 #include <ddb/ddb.h>
2865 #endif
2866
2867 static void
2868 siocntxwait(Port_t iobase)
2869 {
2870         int     timo;
2871
2872         /*
2873          * Wait for any pending transmission to finish.  Required to avoid
2874          * the UART lockup bug when the speed is changed, and for normal
2875          * transmits.
2876          */
2877         timo = 100000;
2878         while ((inb(iobase + com_lsr) & (LSR_TSRE | LSR_TXRDY))
2879                != (LSR_TSRE | LSR_TXRDY) && --timo != 0)
2880                 ;
2881 }
2882
2883 /*
2884  * Read the serial port specified and try to figure out what speed
2885  * it's currently running at.  We're assuming the serial port has
2886  * been initialized and is basicly idle.  This routine is only intended
2887  * to be run at system startup.
2888  *
2889  * If the value read from the serial port doesn't make sense, return 0.
2890  */
2891 /*
2892  * NOTE: Must be called with tty_token held
2893  */
2894 static speed_t
2895 siocngetspeed(Port_t iobase, u_long rclk)
2896 {
2897         u_int   divisor;
2898         u_char  dlbh;
2899         u_char  dlbl;
2900         u_char  cfcr;
2901
2902         cfcr = inb(iobase + com_cfcr);
2903         outb(iobase + com_cfcr, CFCR_DLAB | cfcr);
2904
2905         dlbl = inb(iobase + com_dlbl);
2906         dlbh = inb(iobase + com_dlbh);
2907
2908         outb(iobase + com_cfcr, cfcr);
2909
2910         divisor = dlbh << 8 | dlbl;
2911
2912         /* XXX there should be more sanity checking. */
2913         if (divisor == 0)
2914                 return (CONSPEED);
2915         return (rclk / (16UL * divisor));
2916 }
2917
2918 static void
2919 siocnopen(struct siocnstate *sp, Port_t iobase, int speed)
2920 {
2921         u_int   divisor;
2922         u_char  dlbh;
2923         u_char  dlbl;
2924
2925         /*
2926          * Save all the device control registers except the fifo register
2927          * and set our default ones (cs8 -parenb speed=comdefaultrate).
2928          * We can't save the fifo register since it is read-only.
2929          */
2930         sp->ier = inb(iobase + com_ier);
2931         outb(iobase + com_ier, 0);      /* spltty() doesn't stop siointr() */
2932         siocntxwait(iobase);
2933         sp->cfcr = inb(iobase + com_cfcr);
2934         outb(iobase + com_cfcr, CFCR_DLAB | CFCR_8BITS);
2935         sp->dlbl = inb(iobase + com_dlbl);
2936         sp->dlbh = inb(iobase + com_dlbh);
2937         /*
2938          * Only set the divisor registers if they would change, since on
2939          * some 16550 incompatibles (Startech), setting them clears the
2940          * data input register.  This also reduces the effects of the
2941          * UMC8669F bug.
2942          */
2943         divisor = siodivisor(comdefaultrclk, speed);
2944         dlbl = divisor & 0xFF;
2945         if (sp->dlbl != dlbl)
2946                 outb(iobase + com_dlbl, dlbl);
2947         dlbh = divisor >> 8;
2948         if (sp->dlbh != dlbh)
2949                 outb(iobase + com_dlbh, dlbh);
2950         outb(iobase + com_cfcr, CFCR_8BITS);
2951         sp->mcr = inb(iobase + com_mcr);
2952         /*
2953          * We don't want interrupts, but must be careful not to "disable"
2954          * them by clearing the MCR_IENABLE bit, since that might cause
2955          * an interrupt by floating the IRQ line.
2956          */
2957         outb(iobase + com_mcr, (sp->mcr & MCR_IENABLE) | MCR_DTR | MCR_RTS);
2958 }
2959
2960 #if 0
2961 static void
2962 siocnclose(struct siocnstate *sp, Port_t iobase)
2963 {
2964         /*
2965          * Restore the device control registers.
2966          */
2967         siocntxwait(iobase);
2968         outb(iobase + com_cfcr, CFCR_DLAB | CFCR_8BITS);
2969         if (sp->dlbl != inb(iobase + com_dlbl))
2970                 outb(iobase + com_dlbl, sp->dlbl);
2971         if (sp->dlbh != inb(iobase + com_dlbh))
2972                 outb(iobase + com_dlbh, sp->dlbh);
2973         outb(iobase + com_cfcr, sp->cfcr);
2974         /*
2975          * XXX damp oscillations of MCR_DTR and MCR_RTS by not restoring them.
2976          */
2977         outb(iobase + com_mcr, sp->mcr | MCR_DTR | MCR_RTS);
2978         outb(iobase + com_ier, sp->ier);
2979 }
2980 #endif
2981
2982 static void
2983 siocnprobe(struct consdev *cp)
2984 {
2985         u_char                  cfcr;
2986         u_int                   divisor;
2987         int                     unit;
2988         struct siocnstate       sp;
2989
2990         /*
2991          * Find our first enabled console, if any.  If it is a high-level
2992          * console device, then initialize it and return successfully.
2993          * If it is a low-level console device, then initialize it and
2994          * return unsuccessfully.  It must be initialized in both cases
2995          * for early use by console drivers and debuggers.  Initializing
2996          * the hardware is not necessary in all cases, since the i/o
2997          * routines initialize it on the fly, but it is necessary if
2998          * input might arrive while the hardware is switched back to an
2999          * uninitialized state.  We can't handle multiple console devices
3000          * yet because our low-level routines don't take a device arg.
3001          * We trust the user to set the console flags properly so that we
3002          * don't need to probe.
3003          */
3004         cp->cn_pri = CN_DEAD;
3005
3006         for (unit = 0; unit < 16; unit++) { /* XXX need to know how many */
3007                 int flags;
3008                 int disabled;
3009                 if (resource_int_value("sio", unit, "disabled", &disabled) == 0) {
3010                         if (disabled)
3011                                 continue;
3012                 }
3013                 if (resource_int_value("sio", unit, "flags", &flags))
3014                         continue;
3015                 if (COM_CONSOLE(flags) || COM_DEBUGGER(flags)) {
3016                         int port;
3017                         int baud;
3018                         Port_t iobase;
3019                         speed_t boot_speed;
3020
3021                         if (resource_int_value("sio", unit, "port", &port))
3022                                 continue;
3023                         if (resource_int_value("sio", unit, "baud", &baud) == 0)
3024                                 boot_speed = baud;
3025                         else
3026                                 boot_speed = 0;
3027                         iobase = port;
3028                         crit_enter();
3029                         if (boothowto & RB_SERIAL) {
3030                                 if (boot_speed == 0) {
3031                                         boot_speed = siocngetspeed(iobase,
3032                                                                 comdefaultrclk);
3033                                 }
3034                                 if (boot_speed)
3035                                         comdefaultrate = boot_speed;
3036                         }
3037
3038                         /*
3039                          * Initialize the divisor latch.  We can't rely on
3040                          * siocnopen() to do this the first time, since it
3041                          * avoids writing to the latch if the latch appears
3042                          * to have the correct value.  Also, if we didn't
3043                          * just read the speed from the hardware, then we
3044                          * need to set the speed in hardware so that
3045                          * switching it later is null.
3046                          */
3047                         com_lock();
3048                         cfcr = inb(iobase + com_cfcr);
3049                         outb(iobase + com_cfcr, CFCR_DLAB | cfcr);
3050                         divisor = siodivisor(comdefaultrclk, comdefaultrate);
3051                         outb(iobase + com_dlbl, divisor & 0xff);
3052                         outb(iobase + com_dlbh, divisor >> 8);
3053                         outb(iobase + com_cfcr, cfcr);
3054
3055                         siocnopen(&sp, iobase, comdefaultrate);
3056                         com_unlock();
3057
3058                         crit_exit();
3059                         if (COM_CONSOLE(flags) && !COM_LLCONSOLE(flags)) {
3060                                 cp->cn_probegood = 1;
3061                                 cp->cn_private = (void *)(intptr_t)unit;
3062                                 cp->cn_pri = COM_FORCECONSOLE(flags)
3063                                              || boothowto & RB_SERIAL
3064                                              ? CN_REMOTE : CN_NORMAL;
3065                                 siocniobase = iobase;
3066                                 siocnunit = unit;
3067                         }
3068                         if (COM_DEBUGGER(flags) && gdb_tab == NULL) {
3069                                 kprintf("sio%d: gdb debugging port\n", unit);
3070                                 siogdbiobase = iobase;
3071                                 siogdbunit = unit;
3072 #if DDB > 0
3073                                 cp->cn_gdbprivate = (void *)(intptr_t)unit;
3074                                 gdb_tab = cp;
3075 #endif
3076                         }
3077                 }
3078         }
3079 #if defined(__i386__) || defined(__x86_64__)
3080 #if DDB > 0
3081         /*
3082          * XXX Ugly Compatability.
3083          * If no gdb port has been specified, set it to be the console
3084          * as some configuration files don't specify the gdb port.
3085          */
3086         if (gdb_tab == NULL && (boothowto & RB_GDB)) {
3087                 kprintf("Warning: no GDB port specified. Defaulting to sio%d.\n",
3088                         siocnunit);
3089                 kprintf("Set flag 0x80 on desired GDB port in your\n");
3090                 kprintf("configuration file (currently sio only).\n");
3091                 siogdbiobase = siocniobase;
3092                 siogdbunit = siocnunit;
3093                 cp->cn_gdbprivate = (void *)(intptr_t)siocnunit;
3094                 gdb_tab = cp;
3095         }
3096 #endif
3097 #endif
3098 }
3099
3100 static void
3101 siocninit(struct consdev *cp)
3102 {
3103         comconsole = (int)(intptr_t)cp->cn_private;
3104 }
3105
3106 static void
3107 siocninit_fini(struct consdev *cp)
3108 {
3109         cdev_t dev;
3110         int unit;
3111
3112         if (cp->cn_probegood) {
3113                 unit = (int)(intptr_t)cp->cn_private;
3114                 /*
3115                  * Call devfs_find_device_by_name on ttydX to find the correct device,
3116                  * as it should have been created already at this point by the
3117                  * attach routine.
3118                  * If it isn't found, the serial port was not attached at all and we
3119                  * shouldn't be here, so assert this case.
3120                  */
3121                 dev = devfs_find_device_by_name("ttyd%r", unit);
3122
3123                 KKASSERT(dev != NULL);
3124                 cp->cn_dev = dev;
3125         }
3126 }
3127
3128 static int
3129 siocncheckc(void *private)
3130 {
3131         int     c;
3132         int     unit = (int)(intptr_t)private;
3133         Port_t  iobase;
3134 #if 0
3135         struct siocnstate       sp;
3136 #endif
3137
3138         if (unit == siogdbunit)
3139                 iobase = siogdbiobase;
3140         else
3141                 iobase = siocniobase;
3142         com_lock();
3143         crit_enter();
3144 #if 0
3145         siocnopen(&sp, iobase, comdefaultrate);
3146 #endif
3147         if (inb(iobase + com_lsr) & LSR_RXRDY)
3148                 c = inb(iobase + com_data);
3149         else
3150                 c = -1;
3151 #if 0
3152         siocnclose(&sp, iobase);
3153 #endif
3154         crit_exit();
3155         com_unlock();
3156         return (c);
3157 }
3158
3159
3160 int
3161 siocngetc(void *private)
3162 {
3163         int     c;
3164         int     unit = (int)(intptr_t)private;
3165         Port_t  iobase;
3166 #if 0
3167         struct siocnstate       sp;
3168 #endif
3169
3170         if (unit == siogdbunit)
3171                 iobase = siogdbiobase;
3172         else
3173                 iobase = siocniobase;
3174         com_lock();
3175         crit_enter();
3176 #if 0
3177         siocnopen(&sp, iobase, comdefaultrate);
3178 #endif
3179         while (!(inb(iobase + com_lsr) & LSR_RXRDY))
3180                 ;
3181         c = inb(iobase + com_data);
3182 #if 0
3183         siocnclose(&sp, iobase);
3184 #endif
3185         crit_exit();
3186         com_unlock();
3187         return (c);
3188 }
3189
3190 void
3191 siocnputc(void *private, int c)
3192 {
3193         int     unit = (int)(intptr_t)private;
3194 #if 0
3195         struct siocnstate       sp;
3196 #endif
3197         Port_t  iobase;
3198
3199         if (unit == siogdbunit)
3200                 iobase = siogdbiobase;
3201         else
3202                 iobase = siocniobase;
3203         com_lock();
3204         crit_enter();
3205 #if 0
3206         siocnopen(&sp, iobase, comdefaultrate);
3207 #endif
3208         siocntxwait(iobase);
3209         outb(iobase + com_data, c);
3210 #if 0
3211         siocnclose(&sp, iobase);
3212 #endif
3213         crit_exit();
3214         com_unlock();
3215 }
3216
3217 DRIVER_MODULE(sio, isa, sio_isa_driver, sio_devclass, NULL, NULL);
3218 DRIVER_MODULE(sio, acpi, sio_isa_driver, sio_devclass, NULL, NULL);
3219 #if NPCI > 0
3220 DRIVER_MODULE(sio, pci, sio_pci_driver, sio_devclass, NULL, NULL);
3221 #endif
3222 #if NPUC > 0
3223 DRIVER_MODULE(sio, puc, sio_puc_driver, sio_devclass, NULL, NULL);
3224 #endif