pthread_self is used by stdio.

Do not compile the kernel with the stack protector.  I've decided to tolerate
the stack protector as a default for user programs, but not for the kernel.
The stack protector has known bugs and I frankly believe that it is far more
likely that we would hit one of its bugs verses it actually finding a
stack overflow in the kernel.

Fix a sockbuf race.  Currently the m_free*() path can block, due to
objcache_put() blocking when it must access the global depot.  This breaks
the critical section *AND the BGL during a time when the sockbuf state is
inconsistent.  Another process accessing the same sockbuf would then
corrupt it.  Since depot access is fairly rare, this bug typically required
a number of hours to reproduce.

Delay the actual freeing of mbufs until after the sockbuf state has been
updated.  Encapsulate common operations in a procedure, and add additional
assertions.  NULL out sb_lastrecord when it becomes invalid, and add a
considerable amount of debugging code.

SOCKBUF_DEBUG has been added.  Note that this is a VERY EXPENSIVE
kernel compile option which should only be used when specifically debugging
the networking subsystem.

This is a stabilization patch is rather hackish.  A better cleanup will
occur once we are sure we've fixed all the bugs.

sbcheck provided by: Jeffrey Hsu
Reported-by: David Rhodus, Peter Avalos, YONETANI Tomokazu,
     Tomaz Borstnar, and numerous other people.

Fix a critical bug in the IPI messaging code, effecting SMP systems.  In
order to avoid placing a load fence in the FIFO scanning loop the FIFO write
index is cached and the code then loops the read index until it reaches
the cached write index, rather then real-time write index.  However, if a
FIFO full condition occurs during the callback AND additional IPIQ messages
are queued to the current cpu by a remote cpu at the same time, a recursive
call to lwkt_process_ipiq*() can occur and advance the read index past
the cached write index of the parent processing loop.

An exact comparison against the cached write index was being used which
resulted in the parent processing loop blowing past the actual write
index and re-executing stale IPI messages.  Fix the comparison.

The nature of this bug combined with other bugs in the token code and the
sockbuf code (which were causing crashes far more often) made this a
particularly nasty problem to find, with it taking upwards of a week to
generate a crash and the crash occuring at the worst place imagineable
(a hard IPI interrupt) and doing terrible things (re-executing a stale
IPI message).  It took KTR logging on both the sending and receiving
side of the IPI code to nail the problem.

Very special thanks to Peter Avalos and David rhodus for their debugging
help.  And, most especially, David Rhodus for helping track this down over
the last *THREE* months.

Reported-by: David Rhodus, Peter Avalos, YONETANI Tomokazu, Tomaz Borstnar
Special-thanks-to: David Rhodus and Peter Avalos

Split monolithic /etc/pam.conf into separate files for each service
under /etc/pam.d. The README was obtained from FreeBSD, the convert.sh
script is inspired by convert.pl, but works with sh and awk only.

If you just want to convert your existing configuration to the new
format, run "sh /etc/pam.d/convert.sh". You can remove /etc/pam.conf
afterwards.

Get rid off extraneous spaces in function prototypes.

Add information about console fonts.

Add emulation of statvfs and fstatvfs based on statfs / fstatfs.

Some more junk to remove after manual installation.

Remove part about wscons.  This will need information about our console
system.

Reorder alphabetically.

Add NetBSD's nls(7).

Mark zlib 1.2.2 as dead.

Merge from vendor branch ZLIB:
Switch to zlib 1.2.3, imported under contrib/zlib-1.2 to reduce impact
of latter updates. Remove fix the inflate bug, it is included already.

Switch to zlib 1.2.3, imported under contrib/zlib-1.2 to reduce impact
of latter updates. Remove fix the inflate bug, it is included already.

Switch to zlib 1.2.3, imported under contrib/zlib-1.2 to reduce impact
of latter updates. Remove fix the inflate bug, it is included already.

Remove the minigzip example from libz. Since the real gzip is based on
libz too and is only slightly bigger (7 KB for static linkage), there's
no point in having it.

Additional work to try to make panics operate better on SMP systems.

* Fix a bug in a kernel printf() (that occurs in a panic situation) so
  the printf() itself doesn't fault out.

* The idle thread normally must never hold the BGL across a switch, since the
  switch code must switch to the idle thread if no other threads are available.
  However, since the machine can take a fatal kernel trap or panic in the
  context of the idle thread it is possible for the idle thread to hold the
  BGL during these particular situations.  Additionally, the locking code
  assumes that it can just set the thread's mpcount, call lwkt_switch(), and
  not get the cpu back until the scheduler is able to obtain the BGL on
  behalf of the thread.  So have the scheduler deal with this situation.

  This makes the scheduler look a bit messier then it really is but the code
  paths in question only run during a panic or fatal kernel trap, so
  performance should not be impaired.

From-dumps-provided-by: Peter Avalos <pavalos@theshell.com>

Only compile in lwkt_smp_stopped() on SMP builds.

Reported-by: Noritoshi Demizu <demizu@dd.iij4u.or.jp>

Support disablement of chflags in a jail, part 1/2.

Submitted-by: Deyan Dyankov <deyan.dyankov@gmail.com>
Taken-from: FreeBSD-5

When a cpu is stopped due to a panic or the debugger, it can be in virtually
any state, including possibly holding a critical section.   IPIQ interrupts
must still be processed while we are in this state (even though we could be
racing IPIQ processing if we were interrupted at just the wrong time).  In
particular, dumping is not likely to work if a panic occurs on a cpu != 0
unless we process the IPIQ on the stopped cpus.  There are simply too many
interactions between cpus.

Interrupt threads are LWKT scheduled entities and will generally still not
work during a panic while dumping.  The dumping code expects this.  However,
call splz() anyway.

We may in the future have to allow certain threads to run while dumping.
For example, to allow dumping over the network.  There are various ways this
can be done, such as by masking gd_runqmask or flagging special threads to
be runnable while in a paniced or dumping state.

Add some conditionalized debugging 'PANIC_DEBUG', to allow us to panic a
busy system from the worst place imagineable, the IPIQ loop.

Sync with all revisions up to FreeBSD date.1:1.72 (ru), notably:
- Add the new standard EXIT STATUS section where appropriate.
  Sort standard sections in the (documented) preferred order.
  Author: ru, date.1:1.71
- Give the most awesome example of how to parse the output of date
  back into Epoch time. Author: alfred, date.1:1.67
- Better SYSNOPIS. Author: green, date.1:1.63
- Lots of minor man page cleanups by ru.
- Bump man page date.

Submitted-by: Sarunas Vancevicius <svan_at_redbrick_dot_dcu_dot_ie>

Raise WARNS to 6:
- Declare variables and parameters 'static' and 'const' as needed.

Also:
- Bump FreeBSD CVS id's (date.c:1.47 (imp); extern.h 1.XX (markm))
  to indicate that these files are functionally identical;
- Remove unnecessary casts;
- Apply some style(9).

Submitted-by: Sarunas Vancevicius <svan_at_redbrick_dot_dcu_dot_ie>

Merge ... FreeBSD 1.44 (dds): report and exit on write error.

Submitted-by: Sarunas Vancevicius <svan_at_redbrick_dot_dcu_dot_ie>
              (w/tiny style(9) change by me)

Add some debugging code to catch any dirty inodes which are destroyed
without being synced to the disk.

Add some additinal targets to allow elements of a buildworld to be
independantly built.  This is for debugging only.

Merge ... FreeBSD netdate.c:1.17 (charnier): udp/timed -> timed/udp
(Sync to FreeBSD netdate.c:1.18 (markm) modulo FreeBSD formatting.)

Submitted-by: Sarunas Vancevicius <svan_at_redbrick_dot_dcu_dot_ie>

Merge ... FreeBSD vary.c:1.16 and date.1:1.68 (yar):
Change behaviour of -v to be more intuitive, by accounting for the
fact that not all months have the same number of days.

(Note that, because this commit is the first of a series, the FreeBSD
revision number and date of the man page have not been bumped yet.)

Submitted-by: Sarunas Vancevicius <svan_at_redbrick_dot_dcu_dot_ie>

Limit switch-from-interrupt warnings to once per thread to avoid an endless
loop.  Generate a DDB backtrace when it occurs.

Note from Peter's report that it is possible for the idle thread to panic
if e.g. an IPI or FAST interrupt running in the idle thread's context panics.
This can result in highly unexpected operation and needs to be addressed.

Reported-by: Peter Avalos <pavalos@theshell.com>

Interlock panics that occur on multiple cpus before the first cpu is able to
halt the other cpus.  Print out a nice verbose message describing the
situation, then permanently deschedule the threads that lose the race.

If a fatal kernel trap occurs from an IPI or FAST interrupt on a cpu not
holding the MP lock, the trap code will panic a second time when get_mplock()
attempts to block due to an assertion in lwkt_switch().  Add a new globaldata
field, gd_trap_nesting_level, that allows us to bypass this panic.

If lwkt_switch() is called with a non-zero gd_intr_nesting_level or non-zero
gd_trap_nesting_level, the two variables must be saved and then zero'd
across the switch, and restored on resume.  Otherwise a normal switch in
another thread will result in another panic.  This case only occurs during
fatal traps, panics, or when operating from DDB.

From-kernel-dumps-provided-by: David Rhodus <sdrhodus@gmail.com>

Fix a MP lock race.  The MP locking state can change when lwkt_chktokens()
returns a failure.  The state is not retained by an interrupt because we
are trying to set it for the new thread rather then the current thread, and
the current thread's mpcount could be 0.

Change ASSERT_MP_LOCK_HELD() to supply a thread for reporting purposes in
the KASSERT.

Reported-by: David Rhodus <sdrhodus@gmail.com>

Fix Saved commands bug.  The following Makefile would cause make to core.
This bug has been in make since 4.X

all:    first next
@echo Run now.
...
@echo Run after me

first:
@echo Apppp
...
@echo Run after all 1

next:
@echo Bpppp
...
@echo Run after all 2

Reorder paramters to Compat_RunCommand().

Move handling of the following signals {SIGTSTP, SIGTTOU,
SIGTTIN, and SIGWINCH} closer to the top of the function.

Constify cmd paramter to Compat_RunCommand()

Cleanup the signal handling.  A lot of unnecessary code was
added in the past due to miss-understanding of the signal code.

Now when a signal is delivered, a per signal variable is incremented.
[idea from OpenBSD]  Since the signal handler just set variables
the rest of the code does not need to block signals.  This makes
the mainline code much cleaner.

Constify Lst_Member()

Fix numerous extremely serious bugs in OHCI's iso-synchronous code.  I'm
not even sure if the fixes are entirely correct because the code is badly
written and totally undocumented.  But they seem to help.

* Fix up list linkages prior to calling ohci_free_sitd(), since
  ohci_free_sitd() destroys the nextitd field.  This was causing a huge
  amount of corruption of the SITD free list *AND* the xfer SITD list,
  particularly prevaliant when multi-record transfers are executed
  (e.g. uaudio).

* Properly (I hope) adjust the pipe tail pointer in numerous situations.
  There are a number of unconditional references and assumptions as to the
  validity of pipe->tail.itd and it must be maintained at all times.
  In particular, an aborted or timed-out transfer would corrupt it.

Reported-by: Michal Belczyk <belczyk@bsd.krakow.pl>

de-nop part introduced in the last commit.

Noticed-by: Michal Belczyk <belczyk@bsd.krakow.pl>

Add KTR support for usb_mem to trace usb-related allocations.

DELAY() is a spin loop, we can't use it any more because shutdown
depends on other threads working.  Not only does the syncer and buffer
flusher need to work (else they might get stuck holding a lock on a buffer),
but the scheduler helper threads and device helper threads must also continue
to operate to be able to successfully flush the buffer cache.   In addition,
busy looping while holding the BGL can seriously deadlock SMP machines, so
even if it was (sometimes) possible to get away with using DELAY on UP boxes,
it's simply impossible on an SMP box.

So change the DELAY's to tsleep's in the shutdown code.  The current thread
is also given a very high priority (higher then an interrupt thread,
in fact), to try to ensure it gets through the shutdown procedure even if
the system is fried.  For the moment we do not move the thread to cpu #0.

This puts us in a somewhat awkwar situation when handling panics, but I don't
see that we have much of a choice.

Reported-by: Peter Avalos, David Rhodus, and numerous other people over time.

Fix missing initialisation of big numbers. BN_hex2bn behaves
differently if the passed pointer points to NULL or not.

Noticed-by: Michal Belczyk <belczyk@bsd.krakow.pl>
(slightly different patch commited)

Allow only non-banked direct modes.

Obtained from: FreeBSD

When a usb mass storage device is removed the related CAM SIM structure is
terminated.  A ref count prevents the actual sim structure from being
destroyed if the device still has refs, but the sim->devq structure is not so
protected and will be NULLed out.  An unmount attempt after device removal
will then result in a panic.

Fix this by testing for a NULL sim->devq.

Reported-by: Eduardo Tongson <propolice@gmail.com>

Remove DEC Alpha support.

KTR_MALLOC should be KTR_MEMORY

* Fix a bug that could cause dc_stop() to try to m_freem() something that's
  not a valid mbuf pointer.
* Avoid an unnecessary copy of a packet if it is already in a single mbuf.
* Introduce an additional device flag (DC_TX_ALIGN) for those NICs which
  require the transmit buffers to be aligned to 32-bit boundaries.
* Ignore CSR13, CSR14, CSR15 'Media Specific Data' registers for 21143
  based cards which use SIA mode.
* Don't read the MAC address from a copy of the EEPROM in the softc
  that has been recorded earlier and overwrite it again later by
  reading it directly from the EEPROM again.
* Read the MAC address from the PAR0/PAR1 registers instead, which
  are autoloaded on reboot.
* Added ADMtek ADM9511 and ADM9513 device ID's

Submitted-by: Eduardo Tongson
Taken-from: FreeBSD
    if_dc.c       1.9.46,48,49,50,51,52,53,55
    if_dcreg.h   1.4.2.23,24,25

Reorder the INVARIANTS test in crit_enter() to occur prior to modifying
the critical section count rather then after, to try to catch critical
section mismatches earlier.

Move a mistaken crit_exit() into a crit_enter(), which was panicing the
system when switching out of the SLIP line discpline.

Add some missing crit_exit()'s.  The original code just assumed that the
SPL would be cleaned up by the caller, but the SPL->crit conversion really
requires that the routines be more self-contained.

Make some functions that do not get access outside of job.c static

Temporarily remove KQUEUE code for now, since it complicates the
job.c code.  I will reimpliment it later.

Checked by comparing object files genereage before #ifdef USE_KQUEUE
section where removed, and after they were removed.

Removed unused RANLIBMAG symbol since harti cleaned up the code
that used it. LIBSUFF into suff.c since it is only used there.

Hook libsctp into the build.

Tie SCTP into the kernel, this includes adding a new syscall (sctp_peeloff).

Obtained from: KAME

Don't return right after a goto.

Call suser() with the correct number of arguments.

Remove forgotten debug printf.

Convert spl* to critical sections.

Add libsctp.

Obtained from: KAME

Add a forth argument to soreserve(). Pass just a NULL for now.

Initialize a few more timers.

Properly handle mbuf copying on DragonFly when we try to reduce the size of a
mbuf.

Remove the second argument to ip_stripoptions(), it was never used.

Add va_arg handling for DragonFly.

We have to declare the parent node for a sysctl.

Our mbuf allocation flags are prefixed with MB_ not M_.

Add DragonFly to the #ifdef mess.

I will probably remove support for the other platforms at a later date.

Commit untouched SCTP files from KAME originally written by Randall Stewart.

SCTP or Stream Control Transmission Protocol is designed so you can have
multiple streams within the same connection.

Obtained from: KAME

Remove note about MDA and CGA adapters which we don't support anymore.

The references to EGA modes are left in for the moment because VGA also
knows them.

Noticed by: cpressey

Switch to auth-pam.c from OpenSSH to unbreak Kerberos 5 build.
Fix the bug which prevented one process from seeing the death
of the other. This allows us to remove the pthread hack.

Instead of duplicating the Kerberos tools, use a single version.
Switch to host tools, since they are running on the build system,
not the target platform. Add an explicit dependency of buildincludes
to depend in kerberos5/tools to ensure that the tools are available
in phase 4a.

pam_skey is not supported anymore, remove it from the default config.

MODULE_DIR must include the final '/'.

Merge from vendor branch OPENSSH:
Prepare for using the "official" PAM support.

Prepare for using the "official" PAM support.

Prepare for using the "official" PAM support.

Correct a typo, v_rbdirty_tree is for dirty buffers.

fix typo, SRCS should contain the .c file.

From FreeBSD:
  Better memory handling:

   - It is acceptable to call free(3) when the given pointer itself
     is NULL, so we do not need to determine NULL before passing
     a pointer to free(3)
   - Handle failure of malloc(3)

  MT6/5 Candidate

  Submitted by:   Dan Lukes <dan at obluda cz>

Submitted-by: Xin LI <delphij delphij net>

Unbreak release build from older machines which don't define ${LN} yet.
This is much easier than adding LN?= to -Release and getting people to
upgrade first...

PAM is dead, long live PAM!

Remove extra whitespace at the end of some lines.

Update zoneinfo database.

africa: 7.36 -> 7.37
antarctica: 7.23 -> 7.24
asia: 7.75 -> 7.82
australasia: 7.69 -> 7.71
backward: 7.26 -> 7.27
etcetera: 7.11 -> 7.12
europe: 7.88 -> 7.92
northamerica: 7.69 -> 7.74
southamerica: 7.52 -> 7.59

Return child exit status through ProcStuff.

Add better comments and renamed functions to match rest of the code
in make.

cleanup some spelling errors

Move mkfifio(), and FILENO() into util.c

Move common code that executes the comands associated with a rule
in into Compat_RunCmds().

Group curdir and objdir code.

Add PF_MASKOS and PF_MASKPROC and realign the comment section.

Add STB_LOOS, STB_HIOS, STT_COMMON, STT_LOOS, STT_HIOS, STV_DEFAULT,
STV_INTERNAL, STV_HIDDEN, and STV_PROTECTED.

STV_* concerns symbol visibility.

Add section group flags (GRP_*).

Add SHF_MERGE, SHF_STRINGS, SHF_INFO_LINK, SHF_LINK_ORDER,
SHF_OS_NONCONFORMING, SHF_GROUP, and SHF_MASKOS.

Add SHT_INIT_ARRAY, SHT_FINI_ARRAY, SHT_PREINIT_ARRAY, SHT_GROUP and
SHT_SYMTAB_SHNDX.

Add SHN_LOOS, SHN_HIOS and SHN_XINDEX.

Add ELFOSABI for OpenVMS, HP Non-Stop Kernel, and Amiga Research OS.

Retire EM_486.
It was never used anyway, EM_386 is the value used for 80386 and higher.