Properly integrate the now mandatory serializer into the WI network driver.

Reported-by: Steve Mynott <steve.mynott@gmail.com>
Patch-supplied-by: Sepherosa Ziehau <sepherosa@gmail.com>

Do not try to write sparse files when using zlib.

Noticed-by: Joe Talbott <josepht@cstone.net>
Obtained-from: FreeBSD

Update for axe(4), nv(4), re(4) and rue(4). Add missing xref to bfe(4).

pfnStop() seems to take a flags argument which as far as I can tell from
the header file needs specific flags rather then 0.

Move the calls to nv_setmulti() and nv_ifmedia_upd() to just before
the pfnStart() call.   Note that FreeBSD moved the calls even further
back, to before the pfnInit(), but that is probably not correct.

GC old cvs source

Fix reference.

Add pf example configs

Obtained-from: OpenBSD
Noticed-we-are-missing-them: swildner

Move tsc_offsets[] to a new home to unbreak kernel builds, again.

Add additional performance tests to kern/kern_ktr.c

Reported-by: YONETANI Tomokazu <qhwt+dfly@les.ath.cx> (tsc_offsets issue)

Remove the 'all' target to fix buildworld, and fix a
type-o (.PHONE -> .PHONY).

Fix typo.

* Ansify function definitions.

* Minor style cleanup.

Submitted-by: Alexey Slynko <slynko@tronet.ru>

* Ansify function definitions.

* Remove parameter names from prototypes.

* Minor style cleanup.

Submitted-by: Alexey Slynko <slynko@tronet.ru>

* Ansify function definitions.

* Minor style cleanup.

Submitted-by: Alexey Slynko <slynko@tronet.ru>

Add a feature and a sysctl (debug.ktr.testipicnt) to test inter-cpu
IPI messaging performance, and document it.

Fix another interesting bug.  td_threadq is shared by the LWKT scheduler,
tsleep, and port-blocking code.  Because of this separate flags exist to
indicate which queue the thread currently resides on and careful sanity
checks were added to prevent corruption.

The thread scheduler will not enqueue a thread that is sitting on one of
these other queues.  This commit fixes a bug where the preemption code
would still preemptively switch into the thread even when the enqueue fails,
causing an assertion to be hit in tsleep().

This just goes to show that asserting on supposedly impossible conditions is
a good idea :-).

Reported-by: Stefan Krueger <skrueger@meinberlikomm.de>

Don't display the file and line by default.

Add KTR logging for IF_EM to measure interrupt overhead and packet
receive / transmit / transmit-cleanup operations.

Add KTR logging for tsleep entry/exit and wakeup entry/exit.

Make the KTR test logging work for UP as well as SMP.

Fix UP build issues.  Move tsc_offsets[] from mp_machdep.c to kern_ktr.c,
and document the routines.

Reported-by: Sascha Wildner <saw@online.de>

Do not ldconfig -m /usr/lib/gcc2 if there is no /usr/lib/gcc2 directory.

Submitted-by: Stefan Krueger <skrueger@meinberlikomm.de>

Beef up error reporting for a particular assertion to try to track down a
panic reported by Stefan Krueger.

Ansify function definitions.

Submitted-by: Alexey Slynko <slynko@tronet.ru>

Rework nrelease framework for pkgsrc.  The way the bootstrap kit was
build was incorrect, since the wrong path names end up in the
binaries.  Instead of building it redundantly every time, just expect
a binary bootstrap kit.  Change the installer targets to be a conditional
instead (WITH_INSTALLER), but keep the old targets for compatibility.

The CGI frontend is temporarily removed until the configuration is
updated.  cvsup doesn't currently build, a workaround pkg will be added
latter.

Add a description of how this framework is intended to be used.

Ansify function definitions.

Submitted-by: Alexey Slynko <slynko@tronet.ru>

Fix some manlint nits and add .Dx where appropriate.

Add some bits from FreeBSD to reflect reality.

Remove obsolete 1aout manual section.

Remove last traces of 'DragonFly' keywords in RCNG scripts.

Add some better mdoc markup.

Remove library definitions which are in doc-syms now.

Remove BOOTWAIT and NO_SHAREDOCS options. BOOTWAIT was from the old
boot code and NO_SHAREDOCS is obsolete since we don't build share/doc
anymore.

Add 'manlint' (from bsd.man.mk) to the top level targets.

Fix the directory scan code for SMBFS.  It was losing track of the directory
offset during the scan.

SB_NOINTR must be set for the socket to prevent nbssn_recv() from hard
looping on EWOULDBLOCK.

Clean up more spinlock conversion issues and fix related panics.

Reported-by: "Adrian M. Nida" <nida@musc.edu>

Fix a bug which was introduced in cvs-1.12.13.

With running compression and ssh/rsh it could happen that the zlib
layer would want to read $expected_bytes, which would block because
$expected_bytes of course is a inflated quantity and can't be compared
to the deflated size, except for
$expected_bytes > 0 -> $expected_deflated_bytes > 0

Restore old behaviour which only read one byte a time.

Add additional KTR lines to allow us to characterize the total overhead
when calling malloc() and free().

Add KTR_TESTLOG and debug.ktr.testlogcnt, which issues three ktrlog() calls
in a row and allows one to measure the overhead of the KTR logging facility.

Add the globbing flag GLOB_PERIOD.
This allows matching of filenames that starts with a dot.

Switch to cvs-1.12.13

Add our READMEs to the new cvs import

Merge from vendor branch CVS:
Import a stripped down cvs-1.12.13

Import a stripped down cvs-1.12.13

Enhance ktrdump to generate relative timestamps in fractional microseconds,
add an option to merge all cpus into one log (-s), and locate the starting
point in the FIFO when dumping output.

Synchronize the TSC between all cpus on startup and provide a sysctl,
debug.ktr.resynchronize, which will (very expensively) resynchronize the
TSCs 10 times a second to reduce drift errors to manageable numbers.

The TSC on all the cpus for the purposes of ktrdump's ought to be
synchronizated within ~200ns of each other, assuming all cpus are running
at the same frequency.

This needs more work.  What we really need to do is calculate the drift
for each cpu and apply it dynamically.

Revert last change and add toascii.c to the right variable.

toascii(3) got lost during ctype conversion.

minor style change

remove duplicated `use'

The new lockmgr() function requires spinlocks, not tokens.   Take this
opportunity to convert all use of tokens in SMB to spinlocks since they
are only used to wrap very low level operations.

Reported-by: "Adrian M. Nida" <nida@musc.edu>

Use sh to run scripts instead of relying on their +x bit

doreti and splz were improperly requiring that the MP lock be held in order
to process delayed FAST interrupts.  This could result in clock interrupts
getting delayed indefinitely when the MP lock was held by another cpu.
The delayed clock interrupts further resulted in clock-related issues such
as the system time running slow, and other problems.

Reported-by: Stefan Krueger <skrueger@meinberlikomm.de>

Document the nfs dirent conversion code.  No functional changes.

Add an option -b which dumps the clean/dirty buffer cache RB trees for
each vnode.

Sync up misc work on the currently inactive syscall mapping library.

Fix a bug in our RB_SCAN calls.  A critical section is required to
protect the RB tree against I/O completions.  Also do not abort a scan
if an I/O completion moves a buffer off the dirty list and onto the clean
list while we are trying to lock it.

There is a small chance that this bug could have resulted in dirty buffers
being left intact after being freed from the filesystem bitmap, which in
turn can cause filesystem corruption (dirbad and other panics).

Note that this was a DragonFly-only bug.

Ansify function definitions.

Submitted-by: Alexey Slynko <slynko@tronet.ru>

- Ansify function definitions.

- Move function type on a line of its own.

- Minor style cleanup.

Silence troff warning.

Add DragonFly 1.2, 1.3.6 and 1.3.7. Remove 1.2.* (those have bug fixes only).

- Ansify function definitions.

- Move function type on a line of its own.

- Remove __P().

- Minor style cleanup.

Use DOSMAGIC from <sys/diskmbr.h>.

- Ansify function definitions.

- Move function type on a line of its own.

- Remove __P().

- Minor style cleanup.

- Remove (void) casts for unused return values.

Ansify function definitions.

- Ansify function definitions.

- Remove (void) casts for unused return values.

- Add prototypes.

- Fix some warnings.

- Fix some minor style(9) issues.

In-collaboration-with: Alexey Slynko <slynko@tronet.ru>

Include <time.h> to silence some warnings.

- Ansify function definitions.

- Remove (void) casts for unused return values.

- Remove P().

- Fix some warnings.

In-collaboration-with: Alexey Slynko <slynko@tronet.ru>

Update more default cshrc/profiles with new paths.

Require pkgsrc to be installed, include pkgsrc bootstrap binaries and mk.conf
on the ISO, and provide make targets to install pkgsrc, mk.conf, and the
bootstrap binaries on the local machine.

Add /usr/pkg/[s]bin to /bin/sh's default path and login.conf's default path.

Add support for DLink 528(T) Gigabit cards.

Submitted-by: Gary Allan <dragonfly@gallan.plus.com>
Taken-from: FreeBSD

Fix a bogus proc0 test that is no longer accurate.  This should allow the
smb module to be loaded.

Reported-by: Adrian Nida <nida@musc.edu>

Reduce SCSI_DELAY in GENERIC from 15 seconds to 5 seconds.

Requested-by: many

Update to openssl-0.9.8a and regen man pages

Update our READMEs for OpenSSL

Merge from vendor branch OPENSSL:
Import OpenSSL 0.9.8a

Import OpenSSL 0.9.8a

Remove some files we don't need from CVS's sources

Merge from vendor branch CVS:
Remove some files we don't need from CVS's sources

Remove some files we don't need from CVS's sources

Set POSIX feature test macros to the correct value as mendated by SUS.

Fix a process exit/wait race.  The wait*() code was making a faulty test
to determine that the exiting process had completely exited and was no
longer running.  Testing the TDF_RUNNING flag is insufficient because an
exiting process may block at various points after becoming a Zombie, but
before it deschedules itself for the last time.

Add a new flag, TDF_EXITING, which is set just prior to a thread descheduling
itself for the last time.  The reaper then checks that TDF_EXITING is set
and TDF_RUNNING is clear.

Fix a second faulty test in both the exit and the thread cpu migration
code.  If a thread gets preempted, TDF_RUNNING will be temporarily cleared,
so testing TDF_RUNNING is not sufficient by itself.  We must also test
the TDF_PREEMPT_LOCK flag to be sure that it is also clear.

So the grand result is that to really be sure the zombie process has been
completely descheduled and is no longer running or will ever run again,
the TDF_EXITING, TDF_RUNNING, *and* TDF_PREEMPT_LOCK flags must be tested
and all must be clear except for TDF_EXITING.

It should be noted that TDF_RUNNING on the previously scheduled process
is always cleared AFTER we have context-switched into the next scheduled
thread or the idle thread, so seeing a cleared TDF_RUNNING along with the
appropriate state for the other flags does in fact guarentee that the thread
in question is no longer using its stack in any way.

Reported-by: Stefan Krueger <skrueger@meinberlikomm.de>

Fix a bug in the big tsleep/wakeup cleanup commit.  When stopping a
sleeping process in psignal, we must wakeup() the parent process that
might be waiting in a wait4().

Reported-by: YONETANI Tomokazu <qhwt+dfly@les.ath.cx>

cred may be NULL due to a prior error code.  crhold() handles NULL creds,
but crfree() does not.  Check for NULL.

Reported-by: Stefan Krueger <skrueger@meinberlikomm.de>

Change the initial path from /bin:/usr/bin to /bin:/usr/bin:/sbin:/usr/sbin
when no PATH environment variable is present.  This only really effects
boot -s, and not having [/usr]/sbin has always been an annoyance.

Requested-by: many

Do not hold the ifnet serializer when entering tsleep() in the PPP TUN
interface code.  This can deadlock the network protocol threads.

Reported-by: Stefan Krueger

For MPSAFE syscall operation, CURSIG->__cursig->issignal() may be called
without the MP lock held.  At the moment issignal() needs to be MP locked
so wrap the function in the lock.  Note that issignal() is only called if
there is a signal pending so this will not disrupt kern.syscall_mpsafe
operation.

The primary mbuf cluster management code needs to be made MPSAFE since
m_free() is now MPSAFE.  This involves using atomic_*() increment and
decrement for the mbuf cluster ref count and using a serializer if there
is a potential for a double-free (if the ref count is 2 or greater).  The
common code path will tend not to need the serializer unless the interface
is being tapped.

Reported-by: Peter Avalos <pavalos@theshell.com>

tsleep_interlock() must be called prior to testing the serializer lock
state, otherwise a serializer wakeup on another cpu may race our tsleep().

Reported-by: Emiel Kollof <coolvibe@hackerheaven.org>

Get rid of the p_stat SZOMB state.  p_stat can now only be SIDL, SSLEEP, or
SRUN.  Instead mark zombie processes with a new flag, P_ZOMBIE.  The eproc
code will convert P_ZOMBIE into SZOMB for /bin/ps.

This further isolates the tsleep code from the process status and fixes
a panic when a process in SZOMB tried to tsleep().

Reported-by: Stefan Krueger <skrueger@meinberlikomm.de>

Fix comment.

unbreak LINT building

- Fix wrong table size (which resulted in the descriptions being off by
  one in the menu).

- Change description of sysid #165 from 'FreeBSD' to 'DF/FBSD' since we
  share it with FreeBSD.

upgrade_etc: remove altqd and network scripts too, which have been around
for a while but removed in CVS HEAD.

Jumbo mbuf mangement's extbuf callbacks must be MPSAFE.  Use a serializer
to accomplish the task.  This is a workaround until we create a generic
mbuf management API for jumbo frames.

ipw (is the only driver that) needs a working interrupt to perform
initialization.  This means we have to release the serializer across
the tsleep.  The code must additionally be MP Safe.

Reported-by: Johannes Hofmann <Johannes.Hofmann@gmx.de>

Properly serialize IPW.

Reported-by: Johannes Hofmann <Johannes.Hofmann@gmx.de>
With-help-from: Hiten Pandya <hmp@backplane.com>

Sync zoneinfo database with tzdata2005o from elsie.

asia:           7.86 -> 7.88
northamerica:   7.80 -> 7.82
southamerica:   7.62 -> 7.63

From the announcement:

"These incorporate the Georgia, Cuba, Nicaragua, and Jordan changes
 circulated over the past two weeks by Paul Eggert on the time zone
 mailing list."

Fix mdoc errors exising at least since the beginning of time (1991 import).

Spotted-by: corecode
mdoc-clue: swildner