ccdconfig: Improve markup & sync usage()

 * Fix SYNOPSIS: problems in `...' use
 * Sync usage() to SYNOPSIS
 * Add reference to disklabel64(8)
 * Add markup
 * Break long command lines in examples
 * Start sentence on new line

strfile.8: Add missing `C' flag to SYNOPSIS.

sh.1: Fix markup.

A few ``...'' wasn't marked as arguments.

Revert 4dcaa51ba4d4238e035a802067366a28527cd570

This reverts the .forward commit.  I committed the code to early, there are some
bugs inside (queue handling broken and some security issues).  I back this out
until we have more time to fix all the issues or rewrite some parts from scratch.

This brings dma back in a fully working state, only the .forward stuff is gone.

Tested-by: Daniel Roethlisberger <daniel@roe.ch> and me
Ok-to-back-out: corecode@

Merge branch 'master' of git://chlamydia.fs.ei.tum.de/dragonfly

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

nrelease Makefile adjustments: Packages, newaliases, check target, etc

* Add a newaliases step which fixes the aliases.db warning when the CD boots.

* Adjust the DVD package set a bit.  There are still some license issues
  which need to be resolved.

* Fix the check target to detect certain required packages for building
  the ISO.

* Adjust pkgsrc_bootstrap and pkgsrc_cdrecord helper targets

* Remove some stale targets which are no longer used.

Fix typo.

Improve the customizeiso step to allow restarts

* Use a touch-file to determine if the bootstrap has been built, clean out
  the entire pkg installation if it has not before continuing.  Leave
  things intact if the bootstrap has already been installed.

* Use defensive umounts and rm's as needed to allow the null mounts and
  package building environment to be recreated without destroying packages
  already installed.

* Allow /usr/pkgsrc to be read-only.  If it is read-only then a null-mount
  will be used for /usr/pkgsrc/distfiles pointing to /usr/release/distfiles.

* Add a bmake check step when building each package and only build packages
  which have not already been installed.

Polish cdev example

- dev_t is cdev_t now
- include stdlib.h needed by exit(3)
- respect the ``80 columns per line'' limit
- comply with KNF

No functional change intended

pci intr config: 'j' is the pin index we want to skip.

pci intr config: Fix an off by one bug

FreeBSD pci_pir.c rev1.105
  We represent PCI intpin's two different ways.  One is the way that the
  intpin register is expressed in hardware where 0 means none, 1 means INTA,
  2 INTB, etc.  The other way is commonly used in loops where 0 means INTA,
  1 means INTB, etc.  The matchpin argument to pci_cfgintr_search() is
  supposed to be the first form, but we passsed in a loop index of the
  second.  This fix adds one to the loop index to convert to the first form.

  Reported by: Pavlin Radoslavov <pavlin@icir.org>

Merge branch 'master' of git://chlamydia.fs.ei.tum.de/dragonfly

kill db_print_backtrace()

Use print_backtrace() which is always available. Remove
a bunch of #ifdef DDB and #include <ddb/ddb.h> lines.

installer: Use unsigned long for holding hw.physmem's value.

The previous signed long led to the wrong calculation of default swap size
on machines with >2GB main memory.

Reported-by: corecode
Dragonfly-bug: <http://bugs.dragonflybsd.org/issue1257>

nrelease: Whitespace.

nrelease: Re-add cvsup package URL which I accidentally removed.

tcsh: export PATH if using the default setting

define _PATH_DEFPATH to be reasonable, including sbins and /usr/pkg

sh already had this path set as default, but only sh.  Now everybody
using _PATH_DEFPATH will get the right thing.

sh: export the default PATH instead of keeping it private

sh specifies a default setting for PATH if none is set in the
environment, but up to now it didn't export this setting.  This leads to
strange effects, like sh being able to execute binaries in /usr/sbin,
but which(1) not being able to find them.  Export PATH to create more
symmetry and harmony.

sh: use _PATH_DEFPATH instead of hand-rolling the default path

MFC FreeBSD/1.49 - fix misuse of system() and failure if /usr is not mounted.

Suggested-by: Jeremy Chadwick <jdc@parodius.com>

Release Engineering: Add ds macros for 2.2 and 2.3.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

Release Engineering: Update master to 2.3.0-DEVELOPMENT

nrelease: prevent leaking of env vars into pkgsrc build

At least TARGET_ARCH, which is used by the release build, is causing
havoc for packages built by gmake, as gmake appends ${TARGET_ARCH} to
the ${COMPILE.c} compiler command line.
To be on the safe side, clear the environment completely when calling
into the pkgsrc build.

nrelease: Limit the volid to 32 chars, when building from a dirty state.

mount(8): Start sentence on new line.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

Suppress warnings if /etc/fstab is missing when generating output for
mount -p.  Generate reasonable defaults to fill in missing pieces.

Submitted-by: Stathis Kamperis <ekamperi@gmail.com> added the comment:

GENERIC: replace tab with space to line up even when commenting out

Add a vcount(9) manual page.

Submitted-by: Stathis Kamperis <ekamperi@gmail.com>
Dragonfly-bug: <http://bugs.dragonflybsd.org/issue1266>

Silence 3 warnings in libc.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

Comment out the session line for PAM's xdm config.  This works around
a widely known bug in xdm where a PAM callback can cause xdm to access
a bogus widget pointer after the widget has been destroyed.

With-help-from: Sephe

Make XPT_SCSI_IO path quiet again.

Now when problems with SATA ATAPI devices are resolved, it's not
helpful any more.

HAMMER VFS - Fix I/O invalidation collision assertion

Fix more issues with the hammer_reserve subsystem.

* Fix a broken base_offset calculation which had reversed the zone
  and offset fields in a HAMMER_ZONE_ENCODE() call.  The broken
  base_offset caused hammer_del_buffers() to scan the wrong offset
  range, leaving conflicting buffer cache buffers intact.

  The resulting conflict caused a KKASSERT(LIST_FIRST(&bp->b_dep) == NULL)
  to fail later on.

* Hold a reference through a potentially blocking operation in
  hammer_blockmap_alloc().

* Record the proper zone in a hammer_reserve() structure created via
  hammer_blockmap_free().  Without this the I/O invalidation code
  cannot locate conflicting hammer_buffer structures.

* hammer_reserve_setdelay_offset() was not actually placing the
  hammer_reserve() structure in the delay queue, allowing it to
  be disposed of too early.

make(1) tests: Remove remaining CVS IDs from the tests to make them run again.

Remove some unexpanded $DragonFly$ IDs in our tree.

make(1) tests: Messing with the CVS ID is no longer needed.

rpc_svc_calls(3): Remove __svc_getcallercreds() documentation.

FreeBSD removed the macro but forgot to adjust the manpage.

make.conf: Bring back WARNS_WERROR to build with -Werror if WARNS is set.

In-discussion-with: pavalos

Typo fixing round.

installer: Fix reading disk descriptions when booting verbose.

This fixes issue1256.

Reported-by: corecode

installer: Remove .gitignore files.

manpages: Split DIAGNOSTICS into EXIT STATUS and DIAGNOSTICS.

DIAGNOSTICS shall have information about diagnostic messages while
exit code information (.Ex macro) goes to EXIT STATUS.

Inspired-by: FreeBSD

priv(9): We don't have prison_priv_check() yet so comment out some things.

syncache_socket(): fix abort path by calling pru_abort directly

On syncache_socket() abort path, the inp's {fport,lport,faddr,laddr}
is either incomplete or half destroyed, which causes tcp_soport()
mapping the socket to a wrong CPU.  However, in syncache code, inp
is only accessed or created by its owner CPU, i.e. we are already on
the inp's owner CPU during the socket aborting.

Add soabort_oncpu(), which calls pru_abort directly.  Use it on
syncache_socket() abort path.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

Fix a string parsing bug when trying to run hammer pfs-master on a
subdirectory of the root directory, e.g. "hammer pfs-master /fubar".

Reported-by: "Simon 'corecode' Schubert" <corecode@fs.ei.tum.de>

Put the repo version in the ISO's volid.

nrelease: Use a separate workdir to keep PKGSRC_PATH clean.

Fix capital letter in the middle of a sentence.

Submitted-by: Stathis Kamperis <ekamperi@gmail.com>

jail(8): Fix path in the example.

usbhid(3): Re-commit some fixes that were undone in the FreeBSD sync.

cvs: obey read only fs setting also for the val-tags file

nata: process interrupt even if busmaster active bit is set

The nata driver previously assumed that an interrupt which has the
interrupt and active bits set in the busmaster status register is not a
valid/completed interrupt.  In these situations if would return without
acknowledging the irq, leading to an interrupt livelock situation.

This condition of INTERRUPT|ACTIVE occured on two different machines
both equipped with different versions of an ICH SATA controller, when
accessing an attached SATA ATAPI (DVD) drive by TSScorp (Samsung
OEM/bulk).  Specifically, natapicam seems to trigger this condition on
attach.  It seems that the drive is unhappy with the INQUIRY command
sent by natapicam.  Related artifacts appear when trying to access a
video DVD (possibly due to missing region/css key).

Under the hood it seems that the drive reports an error condition
(visible in the ALT/STATUS register), but does not clear the ACTIVE bit
of the busmaster status.  As a result the nata driver could be waiting
for the completion of the transfer, while the SATA busmaster would keep
the interrupt line asserted.

We work around this issue by following the precedent of other operating
systems and ignoring the ACTIVE bit if the INTERRUPT bit is set.
Specifically, we wait a little bit to accomodate for possibly faulty
hardware which might assert the irq before the transfer is completely
finished.  Nevertheless, we do not reject interrupt proecessing if the
INTERRUPT bit is set in the busmaster status register.

nrelease: Switch to building pkgsrc packages from source.

The pkgsrc tree that shall be used must be specified via PKGSRC_PATH.

So far the LiveCD build has been successfully tested. The LiveDVD might
still need some love, but I'm committing this now so work on the release
can begin.

Still on the TODO is using binary packages optionally.

Requested-by: dillon

Fix format order.

Reported-by: corecode

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

HAMMER VFS - Add missing bqrelse() in last patch.

This fixes a deadlock introduced by the last patch due to a missing
bqrelse() call.

Revert "Update the atime when mmap'ing a file"

This reverts commit 8e7ceff7f24f4bd5eae767c8c091e696d490dd58.

Better code committed in a6e41612e54fa7b0a616c8f8d14446bab206d030

hda: disable verbose output - too chatty even for bootverbose

nata: revert 6e40a325 = don't use tsleep in ata_udelay

ata_udelay might be called from softclock context due to a request
timeout.  However we must not tsleep in softclock.  This restores the
pre-6e40a325 behavior.

HAMMER VFS - Reorganize the use of hammer_del_buffers(), fix rare deadlocks

The previous attempt at fixing a deadlock due to a hammer_buffer being
held cached across long-blocking procedures failed to catch all cases.
Implement a more complete and less invasive fix.  These buffers are
typically held in the hammer_cursor structure.

Instead of trying to release such cached data buffers proactively,
we instead allow hammer_del_buffers() to return a temporary failure when
called from the reservation code.  If hammer_del_buffers() is unable to
completely eradicate underlying buffers due to them being referenced via
the above cache entities the related hammer_reserve structure is simply
re-added to the delayed-release queue.

The related big-block are thus not reused until all such cached entites
have been dereferenced.  The relaxed requirements on the cached entities
removes the possibility of a deadlock in the invalidation code and also
simplifies hammer_io_inval()'s handling of the hammer_buffer<->buffer_cache
coupling case.

HAMMER VFS - clean out cached data_buffer on unlock cursor to avoid deadlock

Clean out any cached cursor->data_buffer when unlocking a cursor.  The
underlying buffer cache buffer could become stale and if we do not release
our hammer_buffer reference on it other threads may deadlock trying to
getblk() the buffer cache buffer in order to invalidate it.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

Fix another process stuck-during-exit bug - stuck due to signal.

Fix a bug where an exiting process becomes a zombie, entering the SZOMB
state, but then receives a stop signal before it can be reaped.  If this
occurs the process was incorrectly placed in SSTOP and then later made
SACTIVE again, preventing it from being reaped.

Symptoms were: process shows up in ps in a DEL state but does not show
up in kgdb's 'info thread' list.  Process is the zombie list and is still
a child of init, but it's state is SACTIVE instead of SZOMB and p_xstat
(last signal taken) is SIGSTOP or SIGTSTP.

HAMMER VFS - Fix deadlock in rmdir

hammer_vop_rmdir() maintains a cursor at the directory entry being deleted,
and then calls hammer_ip_check_directory_empty() to check if the directory
is empty.  The check code creates a second, nested cursor.

Any locks on the first cursor must be released in order to allow the
function to block while scanning the second cursor to avoid possible
deadlocks.

Automatically install required missing pam configurations in upgrade.

Additionally, warn users that the config files may be out-of-date.  99%
of the time, it's probably best for the user to just do the make install
in etc/pam.d to install the default configuration files.

Reviewed-by: dillon

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

HAMMER VFS - Remove the unused also_ip argument from the cursor API

Merge branch 'vendor/GDTOA'

Import gdtoa-20081205.

Note: This will not be connected to the build until after the 2.2
release.

loader(8): hw.usb.hack_defer_exploration's default value is 1.

Remove Asia/Katmandu upon 'make upgrade'.

Use .Fx.

Comment out function which we don't have.

lpr: don't rely on dirs having st_size > 0

getq determines the initial size of its queue array based on the st_size
of the queue directory.  If the queue directory is on a HAMMER file
system, this size will be reported as 0.  However the following array
growing logic just doubles the array size, thus always staying at 0.

Use a sensible minimum array size of 20 items (~ 512/24).

Reported-and-fix-by: Patrick Georgi <patrick@georgi-clan.de>

udf: Remove NULL dereference.

Even if the conditional wasn't wrong, it would be pointless, because
udfmp->hashtbl is already initialized by phashinit() in udf_mountfs().

Found-by: LLVM/Clang Static Analyzer

Bring in some fixes from tzdata2009a from elsie.

* strftime.c - c format warning fix

* zdump.c    - fix infinite loop caused by overflow/optimization interaction

Sync zoneinfo database with tzdata2009a from elsie.

asia:           8.24 -> 8.25
backward:       8.6  -> 8.7
europe:         8.18 -> 8.20
northamerica:   8.24 -> 8.26
zone.tab:       8.21 -> 8.26

From Arthur David Olson's comments:

* asia         - change Katmandu to Kathmandu

* backward     - provide Katmandu link

* europe       - correct Swiss rules

* northamerica - clearer definition of Cuban transitions (no binary change)
               - Resolute changes abbreviation (but not time) twice a year

* zone.tab     - Change Katmandu to Kathmandu
               - Change Resolute from Eastern Time to Eastern Standard Time

Issue 1013 - Update atime on exec, fix bug in last commit.

The call from the mmap code assumed that 'handle' was a vnode.  It is not
necessarily a vnode.  Use 'vp' instead.

Reported-by: Sepherosa Ziehau <sepherosa@gmail.com>

Issue 1013 - update atime on exec and mmap, add helper vop_markatime

Add a new helper VOP which passively updates a vnode's atime.  Implement
the new VOP in HAMMER and UFS and create a default op which does nothing.
Call the new function from mmap() and exec().

Submitted-by: Dion Blazakis
Reported-by: Simon Schubert

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

HAMMER utility - Use a full path to /sbin/mount instead of relying on PATH

Remove GEMDOS support.

Remove checks for BOOTSIG[23] from FAT32 bootblocks.

There seems to be very little documentary evidence outside this
implementation to suggest a these checks are neccessary, and more
than one camera-formatted flash disk fails the check, but mounts
successfully on most other systems.

Obtained-from: FreeBSD

Don't check pm_Heads nor pm_SecPerTrack.

These might be 0 and aren't used anyway. Makes some "god knows where
formatted" usb sticks work here.

Obtained-from: FreeBSD

Make "route add 0.0.0.0/X <gw>" where X > 0 work again.

HAMMER utility - Add ^C support, improve verbosity.

The hammer utility will now write-out the cycle file when pruning or
reblocking is interrupted with ^C.

The hammer cleanup directive will now wait for children to exit before
exiting itself.

The hammer reblocking and pruning directives now generate more verbose
printf output.

NATA disk sort / elevator algorithm adjustments.

Move the sortq_lost counter from the request structure to the channel
structure to fix some edge conditions.  Limit the sort to a maximum of
16 elements before moving the freeze pointer.

This should improve the protection against large continuous linear reads
and writes which can delay unrelated I/O's for very long periods of time.

Reported-by: Hasso Tepper <sinknull@crater.dragonflybsd.org>,
     "Simon 'corecode' Schubert" <corecode@fs.ei.tum.de>

HAMMER: adjustments to flush on umount

Instead of waiting for up to 25 hammer sync sequences before giving up,
instead wait up to 25 seconds before giving up.

Reported-by: Thomas Nikolajsen <thomas.nikolajsen@mail.dk>

Fix a bug in vinvalbuf().  vinvalbuf() is usually called when attempting
to reclaim a vnode but can sometimes be called with V_SAVE when attempting
to make a vnode reclaimable.  In the latter case write races with other
threads can create new dirty buffers after the FSYNC returns.

Only assert that dirty buffers are not present if the vnode is undergoing
reclamation.

Reported-by: "Justin C. Sherrill" <justin@shiningsilence.com>

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

Reorder an unlock to avoid a recursive vnode lock in the sys_mount() code.
This fixes a panic for double-mount_null cases.

Reported-by: Nicolas Thery <nthery@gmail.com>
Submitted-by: Johannes Hofmann <Johannes.Hofmann@gmx.de>

Remove extra '+'.

bce(4): fix module glue

Adjust for change to packet mode as default.

Adjust the installer for the switch to packet mode as default.