sort: Replace GNU sort with NetBSD sort

sort: modifications needed for DragonFly

Minor modications are needed to get NetBSD's sort to build on DragonFly
without error.  The emalloc and erealloc functions are actually now
supported on DragonFly within libutil, but they can't be used because
sort is one of the bootstrap tools.  During the bootstrap, libutil is
not available, so the original malloc and realloc function have been
used along with err() to simulate these error-checking functions without
requiring libutil.

sort: Import NetBSD sort to usr.bin/sort

Bring in NetBSD's unmodified version of the sort program.

i386/mp_machdep.c: Remove unused code

x86_64/mp_machdep.c: Remove unused code

i386/mpapic.c: Remove unused code

x86_64/mpapic.c: Remove unused code

x86_64: isa/clock.c is clean enough to enable -Werror

i386: Remove more old IOAPIC code

x86_64: Remove more old IOAPIC code

pci/compat: Remove old IOAPIC code

i386: Remove old IOAPIC code

x86_64: Remove old IOAPIC code

AF_UNIX: Hold a reference of the unp_conn before executing blocking code

Since unp_token will be automaticly released upon execution of blocking
code, close of unp_conn could race any code paths that references unp_conn
after executing blocking code.  To fix these races, we simply increment
the reference count of the unp_conn before executig any possibly blocking
code and release the reference count of unp_conn, which may release unp_conn
itself.  This _currently_ does not suffer 0-ref race, since unp_token is
always being held.

AF_UNIX: Allocate pcb using M_WAITOK|M_NULLOK instead of M_NOWAIT

So the allocation will not fail mysteriously while the system will not
panic if the system is really out of memory.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

rcorder: unbreak world

The recent update to libutil clashed with the roll-your-own functions of
rcorder, breaking world.  This removes those rolled functions and uses
standard system headers.

Grep: Replace grep-2.4d with grep-2.7

This is the first significant update of grep in DragonFly's existance.
Other BSDs have removed or will remove GNU Grep in favor of BSD Grep, but
GNU Grep is still the best performer.

Grep: Add DragonFly README files

Grep: Second modification to man page

The reference to zgrep was removed because gnu grep no longer builds the
z-variants of grep, egrep, and fgrep.  The "note" was removed because it's
just ridiculous and unprofessional.

Grep: Reintroducing local modification: --only-files option

The previous version of grep was enhanced with a DragonFly-only custom
option --only-files.  This modification adds this customization to
grep 2.7 as well.

Grep: Reintroducing local modification for HAMMER

This reintroduces the fix by Matthias Schmidt for the previous version of
grep.  The unmodified Grep 2.7 still displays the same directory errors as
Grep 2.4d.

Grep: Add pregenerated files

The grep man page has been pregenerated rather than creating it during the
make process.

Merge branch 'vendor/GREP'

Import grep-2.7

malloc.3: Add emalloc(3) reference.

efun.3: Sort sections according to mdoc(7).

libutil: Add MLINKS for the new e* functions.

libutil: Rearrange a bit in the Makefile.

libutil -- Import error functions from NetBSD.

test from machine crawl

kernel/x86_64: SC520 was 32 bit, so not needed here.

kernel - Try to reduce 'busy buffers problems' during halt/reboot

* Ignore busy buffers related to TMPFS in pass 1, and busy buffers related
  to TMPFS, NFS, SMBFS, and MFS in the final check.

Sync zoneinfo database with tzdata2011g from elsie.nci.nih.gov

africa:         8.30 -> 8.31
europe:         8.28 -> 8.32
southamerica:   8.47 -> 8.49

* africa: Egypt's interim cabinet decided to cancel daylight
    saving time.

* europe: Eliminate some doubled words.

* southamerica: As a trial, the Falkland Islands will remain on
    summer time throughout 2011. Also eliminate some doubled
    words.

kernel: Remove some redundant .PATH targets.

kernel: Remove some i386 code from x86_64.

aesni(4): Sync with FreeBSD.

* Add support for CRYPTO_AES_XTS.

* Fix some bugs in aeskeys_*.S and aesni_wrap.c

* Add support for CRD_F_KEY_EXPLICIT flag.

* Remove DEBUG sections.

* Simplify code a bit.

installer: For bootblocks, only offer the disk that was installed to.

In the "Disk Utilities" menu, we still offer all disks.

Requested-by: dillon

aesni(4): Avoid panicking when kmalloc() returns an unaligned pointer.

Instead, align it ourselves and keep the original address for kfree().
This is a bit hacky but not too hacky (and it is done the same way in
padlock(4)).

In the middle run, we probably need some kmalloc() flavor that can do
alignment.

In-discussion-with: alexh

pf(4): Fix compilation without INET6.

kernel - enable carrier/modem-status for usb serial devices (/dev/ucomX)

* Fix an incorrect return code from umodem which was preventing
  ucom from processing TIOCMGET and other related modem control
  ioctls.

* For the moment comment out a panic condition dealing with an
  abort sent from an interrupt context.

kernel -- Slight changes to refcount_wait/_wakeup.

* Pass waitstring into refcount_wait.

* Record long waits in kernel log.

kernel - Add refcount_release_wakeup() and refcount_wait()

* refcount_release_wakeup() releases a reference count and wakes up
  any waiters on the 1->0 transition.

* refcount_wait() waits for the last reference to go away.  When using
  this function all release operations on the field must use
  refcount_release_wakeup().

binutils220: Fix a copy/paste error.

ftpd - Remove the use of GLOB_LIMIT

* The problem with this flag is that it currently arbitrarily limits
  stat and other operations and completely breaks anonymous ftp on
  directories with large numbers of files (like packages/All).

  Remove its use for now.

kernel - Fix a rare nfsnode destruction race

* Clear np->n_vnode atomically (w/ the token held) when removing a
  node from the hash table.  The field was previously not being
  cleared at all which could race the nfsnhash lookup code despite
  the vnode interlock and check the lookup code was performing.

* Remove unnecessary tokens around the remaining nfsnode freeing code
  in the reclaim path.

kernel - Add mtrr support for x86-64

Taken-From: FreeBSD

Set the DragonFly version to 2.11 for 2.11.

kernel - Fix panic when unloading a module on x86-64

* Fix a vm_object ref count panic during a module unload,
  including unloads which occur after failed loads.

release - pkgsrc-2011Q1 is the standard pkgsrc branch now

* Adjust default pkgsrc branch to 2011Q1

release - remove xchat from gui build

* xchat has build problems, remove it

release - Branch 2.10 (set up new master for 2.11)

* Edit sys/sys/param.h, sys/conf/newvers.sh

kernel - Add kqueue support to ulpt for CUPS printing

* Adjust the ulpt driver to add kqueue support (reporting always write-ready).
  Otherwise CUPS will stall indefinitely on a usb printer device.

* NOTE: For CUPS operation /dev/ulpt* must be chgrp'd lp and modes 664,
by adding this to your /etc/devfs.conf:

perm ulpt* root:lp 664

(group 'lp' is added by the CUPS package).

newfs_hammer: update checks on undosize and fssize minimum

Unless -f options given undosize must be at least 500MB
and fssize at least 10GB (50GB recommended).

Also fix a few extra spaces.

hammer.8: improve general description and markup

hammer.5: add info on dedup and improve general description and markup

nrelease - index.html: fix stale links

nrelease - update README w/ HAMMER instructions etc

 - Add instructions on manual HAMMER install
 - Default USB disk name is 'da8'
 - SILI disks uses 'da' name, default 'da0'
 - EHCI (USB 2.0) is enabled by default

hammer - Fix version output

Do not try to display WIP version if there isn't one.

bitstring.h -- Correct bit_fls and bit_nsearch

bit_nsearch was searching for one-too-many bits and was walking the whole set.

Submitted-by: Luis Useche <useche@gmail.com>

acpi: Reduce log verbosity

test from machine bugg

Add a final newline to the last file that didn't have one.

editline(3): Use getpwnam_r() and getpwuid_r() and raise WARNS to 6.

kbdcontrol(1): Raise WARNS to 6 and fix warnings.

vknetd(8): Raise WARNS to 6 and fix warnings.

installer/LiveCD: Do no longer set kern.emergency_intr_enable to 1.

In-discussion-with: sephe

acpi/pcib: If bus does not present, give other bus drivers chance

- Call acpi_DeviceIsPresent() during probing, so that if bus does not
  present other bus drivers could have chance to take over the bus.
- In acpi_pcib_attach(), assert that bus is present, since the presence
  of the bus is checked during probing.

Reported-by: swildner@

ioapic/abi; Reduce log verbosity

acpi: FACS is already loaded, don't load it manually again

acpi: Enable ACPI reset by default

- Enable ACPI reset if FADT has this feature bit set
- During ACPI reset, use AcpiReset() instead of rolling our own

Obtained-from: FreeBSD (r213755 jkim@freebsd.org)

acpi/pstate: Add tunable to allow BIOS whacking start/max FID/VID

This tunable is set to 1 (stringent check) by default.

DragonFly-issue: http://bugs.dragonflybsd.org/issue2025

powerd: Wait hw.acpi.cpu.px_dom* sysctl to be created by kernel

Since hw.acpi.cpu.px_dom* creation is queued into ACPI taskqueue
and ACPI taskqueue is shared across various ACPI modules, any delay
in other modules may cause hw.acpi.cpu.px_dom* to be created at
quite a later time (e.g. cmbat module's task could take quite a lot
of time).

acpi: Enable GPE for button and lid, if they have _PRW object

For devices which has _PRW object, AcpiSetupGpeForWake() will be called,
however, AcpiSetupGpeForWake() will disable GPE, which causes devices
like button and lid to stop function if they have _PRW object.  So for
button and lid, we explicitly enable GPE if they have _PRW object.

Reported-by: y0netan1@

acpi: Skip \_SB_ and \_TZ_ only for devices.

Obtained-from: FreeBSD (r214765 jkim@freebsd.org)

  Adjust a comment to clarify why \_SB_ and \_TZ_ are defined as device
  type in ACPICA.  Reshuffle the code a bit to make sure this kludge only
  applies to these two specical cases and to make it cleaner.

acpi: Restore old AcpiWalkNamespace semantic

Noticed-by: y0netan1@

Sh: Add test for getting length of string in double-quotes.

sh: Add test for obscure and ambiguous ${#?}.

Obtained-from: FreeBSD

sh: Add test for expanding of quoted positional parameters in case.

sh: Add some tests for ${#parameter}.

Obtained-from: FreeBSD

sh: Add some tests for omitting whitespace.

Obtained-from: FreeBSD

sh: Split off some special behavior into separate regress tests.

Obtained-from: FreeBSD

sh(1): Describe subshell environment, command substitution better

POSIX does not require the shell to fork for a subshell environment, and
we use that possibility in various ways (command substitutions with a
single command and most subshells that are the final command of a shell
process).  Therefore do not tie subshells to forking in the man page.

Also, fix some sentences with excessive semicolons.

Obtained-from:  FreeBSD

sh: Fix some parameter expansion variants ${#...}.

These already worked: $# ${#} ${##} ${#-} ${#?}
These now work as well: ${#+word} ${#-word} ${##word} ${#%word}

There is an ambiguity in the standard with ${#?}: it could be the length of
$? or it could be $# giving an error in the (impossible) case that it is not
set. We continue to use the former interpretation as it seems more useful.

Obtained-from:  FreeBSD

sh:  Reduce diffs to FreeBSD in the arith code.

Obtained-from:   FreeBSD

ctags(1): Raise WARNS to 6 and fix warnings.

talk(1): Raise WARNS to 6 and fix warnings.

usbhidctl(1): Raise WARNS to 6 and fix warnings.

acpi/ec: Bring in more GPE fixes from FreeBSD head (acpi_ec.c r216965)

acpi: Sync ec with FreeBSD 8

mount/umount: Small whitespace fix in the usage().

mount, umount: Implement the '-F' option to specify an alternate fstab file.

This also fixes jail_${jail}_fstab option in /etc/rc.d/jail .

Taken-from: FreeBSD (r113220 by mdodd@freebsd.org)

kernel - Fix apparent timing race in early usb keyboard polling code

* Fix an apparent timing race where a USB command does not complete
  prior to the poll issued with the command.  Perform another poll
  in a loop to deal with it.

* Problem appears to occur w/ohci's early poll prior to ehci attachment.

Reported-by: Antonio Huete Jimenez <ahuete.devel@gmail.com>

asf(8): Fix module path.

kernel - Fix hold race and catch bad vm_object terminations

* vm_object_hold_wait() currently also needs the vm_token to safely
  test rb_memq.

* Add code to complain if a VM object's rb_memq is not empty when
  the object is being terminated.

kernel - MFC an IPSEC security fix related to nested compressed frames

* MFC an IPSEC security fix realted to nested compresesd frames

* Note that this code path is disabled and non-working in DFly anyway,
  at least atm.

Taken-from: FreeBSD

vkernel64 - Start work on kld support

* This is a non-working commit but it progresses the issue a bit.

kernel - remove extra tsleep_interlock() calo

* Remove an extra tsleep_interlock() call that slipped into the
  tsleep() code.

kernel - Change ccb state with lock held

* When putting a CCB back into the ap_ccb_free list do not
  change the state until after ap_ccb_lock has been acquired.

nrelease - Add targets to Makefile.usr

* Add src-create-repo and pkgsrc-create-repo targets, which create
  only the repo and do not attempt to checkout the source.

* Add pkgsrc-2011Q1 to the list of branches.