Merge branch 'master' into selwakeup

kernel - Remove selrecord()

* selrecord is no longer a necessary component of event propogation, all
  interested parties are now added to a klist ala kqueue.

kernel - Remove legacy vnode poll support

* Add an appropriate call to KNOTE() to wake up listeners when a vnode is
  revoked, replacing a selwakeup().

dev - dsp - Remove unnecessary selrecord call

kern - Make socket_wait() actually work

* Do better initialization of a new kq so we can use one occupying non-zero'd
  memory.

wlan - Don't use M_NOWAIT in kmalloc() calls.

altq - Get rid of unneeded fields in struct altq.

This was incorrectly brought over from FreeBSD.

ral - Don't use M_NOWAIT in kmalloc() calls.

wpi - Fix mbuf flags and kmalloc flags, plus refcount nodes.

Use MB_xxx flags to mbuf API calls rather than M_xxx.

Don't use M_NOWAIT in kmalloc() calls.

Bring in some ieee80211_node reference counting as discussed on
the FreeBSD-Current mailing list recently.

http://docs.freebsd.org/cgi/getmsg.cgi?fetch=178502+0+current/freebsd-current

Discussed-With: dillon

wlan - Fix mbuf handling when using encryption.

Re-add a __FreeBSD__ only section of code that copies an mbuf chain to
a writtable version before encapsulating the packet.

Uses m_dup() since we don't have m_unshare() (yet).

Discussed-With: dillon

Remove the old udevd binary (it's now in /sbin) via 'make upgrade.

Makefile_upgrade.inc: Move some stuff to the right place.

Merge branch 'master' into kq_devices

kernel - Tear out socket polling

* Remove existing (now legacy) code that implements socket polling, kq
  filters are now the "One True (and only) Way"

* Implement a new socket_wait() that can be used to wait for data to arrive
  on a single descriptor with an optional timeout.

rc.conf - add lvm and udevd related settings

rc.d - add lvm rc script

* Add an rc.d script for lvm taken from NetBSD.

* Drop the dependency of udevd on syslog since it's not critical anyways
* to avoid a circular dependency.

libdevattr & udevd - add man pages

libdm - restore libdm-netbsd.h

* libdm-netbsd.h was accidentally deleted a few commits ago

mkinitrd - improve man page a bit

* Mention the vfs.root.realroot loader tunable and how to use it,
  including the currently supported types of root.

initrd - minor fixes

* mount the new root as read-only so that fsck doesn't complain and
  drop us to single-user mode.

* drop a few unnecessary tools from the initrd

* Remove a debug printf from the mini_init.

* Mount the device as read-only in rcmount_crypt since fsck and so on
  expect it that way.

lvm - use libdevattr for device cache checks

* Improve the device checking of devices that go into that cache and
  that don't by using libdevattr and the tagged stuff.

udev - Tag some subsystems/drivers

* While here, fix a number of bugs in the udev kernel implementation.

dm - Bind into build system, fix small problem

* Bind into the kernel build system.

* Make cmd_fn static, so it doesn't interfere with udev's cmd_fn

initrd - Update for LVM root support

* Also add support for some generic mounting of local volumes
  (configured via the loader tunable vfs.root.realroot) and scriptable
  mounting of other kinds of volumes.

* Add some more tools to the default mkinitrd set

* Add support to mount crypt volumes

mkinitrd - add dm-related tools

vfs_conf - export vfs.root.realroot via sysctl

* export the tunable vfs.root.realroot via vfs.real_root sysctl.

lvm/dm - clean up debug, fix open bug

* Clean up debug code and change it to log_verbose, mostly. Also remove
  some of the older, now irrelevant, comments.

* For dm, add a sysctl and tunable to enable debugging (debug.dm_debug)

* in the dragonfly filter, open the device early enough, and definitely
  before closing it ;)

dm - General printout cleanup

dm_target_crypt - Make compatible with luks

* Make dm_target_crypt compatible with cryptsetup+luks, or at least with
  the main features.

cryptsetup - Port to DragonFly

cryptsetup - Delete unneeded files

cryptsetup - add our READMEs

Import cryptsetup-1.1.2

lvm2 stuff - bind into build system

* Bind all the lvm2 stuff into the build system and get rid of useless
  lvm2tools.mk.

libdm - fix two warnings

* Fix to warnings related to devname visibility.

libdm-dragonfly-iface foo3

dm - Add crypt target

* Add an initial crypt target. It's WIP, full of bugs, but is a general
  outline of how I want to approach the crypt target for dm.

* As per Aggelos' recommendation, I'm using pbkdf2 and hmac sha from
  other crypto implementations instead of rolling my own, for good
  cryptography's sake :P

include - Install dm includes

lvm2 - port to DragonFly

dm - Port to DragonFly

* port the device mapper kernel support to DragonFly

dm - Import verbatim from NetBSD

Import lvm2 from NetBSD

kernel - Tear out descriptor polling

* Remove existing (now legacy) code that implements descriptor polling, kq
  filters are now the "One True (and only) Way"

kernel - Tear out vfs polling

* Remove existing (now legacy) code that implements vfs polling, kq filters
  are now the "One True (and only) Way"

kernel - Tear out device polling

* Remove existing (now legacy) code that implements device polling, kq filters
  are now the "One True (and only) Way"

* Add dummy write filters (always true) for devices: targ, vinum, snp, tw
  and apm

net - Add dummy kq write support to tun and tap

* Makes tun and tap always report writeable if polled via a kq-enabled
  interface.

dev - Mask false uninitialized variable warning

man(1): Lots of cleanup.

Remove 'register', ansify, remove dead code for Xenix and whatnot etc.

No functional changes.

Raise WARNS to 6.

udevd - add pidfile & SIGTERM handler

* Add the creation of a pidfile and a SIGTERM handler that disposes of
  the pidfile.

* add pidfile to rc script

libdevattr - install include

udevd - bring into sbin, add rc script

* Bring udevd into sbin so it can be used very early on, for example in
  the initrd environment.

* Add an rc script for udevd.

* Remove debugging flags from libdevattr Makefile

tmpfs - fix failing writes with no swap

* When no swap is available, tmpfs was trying to use bawrite, causing
  some further problems down the line. We avoid this by now forcing the
  use of buwrite() for this case (no swap).

Suggested-by: Matt Dillon

kernel - fix crash in smb mount

The samba kernel-side daemon smbiod is created with
kthread_create_compat().

Kernel threads created with kthread_create_compat() have no td_ucred, as
other kernel threads, but have td_proc != NULL because this function
under the hood forks the process 0.

prison_replace_wildcard() was assuming that if td_proc != NULL it is
dealing with a user thread that has a valid td_ucred thus causing a NULL
ptr dereference when operating on kthread_create_compat()-threads.

Reported-and-fixed-by: Tero Jaasko
Dragonfly-bug: <http://bugs.dragonflybsd.org/issue1790>

kernel - kqfilter - Fix edge-case lockup in kern_kevent()

* An edge case where the marker can wind up at the head of
  a non-empty event list containing only spurious events.  This
  causes an endless loop to be entered because only the sleep
  case moves the marker.

* If no events were processed and we loop the marker is now
  moved, fixing the problem.

kernel - Fix kqfilter error return codes

* Some kqfilters returned an Exxx error, others return 1 on error,
  and the device kq code returned -1 on error.

* All kqfilters now return a proper Exxx error.

* When an EVFILT is not implemented, EOPNOTSUPP is now returned.
  EPERM is no longer returned.

kernel - implement serialno for kqueue poll handling part 1/2

* The kqueue implementation for the poll system call was improperly
  triggering on spurious events.

* Adjust the poll support code to implement a serial number scheme
  similar to how the select code works.  The poll array index is also
  encoded.

* poll() handles unsupported POLLPRI and POLLRDBAND requests differently
  from select().  poll() ignores these requests if they are not supported
  (select returns an error).

  Allow kqfilter functions to return EPERM or EOPNOTSUPP to indicate
  an unsupported filter.  Return values will be fixed in part 2.

Merge remote branch 'crater/master' into kq_devices

dev - Properly propogate wakeup events for ums

* The last commit had a minor problem.  It turns out that the
  selwakeup() code does not generate a kqueue event or wake it up
  if no select pid was set, and since select() now uses kqueue no
  select pid will ever be set.

* Calling KNOTE() directly solves the problem.

mkinitrd - make use of lt

lt - add new tree-like utility

* lt shows the directory structure below some specified directory much
  like the tree utility does.

libmd - add sha512, fix warnings in tests

* Add a SHA512 implementation taken from sys/crypto/sha2.

* Fix the test driver warnings up to the set WARNS level.

libc - correct pthread_once stub

* Make the pthread_once stub in libc work correctly.

* This fixes an issue with pthread_once not being called even once in
  libprop for programs not linked against lpthread.

Suggested-by: Simon 'corecode' Schubert
Obtained-from: NetBSD

dev - Properly propogate wakeup events for ums

* No longer conditionalize the call to selwakeup when new data is available,
  the kq subsystem will sort out whether a wakeup really needs to happen or
  not.

kernel - skip PG_MARKER vm pages.

* The contigmalloc code was improperly interpreting PG_MARKER
  VM pages, resulting in an infinite blocking condition.

Merge branch 'master' into kq_devices

devfs(4): Remove a bogus assertion (nchildren is unsigned, hence can't be <0).

In-discussion-with: alexh

bus - Add kq support to usb bus

dev - Add kq support to usbmisc devices

* ugen, uhid, ums and uscanner

i4b - Add kq support

kernel - Add kq support to ctty

dev - Add kq support to drm

bus - Add kq support to fwdev

kernel - Fix altq for x86_64 vkernel build

* Remove i386-conditionalization for TSC access
* Probably also fixes x864_64 normal kernel build too.

kernel - MPSAFE work - Basic tokenization for vkernel x86_64 pmap.c

* Tokenize the vkernel x86_64 pmap.c file

kernel - MPSAFE work - Basic tokenization for vkernel i386 pmap.c

* Tokenize the vkernel i386 pmap.c file
* Add minor documentation to x86_64 pmap.c

sys/conf/kmod.mk: Adjust the genassym stuff a wee bit.

This should fix 'make -j X buildkernel'.

Reported-by: sephe
Dragonfly-bug: <http://bugs.dragonflybsd.org/issue1792>
Modeled-after: FreeBSD

/usr/Makefile: Adjust to our new handling of the pkgsrc GIT repository.

dev - Add kq support to hotplug

dev - Add kq support to spic

dev - Add kq support to tw

dev - Add kq support to cmx

dev - Add kq support to bktr

dev - Add kq support to cxm

dev - Add kq support to aac

vinum - Add kq support

dev - Add kq support to snp

dev - Add kq support to mse

dev - Add kq support to asc

linux - Finish bringing epoll in sync with kevent changes

* Description extraction now happens outside of kern_event()

apm - Add kq support

dev - Add kq support to kbd

filters - Minor fixes

* Don't fall-through in psm kqfilter setup struct

* Assign correct address to kn_hook in tun setup function

top: Fix count of process states

The count was not in correspondence with our enumeration constants
for the process states. For example, an "active" process could be
counted as "running".

Only tested with i386/UP :)

acpi_{hp,thinkpad}.4: Fix sysctl names.

ral.4: We don't have %U, so use %O for URLs for now.

acpi_sony(4): Sync with FreeBSD.

acpi_sony.4: Fix sysctl names.

Make the loader load ehci.ko by default.

It seems to do more good than harm.

HOWEVER!

Unfortunately, There are systems that don't play nice with ehci. One
of my boxes, for example, won't reboot with ehci loaded.

Therefore, the behavior introduced with this commit can be disabled
by doing one of the following things:

1) 'unset ehci_load' from the loader prompt before booting.

2) Booting in 'safe mode'.

3) Putting 'hint.ehci.0.disabled=1' in /boot/loader.conf.

This is all modeled after the way the automatic loading of acpi.ko is
handled.

test commit

mkinitrd(8): Strip binaries when copying so they will fit in the image.

While here, comment out a call of the tree utility which we don't have
in base.

initrd: /usr/share/initrd/sbin wasn't being created. Add it via mtree(8).

This led to oinit being installed as a file named 'sbin'. Remove this
file via etc/Makefile (during 'make upgrade') so that with the next
upgrade the file is installed correctly.