iwi(4): Hook it into the build again and enable it everywhere else.

Update iwi(4) from FreeBSD.

sys/tools/fw_stub.awk: Change printf to kprintf as this is kernel code.

Submitted-by: Johannes Hofmann <johannes.hofmann@gmx.de>
Dragonfly-bug: <http://bugs.dragonflybsd.org/issue1794>

rpcbind.3: Fix two more errors in the SYNOPSIS which I overlooked before

udev.3: Add final newline and remove extra space.

devattr.3: Add final newline.

rpcbind.3: Fix function declaration in the SYNOPSIS.

prop_*.[39]: Fix include path.

wpi - Remove unneeded WPI_UNLOCKs

kern_linker - Rearrange locking a bit for module loading.

This was needed to get automatic firmware module loading to work
properly.

ifconfig.8: Re-add our documentation for the 'powersavemode' parameter.

<sys/_null.h>: Remove the #include guard.

POSIX states that various headers (such as <unistd.h>, <stddef.h>,
<string.h> etc.) all shall provide a definition of NULL. We do that
by including <sys/_null.h> in these headers.

The problem with the #include guard is that NULL will no longer be
defined if a program does something like this:

#include <stddef.h>
#undef NULL
#include <unistd.h>

<sys/_null.h>'s guard will still be defined and NULL is not getting
(re-)defined.

Therefore, remove the #include guard. It's just belt and suspenders
since there is an "#ifndef NULL" around everything in <sys/_null.h>
anyway.

In-discussion-with: beket

udevd - Big memory and thread cleanup

* Adjust read_xml() to allocate just the right size of memory, so we
  don't waste anything by allocating 12 MB per client, when the usual
  client xml is a few kB.

* Detach threads so that they can free resources whenever they return
  from their startup function.

* Release the memory associated with a particular iterator and with some
  of the fields in the event filters, which were previously leaking.

* Let the monitor thread check every few (2) seconds if the underlying
  connection is still alive. Previously the threads were staying around
  even after the connection was closed when no event (attach/detach)
  occured.

* Clean up the pdev array on a clean exit so it's easier to find memory
  leaks, since the amount of allocations done by proplib on behalf of
  the pdev stuff is huge.

* Incidentally, don't forget to update the pdev array when a device is
  detached.

Reported-by: Antonio Huete (tuxillo@)

libdevattr - Visibility change, stop memory waste

* Change the visibility of some function prototypes in devattr.h to be
  only visible from within libdevattr (or when LIBDEVATTR_INTERNAL is
  specified).

* Stop wasting memory when reading the socket. Since we receive the size
  of the remaining data first, we can allocate exactly the right amount
  instead of wasting it big time by allocating 12MB no matter what.

Add support for $CCVER="clangsvn"

This is for clang/llvm installed from SVN trunk to /usr/local
(which is its default location).

BSD.include.dist: Use spaces for indentation.

lt(1): Change mode to 644.

libdevmapper/liblvm: Also needs libdevattr

* liblvm's shared library generation also needs libdevattr.

* Add libdevattr to the prebuild list in Makefile.inc1.

Suggested-by: Alex Hornung

udev_enumerate.3: Improve macro declaration a bit.

udev_enumerate.3: Some cleanup.

* Fix function name.

* Remove trailing whitespace.

* Add final newline.

udev_{device,monitor}.3: Add final newline.

libdevmapper/liblvm: Add SHLIB_MAJOR so we get the .so too.

Fix LINT build.

wlan - Don't use M_NOWAIT in kmalloc() calls.

altq - Get rid of unneeded fields in struct altq.

This was incorrectly brought over from FreeBSD.

ral - Don't use M_NOWAIT in kmalloc() calls.

wpi - Fix mbuf flags and kmalloc flags, plus refcount nodes.

Use MB_xxx flags to mbuf API calls rather than M_xxx.

Don't use M_NOWAIT in kmalloc() calls.

Bring in some ieee80211_node reference counting as discussed on
the FreeBSD-Current mailing list recently.

http://docs.freebsd.org/cgi/getmsg.cgi?fetch=178502+0+current/freebsd-current

Discussed-With: dillon

wlan - Fix mbuf handling when using encryption.

Re-add a __FreeBSD__ only section of code that copies an mbuf chain to
a writtable version before encapsulating the packet.

Uses m_dup() since we don't have m_unshare() (yet).

Discussed-With: dillon

Remove the old udevd binary (it's now in /sbin) via 'make upgrade.

Makefile_upgrade.inc: Move some stuff to the right place.

rc.conf - add lvm and udevd related settings

rc.d - add lvm rc script

* Add an rc.d script for lvm taken from NetBSD.

* Drop the dependency of udevd on syslog since it's not critical anyways
* to avoid a circular dependency.

libdevattr & udevd - add man pages

libdm - restore libdm-netbsd.h

* libdm-netbsd.h was accidentally deleted a few commits ago

mkinitrd - improve man page a bit

* Mention the vfs.root.realroot loader tunable and how to use it,
  including the currently supported types of root.

initrd - minor fixes

* mount the new root as read-only so that fsck doesn't complain and
  drop us to single-user mode.

* drop a few unnecessary tools from the initrd

* Remove a debug printf from the mini_init.

* Mount the device as read-only in rcmount_crypt since fsck and so on
  expect it that way.

lvm - use libdevattr for device cache checks

* Improve the device checking of devices that go into that cache and
  that don't by using libdevattr and the tagged stuff.

udev - Tag some subsystems/drivers

* While here, fix a number of bugs in the udev kernel implementation.

dm - Bind into build system, fix small problem

* Bind into the kernel build system.

* Make cmd_fn static, so it doesn't interfere with udev's cmd_fn

initrd - Update for LVM root support

* Also add support for some generic mounting of local volumes
  (configured via the loader tunable vfs.root.realroot) and scriptable
  mounting of other kinds of volumes.

* Add some more tools to the default mkinitrd set

* Add support to mount crypt volumes

mkinitrd - add dm-related tools

vfs_conf - export vfs.root.realroot via sysctl

* export the tunable vfs.root.realroot via vfs.real_root sysctl.

lvm/dm - clean up debug, fix open bug

* Clean up debug code and change it to log_verbose, mostly. Also remove
  some of the older, now irrelevant, comments.

* For dm, add a sysctl and tunable to enable debugging (debug.dm_debug)

* in the dragonfly filter, open the device early enough, and definitely
  before closing it ;)

dm - General printout cleanup

dm_target_crypt - Make compatible with luks

* Make dm_target_crypt compatible with cryptsetup+luks, or at least with
  the main features.

cryptsetup - Port to DragonFly

cryptsetup - Delete unneeded files

cryptsetup - add our READMEs

Import cryptsetup-1.1.2

lvm2 stuff - bind into build system

* Bind all the lvm2 stuff into the build system and get rid of useless
  lvm2tools.mk.

libdm - fix two warnings

* Fix to warnings related to devname visibility.

libdm-dragonfly-iface foo3

dm - Add crypt target

* Add an initial crypt target. It's WIP, full of bugs, but is a general
  outline of how I want to approach the crypt target for dm.

* As per Aggelos' recommendation, I'm using pbkdf2 and hmac sha from
  other crypto implementations instead of rolling my own, for good
  cryptography's sake :P

include - Install dm includes

lvm2 - port to DragonFly

dm - Port to DragonFly

* port the device mapper kernel support to DragonFly

dm - Import verbatim from NetBSD

Import lvm2 from NetBSD

man(1): Lots of cleanup.

Remove 'register', ansify, remove dead code for Xenix and whatnot etc.

No functional changes.

Raise WARNS to 6.

udevd - add pidfile & SIGTERM handler

* Add the creation of a pidfile and a SIGTERM handler that disposes of
  the pidfile.

* add pidfile to rc script

libdevattr - install include

udevd - bring into sbin, add rc script

* Bring udevd into sbin so it can be used very early on, for example in
  the initrd environment.

* Add an rc script for udevd.

* Remove debugging flags from libdevattr Makefile

tmpfs - fix failing writes with no swap

* When no swap is available, tmpfs was trying to use bawrite, causing
  some further problems down the line. We avoid this by now forcing the
  use of buwrite() for this case (no swap).

Suggested-by: Matt Dillon

kernel - fix crash in smb mount

The samba kernel-side daemon smbiod is created with
kthread_create_compat().

Kernel threads created with kthread_create_compat() have no td_ucred, as
other kernel threads, but have td_proc != NULL because this function
under the hood forks the process 0.

prison_replace_wildcard() was assuming that if td_proc != NULL it is
dealing with a user thread that has a valid td_ucred thus causing a NULL
ptr dereference when operating on kthread_create_compat()-threads.

Reported-and-fixed-by: Tero Jaasko
Dragonfly-bug: <http://bugs.dragonflybsd.org/issue1790>

mkinitrd - make use of lt

lt - add new tree-like utility

* lt shows the directory structure below some specified directory much
  like the tree utility does.

libmd - add sha512, fix warnings in tests

* Add a SHA512 implementation taken from sys/crypto/sha2.

* Fix the test driver warnings up to the set WARNS level.

libc - correct pthread_once stub

* Make the pthread_once stub in libc work correctly.

* This fixes an issue with pthread_once not being called even once in
  libprop for programs not linked against lpthread.

Suggested-by: Simon 'corecode' Schubert
Obtained-from: NetBSD

kernel - skip PG_MARKER vm pages.

* The contigmalloc code was improperly interpreting PG_MARKER
  VM pages, resulting in an infinite blocking condition.

devfs(4): Remove a bogus assertion (nchildren is unsigned, hence can't be <0).

In-discussion-with: alexh

kernel - Fix altq for x86_64 vkernel build

* Remove i386-conditionalization for TSC access
* Probably also fixes x864_64 normal kernel build too.

kernel - MPSAFE work - Basic tokenization for vkernel x86_64 pmap.c

* Tokenize the vkernel x86_64 pmap.c file

kernel - MPSAFE work - Basic tokenization for vkernel i386 pmap.c

* Tokenize the vkernel i386 pmap.c file
* Add minor documentation to x86_64 pmap.c

sys/conf/kmod.mk: Adjust the genassym stuff a wee bit.

This should fix 'make -j X buildkernel'.

Reported-by: sephe
Dragonfly-bug: <http://bugs.dragonflybsd.org/issue1792>
Modeled-after: FreeBSD

/usr/Makefile: Adjust to our new handling of the pkgsrc GIT repository.

top: Fix count of process states

The count was not in correspondence with our enumeration constants
for the process states. For example, an "active" process could be
counted as "running".

Only tested with i386/UP :)

acpi_{hp,thinkpad}.4: Fix sysctl names.

ral.4: We don't have %U, so use %O for URLs for now.

acpi_sony(4): Sync with FreeBSD.

acpi_sony.4: Fix sysctl names.

Make the loader load ehci.ko by default.

It seems to do more good than harm.

HOWEVER!

Unfortunately, There are systems that don't play nice with ehci. One
of my boxes, for example, won't reboot with ehci loaded.

Therefore, the behavior introduced with this commit can be disabled
by doing one of the following things:

1) 'unset ehci_load' from the loader prompt before booting.

2) Booting in 'safe mode'.

3) Putting 'hint.ehci.0.disabled=1' in /boot/loader.conf.

This is all modeled after the way the automatic loading of acpi.ko is
handled.

test commit

mkinitrd(8): Strip binaries when copying so they will fit in the image.

While here, comment out a call of the tree utility which we don't have
in base.

initrd: /usr/share/initrd/sbin wasn't being created. Add it via mtree(8).

This led to oinit being installed as a file named 'sbin'. Remove this
file via etc/Makefile (during 'make upgrade') so that with the next
upgrade the file is installed correctly.

standards.7: Write some more and mention the default environment.

Add a few __printflike() and __scanflike() to various header files.

vinum(4): Use char for has_part since that's what we scanf() later on.

Uncomment vinum in LINT to have it covered by -Werror.

kernel - MPSAFE work - Basic tokenization for x86_64 pmap.c

* Tokenize x86_64 pmap.c, it still needs documenting and cleanup
  like i386 pmap.c has.

kernel - MPSAFE work - Finish tokenizing vm_page.c

* Finish tokenizing vm_page.c

* Certain global procedures, particular vm_page_hold() and vm_page_unhold(),
  are best called with the vm_token already held for implied non-blocking
  operation.

kernel - MPSAFE work - Add missing token release

* Add a missing token release in a rare code path.

linux emu - MPSAFE work

* Reduce the uses of the mplock to a bare minimum, such as when calling
  exit1.

* Change the emuldata lock to lockmgr; it shouldn't have been mplock in
  the first place.

* Reduce the scope locked by the emuldata lock as much as possible.

kmod.mk - attempt to enable use of assym for kmods

* Half-working attempt at being able to use assym.s in kernel modules
  when doing a 'make' in the directory of the module. It will now fail
  because of opt_nfs.h being included by nfs.h, included by genassym.c
  not being found.

Obtained-from: FreeBSD

sk(4): Initialize if_multiaddrs (in ether_ifattach), before touching it

Dragonfly-bug: http://bugs.dragonflybsd.org/issue1789

kernel - hold MP lock in idlezero for now

* The MP lock must be held in the idlezero code for now until tokenization
  is finished on the rest of the code base.

* Fixes random memory corruption which could occur when idlezero was
  turned on.

unmount - fix issue with process refs on unmount

* The p_textnch introduction made this issue appear, as some processes
  are still alive at system shutdown and their p_textnch were holding
  these references to the mount nch.

* On unmount of a filesystem we now scan all active processes for procs
  whose p_textnch is related to the mountpoint we are getting rid of,
  and release these.

Dragonfly-bug: http://bugs.dragonflybsd.org/issue1708
Special-Thanks-To: Antonio Huete (tuxillo@) for identifying the
offending commit and extensive testing

mkinitrd.8: Remove some trailing whitespace.

Remove opt_global.h inclusion, it is included by default.

if_detach(): Fix unoptimized compilation without ALTQ in the config.

altq_disable() and altq_detach() aren't available until ALTQ is configured
and compilation with -O0 failed linking.

$deity knows why this worked when building optimized (our default).

mkinitrd.8: Remove empty line.

mkinitrd(8): Miscellaneous permission related clean up.

Also, rename mkinitrd -> mkinitrd.sh in src/ so it is easy to recognize
as a script. Our build infrastructure will handle installing it without
the suffix.