Fix a typo in the vkernel rc script.

Submitted-by: Rumko

HAMMER VFS - Minor bug (caught by assertion panic)

* A snapshot can sometimes contain visible inodes whos nlinks count is 0,
  essentially the snapshot 'catches' the file in the middle of being deleted.

* HAMMER was attempting to truncate the data for such inodes if the file
  were opened and then closed, and failed to check whether the inode was a
  snapshot or a current inode.  This flowed through until it hit an assertion
  designed to detect precisely that case.

* Fixed by adding a check to determine if the inode is a snapshot and/or
  the filesystem is mounted read-only.

Repored-by: Max <herrgard@gmail.com>

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

kernel - Fix bug in unp_gc()

* Fix a race against a file close where FDEFER can wind up being left
  set.

* Fix a panic during unix domain socket garbage collection where a token
  was being acquired with a spinlock held.  Use trytoken instead and if
  it fails simply defer checking of the (fp) in question.

kernel - Remove confusing warning

* Remove the "bio_page_alloc: WARNING emergency page allocation" warning
  and replace it with a sysctl counter.

* Keep the allocation failure warning and add a sysctl counter for it too.

Raise default .Os value for the manual pages to 2.9 on 2.9.

release engineering - Bump master to 2.9

kernel - Fix race in bio_track_wait()

* Remove an improper optimization prior to an atomic cmpset function call.

kernel - Fix NFS client & server bugs

* A very long standing bug in the server cache was finally whacked.  The
  write-gather code was improperly returning the wrong mbuf for the server
  to reply with, causing client stalls.  This behavior depends on the client
  doing burst asynchronous writes.  Newer releases of DragonFly do burst
  asynchronous writes but older ones tended not to.

* The server cache was not MPSAFE.  Add a MP token to fix that.

* Remove critical sectons from the server cache which are no longer needed.

* Fix a potential client-side rpc request race where a request's
  NEEDSXMIT flag is not set until after the request possibly blocks,
  which can lead to issues if another thread picks up the request
  and then believes that it has already been transmitted when it
  has not.

* Document a big problem with NFSv2 and HAMMER-served directories.  NFSv2
  only has 32-bit directory cookies.  It is possible to work around the
  problem by using rdirplus (which is the default now).  However, some
  servers may not be able to handle rdirplus with a NFSv2 mount.

  Users who need to serve out NFSv2 cannot serve HAMMER directories
  with NFSv2 unless the clients support rdirplus.

  Our defaults are NFSv3 and rdirplus and NFSv3 does NOT have this problem.

Reported-by: Thomas Nikolajsen <thomas.nikolajsen@mail.dk>

kernel - Fix padlock panic in hw crypto

* padlock_freesession_one() was zeroing out the structure which caused
  ses_freeaddr to be lost.  Restore ses_freeaddr.

Reported-by: lentferj

Bring in uguru(4) for ABIT temperature, voltage and fan sensors.

Ported-from: OpenBSD
Tested-by: Max Herrgard <herrgard@gmail.com>

devfs - Fix mountpoint specific rules

* Mount-point specific rules depend upon f_mntonname to be correct, so
  populate this field of mnt_stat on mount().

Reported-by: Hugo

undo - stat(2) may not populate struct stat upon failure.

test/vkernel - Include ROOTSIZE environment variable in Makefile's help

loader.8: Improve wording. Fix typos and an error.

powernow(4): Make it build on x86_64 and hook it in the x86_64 build.

Tested-by: Max Herrgard <herrgard@gmail.com>

Update the rc.conf's man page's vkernel section.

A few new vars were introduced and one was made optional.

rc.d/vkernel: pidfile related enhancements

Fix a typo when checking for the pid file when starting a vkernel.
Better checking if the vkernel being started is already running.

rc.d: completely stop the vkernels

When stopping the vkernel, after a set timeout if the vkernel is still
alive, send a SIGKILL.
Also redirect STDIN when starting the vkernels.

vkernel: rc improvements

Add a vkernel_bin var that contains the default path to the binary,
for all the vkernels without a vkernel specific entry.
Also the root image is no longer required (diskless vkernels have no
use for a root image).
And when stopping a vkernel a pidfile is required so we don't kill
innocent bystanders.

ucom - destroy device node on detach

Issuing `ls /dev' after unloading the driver triggered a panic because
of the stale device node.

identcpu.c: Fix a typo in the Features2 strings and rename AES -> AESNI.

aesni(4): Move CPUID2_AESNI to specialreg.h. Also add CPUID2_PCLMULQDQ.

Add an aesni(4) manual page (taken from FreeBSD).

mdoc.local: Add FreeBSD 9.0.

chroot.2: Add chroot_kernel() to .Nm.

rename.2: Add renameat() to .Nm and .Rv.

fortune -- Its time for pie.

Enable DSO support in OpenSSL.

OpenSSL can now load engines at run-time.  We install a few in
/usr/lib/engines/ by default.

nmalloc - Fix depot race - this should fix remaining issues with firefox.

* nmalloc was accidently calling the libc _pthread_spin_lock() stub
  even when threaded, causing all depot operations to race.  No actual
  lock was being acquired.

  Change it over to the internal _SPINLOCK() API.

* Expand libthread_xu's base spinlocks from 128 to 256 and use those
  for the depot lock.  Note that the depot[] array can be upwards of
  80 elements so lets not take any chances.

Reported-by: Pierre Abbat <phma@phma.optus.nu>, others

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

Test commit.

Test commit.

Test commit.

Test commit.

installer: Fix an issue in the UFS install.

I had broken using '*' as partition size in my previous commit.

libcrypto:  Enable cryptodev support.

Reported-by: Jan Lentfer <Jan.Lentfer@web.de>

umass: Add support for WD USB HDD

* Add Western Digital USB HDD Passport

Submitted-by: Dylan Reinhold
Dragonfly-bug: http://bugs.dragonflybsd.org/issue1768

Merge branch 'master' of git://uther.dragonflybsd.org/dragonfly

libc - Move the newmag prestage code

* Avoid any possible assumptions due to reentrnacy by moving
  the pre-stage code.

vkernel - Scrap some old install stuff that no longer applies

* Scrap some stuff that prevented vkernels from being
  installed properly.

Submitted-by: Rumko

pf.os - Add DragonFly OS fingerprints

libc - Do some reorganization of nmalloc() and add asserts.

* Reorganize mtmagazine_alloc() and mtmagazine_free() to make the code
  more clear.  Add assertions on 'continue' loops so we abort on
  magazine memory corruption instead of looping forever.

* Pre-stage the new magazine that mtmagazine_free() might need to avoid
  having to relock the depot.  This also allows us to stage the new
  magazine directory into the per-thread loaded field instead of running
  it through the depot.

* Fix a deep or infinite recursion which can occur when mtmagazine_free()
  calls _slaballoc(), which it does sometimes when it needs a new
  magazine.  Avoid reentrancy by temporarily disabling the per-thread
  cache around the call.

PF: Fix Operating System Fingerprinting

   Due to some wrongly imported byte-order conversions osfp was
   broken.

   Reported and tested by: Matthias Schmidt (matthias@dragonflybsd.org)

libc - Fix livelock in nmalloc

* free() -> _slabfree() was turning around and calling _slaballoc()
  with the depot lock held, which could lead to a livelock.  Fix by
  unlocking the depot lock around the call.

* Clean up and document other unrelated bits of nmalloc(). In particular,
  clean up magazine_alloc().

Reported-by: Siju George <sgeorge.ml@gmail.com>, and others

libthread_xu: Add references for pthread_mutexattr_{get,set}pshared().

pthread_condattr_getpshared(3): Correctly store the attribute.

libprop: Clean up the Makefile a bit (and raise WARNS to 3).

send(2) - Add MSG_NOSIGNAL flag.

POSIX:2008 introduces the MSG_NOSIGNAL flag that requests
not to send the SIGPIPE signal if an attempt to send
is made on a stream-oriented socket that is no longer
connected. The EPIPE error shall still be returned.

This fixes the build of multimedia/gst-plugins-bad in
current pkgsrc.

kernel: Remove unneeded inclusions of <sys/cdefs.h>.

Merge branch 'master' of git://uther.dragonflybsd.org/dragonfly

vkernel - Fix installkernel target

The recommended command to install a vkernel is ATM:

make -DNO_MODULES installkernel KERNCONF=VKERNEL DESTDIR=/var/vkernel

This installed the plain kernel into /var/vkernel.  Due to the
introduction of the new loader (dloader), the installkernel target
refused to work, because it could not find a boot/ directory.

Skip the error message about missing boot/ and skip the creation of the
kernel.old/ backup directory when installing a vkernel kernel.

installer: Clean up check_capacity() (UFS) a bit and improve the message.

pf.os - Sync with OpenBSD

loader(8): adjustment & man update

 * fix `help' command by using $base/loader.help,
otherwise `help' didn't work when pwd outside $base.
 * allow `cd' and `optcd' without arguments,
using $base as default.
 * use pager for `?' and `local' commands.
 * make `more' work with relative file names
 * truncate very long lines (more than 256 chars),
and give warning; before they stopped include processing;
these are typically just comments.
 * add `optcd kernel' when using ESC in `menu',
like the menu item (`9') that exits via dloader.menu.
 * remove extra line in Fred menu (on right)
(it was scrolling warning about truncated line off screen).
 * remove obsolete variables in loader.conf.
 * update `help' output.
 * update man pages.

libstand: add fgets()

This fgets() operates on int fd, not FILE * stream,
as libstand doesn't supply FILE type.

fgetstr() is already in libstand, but it can't determine
if line did fit in supplied buffer.

libstand.3: remove .Xo/.Xc

kernel - Fix vmtotal sysctl

* Recognize unbounded VM objects and do not try to include their sizes
  in the vmtotal structure.

* Should fix systat -vm output for the All/Tot entry.

* Redo the vmstat structure.  Use long's and int64_t's as
  appropriate.

* Adjust systat and vmstat to deal with the new field widths
  in struct vmstat.

Reported-by: Antonio Huete Jimenez <ahuete.devel@gmail.com>

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

HAMMER VFS - Fix deadlock during read-only HAMMER mount (2)

* Slightly more correct fix.  Only translate zone offsets which can be
  translated.

Tested-by: Matthias Schmidt <matthias@dragonflybsd.org>

installer: Raise the recommended size for / in the UFS install.

It turned out that the x86_64 install's contents of / didn't fit into
256M. So increase to 320M for the smallest supported disks (2-4G) and
raise it gradually to 640M (4-10G) and 768 (anything above 10G). The
latter is also the HAMMER install's default recommendation.

The best solution here would probably be to base the recommendations
on the actual contents of the medium (to be tackled after the release).

Reported-by: Przemyslaw Pawelczyk <pp_o2@o2.pl>

kernel - Fix panic when unblanking screen saver

* When console output occurs while the screen is blanked, e.g. when
  using something like blank_saver.ko, we hit a hard path lock assertion.

* Queue the unblank request instead of trying to unblank the screen
  directly in this path.

Reported-by: Sascha Wildner <swildner@crater.dragonflybsd.org>

HAMMER VFS - Fix deadlock during read-only HAMMER mount

* HAMMER UNDOs are addressed using zone-1 (HAMMER_ZONE_RAW_VOLUME) and
  zone-2 (HAMMER_ZONE_RAW_BUFFER) data offsets.  Normal filesystem
  operations may use zone references which are incompatible with the UNDO
  data references.  That is, they may use a different zone accessing
  the same physical disk offset.

  Normally when the UNDO is run the modified buffers are flushed to disk
  and the buffers are destroyed before normal filesystem operations begin.
  Thus it isn't a problem for normal R+W mounts.

* Read-only mounts are a different story.  The modified buffers from the
  undo are left in core memory (they cannot be flushed yet because the
  mount is read-only).  The incompatible zones cause the HAMMER buffer
  system to lose track of related locked buffer cache buffers and can lead
  to a deadlock.

* Fix this by explicitly checking for a read-only mount and doing a
  secondary lookup using the RAW zone for certain selected zones.

Reported-by: Matthias Schmidt <matthias@dragonflybsd.org>

procfs: Add vnode path to /proc/<pid>/map for vn-backed vm objects.

liblvm: Raise WARNS to 1.

Since __BSD_VISIBLE is unset for liblvm compilation, we need to add the
standard define for alloca() (taken from <stdlib.h>) to lib.h to prevent
warnings.

While here, clean up the Makefile a bit, too.

libcryptsetup & libluks: Raise WARNS to 1.

gcc44: Teach gcc44 about our special conversions, such as %b and %D.

Some special code is necessary to have %D take precedence over the DD
length specifier (which is not present in gcc41). Eventually, we will
probably have to get rid of all these local conversions entirely.

This commit gets rid of a large bunch of warnings when compiling the
kernel with gcc44.

top - Adjust docs

* Adjust manual page for PRES addition.

top - Adjust top display

* Replace RES with PRES, remove PRI.  This opens up more space for the
  command which had gotten too squeezed.

* Realign columns for smp and non-smp displays.

* Remove annoying "This terminal can only display..." message from the
  original contrib code.

kernel - Add Proportional RSS (PRES)

* Track vm_object sharing and calculate proportional RSS in kinfo_proc

* Add PRES to the top(1) output

Submitted-by: Pratyush Kshirsagar <pratyush.kshirsagar@gmail.com>

network - Fix altq_red

* altq_red was asserting that it could only be called from PF when in fact
  it can also be called via ifq_enqueue().

* Add code to handle the ifq_enqueue path.

Reported-by: Francois Tigeot <ftigeot@wolfpond.org>

pkgsrc - Hack for dynamic loading of certain libgcc.a symbols (2)

* Make the hack i386-specific.

pkgsrc - Hack for dynamic loading of certain libgcc.a symbols

* For some reason firefox cannot find __popcountsi2 in a late reference
  from libcairo.so.2, which occurs when certain page content is accessed.
  This reference does not occur immediately.

* Add a weak reference from libc to force the symbol to be available,
  which appears to fix the problem.

* This is a horrible hack and currently we do not know why the dynamic
  link code cannot find the symbol.

libc - Fix some recursion issues during thread teardown

* thread destructors called by sophisticated pthreaded programs such
  as firefox can wind up allocating/freeing space multiple times
  AFTER nmalloc's destructor is run.

  This can leave the mtmagazine in a weird state because it's destructor
  fails to NULL-out tp->mags[i].loaded and tp->mags[i].prev.

* Properly NULL out tp->mags[i].{loaded,prev} in the destructor.

* Lockout mtmagazine use while the mtmagazine is being initialized or
  destroyed.

* Permanently lockout mtmagazine use after its destructor has been run.

* Instead of trying to initialize the mtmagazine on the first free, which
  might not occur until the destrutor is run (causing pthreads to complain
  about destructors being left hanging), have libthread_xu call a new
  function _nmalloc_thr_init() during thread creation and do all the slab
  initialization there.

network - Fix udp multicast assertion & mplock for ip_output

* Fix an assertion which is no longer valid, the MP lock is no longer
  held by the caller when passing a multicast packet into ip_output.

* Move the mp lock for udp multicast packets inward.  The underlying code
  still isn't mpsafe.

Reported-by: "Edward O'Callaghan" <eocallaghan@auroraux.org>

Fix VKERNEL64 build.

kernel: Fix numerous errors in printf() like formats and arguments.

kernel: Add some __printflike()'s to protect against format issues.

Teach gcc41 about %b and %D taking two parameters in a better way.

Previously, we had special code to handle the properties of %b and %D
(which are for printing bit masks and hexdumps, respectively). Remove
this code and instead use chained format_char_info's to pass the
information that both of these formats consume two arguments.

hammer(8): Fix wrong message.

Noticed-by: beket

pflogd(8): Use TAB for indentation.

pflogd(8): Raise WARNS to 6.

rc.resume - Reassociate with WPA client on resume

change a comment while here and accept ACPI state 5.

Obtained-From: FreeBSD

gzip - Do not return from write after each inflate

From FreeBSDs commit message:

In the past gunzip(1) write()'s after each inflate return.  This is
not optimal from a performance standpoint since the write buffer is
not necessarily be filled up when the inflate rountine reached the
end of input buffer and it's not the end of file.

Submitted-By: Xin LI <delphij@FreeBSD.org>
Obatined-From: FreeBSD

Regenerate the pciconf(8) database

...from the following files:

Hart:    Jan 22, 2008 (version 671)
Boemler: Oct  1, 2010
Mares:   Aug 27, 2010

fdisk(8): Fix a bug when reading >1TB slice sizes from a config file.

The numerical parameters in configuration file lines were previously
read into signed integers. This would cause a problem with a config
file line like this (for a ~1.2TB slice):

p 1 165 63 2491404993

The length parameter (2491404993) for the slice would have exceeded
INT_MAX (2147483647) and the slice would have been truncated to 1TB.

Since the installer is using fdisk with a configuration file, it
was previously not possible to use a whole >1TB disk from it (one
had to work around it from the command line).

To fix all this, read the numerical parameters in configuration file
lines into a long long.

Note that this change only affects the variable type into which the
parameters read from the file are stored and not any on-disk structures.
Also, checks at different places in fdisk(8) will of course still ensure
that we don't ever go above 2TB.

sshd - Remove libmd from link to fix SHA*() function conflicts

* libmd conflicts with libcrypto, remove libmd from the link to fix
  conflicts which were breaking putty connections to sshd.

Reported-by: Peter Avalos <peter@theshell.com>

SYSINIT.9: More mdoc fixes.

SYSINIT.9: Some cleanup (mostly whitespace).

dsched.9: Fix a typo.

Fix warnings when compiled with ACPI_IO

Merge branch 'master' of git://git.dragonflybsd.org/dragonfly

MP table: Do preliminary checks before claiming that the MP table is valid

Apply commit fa0583846340dfc45e2c45fe65868c95f295d8df for x86_64.

Put mp_nbusses and bus_data under APIC_IO

Apply commit 4f6a8b30c9ca96ca4df6ed16232bbc9eeba05a5e for x86_64.

Staticize mp_nbusses

Apply commit abe45f39559867d84370bf61f05b7649cd17a7b9 for x86_64.

Remove bsp_apic_ready

Apply commit ae996d5a08c195e14ffc9374645447d29611dd15 for x86_64.

Correct the logical_cpus calculation in mptable_hyperthread_fixup()

Apply commit 7ea07fd226314dc116e1089cb39196610300b406 for x86_x64.

build - Correct compile errors on 64-bit buildworld

* printf formatting stuff in ssh-keygen

installer: Fix the HAMMER install.

Due to the recent change of some variables from unsigned to signed some
issues had crept in.

While here, clean up the function a bit and make the error message more
useful.

build - Adjust Makefile.usr to point at new pkgsrcv2.git repo

* Change 'pkgsrc.git' to 'pkgsrcv2.git'.