Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

crypt(3) - Switch SHA256/512 to the Linux implementation

* The existing SHA backends have been shown to be more susceptible to brute-
  force attacks than we would prefer --
  http://www.openwall.com/lists/oss-security/2012/01/16/2

* Bring in the reference implementation used in Linux, code is in the public
  domain.

* Add required (standard) functions mempcpy and stpcpy.

* Change default for future installs to SHA512, this is the default on at
  least archlinux and fedora.

* Add some minor hacks to libcrypt/crypt.c to ensure that
  a) All existing passwords continue to work
  b) All future passwords will be more secure with no changes required

* To update passwords to the new format use passwd(1) for each user, and to
  change your default password type to SHA512 (default for new installations)
  change the passwd_format setting under default to "sha512".

icu_abi/x86_64: {msi,msix}_release returns nothing

i386: Implement MSI-X allocation and release support

icu/x86_64: Implement MSI-X alloc/release

kernel: Remove two more major numbers.

kernel: Remove some old major numbers.

LINT/LINT64: Add snd_gusc.

GENERIC: Add back COMPAT_DF12.

It's a good thing, because it allows for running FreeBSD 4 binaries.

Requested-by: vsrinivas

kernel: Fix building of snd_gusc.

jme: Support multiple MSI-X interrupt model

ahci(4)/sili(4): Fix some comments.

Submitted-by: Johannes Hofmann <johannes.hofmann@gmx.de>
Dragonfly-bug: <http://bugs.dragonflybsd.org/issues/1692>

Remove empty DragonFly CVS IDs.

Update files for OpenSSL-1.0.0g import.

Merge branch 'vendor/OPENSSL'

Import OpenSSL-1.0.0g.

o Fix for DTLS DoS issue CVE-2012-0050

vquota(8): Remove unneeded braces

vquota(8): Display full user and group names

* Full user and group names are now displayed by default

* add a -n flag to show the raw user and group ids

* refactor the code to use common id printing functions

i386: Unbreak LINT building

bus: Pass intsrerupt description to setup_intr bus method

If no interrupt description is supplied, then the device's name
will be used.

Add bus_setup_intr_descr(), which allow device drivers to pass
interrupt description.  Reimplement bus_setup_intr() using
bus_setup_intr_descr().

jme: Split ifnet serializer; in preparation for multiple MSI-X support

Disable HAMMER live dedup, mark as experimental

* Comment out mentions to it in the hammer(8) manpage

* Live-dedup is a relatively new feature that has not undergone
  extensive testing.

* It may have some issues with HAMMER bigblocks, we do not want
  users to run it on production machines yet.

carp: Add comment about carp_update_addrs()

nexus/x86_64: Implement {alloc,release}_msix pcib methods

ioapic_abi/x86_64: Implement MSI-X alloc/release

msix/pci: Enable MSI-X by default

msix: Use msix_table_res to determine whether MSI-X is used or not

msix: Make sure vectors are not allocated before setup/teardown

msix: Rework MSI-X allocation, step 5/5

Add release_msix_vector pci method

mxge: Unbreak LINT building due to recent MSI-X allocation changes

msix: Rework MSI-X allocation, step 4/many

Save MSI-X vector information for resuming and verification

uname - Allow varsym overrides

* A varsym named UNAME_<opt> will override a uname option, similar to
  how environment variables override a uname option.  Environment variables
  take priority.

varsym - Add -x option

* Add the -x option which causes varsym to set per-process variables and
  then exec the command line from the first non-varsym-assign.  For example:

  varsym -x UNAME_n=fubar uname
  varsym -x UNAME_n=fubar /bin/csh
  etc

Fix the ktr(4) formats for pid_t and lwpid_t on x86_64

Fix a few bugs in the new ktrdump code

- Pass in the correct machine_valist pointer on i386 (which means we need
  some indirection on x86_64).
- Keep references to all memory blocks that we allocate and free them
  when we're done with the machine_valist.
- Make sure we don't leak any memory on the error paths either.

Merge branch 'vendor/LIBARCHIVE'

Import libarchive-3.0.3.

-Errors saving sparse files to pax archives.
-allow archive_*_free(NULL)
-empty contents extracting Zip files with bsdcpio
-truncated filenames in listings

bsd-family-tree: Sync with FreeBSD.

kernel - Fix 3:00 a.m. crashes (deadlocks) related to HAMMER VM use

When memory is low and the pageout daemon needs to write things out we still
need to have at least some reserve to perform the supporting operations for
the pageout.  HAMMER is particularly memory intensive and could get into a
situation where insufficient reserve memory was available, deadlocking the
system.

With these changes DragonFly should run stable on systems with as little
as 256M of ram, and possibly a bit lower.

* The getblk/bread/bwrite/etc brelse/bqrelse sequence used to manage buffers
  had several bugs in it that prevented the low memory handling code from
  operating properly.  The b[q]relse() sequence was not properly detecting
  the low memory condition and freeing or caching the underlying VM pages
  (when possible).

* Also change the low memory test used by the buffer cache from 'severe'
  to 'min' in kern/vfs_bio.c.  We may be able to change this back to 'severe'
  at a later date with further testing.  These tests are in brelse(),
  bqrelse(), and vfs_vmio_release().

* Rewrite bio_page_alloc().  It effectively does the same thing that it did
  before but should operate more smoothly.  We also no longer try to recover
  pages from unrelated buffer cache buffers from this function, which could
  lead to deadlocks.  The warning kprintf is now also rate-limited.

* Add a buffer overload test in the hammer dedup ioctl.  A hammer dedup
  could cause a buffer cache deadlock by allowing too many dirty buffers
  to build up.

* Add a VM memory test to the core hammer flusher code that was previously
  only checking for the UNDO meta-data and buffer overload limits.  This
  is now done on a per-record basis and should prevent HAMMER from allocating
  too much memory during a flusher operation when the VM system is already
  too low on memory.

* Add some vm_wait_nominal() calls in critical I/O paths, but make sure we
  do not use these calls in any I/O path used by the HAMMER pageout code.

  Probably the most important path is the vm_object_page_clean*() code
  path, effectively called via either msync() or via the 30-60 second
  system sync.

* Properly bawrite() a buffer in hammer_vop_write() when IO_ASYNC is set
  (which is used by the pageout daemon), otherwise the pageout daemon will
  not be able to directly recover memory in low memory situations when
  paging to a HAMMER file mapped SHARED/RW.

Testing-by: tuxillo, lentferj, ftigeot, dillon

hammer - Properly pass -S option to hammer run via remote ssh

* Properly pass -S option to hammer run via remote ssh

Reported-by: someone not me, sorry I forgot.

umass(4): Remove an unneeded include.

kern: Update traps, sigbus->sigsegv, cleanup and fixes

The primary purpose of this changeset is to change the signal from
bus error to segfault when an attempt to access protected memory is
made.  In the process of doing this, it was noticed that there were
differences between i386 and x86_64 as well as differences between
the actual and virtual kernels.

Several of these differences were addressed.  Extra whitespace was
removed and some syncing between the divergent FreeBSD version was
made.  Some "#if 0" sections were removed.  The virtual kernels were
tested along with the real kernels.  A conservative approach was
taken as there seems to more cruft that could come out.

rtld: add RELRO support

"RELRO" means PLT (partial) or PLT+GOT (full) data is shifted to a
dedicated page by the linker which triggers the dynamic linker to
protect the page by setting the memory to read-only.  This feature
assists in detecting memory corruption and also prevents some types
of buffer overflow exploits.

Until now, this feature was only supported by Linux's glibc.  No BSD
had relro support in their dynamic linker.  I proposed the patch and
it was reviewed by a FreeBSD dynamic linker expert.  Attempts to
access protected data currently results in a bus error signal, but the
next commit will update the kernel trap files to cause the segfault
signal to be emitted instead.

Reviewed-by: Kostik Belousov

rtld: Reorganize reloc_plt and reloc_jmpslots

In the future, more reloc types than just R_$ARCH_JMP_SLOT will be
supported.  FreeBSD already has them and converted to a switch statement
and introduced a new rtld_error message rather than use an ASSERT.
Follow suit and fix a mismatching const as well.

Makefile_upgrade.inc: Remove some MLINKS added in 2008 which do now exist.

hptiop(4): Sync with FreeBSD.

Set the sense residual properly.

hptiop(4): Add MODULE_VERSION.

hptiop(4): Remove an unused define.

hptiop(4): Remove an unneeded variable.

device_printf() will already print the unit.

msi/msix: Don't allocate MSI/MSI-X if the device does not support any messages

msix: Remove MSI-X allocation, step 3/many

Add alloc_msix_vector pci method, which allocate one MSI-X at the
specified position on the target CPU

msix: Rework MSI-X allocation, step 2/3

Add pci_{enable,disable}_msix(), which enable/disable MSI-X globally

msix: Rework MSI-X allocation, step 1/3

Add pci_{setup,teardown}_msix(), which prepare/cleanup necessary
information for MSI-X allocation operation.

msix/pcib: Pass cpuid to {alloc,release}_msix pcib methods

mbuf: Don't raise mbuf limit for jcluster

jcluster's space is shared with normal cluster's space

mbuf: Avoid kmalloc "limit" overflow

Cast stack variable cl_limit and mb_limit to size_t when calculate
the kmalloc limit, so large kern.ipc.nmbclusters will not cause
the calculated value overflow.

vmstat: ks_limit is size_t not ssize_t

route: Add net.route.kmalloc_limit tunable to raise M_RTABLE limit

Add vfs_accounting to etc/rc.d/Makefile

rc.d: default values for vfs_accounting variables

rc.d: Add a vfs_accounting script

* Its only function for now is to synchronize counters with the real
  disk usage of a list of mount points

* Small rc.conf example:
  vfs_accounting_enable="YES"
  vfs_accounting_sync="/home /mnt/data"

make upgrade: Remove some more libarchive manpages.

atphy: Explicitly clear 1000baseT control register for 10/100 only F1 PHY

Obtained-from: FreeBSD 221817

  "Explicitly clear 1000baseT control register for F1 PHY used in
   AR8132 FastEthernet controller.  The PHY has no ability to
   establish a gigabit link. Previously only link parters which
   support down-shifting was able to establish link.
   This change should fix a long standing link establishment issue
   of AR8132."

atphy: Recognize another F1 PHY

miidev: regen

miidev: Add PHY ID for Atheros F1 10/100/1000

msi-x: Suffix operation on vectors w/ _vector

msi: Don't release MSI-X on MSI releasing path

pci; Remove pci_remap_msix_method declaration; it was nuked

rtld: Fix TLS inconsistency, cleanups

Fixes FreeBSD PR kern/160721: TLS is inconsistent
Uses the proper TLS block to calculate the TLS variable address in the
event the TLS data generation was updated.  (FreeBSD SVN 225582)

Also cleaned up a typo and added some parentheses around return
values to sync up with FreeBSD.

rtld: Clang fixes

1) Fix clang warnings
2) Fix r_debug_state function

The r_debug_state function is a hook required for gdb.  Clang will inline
the function, but because it is empty, it won't generate any calls to it.
This results in gdb backtraces being corrupted.  Fixed with the following
hack obtained from FreeBSD SVN 225366.

Fix it by marking the function __noinline, and inserting an empty asm
statement that pretends to clobber memory.  This forces the compiler to
emit calls to the r_debug_state() function throughout rtld.c

pci: Remove unused MSI remap method

rtld: remove broken functionality to build exec. version

If anyone had tried to build an executable version of the dynamic linker
using the source makefiles, it would have failed.  The i386 version had
bad CFLAGS and the x86_64 was missing the ldscript.  Moreever, as the
gold linker doesn't use ldscripts, it was GNU linker (ld.bfd) specific.

If somebody decides this functionality is still desired, the ldscript
files from FreeBSD (elf_rtld.x) can be imported from FreeBSD likely
without modification.  The now-dummy makefiles were alterated with
similar comments.

rtld: fix some typos

rtld: Fix improper sync of map_object.c (17 July 2009)

DragonFly rtld synced FreeBSD commit SVN 195743, but this minor
condition change was missed.

rtld: Revert mprotect optimization during .bss creation

Using only mprotect over .bss prevented it from writing .bss to the core
files as the whole region for the dso is mmapped with MAP_NOCORE flag.
Revert to previous mmap implementation.
Comes from FreeBSD SVN 225699

rtld: Fix file descriptor leak

test - Correct bug in tuxload and document second bug

* Correct a file creation bug in tuxload

* Document that the msync() is not working as originally intended, but
  we like the bugged version better so we're running with it.

test - Add tuxload.c

* Tuxload tries to stress the VM system's free memory.

Submitted-by: Antonio Huete Jimenez <tuxillo@quantumachine.net>

MachIntrABI: intr_{config,cpuid} -> legacy_intr_{config,cpuid}

So these two functions will not be misused on MSI. No functional changes

Update files for libarchive-3.0.2 import.

Merge branch 'vendor/LIBARCHIVE'

Import libarchive-3.0.2.

*libarchive 3.0.2 released
*Various fixes merged from FreeBSD
*Symlink support in Zip reader and writer
*Robustness fixes to 7Zip reader

*libarchive 3.0.1b released
*7Zip reader
*Small fixes to ISO and Zip to improve robustness with corrupted input
*Improve streaming Zip reader's support for uncompressed entries
*New seeking Zip reader supports SFX Zip archives

*libarchive 3.0.0a released
*Update shared-library version calculations for libarchive 3.x
*Fix tar -s; follow GNU tar for controlling hardlink/symlink substitutions
*Fix reading ISO images built by NetBSD's mkisofs
*Old archive_read_support_compression_XXX functions are deprecated and
 will disappear in libarchive 4.0.
*RAR reader
*Add tar:compat-2x option to emulate broken libarchive 2.x
 handling of pax UTF-8 headers
*Refactor read_open() into a collection of single-item setters;
 support the old interfaces as wrappers
*Split disk writer into separate POSIX and Windows implementations
*More work to return errors instead of calling abort()
*Add charset option to many writers to control MBCS filenames
*Overhauled support for per-format extension options
*Track character set used for mbcs strings, support
 translating to/from user-specified locale
*Recognize mtree files without requiring a signature
*Use iconv to convert to/from Unicode instead of making bad
 assumptions about the C90 character set translation functions
*CAB reader
*LHA/LZH reader
*Many improvements to ISO reader compatibility
*Use larger buffers when copy files into an archive
*archive_read_disk now supports traversals
*XAR writer
*Fix ^T handling; don't exit on interrupted reads and writes
*Improved detection of platform-specific crypto support
*lzip read and write filters
*tar --gid --gname --uid --uname
*Use Red-black tree for ISO reader/writer to improve performance
*Minimal writer for legacy GNU tar format
*Relax handling of state failures; misuse by clients now generally
 results in a sticky ARCHIVE_FATAL rather than a visit to abort()
*ISO writer
*Split many man pages into smaller chunks.
*Cheat on block sizes when reading archives from disk.
*Use int64_t instead of off_t, dev_t, ino_t, uid_t, and gid_t
*Document new ACL functions.
*Support multiple write filters
*Remove some legacy libarchive 1.x APIs
*Read afio headers
*Archive sparse files compatibly with GNU tar
*Support cpio -V

vknetd - Ignore SIGPIPE

* Ignore SIGPIPE, fixing an undesired kill of vknetd when a write()
  races a vkernel termination.

Reported-by: tuxillo

ioapic_abi: More consistent function name w/ legacy interrupt

No functional changes

tcp_output: Move output mbuf related variables' cleanup to the again label

Though not all cleanups are necessary if we loop back to again label,
better safe than sorry

route: Log R_Malloc failure in rtrequest1()

drm.4: Add some info about what to do when acceleration fails to initialize.

Submitted-by: Andrea Magliano <masterblaster@tiscali.it>
Dragonfly-bug: <http://bugs.dragonflybsd.org/issues/2230>

netgraph: remove unused variable.

netgraph: handle M_PREPEND failure.

Noticed-by: Sepherosa Ziehau

netgraph7: move static to the front and remove MALLOC/FREE macro usage.

netgraph7: uncomment ng_tcpmss cookie.

* Forgotten in last commit.

netgraph7: welcome ng_tcpmss.

netgraph7: welcome ng_rfc1490.

netgraph7: welcome ng_hub.

netgraph7: conditionalize netgraph modules build.

* If WANT_NETRAPH7 make variable is set then build netgraph7 modules,
  otherwise build netgraph modules.

netgraph7: convert lockmgr locks into mutexes.

Revert "netgraph7: Make netgraph7 kernel modules names unique."

This reverts commit b3caef111369521fa1099de35840437191aa1436.

* Now that netgraph7 kernel buils is under the WANT_NETGRAPH7 make
  variable, this commit can be reverted.

netgraph7: Put netgraph7 kernel build under WANT_NETGRAPH7 make variable too.

* When the WANT_NETGRAPH7 make variable is set, libnetgraph7 and the
  netgraph7 kernel parts instead of their legacy couterparts.
  Previously, only the libnetgraph7 build was controled by this variable.
  This commit puts the kernel build part under the same variable as well
  so that the legacy kernel modules are not overwriten by the new ones.

netgraph7: ng_socket: use lksleep() instead of home brewed version.

* This eliminates the last function in netgraph7/dragonfly.c.
  Remove the file because it is no longer needed.