syscons - improve debugger entry

* Reduce stalls during debugger entry.

kernel/linux: Fix a bug in idr_alloc()

That function was only doing a single memory allocation and didn't
try to grow the underlying idr storage when needed.

OpenLIBM: Add 3 new symbols to map

We gained three additional functions with the move to OpenBSD libm:
  catanhl
  casinhl
  cacoshl

They were built but filtered out because they weren't on the symbol
map before.

kernel - Fix live lock in vfs_conf.c mountroot>

* The mountroot> prompt calls cngetc() to process user input.  However, this
  function hard loops and can prevent other kernel threads from running on
  the current cpu.

* Rearrange the code to use cncheckc() and a 1/25 second tsleep().

* Fix a bug in the syscons code where NOKEY was not being properly returned
  as documented.  Modify all use cases to handle NOKEY.  This allows us to
  differentiate between a keyboard present but not key pressed and a keyboard
  not present.

* Pull the automatic polling mode code out of cncheckc() (or more precisely,
  out of sccncheckc()) and add a new cnpoll() API function to set it manually.

  This fixes issues in vfs_conf when normal keyboard processing interrupts
  are operational and cncheckc() is used with a tsleep() delay.  The normal
  processing interrupt wound up eating the keystrokes so the cncheckc()
  basically always failed.

  cncheckc() in general also always had a small window of opportunity where
  a keystroke could be lost due loops on it.

* Call cnpoll() in various places, such as when entering the debugger,
  asking for input in vfs_conf, and a few other places.

WPA Supplicant: Add warning about its use

The wpa_supplicant software in base is three releases behind and likely
full of security holes.  For example, the current release in DPorts has
already had 5 security vulnerabilities patched, but the base version is
not being actively maintained.

The base wpa_supplicant should only be used long enough to be able to
install the latest version from dports.  In order to let sysadmins know
that running it is not the best idea, a 10-second warning will come up
when the base wpa_supplicant is used.

reviewed by: robgar

Bump __DragonFly_version after replacement of libm

Replace hybrid libm with OpenBSD libm on vendor branch

In order to gain full c++11 support on GCC, we had to import a number
of long double functions from NetBSD, once again converting libm into
a hybrid library from a mixture of sources.  As of today, FreeBSD still
doesn't have the missing functions and the PR on broken c++11 has been
lingering for months.

The OpenBSD libm is complete and maintained[1][2].  It's unmodified
sources are in vendor/OPENBSD_LIBM branch with local modifications (to
squelch gcc warnings and adjust for OS differences mainly) are applied
to the master for easy diff generation.

A dports bulk build was executing using the new math library and the
result is the ports built normally.

[1] The final two "imprecise" functions were replaced by proper long
    double versions.  The imprecise versions remain as older symbols
    (libm has symbol versioning) so this source is additional to what
    is provided in the vendor branch. (powl, tgammal)

[2] There were several DF306.0 symbols that are not present in OpenLIBM,
    partially because they've been moved to libc or were always there.
    In order to maintain backwards capability, copies of these functions
    with new names are built into libm, and given DF306.0 versions only.
    Without the version suffix, these past functions will not link to
    new programs.

ipiq: Add simple IPI latency measure sysctls (2)

* Add /usr/src/test/sysperf/ipitest test script.

* Make adjustments to the sysctl latency code, remove unnecessary
  critical section and convert the result to nanoseconds.

ipiq: Add simple IPI latency measure sysctls

It could be used to measure latency caused by power management stuffs.

OpenLIBM math.h: change __XPG_VISIBLE => __XSI_VISIBLE

OpenBSD uses a different macro definition X/Open portability spec, so
rename it (__XPG_VISIBLE) to the one used by Free/DF (__XSI_VISIBLE).
This is another local modification to math.h

OpenLIBM local mod: change another __fpclassify => __fpclassifyd

To avoid creating a new symbol, the original __fpclassifyd name was
retained, but I missed changing this one.  The error was discovered
by a build failure of lang/spidermonkey185

xlocale: remove const qualifier from __xlocale_C_ctype

It contains a reference count that is modified by newlocale,
duplocale, freelocale.

diagnosed-by: dillon
taken-from: freebsd

kernel - Fix mlock() related panic and memory leak

* If a process exits with mlock()d pages, the pages are left wired,
  causing an immediate memory leak and also leading to an assertion
  and panic later on when the kernel tries to free the pages.

* The problem is due to an exit optimization which calls
  pmap_remove_pages() before deleting the mappings.  vm_fault_unwire()
  expects the pmap to have the pages and fails to properly adjust the
  wire count when it doesn't.

* Fixed by testing pmap->pm_stats.wired_count and shifting the
  pmap_remove_pages() call to after the maps are removed if it is
  non-zero.

Reported-by: marino via muscles panic

bus: Clear device description when we set driver.

This fixes several places that driver is detached, but device desc set
by driver is not cleared, e.g. module unload.

Minor cleanup, while I'm here.

Reported-by: swildner@

OpenLIBM: Add DRAGONFLY.README to contrib

OpenLIBM: remaining local modifications

The following section is an excerpt of DRAGONFLY.README for this vendor
branch.  Many of these patched issued exist in the current libm as well,
but they are masked with WARNS?=1.  Other fixes adjust for differences
between DragonFly and OpenBSD.  The WARNS level has been raised to 3, and
it could be raised to 4 by fixing "set-but-unused" errors.

The following files have been patched
=====================================
arch/amd64/*.S             (elf note added to all assembly files)
arch/amd64/fenv.c          (#include diff from OpenBSD)
arch/amd64/fenv.h          (#include <sys/cdefs.h> for CDECL)
include/global/math.h      (#include diff, double/float typedefs)
src/e_j0.c                 (full coverage)
src/e_j0f.c                (full coverage, fix sign comparison mismatch)
src/e_j1.c                 (full coverage)
src/e_j1f.c                (full coverage, fix sign comparison mismatch)
src/e_jnf.c                (sign comparison mismatch)
src/e_pow.c                (sign comparison mismatch)
src/e_powf.c               (sign comparison mismatch)
src/e_rem_pio2f.c          (sign comparison mismatch)
src/ld80/e_fmodl.c         (sign comparison mismatch)
src/ld80/s_ceill.c         (sign comparison mismatch)
src/ld80/s_floorl.c        (sign comparison mismatch)
src/ld80/s_nextafterl.c    (strong alias, explicit eval order, always true)
src/ld80/s_remquol.c       (sign comparison mismatch)
src/s_lround.c             (sign comparison mismatch)
src/s_lroundf.c            (sign comparison mismatch)
src/s_nan.c                (#include diff from OpenBSD)
src/w_drem.c               (ansify prototype)

OpenLIBM: local modification - elf notes on assembly

All object files need a .note.GNU-stack elf section in order to preserve
the ability for the resulting program to run on a non-executable stack.
If a single object is missing this section, the linker will run the program
on an executable stack instead which is less secure.

The FreeBSD and NetBSD libm assembly files have these notes, but OpenBSD
does not use them, thus the need for a local modification.

Merge branch 'vendor/OPENBSD_LIBM'

Import OpenBSD's libm (trunk, 4 July 2015) to a new vendor branch

With the exception of x86_64 (as amd64), all arch-specific files have
been filtered out.  A new directory called "include" has been added
to capture global and arch-specific headers for installation.  Other
than that directory and those exclusions, this is an unaltered copy
of OpenBSD's libm as it existed on 4th of July, 2015.

sys/vfs/hammer: Fix comments

- hammer_fsbuf_head only existed in the early days of hammer.

sys/vfs/hammer: Cleanup whitespace(0x20) before tab

- Get rid of 0x20s that are being highlighted by editors
  whereas other lines in hammer are aligned only by tabs.

sys/vfs/hammer: Add comment on multi-master clustering

- It should note that multi-master clustering is not supported.
  The original comment on multi-master clustering is from 2008.

cam: Initialize counted_to_config properly in xpt_bus_register

DragonFly-bug: http://bugs.dragonflybsd.org/issues/2823

acpi/pstate: Fix and cleanup 465a6ec

End of P-states MSR is not set properly in 465a6ec.

While I'm here, clean up macro names for AMD 11h related registers
and values.

acpi/pstate: Since AMD 11h, 8 P-states are supported.

DragonFly-bug: http://bugs.dragonflybsd.org/issues/2814

sbin/hammer: Fix comments

- The first comment on layer1 seems to be obsolete.
  The big-block for layer1 metadata is always in volume0, but
  the big-blocks for layer2 metadata and filesystem data could
  be in any volume. This comment is from 2008 and only found
  here so remove it.

- Sync the second comment on layer2 with that of kernel code.

sbin/hammer: Cleanup blockmap pointer dereference

- Just to make the code look better
  (than having blockmap[\nHAMMER_...]).

sbin/hammer: Remove unnecessary blockmap argument

- format_freemap() does not need the second argument for blockmap.
  This function sets that blockmap pointer to
  &root_vol->ondisk->vol0_blockmap[4];
  right before it starts to initialize blockmap anyway.

- Also passing the freemap blockmap as an argument is redundant
  in terms of api since format_freemap() can access the freemap
  blockmap via the first argument (root volume, as mentioned above)
  given that the function knows it's looking for blockmaps[4].

sbin/hammer: Make function prototype explicit

- format_undomap() is only for root volume, so it's better to have
  the same first argument type as format_freemap(). It explicitly
  shows that the volume is the root volume.

- Also add assertions to check the given pointer is root volume.
  (it's invalid for non-root volumes to call these at least for now)

sbin/hammer: Cleanup blockmap initialization

- Initialize blockmap fields in the same order as
  struct definition as well as format_undomap().

drm: Implement set_memory_wc() and set_memory_wb()

aperf: Sensor for effective CPU frequency using APERF/MPERF MSRs.

It was adapted by me to fit into cpu sensor device and utilize our
per-cpu sensor tasks.

Obtained-from: Imre Vadasz <imre@vdsz.com>

sensors: Add frequency sensor type

While I'm here, fix sensor type string array.

sensors: Fix value type

xlocale: Fix potential segfault

It was possible for locale and rune locale to become out of sync causing
mb* and similar functions to be called with the wrong data, including
with a null pointer.  Unfortunately, this still does not solve the
gfortran testsuite failure related to newlocale usage.

Taken-from: FreeBSD SVN 264038 (2 APR 2014)

sys/vfs/hammer: Add hammer_node_max_elements()

- Add inline function hammer_node_max_elements() and make
  it available to userspace.

- The relation between btree node type and # of elements is
  a part of ondisk definition, so it's better to have it in
  the same header file.

sys/vfs/hammer: Use HAMMER_BUFFERS_PER_BIGBLOCK

- It's been defined but not used and good to use it.

sbin/mount_hammer: Fix indentation

sbin/hammer: Enable readhammerbuf()

- Bring back #if0'd function readhammerbuf() which is a wrapper
  for pread(2) for 16KB buffer.

- (writehammerbuf() has been used since the early days)

sbin/hammer: Remove init_fifo_head()

- format_undomap() initializes fifo head without using this
  function which has been #if0'd.

acpi/pstate: Expose frequency power consumption table

acpi/pstate: Increase max supported P-states

Intel Broadwell cpus could have 16 P-states.

powerd: Implement mwait C-state hint adjustment

powerd: Allow disable CPU power domain frequency adjustment

And update powerd.8

kernel - Fix panic during coredump

* multi-threaded coredumps were not stopping all other threads before
  attempting to scan the vm_map, resulting in numerous possible panics.

* Add a new process state, SCORE, indicating that a core dump is in progress
  and adjust proc_stop() and friends as well as any code which tests the
  SSTOP state.  SCORE overrides SSTOP.

* The coredump code actively waits for all running threads to stop before
  proceeding.

* Prevent a deadlock between a SIGKILL and core dump in progress by
  temporarily counting the master exit thread as a stopped thread (which
  allows the coredump to proceed and finish).

Reported-by: marino

gcc5: Fix quickworld.

When copying the Makefile from gcc47, the writing of a comment line to
configargs.h about it being a generated file was removed, but the output
redirection was not adjusted to create the file from scratch.

This led to quickworld just appending to the existing header in /usr/obj
and resultant build errors.

i386 removal, part 17/x: Remove i386 code from various parts of the tree.

powerd: Rework cpu and cpu power domain selection

Since some kernel threads are bound to the specific cpus, e.g.
network threads, so we need to take this into consideration when
cpus are selected to increase their performance.  And cpu power
domain selection is adjusted accordingly.

Local adjustments for OpenSSL-1.0.1p.

Merge branch 'vendor/OPENSSL'

Import OpenSSL 1.0.1p.

Fixes CVE-2015-1793 (http://openssl.org/news/secadv_20150709.txt).

i386 removal, part 16/x: Remove forgotten file via 'make upgrade'.

i386 removal, part 15/x: Remove i386 specific network drivers.

i386 removal, part 14/x: Remove i386 specific code from ext2fs.

sys/gnu/vfs/ext2fs: Update COPYRIGHT.INFO

- 1284f18 should have updated this file.

Remove non-existant .PATH components from a number of Makefiles.

dirfs - Restore old behavior for 0-refs vnodes

- Set VREF_FINALIZE on all dirfs vnodes. This way VOP_INACTIVE()
  will be called on last ref, which was the behaviour before ee173d09

testcases: Attempt to integrate POSIX IPC tests to dfregress(8)

- Tests have been split up so they run separately

kernel/hda: Add missing != NULL check around kfree().

If hdac_get_capabilities() fails, sc->streams has not been allocated, so
check for != NULL before trying to free it in the cleanup.

Reported-by: Rimvydas Jasinskas <rimvydas.jasinskas@gmail.com>

drm: Add linux/irqflags.h

iasl(8): Remove whitespace I overlooked in 44db1c69b6.

hammer: Remove trailing whitespaces

- (Non-functional commits could make it difficult to git-blame
  the history if there are too many of those)

hammer: Remove trailing tabs

- (Non-functional commits could make it difficult to git-blame
  the history if there are too many of those)

sys/*: Fix typos

- "separate" is probably right.

- "transaction" is probably right.

sys/vfs/hammer: Remove obsolete macros

- These were added in 47197d71 and once used in early days of hammer
  but no longer used.

sys/vfs/hammer: Rename macros for consistency

- Rename HAMMER_SHORT_OFF_ENCODE() to HAMMER_OFF_SHORT_ENCODE()
  and HAMMER_LONG_OFF_ENCODE() to HAMMER_OFF_LONG_ENCODE() for
  consistency with the existing macros HAMMER_OFF_SHORT_MASK
  and HAMMER_OFF_LONG_MASK.

- These two are used by ENCODE() macros and haven't been used
  independently elsewhere, so there is no effect to others.
  (if external userspace programs are using these then those
  programs are probably doing something strange)

sys/vfs/hammer: Cleanups

- For better readability,
  define macros in zone -> volume -> offset order and
  define macros in encode -> decode order.

sbin/hammer: Use HAMMER_ENCODE_XXX() to encode zone address

- Use HAMMER_ENCODE_RAW_BUFFER() instead of manual bitwise operations.

Sync ACPICA code with the Intel licensed 20150619 distribution.

Due to some issue in Intel's release procedure, the dual licensed
distribution - which we use - had not just license differences but
also code differences when comparing to the Intel licensed one.
Adjust to the code of the Intel licensed distribution.

Said issue will be reported to Intel.

This fixes a build issue in emulators/qemu-devel where iasl(8) was
wrongly crashing due to those code differences.

Reported-by: marino

drm/linux: Implement GENMASK()

kernel - Fix syscons cursor movement

* Recent commits broke the cursor movement test, causing
  certain cursor movements to not update the screen.

* Re-enable the asynchronous update thread, whos primary
  purpose is to fix stuttering sound and other interrupt
  issues.

* Add a sysctl kern.syscons_async which defaults to 1
  to control whether the async thread is used or not.
  This can be changed at any time.

Reported-by: marino

btx: Fixup comment indent

Fix hangup on VirtualBox.

sys/vfs/hammer: Cleanup HAMMER_ENCODE_XXX() macros

- Define HAMMER_ENCODE_XXX() macros using HAMMER_ENCODE()
  which is a generic version of these.

sys/vfs/hammer: Define and use HAMMER_ENCODE() on blockmap formatting

- Add HAMMER_ENCODE() which is a generic version of existing
  macros HAMMER_ENCODE_{RAW_VOLUME|RAW_BUFFER|FREEMAP}().

- Use HAMMER_ENCODE() in format_blockmap() in userspace when newfs
  initializes blockmap offsets. This is better in the sense that
  the macro hides internal of hammer's storage address space format,
  and gets rid of bitwise operations that make assumption on format.

sbin/hammer: Remove panic()

- hammer userspace mostly uses err()/errx() and panic()
  (which is only used once) can be replaced using these.

powerd: Staticize global variables

powerd: Merge TotalCpus and NCpus

powerd.8: List only related kernel modules

powerd: Remove unused global variable CpuCount[]

x86_64: Add per-cpu mwait CX setting

sbin/hammer: Remove test_volume()

- get_volume() and test_volume() are basically the same. The only
  difference is get_volume() calls errx() when the volume is not
  found while test_volume() returns NULL.

- The caller of test_volume() calls errx() when NULL is returned,
  so test_volume() can be replaced using get_volume().

- Also note that if the volume instance is not found, there is
  basically no way that the hammer userspace command can proceed
  the rest of the command (similar to losing superblock in UFS).

gcc50 c++: Restore C99 after change to __LONG_LONG_SUPPORTED

The recent correction of __LONG_LONG_SUPPORTED had the undesirable
side of effect of breaking the base and dports GCC support for c++.
This patch restores it (comes from FreeBSD config), and will have to
be pushed upstream to GCC.  All GCC without it (dports) now has
missing c++ functions (e.g. wcstoll, wcstoull)

<net/bpf.h>: Include <sys/param.h> for roundup2().

Reported-by: marino

kernel/uaudio: Fix weird indent.

<sys/socket.h>: Whitespace cleanup.

Remove duplicate includes in <iconv.h> and <sys/socket.h>.

drm/linux: Fix WARN_ONCE()

Use roundup2() from <sys/param.h> in a number of places.

Makefile.inc: Add kernel install complete message

All the targets that have an "starting" message also have a corresponding
"complete" message except the installkernel target.  This is particularly
obvious when checking logs to see if kernel successfully installed, so
I'm adding that message here.

i386 removal, part 13/x: Some cleanup after pc32 platform removal.

i386 removal, part 12/x: Remove sys/platform/pc32.

i386 removal, part 11/x: Remove wrong machine/ setup in the boot Makefiles.

Several of the link targets were pointing to ${.CURDIR}/../../i386/...
which doesn't exist. This is from times when our platform-specific
headers were differently laid out and it was never noticed that after
some point, it was no longer needed.

In fact, sys/boot builds properly without all this, because:

* -m32 ensures that the i386 platform is targeted by the compiler

* Various (needed) __i386__ checks in sys/cpu/x86_64/include ensure that
  even on x86_64, the basic types have the right sizes.

Confirmed by binary compare of /boot without and with the patch.

i386 removal, part 10/x: Fixes in sys/boot to compile without platform/pc32.

iconv sync 11/11: Use macro like FreeBSD (1 file) to eliminate diff

iconv sync 10/x: FreeBSD SVN 258316 + 283406 + 283418

SVN 258316: Bug fixes in iconv(3) UTF-7 support.

- Add ' to the list of directly encoded characters and * to the list of
  optionally directly encoded characters as per RFC 2152.

- In _citrus_UTF7_mbtoutf16 on end of input when the next output character
  has only been partially decoded, save a copy of the buffer of input
  characters (not just its length).  On the next call with more input
  characters this buffer is reprocessed together with the new input to
  form a fully decoded output character.

- At the end of a base64 encoded sequence fully discard '-' (BASE64_OUT)
  by decrementing psenc->chlen and i.  This is needed to make room in
  psenc->ch (input buffer) in case the next input character starts a new
  base64 encoded sequence.  And also, if this is the end of input and no
  output character can be returned, this brings the encoder in the initial
  state as indicated by _citrus_UTF7_stdenc_get_state_desc_generic which
  is used by the caller to distinguish between no output and partial
  output.

- In _citrus_UTF7_mbrtowc_priv pass the s parameter (input pointer)
  directly to _citrus_UTF7_mbtoutf16 instead of a copy (s0).  This way s
  is updated correctly in case of errors.

- In _citrus_UTF7_mbrtowc_priv when called with psenc->surrogate set
  (previous call did not have enough input), retrieve the previously
  decoded UTF-16 character fr

SVN 283406: Fix decoding of UTF-7 when a base64 encoded chunk appears at
            the end of the input buffer.

_citrus_UTF7_mbtoutf16 stored the decoder state at the beginning so it
could restore this state on an incomplete character such that the next
call would restart the decoding.  The problem was that "-" (end of base64
mode) at the end of a string was also treated as an incomplete character
but was also removed from the state buffer.  So the initial state would be
restored (with base64 mode) and the next call would no longer see the "-"
so it continued in base64 mode.

This state saving/restoring isn't needed here.  It's already handled
elsewhere (citrus_iconv_std.c:_citrus_iconv_std_iconv_convert) so just
remove it.

Also initialise *nresult.

SVN 283418: (continued)

When only 2 bytes can be read from a 4 byte UTF-16 character in a base64
encoded chunk of a UTF-7 string, treat that as an incomplete character and
return an error instead of a shift sequence and no error.

Also check that the low 2 bytes have a valid value.

iconv sync 9/x: FreeBSD SVN 260003

In libiconv i18n modules, surround the unused static
_citrus_xxx_pack_state() and _citrus_xxx_unpack_state() functions
with #if 0 blocks for now

iconv sync 8/x: FreeBSD SVN 281550

Remove the const qualifier from iconv(3) to comply with POSIX:
http://pubs.opengroup.org/onlinepubs/9699919799/functions/iconv.html
Adjust all code that calls iconv

Note: The libcpp Makefile cflag was added because the host iconv.h
      header was getting pulled in.  This always should have been the
      src version of iconv.h, but the error wasn't exposed until now.

iconv sync 7/x: FreeBSD SVN 281798

Fix improbable memory leak in _citrus_prop_read_str()

iconv sync 6/x: FreeBSD SVN 279404

Avoid lookup of CODESET aliases using unitialized path.  We do not use
iconv.alias file so avoid using the vestiges of the code that do.