tmpfs - Cycle through buffer cache when pageout daemon is running

* tmpfs usually allocates VM pages directly, but this can overwhelm
  the VM system in low-memory situations, causing processes to make
  very little progress in normal run-time operation if one or more
  of them are doing heavy writing to tmpfs.

* Significantly improves dsynth performance in low-memory situations
  where multiple worker slots are in the install-pkgs phase.

kernel - Warn/assert on broken ACPI MADT

* Add warnings and assertions for broken ACPI MADT tables.  I encountered
  this trying to boot a 3990X on a motherboard with an old BIOS that didn't
  support it.  It tried to boot anyway, but the MADT table was mangled
  and caused a null-pointer indirection in the kernel.  Assert nicely
  instead.

kernel - Add cpu ident bit ADMSKX (address mask extensions)

* Add cpu ident bit ADMSKX (address mask extensions)

Taken-from: FreeBSD

Merge branch 'vendor/OPENBSD_LIBM'

Really sync <math.h> with OpenBSD on the vendor branch.

libm: Remove sincos() and friends from lib/libm.

Merge branch 'vendor/OPENBSD_LIBM'

Import sincos() and friends directly to the vendor branch.

sincos.3: Add missing MLINKS.

inet6: report RTM_MISS when probing a known address fails

This allows unreachable to hit userland faster.

<sys/ttydefaults.h>: Sync up with FreeBSD, mainly for r179567.

The rest of it was already brought in.

FreeBSD's commit msg:

r179567 | ed | 2008-06-05 19:44:18 +0200 (Thu, 05 Jun 2008) | 13 lines

Fix faulty character to control-character conversion for CTRL().

The CTRL() macro seems to perform character to control-character
conversion (i.e. 'A' to 0x01) to lowercase characters. This is actually
not valid. If we use lowercase characters, conversions such as
CTRL('\\') and CTRL('?') will result to invalid conversions.

Because we must still support old source code that uses CTRL() (bad!),
we make CTRL() accept both forms. When the character is a lowercase
character, we perform the old style conversion.

<sys/ttydefaults.h>: Add some includes for self-sufficiency.

route(4): Remove a leftover closing brace.

Assuming the opening one was removed for style reasons.

installer: Silence a kenv(1) warning.

On non-comconsole systems, this is undefined, so silence any warnings
about it (that would show up briefly when logging in as installer).

route(4): add RO_MISSFILTER socket option.

This allows filtering of specific RTM_MISS destination sockaddrs.

route: make INET6 addrs human readable with sockaddr_print

route: constify sockaddr_print

kernel/apple_gmux: Add missing opt_ddb.h to the Makefile and sort.

kernel/vga_switcheroo: Add missing opt_ddb.h to the Makefile.

kernel/drm: Add missing opt_ddb.h to the Makefiles.

While here, adjust some SRCS declaration style with the rest of the
Makefile.

kernel - Clean up memory leaks and a stack buffer disclosure bug

* Clean up memory leaks, a stack buffer disclosure bug, and a
  missing priv check in if_oce (which probably never attaches these
  days).  All in the network subsystem.

Reported-by: Ilja van Sprundel

sbin/fsck_msdosfs: Diff reduction against FreeBSD against NetBSD

from freebsd/freebsd@28bbeac80931cc14571ef4b6455d8da7466411a2

sbin/fsck_msdosfs: Tighten FAT checks and fix off-by-one error in corner case

See below for details.
https://reviews.freebsd.org/D23065

from freebsd/freebsd@b60894b10adb071a8dc2b6fea5f9867c24bc9c47

libm: Bring in sincos, sincosf, and sincosl from OpenBSD

drm/linux: fix a bug in DEFINE_WAIT()

The wake-up function was not properly set up.

sbin/fsck_msdosfs: Document -M

from freebsd/freebsd@0371742d8ddb1c53201a1141a58076535e0b2f9c

sbin/fsck_msdosfs: Reduce memory footprint of fsck_msdosfs

See below for details.
https://reviews.freebsd.org/D22965

from freebsd/freebsd@41655e1cf1451b788f6437c91ec74bcecd2192b7

drm: Improve drm_can_sleep()

drm - Remove some of the linux_sched debugging

* Remove some debugging that we no longer need.

hammer2.8: Fix typo.

dsynth - Add HTML support (2)

* Fix 'ignored' and 'failed' reason format (the js expects a certain
  format and coughs pop-up errors up if it doesn't get it).

dsynth - Add HTML support

* Bring in progress.css, progress.html, progress.js, and icons from
  the synth project.  Add John's copyright to progress.js.

* dsynth now generates the logs/Report subdirectory, all necessary
  files, and dynamically generates the json.

  The summary.json database is updated every 10 seconds to reduce wear and
  tear.

* Split the history files in 50KB segments to reduce network traffic.

etc/defaults/rc.conf: Remove some leftovers from the mrouted(8) removal.

kernel/iwm: Add back support for IWM_DEBUG (default is inactive).

Dunno why it got lost in the last upgrade.

Also, comment it out in the module Makefile.

getrandom.2: Use .Dv for defines.

iso639: Fix some descriptions (from upstream).

kernel - Fix usb crash on detach

* Sometimes a bad usb link can flicker off before the usb bus is able
  to finish attaching it, resulting in an attempt to kfree() a NULL
  pointer.  Check for NULL.

sysctl.9/sysctl_add_oid.9: Add missing BIT32 and BIT64 MLINKS.

rman.9: Fix rman_make_alignment_flags() prototype.

getrandom.2: Comment out reference to getentropy.3 and fix date.

vkernel: Include <sys/malloc.h> for malloc_reinit_ncpus() prototype.

Fixes the VKERNEL64 build.

gcc80: Hide NO_WERROR in tools better.

hostprog: Remove NO_WERROR from btools tic.

Pointed-out-by: swildner

<alloca.h>: Add comment for special handling case.

kernel - Make writing to /dev/urandom (to add entropy) faster

* Speed this up a bit by chunking up 256 byte blocks instead of
  64.  The SHA256 hash eats a lot of time, this should speed the
  boot-time entropy injection up by 4x.

Reported-by: zrj

libc - Update manual page for realpath(3) and add page for __realpath(2)

* Add a manual page for __realpath(2) which clarifies differences
  between realpath(3) and __realpath(2).

libc - Update for realpath() system call support (2)

* Fix bug last commit, on failure if a buffer is supplied we copy
  the source path to the target buffer before returning.

Reported-by: zrj

boot/pxe: Fix some typos in comments and (unused, as it seems) type names.

While here, use our __packed.

kernel - Rejigger random number generator to be per-cpu 2/2

* The initializer tries to diverge each cpu's csprng a bit more
  now.  These initial conditions are not intended to produce secure
  random numbers, but they should be reasonably secure by the time the
  kernel is finished booting.

* Once the csprng is operational, do not always inject the same
  entropy into both csprngs since that would make having two and
  XOR'ing the results together kinda worthless.

* If RDRAND is available the csprng will get new injections 25 times
  a second on each cpu.  Without it, however, entropy injection is
  relatively slow.

kernel - Rejigger random number generator to be per-cpu 1/2

* Refactor all the kernel random number generation code to
  operate on a per-cpu basis.  The csprng, ibaa, and l15
  structures are now per-cpu.

* RDRAND now runs a periodic timer callback on all available cpus
  rather than just on cpu 0, allowing rdrand data to mix on
  each cpu's rng independently.

* The nrandom helper thread now chains state with an iteration
  between cpus, injecting a random data buffer generated from
  the previous cpu into the mix of the current.

kernel - Add __realpath() and getrandom() system calls (2)

* Move GRND_* defines to the right spot in sys/random.h

make(1): Add OpenBSD support.

 OpenBSD does not have 'A' support in malloc_options.  Use supported 'S'
 to prevent a lot of warnings during every bmake invoke.

tic(1): Explicitly disable WERROR in hostprog tic.

 This special version is used during buildworld.
 Helps with bootstrapping on OpenBSD.

world: Explicitly disable WERROR for hostprog and hostlib.

 Explicit tracking of currently toolchain is too fragile for c++.
 Add CROSS_CFLAGS helper in NXFLAGS for bootstrapping on OpenBSD.

gcc80: Make bootstrapping more permissive.

 To allow boostrapping on OpenBSD/Linux hosts:
 * provide CROSS_LIBDL knob when needed;
 * disable use of iconv in support libs;
 * disable werror in hostlibs.

binutils227: Explicitly include <stdint.h> and add CROSS_LIBDL.

 On glibc based systems dlopen() functionality is not in libc.

gdb(1): Explicitly include <stdint.h>.

libc - Update for realpath() system call support

* The realpath() implementation now checks to see if the system call
  is available and uses it.

* getosreldate() now caches the result to avoid multiple sysctl()
  calls.

* Add the new system calls (__realpath and getrandom()) to the symbol
  list.

kernel - Add __realpath() and getrandom() system calls

* Add a kernel __realpath() system call.  libc must still implement
  the realpath() function to handle NULL buffers (malloc()d buffer
  returned).

  The libc implementation checks the osversion for backwards compatibility
  before attempting to use the new system call.

* Add a kernel getrandom() system call.

* Bump __DragonFly_version to 500710.

Suggested-by: tuxillo, mjg

env(1): Match glibc getopt() semantics.

 Move '-' to the end of opstring since position within opstring is not
 meaningful.

Taken-from: OpenBSD

xargs(1): Disable prompt support (-p) in btools.

 Not needed and helps with bootstrapping on different OS.

xargs(1): Add limit for args_max.

 Current logic does not handle cases where args_max > int32_t limit.

tr(1): Fix compilation on Linux hosts.

dd(1): Allow to bootstrap on OpenBSD and glibc based systems.

 Disable tape detection support (reduces host requirements).
 Redirect siginfo to SIGUSR1 to match dd behavior on glibc systems.

time(1): Disable -l support in btools.

 This removes kinfo(3) requirement to bootstrap time(1) on OpenBSD.

time(1): Install signal handle only if SIGINFO is available.

 While there, adjust needed headers and remove few trailing whitespaces.

wc(1): Install signal handler only if SIGINFO is available.

 Allows to bootstrap on glibc based systems.

tail(1): Disable -f and -F (follow) functionality in btools.

 Allows to bootstrap on OpenBSD (no kevent support).

patch(1): Check for _DIRENT_HAVE_D_NAMLEN availability.

sh(1): Check for _DIRENT_HAVE_D_NAMLEN availability.

 To allow bootstrapping on OpenBSD.

strfile(8): Include <stdint.h> explicitly.

libc/citrus: Include <stdint.h> explicitly.

localedef(1): Allow easier bootstrapping.

 Solves issue when bootstrapping on OpenBSD.

lorder(1): Use POSIX defined flags for sort(1).

 While there, add -s to ensure stable sort (commonly available).

 No functional change.

world: Pass relative location of sys/ to newvers.sh as argument.

 Location is known at invoke time and avoids issue where <osreldate.h>
 might not be properly populated when building on OpenBSD host.

taskqueue: Fix the order of TASKQUEUE_DEFINE_THREAD

So it can be used by drivers.

sound/hda: Use driver specific taskqueue, instead of per-cpu taskqueue

This driver is not per-cpu ready, so don't user per-cpu taskqueue,
which causes assertion during taskqueue_enqueue.  Instead use driver
specific taskqueue.

taskqueue: Fix TASKQUEUE_DEFINE_THREAD

hammer2 - Fix inode & chain limits, improve flush pipeline.

* Reorganize VFS_MODIFYING() to avoid certain deadlock conditions and
  adjust hammer2 to unconditionally stall in VFS_MODIFYING() when dirty
  limits are exceeded.

  Make sure VFS_MODIFYING() is called in all appropriate filesystem-
  modifying paths.

  This ensures that inode and chain structure allocation limits are
  adhered to.

* Fix hammer2's wakeup code for the dirty inode count hystereis.  This
  fixes a situation where stalls due to excessive dirty inodes were waiting
  a full second before resuming operation based on the dirty count
  hysteresis.

  The hysteresis now works as intended:

  (1) Trigger a sync when the dirty count reache 50% N.
  (2) Stall the frontend when the dirty count reaches 100% N.
  (3) Resume the frontend when the diirty count drops to 66% N.

* Fix trigger_syncer() to guarantee that the syncer will flush the
  filesystem ASAP when called.  If the filesystem is already in a flush,
  it will be flushed again.

  Previously if the filesystem was already in a flush it would wait one
  second before flushing again, which significantly reduces performance
  under conditions where the dirty chain limit or the dirty inode limit is
  constantly being hit (e.g. chown -R, etc).

Reported-by: tuxillo

kernel - Document UPREQ and EXREQ cases better

* Do a better job documenting responsibilities for UPREQ and EXREQ.

libfetch: Fix buffer overflow (CVE-2020-7450)

  - A remote attacker, who can supply a malicious URL to the application
    that uses libfetch(3), can trigger memory corruption and execute arbitrary
    code on the target system.
  - FreeBSD-SA-20:01.libfetch

Submitted-by: bapt, emaste

daemon(8): Sync with FreeBSD. Some ports need options we didn't have.

Mainly for -T, see https://github.com/DragonFlyBSD/DeltaPorts/issues/914

Most of the changes revolve around supporting logging the program's
output with syslog(3).

Reported-by: kworr
Taken-from:  FreeBSD

dsynth - Hack elfinfo note output a bit

* The elf info is a bit of a hack and typically contains two
  note structures, but only one has the version.  The other typically
  has zero for the version field.

* The structures in the .note section can sometimes be transposed,
  so allow the case by testing to see if version is 0 and using the
  second structure's version if it is.

Reported-by: Romick

lockmgr - Fix bug in lockmgr() cancel path

* Fix a bug in the lockmgr() cancel path where a cancelable blocked
  exclusive lock is not canceled.  The EXREQ2 bit must be tested in
  addition to EXREQ, as it is possible for EXREQ to be clear when
  EXREQ2 is set.

* Fixes a situation where the usb path could deadlock a softclock
  cpu thread, causing a cascade of issues on that cpu.

kernel/atkbdc: Remove some dead code.

phantasia(6)/dsynth(1): Add two missing DPADD definitions.

libc - Check for invalid context in setcontext() and swapcontext()

* Check for an invalid context in setcontext() and swapcontext()
  and return -1 instead of switching to the invalid context.

* This is not an exhaustive check but will handle invalid states set
  by makecontext() if e.g. argc is messed up or the supplied stack is
  too small.  In particular, if makecontext() fails and set/swap tries
  to switch to it, it will switch to the state from the getcontext()
  prior to the makecontext() instead of to the desired makecontext()
  state.

Reported-by: zrj, tuxillo

kernel/vga: Sort I/O port addresses in vgareg.h.

rc.d/root: Fix return code that I broke in November.

After f304a32950ea980273aabeb3a194836fbb8471d2, the umount ended up
being the last command in root_start(), but it is expected to
return a non-zero status.

Fix this by inserting a return 0.

kernel/ntfs: Fix lockinit() flags.

kernel - Fix missing lock in devfs

* The master devfs lock must be held across a devfs_reference_ops()
  call.

* Should fix races and panics related to fast device creation and
  deletion (typically only triggered by dsynth's use of pty's).

Reported-by: zrj, multiple

drm: Fix lockinit() calls in previous commit

LK_EXCLUSIVE is a lockmgr() argument, not a lockinit() one.

drm: Replace all Linux spinlocks by lockmgr locks

* The DragonFly kernel can sleep in different circumstances than Linux

* Linux driver code has not been written to prevent it

* Make all Linux spinlock_t spinlocks lockmgr locks and avoid potential
  problems once and for all

drm: Pass CRTC ID in userspace vblank events

* Add DRM_CAP_CRTC_IN_VBLANK_EVENT so userspace can
  query the crtc field.

* This follows Linux's commit
  5db06a8a98f515f67446a69c57577c4c363ec65d.

libutil: Fix some weird indentation.

mtest(8): Fix two -Wunused-parameter warnings and raise WARNS to 6.

ifmcstat(8): Fix a -Wshadow and raise WARNS to 6.

pflogd(8): Fix a duplicate prototype and raise WARNS to 6.

Local changes for the flex upgrade.

Merge branch 'vendor/FLEX'