Stop overwriting /etc/gettytab on every 'make upgrade'.

There isn't really any important movement in it from our side, but there
are some scenarios (autologin for example) where a user may have changed
it.

kernel - Refactor sysclock_t from 32 to 64 bits

* Refactor the core cpu timer API, changing sysclock_t from 32
  to 64 bits.  Provide a full 64-bit count from all sources.

* Implement muldivu64() using gcc's 128-bit integer type.  This
  functions takes three 64-bit valus, performs (a * b) / d
  using a 128-bit intermediate calculation, and returns a 64-bit
  result.

  Change all timer scaling functions to use this function which
  effectively gives systimers the capability of handling any
  timeout that fits 64 bits for the timer's resolution.

* Remove TSC frequency scaling, it is no longer needed.  The
  TSC timer is now used at its full resolution.

* Use atomic_fcmpset_long() instead of a clock spinlock when
  updating the msb bits for hardware timer sources less than
  64 bits wide.

* Properly recalculate existing systimers when the clock source
  is changed.  Existing systimers were not being recalculated,
  leading to the system failing to boot when time sources had
  radically different clock frequencies.

drm/linux: Add work_pending()

drm/linux: Add raw_read_seqcount()

drm/linux: Add swiotlb_max_segment()

sbin/newfs_hammer2: Remove extra line break after printf outputs

This probably came from newfs_hammer.c, but HAMMER2 doesn't have
a note after this.

read.2: improve formatting of previous addition

- start sentences on new lines
- highlight mentioned functions properly
- add a reference to readdir(3)

Pointed out by: Sascha Wildner

read.2: describe EISDIR error

Discussed with: Sascha Wildner

kernel: more precious errors from read()ing hammer and hammer2

To conform POSIX, return EISDIR instead of EINVAL when trying to read(2)
a directory from hammer or hammer2 filesystem.

Discussed with and reviewed by: Sascha Wildner

Implement periodic hammer2 snapshots.

- add new periodic(8) script 220.snapshot-hammer2 to daily interval
- symlink the script also into weekly and monthly intervals
- extend default periodic.conf(5) with variables to configure the script
- describe new variables in periodic.conf.5 manpage
- mention the functionality also in hammer2.8 manpage

Note: "daily" variables are used by the script as defaults, so it's
      possible to set custom cron entry for different periodic invocation
      of the script, to create for example hourly snapshots

Discussed with, reviewed and tested by: Matthew Dillon

drm/linux: Rewrite dev_printk()

drm/linux: Rewrite seq_printf()

drm/mm: Fix definitions of alloc_pages() and __free_pages()

drm/linux: Add mutex_lock_nested() and mutex_trylock_recursive()

drm/linux: Add list_for_each_entry_safe_reverse()

Obtained-from: FreeBSD

drm/linux: Improve put_user()

efidp.8: Remove unneeded .Pp

kernel - Refactor kern_kevent(), fix timeout overflow (ppoll() bug) (3)

* Fix a second timer overflow.  The systimer clock variable is
  actualy only 32 bits, a 10 minute timeout will overflow it.
  Change the kqueue timeout to 1 minute to work-around.

  (We really need to redo sysclock_t from 32 to 64 bits)

* This should finally fix both swildner's panic and rsmarples
  continued early timeout issue.

Reported-by: swildner, rsmarples

drm: Add linux/llist.h

Mostly obtained from OpenBSD with a few key modifications

drm/linux: Fix casting issues in cmpxchg()

libefivar: Fix (instead of silence) the remaining warnings in libefivar.

kernel - Increase KNOTE_CACHE_MAX

* Increase KNOTE_CACHE_MAX from 8 to 64 descriptors.  These are tiny
  descriptors, we can afford to have a larger per-cpu cache.

kernel - Refactor kern_kevent(), fix timeout overflow (ppoll() bug) (2)

* Certain unsupported EV_ERROR events can cause kern_kevent() to
  live-lock, which hits a 'checkloop failed' panic.  Silently
  deregister such events.

* Complain and deregister any kqueue event on behalf of *poll()
  which does not set any poll return flags.

Reported-by: swildner

sbin/fsck_hammer2: Fix siz in tsnprintf()

Prevent small terminal width causing newline behavior in
print_blockref_stats() in verify_blockref().

Bring in efidp(8) from FreeBSD.

Taken-from: FreeBSD

Sync uefisign(8) with FreeBSD.

Taken-from: FreeBSD

Sync libefivar and efivar(8) with FreeBSD.

Some larger adjustments were needed in efivar-dp-xlate.c to work
around geom.

Taken-from: FreeBSD

drm: Switch to the OpenBSD dma-fence implementation

The old NetBSD one did not respect sleep/wakeup sequences Linux code expects

drm/linux/dma-buf: Rename struct fence to dma_fence

hammer2 - Enhance pfs-list and pfs-delete (2)

* Fix cast error last commit.

Reported-by: CuteLarva

hammer2 - Enhance pfs-list and pfs-delete

* Enhance pfs-list to list PFSs available across all mounted hammer2
  filesystems instead of just the current directory's mount.  A
  specific mount may be specified via -s mountpt.

* Enhance pfs-delete to look for the PFS name across all mounted
  hammer2 filesystems instead of just the current directory's mount.

  As a safety, pfs-delete will refuse to delete PFS names which are
  duplicated across multiple mounts.  A specific mount may be specified
  via -s mountpt.

autofs: Fix example file installation.

Reported-by: deef

kernel - Refactor kern_kevent(), fix timeout overflow (ppoll() bug)

* Fix a bug where large timeouts or very small timeouts could
  overflow the ustimeout variable.  Change the internal timeout
  cap to ensure that no overflow occurs.

* Fix another bug where the internal timeout cap could cause
  ppoll() to return early.  Internal tsleep (etc) timeouts
  need to be ignored because the external timeout might be
  larger and will handle the error return for us when it is
  checked.

* Refactor kern_kevent() to be somewhat more efficient.

Reported-by: rsmarples

A little cleanup after recent dhcpcd(8) changes.

* Remove /var/chroot via 'make upgrade' for now.

* Use spaces for indenting in BSD.var.dist.

* Un-document dhcpcd_chrootdir and /var/chroot.

dhcp: Restore /var/empty as the homedir

Punt the old chroot /var/chroot/dhcp

autofs: Continue installing auto_master to /usr/share/examples/etc too.

We keep an unmodified copy of our shipped /etc in /usr/share/examples/etc
and the recent move of auto_master from etc/ (where we get this copying
gratis) to usr.sbin/autofs requires an extra Makefile now.

edk2: Bring in a bunch of additional TianoCore EDK II headers.

Taken from the MdePkg of the edk2-stable202005 tag of the
git://github.com/tianocore/edk2 repository. All I modified was
killing CRs using 'tr -d "\015"'.

In preparation for some upcoming efidp work in libefivar.

edk2: Sync our TianoCore EDK II headers with the edk2-stable202005 tag.

FD_SET: cast away signed vs unsigned conversion warnings

dhcpcd: Update README

Build with dhcpcd-9.1.1

Merge branch 'vendor/DHCPCD'

Import dhcpcd-9.1.1 with the following changes:

 * Restore dumping leases from stdin
 * auth: Only accept RECONFIGURE messages from LL addresses
 * auth: Access the RDM monotonic counter file via privsep
 * ARP: call arp_announced() when cancelling it
 * BSD: fwip(4) interfaces are now ignored by default
 * privsep: Ensure IPC buffers are large enough to carry messages
 * privsep: Only open RAW sockets for the needed protocols
 * privsep: Fix indirect ioctls returning data
 * privsep: wait for processes on SIGCHLD rather than when sent a STOP cmd
 * eloop: just use ppoll/pollts(2), falling back to pselect(2)

drm/linux: Add pid_nr()

drm/linux: Fix ratelimit.h copyright

nrelease: Stop putting the wpa_supplicant pkg on our install media.

Base wpa_supplicant was recently upgraded to 2.9.

build.7: mention "build-all" and "install-all" targets

Describe "build-all" and "install-all" targets in both Makefile
and build(7).

Submitted by: Pierre-Alain TORET <pierre-alain.toret@protonmail.com>
Issue: https://bugs.dragonflybsd.org/issues/3229

kernel: avoid possible sysctl integer overflow in acpi_thinkpad(4)

autofs: Remove BUGS section from autofs(5)

vfs.autofs.mount_on_stat was initially nop, but removed later on.

autofs: Sync autofs(5) with FreeBSD

from freebsd/freebsd@215ce0ad1ae5c6fa927904738502bfe39bf56ac2

Minimize diff vs FreeBSD.
vfs.autofs.mount_on_stat (automount on vop_getattr) is unsupported.

kernel/acpi: sync acpi_thinkpad with FreeBSD acpi_ibm

Note: sysctl(8) variables hw.acpi.thinkpad.* have moved to
      dev.acpi_thinkpad.0.*

Discussed with: Sascha Wildner
Reviewed and tested by: Daniel Fojt

drm: Add Coccinelle transformation scripts

In order to automate various changes in cases where the original
Linux source code cannot be used unmodified.

kernel/efirt: Fix a kfree(NULL) panic when deleting a UEFI variable.

There is no data in this case. Rest of function is ok, just a forgotten
datasize check.

Upgrade grep(1). 2/2

Adapt master branch to vendor update:

- update README.DELETED and README.DRAGONFLY
- re-generate header files
- adapt build
- sync manpage grep.1 with vendor

Reviewed by: Sascha Wildner

Upgrade grep(1). 1/2

Merge branch 'vendor/GREP' into master.

vendor/grep: upgrade from 2.22 to 3.4

autofs: Move autofs related configs to usr.sbin/autofs/

from freebsd/freebsd@b92449059479770813b2766a0e757d1176e2fab6

FreeBSD has moved autofs scripts to autofs userspace code a while ago.
The end result doesn't change.

bsd-family-tree: Sync with FreeBSD (2.11BSD release date fix).

etc/network.subr: enhance wlan initialization

Introduce new functions wlan_get_unused() and wlan_is_parent(),
and extend wlan_up() to utilize them.

With this change, devices configured the traditional way in rc.conf(5)
are created first, and then all other wireless interfaces are assigned
to next available wlan<index> devices automatically.

This allows either to have wlan configured manually in rc.conf(5) via
"wlans_<iface>" or to remove the static assignment and let devices be
auto-created. With dhcpcd_enable and wpa_supplicant_enable in rc.conf,
no further configuration is then needed to get network connectivity.

Furthermore, this will allow to enhance devd(8) default configuration,
so that also hot-pluggable wireless interfaces are automatically detected
and brought up (ie. assigned to wlan<index> devices).

Reviewed by: Aaron LI

dhcpcd: Move any existing files out of the dhcp chroot.

So it's empty once more.

dhcpcd: Remove chroot setup and restore things as they were before

Newer dhcpcd has an empty chroot.

Merge branch 'vendor/DHCPCD'

Update to dhcpcd-9.1.0 with the following changes:

 * Leases are stored outside the chroot again
 * The chroot directory can now be (and should be) empty [1]
 * BPF: set write filters when supported
 * ARP is now per address rather than per interface
 * Filter allowed ioctls in the privileged actioneer
 * Filter allowed UDP ports used by sendto(2) in the privileged actioneer
 * Filter allowed file paths in the privileged actioneer
 * route socket is now drained on overflow as it cannot be
   re-opened by the unpriviledged user

 * hostname can no longer be clobbered by SLAAC
 * grep is no longer used by the test hook
 * Interface hardware address type changes are now picked up
 * Fixed some RA timing issues
 * Fixed nd_* option parsing in dhcpcd.conf
 * Allow SIGPIPE in scripts
 * Default dhcpcd.conf no longer sends the current hostname
 * Default dhcpcd.conf no longer sends a vendorclassid

dsynth - Track contents of dports to detect changes

* Stat information and path names for the files making up a port
  (in the dports directly tree) is rolled-up into a CRC and tracked
  by dsynth.

* By default, dsynth automatically rebuilds any dport that it detects
  has changed, even if a binary package file already exists, including
  any dependent ports.

* Add the -x and -xx options which may be used to override this behavior.

kernel/pci: Remove embedded newlines in sysctl descriptions.

kernel/pci: Correct an old TUNABLE_INT() to TUNABLE_ULONG().

While here, make the sysctl description look nicer.

dsynth - Work on count mismatch issues, fix binary pkg deletion

* The remaining count issue was due to an incorrect test
  involving PKGF_NOTREADY, which also happens to be the code
  which is supposed to delete packages with missing or modified
  dependencies.

* Fix the test.  This should fix both the remaining count issue
  (any remaining issues will be logged in 05*.log), and hopefully
  also properly delete packages with missing or modified dependencies
  at the start of the run (logged as DELETE-PACKAGE in 00*.log).

Reported-by: tuxillo

dsynth - Work on count mismatch issues

* Sometimes the individual counts do not add up to the total
  count.

* Fix an issue where 'pkg' is not always accounted for.

* Fix an issue where certain ignored packages are not passed on
  to the service list.

* Log unexpected PKGF_PACKAGED state in 05_abnormal*.log.  This
  typically occurs on incremental runs and is not being properly
  accounted for.

* Log any packages left over on the origination list after the
  run completes to 05_abnormal*.log.  These are usually dependencies
  on ports which do not exist in dports.

Remove references to acpinames(8) from various manual pages.

usr.sbin/autofs: Cleanup workaround code for a VFS bug

autofs: Minimize non functional diff vs FreeBSD

sys/sys/mount.h: Add fsidcmp()

Only used by autofs at the moment.

from freebsd/freebsd@30596480c966b8d8bc7436df3467ab2eac145751

Sync ACPICA with Intel's version 20200528.

* Remove acpinames(8). Its functionality is covered by acpiexec(8)'s
  'namespace' command.

* Add preliminary support for 'PlatformRtMechanism' address space
  (will be in the next ACPI specification).

* Fix some issues in iasl(8).

For detailed list, please see sys/contrib/dev/acpica/changes.txt.

kernel - Fix efivar panic

* The efirt driver uses direct-map mode, and creates an independent
  pmap to hold it.  The direct map typically uses userspace addresses,
  so SMAP must be disabled across any EFI call.

* Add smap_open(), smap_close(), smap_smep_disable(), and
  smap_smep_enable() calls for C.

  NOTE: We also have to set pcb_onfault to non-NULL to bypass failsafe
checks done in trap().

* Hack the EFI address space code to disable SMAP and SMEP across
  the EFI call.  Unfortunately since we also have to disable SMEP,
  these functions have to manipulate CR4.

Reported-by: daftaupe

patch(1): sync with FreeBSD to version 2.0-12u11

Summary of notable changes from previous sync:

- add -Vnone option to disable backup files
- avoid infinite loop asking for a filename
- add support for git generated diffs
- don't overrun line buffer in some cases
- fix the file removal test
- give /dev/null patches special treatment

Test commit.

Update test/test/README as suggested in committer(7).

Recommended by: Sascha Wildner :)

Clean up the namespace of <sys/timeb.h>.

While here, do some whitespace cleanup.

drm/linux: Add down_write_killable()

CURDIR returns an absolute path, so GENLOGDIR does not need this slash in it.

mount_msdos: Oops, really sort.

Clean up a few things after moving fparseln() to libc.

* mount_msdos: libutil.h's inclusion can now be sorted.

* mailwrapper: libutil is no longer needed.

* mtree: libutil is no longer needed either but when mtree is built
      as a bootstrap tool, we must make sure that the host's libc is
      sufficiently recent.

* makefs: makefs was relying on mtree's extern.h (which it includes)
      to bring in libutil.h. Add an explicit #include to makefs, now
      that mtree no longer needs libutil.

libc: Bring in getdate() from NetBSD for POSIX conformance.

libutil/libc: Move fparseln(3) from libutil to libc.

Revert "libc: Bring in getdate() from NetBSD for POSIX conformance."

This reverts commit 28bfdfe646cc75375bb9065f47aca011952469ef.

I need to work a bit more on this first.

libc: Bring in getdate() from NetBSD for POSIX conformance.

hack(6): Rename getdate() to getdatestr().

In preparation to importing POSIX getdate() to libc.

Taken-from: NetBSD

libc/utmpx: Add missing #include "un-namespace.h" and adjust.

libc/devname: Move inclusion of <db.h> out of namespace.h / un-namespace.h.

<db.h> is an exception because of DB's 'close' member.

<sys/mount.h>: Put the <sys/mplock2.h> inclusion under _KERNEL.

No need to include in userland.

Reported-by: tuxillo

xargs.1: Change .Fx to .Dx where appropriate

<inttypes.h>: Small sync with FreeBSD.

include/xlocale: Expose xlocale prototypes also upon wrong #include order.

The correct order to expose xlocale prototypes is for example:

#include <stdio.h>
#include <xlocale.h>

This commit fixes the two cases where we didn't accept the reverse
order. FreeBSD's commit msg says that some ports use the wrong
order.

Based-on:    FreeBSD's r233600
Reported-by: zrj

Remove patch(1) from the list of bootstrap tools.

Now that we no longer ship patches in the tree, patch(1) is no longer
needed during buildworld, buildkernel etc. The last patch was removed
in d8d77baac2714febf36f4ac37afccbbbdcdc8857.

While here, also remove our old bsd.patch.mk which was used in the
old days to handle local changes to contrib/ code using patches we
shipped. Since we have git, we use vendor branches which we merge and
then just modify on master for this purpose.

xargs(1): Sync with FreeBSD

  Changes:
    - Use waitpid(2) instead of wait3(2), for portability reasons.
    - Call setlocale(3) with LC_ALL category instead of LC_MESSAGES.
    - Fix -0 vs -L/-I processing.
    - Add -S option to control the maximum size of an argument.
    - Make xargs(1) keep track of its children.
    - Wait for all invocations upon exit.
    - calloc(3) usage fixes.
    - Replace atoi(3) calls with stronum(3) ones.
    - Now -P0 creates as many concurrent processes as possible.
    - Fix exit status expression when a child fails to exec.

The -0 fix solves a problem with DPorts' graphics/libprojectm during stage phase.

libstand: Apply our bzlib.c patch to master.

All it does is to add #ifdefs to compile decompression support only.

While here, remove some unneeded headers from SRCS.

bzip2: Bump WARNS to 3.

bzip2: Update README.DRAGONFLY.

Merge branch 'vendor/BZIP'

vendor/bzip: upgrade bzip2 from 1.0.6 to 1.0.8

Fixes CVE-2016-3189 and CVE-2019-12900.

hier.7: Describe /var/chroot (taken from NetBSD).