libc: Fix a number of .PATH related issues in the Makefiles.

* Adjust a couple of .PATHs in libc's Makefiles so that libc_rtld can
  reuse them.

* Remove non-existent .PATHs.

libc/Makefile.inc: Sort includes alphabetically.

file(1): Fix a small issue in a magic(5) file.

kernel: Fix LINT64 build.

* Add a needed file to sys/conf/files.

* Shield the drm code from 'DEBUG' being defined via opt_global.h (DEBUG
  is a kernel configuration option). This was breaking amdgpu's atom.c
  that defines its own 'DEBUG' macro.

kernel/files: Remove duplicate line.

drm: enable amdgpu module build; update radeon to use updated ttm api

drm/ttm: Update to match amdgpu driver, Linux 4.19 based

drm/amdgpu: Replace firmware names

drm/amdgpu: Port to DragonFly

* This commit does not build as it requires ttm changes from
  the corresponding commit

Amdgpu driver changes:
* Builds with CONFIG_DRM_AMD_DC and CONFIG_DRM_AMD_DC_DCN1_0 defined
* Support for older GPUs (SI, CIK) is not implemented
* Several functions for display core module require msse and
  mhard-float gcc flags to be set; and they require special
  treatment from kernel by utilizing kernel_fpu_begin/kernel_fpu_end
  functions
* It is required that tunable set amdgpu_hw_i2c=1 to work around
  panic during module load
* Thunderbolt support is disabled
* Amdgpu trace infrastructure replaced by a stub

Drm changes:
* register_framebuffer is called at the later stage, after crtcs
  were properly initialized
* drm_close implemented
* drm_connector_update_edid_property implemented
* Fix drm device stays locked in case of an error or module shutdown
* Imported drm gem framebuffer helper functions
* Fixed null pointer deref in the drm mmap ioctl
* Imported atomic64_inc and atomic_long_* functions from Linux
* Imported bitmap_complement function from Linux
* Imported kfifo struct from Linux
* Implemented dma fence array properly
* Imported rb_root_cached struct from Linux
* Implemented several dma fence functions

Co-authored-by: François Tigeot <ftigeot@wolfpond.org>
Co-authored-by: Matthew Dillon <dillon@apollo.backplane.com>

drm: Import the amdgpu driver from Linux 4.19

usr.sbin/fstyp: Fix intra-object buffer overread for labeled msdosfs volumes

Volume labels, like directory entries, are padded with spaces and so
have no NUL terminator. Whilst the MIN for the dsize argument to strlcpy
ensures that the copy does not overflow the destination, strlcpy is
defined to return the number of characters in the source string,
regardless of the provided dsize, and so keeps reading until it finds a
NUL, which likely exists somewhere within the following fields, but On
CHERI with the subobject bounds enabled in the compiler this buffer
overread will be detected and trap with a bounds violation.

taken from FreeBSD
34fb1c133c5b8616f14f1d740d99747b427f5571
63d24336fd1aad81a4bdefb11d8c487cee5f88a0

<readpassphrase.h>: Remove duplicate include.

makefs.8: Document msdos fs support.

Taken-from: FreeBSD

kernel: Add xdisk to LINT64.

xdisk.4: Some cleanup.

Also add an xdisk(4) reference to hammer2.8.

kernel - Make getpeereid() work with socketpair()

* getpeereid() now works with socketpair() sockets.

Requested-by: rtzoeller

kernel - Add kernel_fpu_begin() and kernel_fpu_end()

* Add kernel_fpu_begin() and kernel_fpu_end().  Some linux stuff
  in amdgpu will need it.

  Generally speaking the entire FP system needs a rewrite, but I'm
  not doing that now.

usr.sbin/makefs: Ignore the "tags" keyword in mtree manifests

An install using -DNO_ROOT emits mtree entries containing tags used by
pkgbase.  makefs(8) can safely ignore them, so do that rather than
emitting a warning for each entry.

taken from FreeBSD ed42b22abc48ba53aaa38e1e64438b6d71e7e944

usr.sbin/makefs: fix use-after-free in read_mtree_keywords()

The st variable is used as a shortcut for &node->inode->st, but in one
branch just before the exit we update node->inode without changing st.

taken from FreeBSD 12ad8bdb34aa990bcc4f3faa92a6e0557385d2b2

usr.sbin/makefs: Fix -Wpointer-sign warnings in makefs

UFS part taken from FreeBSD fe41c64b577251fd1df89aa6c722a877b88b402b
iso9660 part is unchanged.

usr.sbin/makefs: Also set UFS di_birthtime when building on Linux

Since st_birthtime doesn't exists on Linux (unless you use statx(2)),
we instead populate it with the st_ctime value.

taken from FreeBSD 1e9f67e2e4bcfb5aff72b184b5fce5f1faf3ca68

usr.sbin/makefs: Fix "time" mtree attribute handling

When processing mtree(5) MANIFEST files, makefs(8) previously threw an
error if it encountered an entry whose "time" attribute contained a
non-zero subsecond component (e.g. time=1551620152.987220000).

Update the handling logic to properly assign the subsecond component if
built with nanosecond support, or silently discard it otherwise.

Also, re-enable the time attribute for the kyua tests.

taken from FreeBSD 286258a9a0e39cfce79d3b072a665b88bfb422c7

usr.sbin/makefs: Improve error handling

Bail out if one of the files
scheduled to go to the FS image we are making cannot be read (e.g. EPERM).
Current behaviour when we issue waring but still proceeed and return success
is definitely not correct: masking out error condition as well as making a
slighly inconsistent FS where attempt to access the file in question ends up
in EBADF.

taken from FreeBSD 781e78182da4fb382485b9cb71127a7c2a2588b0

xdisk - Link into tree, add manual page

* Link the xdisk driver into the tree and add a quick manual page.
  The xdisk driver uses libdmsg + the hammer2 service daemon to
  implement remote block devices over a network.

  The hammer2 service daemon is the lynchpin of the system, see
  the section on setting up /etc/hammer2 in the hammer2 manual page
  for more information.

* xdisk works like a dedicated block device, so is NOT like a NFS share.
  At any given time, a particular block device should only be open for
  writing by a single client.  The driver needs some work w/regards to
  maintaining open ref counts and such across the mini-cloud.  Multiple
  clients should not try to share the same block device.

  That said, filesystem performance over xdisk block devices should be
  very good.  Since the filesystem is running on the client-side, system
  buffer cache, read-ahead, and write buffering may be fully employed
  and performance will generally be better than NFS.

* Note that libdmsg has been in the tree awhile but is still considered
  highly experimental.  It uses encrypted connections but the encryption
  is not considered to be robust at this time.  Authentication is implemented
  via a combination of public/private key pairs and IP addresses.

  The hammer2 manual page describes the directives that may be used to
  create these keys.

libdmsg - Get the encryption operational again

* Currently encrypts/decrypts, but the algorithm is really just a
  place-holder for something better.  It does not use any openssl
  algos beyond basic public key exchange, session key exchange, and
  raw aes-256-gcm encryption with a block IV increment to prevent replay
  attacks.

* Note that in the final protocol there will be two verifiers embedded
  in the dmsg itself, rather than tacked on via the transport.  One is
  the 32-bit header crc (there is also an aux-data crc), and the second
  is a 64-bit verifier that the link-level is intended to replace and check.
  The dmsg also has a signature and 24 random bits to mix things up.

hammer2.8: Minor fixes

hammer2.8: Adds a reference to -d option

usr.sbin/makefs: Add FAT support (taken from FreeBSD)

Basically same as FreeBSD version, except that several denode
functions (that makefs(8) is trying to override kernel ones using
the same name) have slightly different arguments in DragonFly.

This commit adds #ifdef MAKEFS here and there in
sys/vfs/msdosfs/*.h, which is the same in FreeBSD makefs(8).

FreeBSD makefs(8) now uses m_buf and m_vnode instead of overriding
kernel structs (using that they can't be included in userspace),
but DragonFly still uses buf and vnode defined in makefs(8).

dhcpcd: Note update to 9.4.1

dhcpcd: remove parts of the build import-src now does.

Merge branch 'vendor/DHCPCD'

Update to dhcpcd-9.4.1 with the following changes:

 * BSD: Find the correct interface for tunnelled routes
 * OpenBSD: Fix uniqueness of routes for matching priorities
 * Linux: Support more platforms for seccomp (thanks to Fabrice Fontaine)
 * eloop: Process all waiting fd's as they come in
 * control: Unlink sockets when not in privsep
 * privsep: Renamed Master to Manager
 * privsep: Renamed Privilged Actioneer to Privileged Proxy
 * privsep: Fix getting interface VLANID on BSD
 * privsep: Enforce proper alignment of serialized struct cmsghdr
 * IPv4LL: Don't remove statically assigned addresses
 * routes: Fix route comparision for network prefixes with different masks
 * DHCP6: Only send FQDN for SOLICIT, REQUEST, RENEW, or REBIND messages
 * DHCP6: Don't spam the log when a RA repeatedly triggers an INFORM
 * DHCP: Fix infinite INFORM messages

Sync zoneinfo database with tzdata2021e from ftp://ftp.iana.org/tz/releases

Previously, we were on 2021a.

For a detailed list of changes, see share/zoneinfo/NEWS.

net: Allow binding of unspecified address without address existance

This removes a broken check. The comment says it's broken, but
it's only broken by it's existance.

dsynth - Conditionally avoid passing PKG_SUFX make env

* Avoid WARNINGs in the logs due to passing PKG_SUFX into make env.
  Remove this for pkg versions 1.17 or bigger.

* Fixes WARNING's in the logs and related sleep 10's generated by
  the port Mk files.

dsynth - Add PKG_COMPRESSION_FORMAT

* Generate a PKG_COMPRESSION_FORMAT env variable in addition to
  PKG_SUFX.  This should fix the compression format used for
  package generation to be the one specified in dsynth.ini.

* For now keep PKG_SUFX in case dsynth is run on an older system.
  It will cause dports to generate warnings in the logs, which can
  be ignored.

dsynth - Support pkg 1.17 (.pkg suffix for packages)

* When scanning for binary packages, check for .pkg suffixed
  files unconditionally in addition to checking for the older
  .<compression_fmt> files.

* Use the template-generated pkg-static when regenerating the
  repo, otherwise an older pkg or pkg-static installed on the
  system will be used and cause problems with the new .pkg
  suffix format.

* Also give a 'reason' for why the template gets regenerated,
  when dsynth decides it needs to.

dsynth: Explicitly fail when the chroot can't resolve DNS names

init(8): Remove unneeded libcrypto linking.

Local adjustments for OpenSSH-8.3p1.

Merge branch 'vendor/OPENSSH'

Import OpenSSH-8.8p1

Revert "fdisk(8): check the result of read_s0()"

This reverts commit f01e65a33a3d0f4dc120b24b3298d75b1bb8f909.

We must ignore read_s0() errors when -I is passed.

This unbreaks ISO/IMG building.

bot test #2

bot test

Sync ACPICA with Intel's version 20210930.

* Add new "Windows 2020" _OSI string.

* Improve iasl(8).

* Some sleep/resume fixes (that I guess do not affect us).

For a detailed list, please see sys/contrib/dev/acpica/changes.txt.

libressl: Fix validation errors in certificate chains with expired certificates

 - Local patch to LibreSSL, from OpenBSD 6.9 errata 018, September 30, 2021.
 - Tested with pkg, fetch.

Reported-by: zach, others
Taken-from: OpenBSD

man.1: Add some examples (taken from FreeBSD).

mandoc(1): Update local files for 1.14.6.

Merge branch 'vendor/MDOCML'

Import mandoc-1.14.6.

See https://mandoc.bsd.lv/NEWS for a list of changes.

Fix a typo in a locale upgrade script.

Fix .In abuse and a wrong include path in three manual pages.

Fix some include file paths (.In) in two manual pages.

Update the pciconf(8) database.

September 14, 2021 snapshot from https://pci-ids.ucw.cz

Some additions and fixes related to fdatasync(2) and posix_fallocate(2).

* Fix a small issue in VOP_FDATASYNC()'s definition in <sys/vfsops.h>.

* Mention fdatasync() in fsync.2 (this basically syncs that manual page
  with FreeBSD, with a few adjustments).

* Add a manual page for posix_fallocate() (from FreeBSD, with a few
  adjustments).

* Mention fdatasync() in the list of reentrant functions in sigaction.2.

* In pthread_testcancel.3, mention fdatasync() in the list of functions
  for which a cancellation point will occur.

* Mention VOP_FDATASYNC() in VOP_FSYNC.9 (partly taken from FreeBSD).

* Remove a compatibility define in the fsstress tool.

Thanks to tkusumi for reviewing.

gencat(1): Bump WARNS to 6.

sys/kern: Add fdatasync(2)

Based on the following FreeBSD commits in 2016.
295af703a0d7987c6cf4987e7b7f5f07b3ca1221
1c1cc89580f0fbfabaf6f6c7f0f6440eef0c128e

Add the syscall and also add it to pthread's cancellation point.
The default behavior is same as fsync(2), which is fine but inefficient.

libc: Remove __NO_TLS checks inherited from FreeBSD.

libc: Move posix_fallocate() to the right place in Symbol.map.

sys/kern: Move vop_stdallocate() within vfs_default.c

vop_allocate stuff are usually placed after vop_markatime,
but looking at vfs_default.c this std function should probably
be the last.

<sys/kernel.h>: Remove unused SI_BOOT2_VMM definition.

sys/kern: Add posix_fallocate(2)

Based on the initial posix_fallocate(2) implementation in FreeBSD
from d91f88f7f38078ac6dd4b0f0e77470d605d1518e in 2011.

There is nothing special or efficient about the default behavior.
VFS has no knowledge of fs details.

<sys/*.h>: Fix some include guard related comments.

<sys/*.h>: Fix some include guard names.

kernel/libc: Remove the old vmm code.

Removes the kernel code and two system calls.

Bump __DragonFly_version too.

Reviewed-by: aly, dillon

installer: Use <sys/diskmbr.h>'s define instead of a constant.

kernel: In some files, make it clearer that only 0 is returned.

The error case has already been dealt with earlier in the function.

hammer2 - Fix panic when /tmp and /var/tmp are nullfs mounts

* Certain illegal rename operations can cause a panic() in hammer2
  when /tmp and/or /var/tmp are nullfs mounts into an H2 filesystem.

* Catch the situation, report it, and generate an error code instead
  of panicing.

Reported-by: tuxillo and at least one other person recently

usr.sbin/fstyp: Add BeFS support

from FreeBSD 0e92585cde5101506720ca1b904372317b7d84b6

sys/vfs/ext2fs: Correct a typo in an error message

from FreeBSD 47f880ebeb3092b1b7bbc6d75e82532e43bbf010

Make a number of headers self-sufficient.

Also, do not trust headers to bring in needed headers.

<sys/mman.h>: Remove MAP_RENAME, MAP_NORESERVE and MAP_NOEXTEND defines.

They were all inherited from FreeBSD and never implemented nor used.
FreeBSD never implemented them either and has removed all of them by
now.

Pointed-out-by: rtzoeller

Fix grammar issues in a few manual pages.

libnvmm.3: Fix some typos.

kernel/acpi: Remove the never used ACPI_NO_SEMAPHORES kernel option.

Some trivial changes to better comply with strict aliasing. (2)

Now that the warnings are fixed, do not pass -fno-strict-aliasing
anymore.

getconf(1): Add support for retrieving _SC_PHYS_PAGES.

boot0cfg(8): Use some constants from <sys/diskmbr.h>.

While here, rename DOSMAGICOFFSET to DOSMAGICOFF, like DOSPARTOFF.

Some trivial changes to better comply with strict aliasing.

<sys/diskmbr.h>: Don't expose the partition type struct/array for boot code.

defaults/compilers.conf: Add CCVER definitions for clang11.

<sys/diskmbr.h>: Minor style fix (missed in last commit).

installer(8): Move the contents of sysids.h into <sys/diskmbr.h>.

It is needed by both fdisk(8) and the installer.

<sys/diskmbr.h> seems reasonable because it already has defines for
various partition types. Use them in the struct. Adjust the naming of
the structure and the array to match the rest of <sys/diskmbr.h>.

Based on a patch by Alexander Kuleshov <kuleshovmail@gmail.com>.

Dragonfly-bug: <https://bugs.dragonflybsd.org/issues/2875>

sysconf.3: Document more constants.

fdisk(8): check the result of the write_s0()

This patch provides a check of the write_s0() function call
which can be -1 on failure.

fdisk(8): close boot_fd on failure

The init_boot() function opens/reads the /boot/mbr file or
file which is given with the -b option. There are couple
failure cases can be occured there. So we need to close
file description of /boot/mbr.

fdisk(8): check the result of read_s0()

The read_s0() function can return -1 on failure, so we need to
check its result.

fdisk(8): check result of the read_disk() function

During detection of the sector size, the read_disk function may
return '-1'. This patch provides check for this case.

fdisk(8): check result of the getdevpath(3)

We are using the getdevpath(3) function in the fdisk.c As described
in the manual:

getdevpath() returns a pointer to a malloc()'d path on success and NULL
on failure.  If a failure occurs errno will be set appropriately.

So, we need to check the result of the getdevapth() call.

fdisk: use macros from the <sys/diskmbr.h>

The fdisk(8) contains definitions of the C:H:S related macros. In
the same time, the <sys/diskmbr.h> header provides the same set of
macros. Let's use it, instead of self written.

periodic/accounting: Fix a missing "Doing login accounting:" line.

While here, sync monthly/200.accounting with FreeBSD, adjust the
periodic.conf.5 manual page for the changes in 980397133d362b559ec,
and also point out that daily's accounting is process accounting
(from FreeBSD).

Submitted-by: James Cook (falsifian)
Dragonfly-bug: <https://bugs.dragonflybsd.org/issues/3289>
               <https://bugs.dragonflybsd.org/issues/3290>

dsynth.1: Document hooks

Suggested-and-reviewed-by: swildner

<errno.h>: Make ENOTRECOVERABLE and EOWNERDEAD visible unconditionally.

The problem here is that GCC will expect these errnos to be
visible unconditionally for its C++ headers - and errors in
<bits/error_constants> if they aren't - as soon as we set the
HAVE_E* for them in GCC's config.h.

On the other hand we have software such as www/qt5-webengine
that sets _POSIX_C_SOURCE and/or _XOPEN_SOURCE to older standards
that didn't specify those two errnos.

If anything, it is rather a "fault" of GCC's C++ header handling
than one of qt5-webengine.

Reported-by: tuxillo

<signal.h>/<ucontext.h>: Split those two headers better.

<signal.h> needs only ucontext_t and stack_t from <ucontext.h>. Split
those out to <sys/_ucontext.h> and stop including the full <ucontext.h>
from <signal.h> and vice versa, for userland.

In <ucontext.h>, continue defining siginfo_t for non-POSIX because
third party code expects us to.

This has been tested with a full dports bulk build.

Update the pciconf(8) database.

July 25, 2021 snapshot from https://pci-ids.ucw.cz

<stdio.h>: Clean up the POSIX namespace better.

* Include just <machine/stdint.h> for POSIX, but leave <sys/types.h>
  otherwise for the traditional expectations of third party code.

* POSIX did not require <stdio.h> to define off_t until Issue 7, even
  though ftello() and fseeko() were using it for a long time. This
  seems to be a "bug" in the specification, so adjust the visibility
  of off_t to match that of the functions. Actually use off_t for the
  ftello() and fseeko() prototypes.

Tested with a full bulk build.

Include <inttypes.h> instead of <cpu/inttypes.h> in world.

Remove the unneeded inclusions otherwise.

libc: Clean up the Symbol.maps a bit.

* Remove sysv_cond_wait and sysv_cond_signal because these functions
  were always static.

* Remove tre_have_approx because this function is only available with
  -DTRE_APPROX which we never used, nor build with right away.

* Remove pthread_init since there was never a pthread_init in libc.
  Seems to be just a typo.

* Remove mexitcount which was kernel only.

* Add a comment to a symbol that will only show up when libc is built
  with a debug option.

libc: Clean up some kernel profiling bits.