libressl: Fix validation errors in certificate chains with expired certificates

 - Local patch to LibreSSL, from OpenBSD 6.9 errata 018, September 30, 2021.
 - Tested with pkg, fetch.

Reported-by: zach, others
Taken-from: OpenBSD

man.1: Add some examples (taken from FreeBSD).

mandoc(1): Update local files for 1.14.6.

Merge branch 'vendor/MDOCML'

Import mandoc-1.14.6.

See https://mandoc.bsd.lv/NEWS for a list of changes.

Fix a typo in a locale upgrade script.

Fix .In abuse and a wrong include path in three manual pages.

Fix some include file paths (.In) in two manual pages.

Update the pciconf(8) database.

September 14, 2021 snapshot from https://pci-ids.ucw.cz

Some additions and fixes related to fdatasync(2) and posix_fallocate(2).

* Fix a small issue in VOP_FDATASYNC()'s definition in <sys/vfsops.h>.

* Mention fdatasync() in fsync.2 (this basically syncs that manual page
  with FreeBSD, with a few adjustments).

* Add a manual page for posix_fallocate() (from FreeBSD, with a few
  adjustments).

* Mention fdatasync() in the list of reentrant functions in sigaction.2.

* In pthread_testcancel.3, mention fdatasync() in the list of functions
  for which a cancellation point will occur.

* Mention VOP_FDATASYNC() in VOP_FSYNC.9 (partly taken from FreeBSD).

* Remove a compatibility define in the fsstress tool.

Thanks to tkusumi for reviewing.

gencat(1): Bump WARNS to 6.

sys/kern: Add fdatasync(2)

Based on the following FreeBSD commits in 2016.
295af703a0d7987c6cf4987e7b7f5f07b3ca1221
1c1cc89580f0fbfabaf6f6c7f0f6440eef0c128e

Add the syscall and also add it to pthread's cancellation point.
The default behavior is same as fsync(2), which is fine but inefficient.

libc: Remove __NO_TLS checks inherited from FreeBSD.

libc: Move posix_fallocate() to the right place in Symbol.map.

sys/kern: Move vop_stdallocate() within vfs_default.c

vop_allocate stuff are usually placed after vop_markatime,
but looking at vfs_default.c this std function should probably
be the last.

<sys/kernel.h>: Remove unused SI_BOOT2_VMM definition.

sys/kern: Add posix_fallocate(2)

Based on the initial posix_fallocate(2) implementation in FreeBSD
from d91f88f7f38078ac6dd4b0f0e77470d605d1518e in 2011.

There is nothing special or efficient about the default behavior.
VFS has no knowledge of fs details.

<sys/*.h>: Fix some include guard related comments.

<sys/*.h>: Fix some include guard names.

kernel/libc: Remove the old vmm code.

Removes the kernel code and two system calls.

Bump __DragonFly_version too.

Reviewed-by: aly, dillon

installer: Use <sys/diskmbr.h>'s define instead of a constant.

kernel: In some files, make it clearer that only 0 is returned.

The error case has already been dealt with earlier in the function.

hammer2 - Fix panic when /tmp and /var/tmp are nullfs mounts

* Certain illegal rename operations can cause a panic() in hammer2
  when /tmp and/or /var/tmp are nullfs mounts into an H2 filesystem.

* Catch the situation, report it, and generate an error code instead
  of panicing.

Reported-by: tuxillo and at least one other person recently

usr.sbin/fstyp: Add BeFS support

from FreeBSD 0e92585cde5101506720ca1b904372317b7d84b6

sys/vfs/ext2fs: Correct a typo in an error message

from FreeBSD 47f880ebeb3092b1b7bbc6d75e82532e43bbf010

Make a number of headers self-sufficient.

Also, do not trust headers to bring in needed headers.

<sys/mman.h>: Remove MAP_RENAME, MAP_NORESERVE and MAP_NOEXTEND defines.

They were all inherited from FreeBSD and never implemented nor used.
FreeBSD never implemented them either and has removed all of them by
now.

Pointed-out-by: rtzoeller

Fix grammar issues in a few manual pages.

libnvmm.3: Fix some typos.

kernel/acpi: Remove the never used ACPI_NO_SEMAPHORES kernel option.

Some trivial changes to better comply with strict aliasing. (2)

Now that the warnings are fixed, do not pass -fno-strict-aliasing
anymore.

getconf(1): Add support for retrieving _SC_PHYS_PAGES.

boot0cfg(8): Use some constants from <sys/diskmbr.h>.

While here, rename DOSMAGICOFFSET to DOSMAGICOFF, like DOSPARTOFF.

Some trivial changes to better comply with strict aliasing.

<sys/diskmbr.h>: Don't expose the partition type struct/array for boot code.

defaults/compilers.conf: Add CCVER definitions for clang11.

<sys/diskmbr.h>: Minor style fix (missed in last commit).

installer(8): Move the contents of sysids.h into <sys/diskmbr.h>.

It is needed by both fdisk(8) and the installer.

<sys/diskmbr.h> seems reasonable because it already has defines for
various partition types. Use them in the struct. Adjust the naming of
the structure and the array to match the rest of <sys/diskmbr.h>.

Based on a patch by Alexander Kuleshov <kuleshovmail@gmail.com>.

Dragonfly-bug: <https://bugs.dragonflybsd.org/issues/2875>

sysconf.3: Document more constants.

fdisk(8): check the result of the write_s0()

This patch provides a check of the write_s0() function call
which can be -1 on failure.

fdisk(8): close boot_fd on failure

The init_boot() function opens/reads the /boot/mbr file or
file which is given with the -b option. There are couple
failure cases can be occured there. So we need to close
file description of /boot/mbr.

fdisk(8): check the result of read_s0()

The read_s0() function can return -1 on failure, so we need to
check its result.

fdisk(8): check result of the read_disk() function

During detection of the sector size, the read_disk function may
return '-1'. This patch provides check for this case.

fdisk(8): check result of the getdevpath(3)

We are using the getdevpath(3) function in the fdisk.c As described
in the manual:

getdevpath() returns a pointer to a malloc()'d path on success and NULL
on failure.  If a failure occurs errno will be set appropriately.

So, we need to check the result of the getdevapth() call.

fdisk: use macros from the <sys/diskmbr.h>

The fdisk(8) contains definitions of the C:H:S related macros. In
the same time, the <sys/diskmbr.h> header provides the same set of
macros. Let's use it, instead of self written.

periodic/accounting: Fix a missing "Doing login accounting:" line.

While here, sync monthly/200.accounting with FreeBSD, adjust the
periodic.conf.5 manual page for the changes in 980397133d362b559ec,
and also point out that daily's accounting is process accounting
(from FreeBSD).

Submitted-by: James Cook (falsifian)
Dragonfly-bug: <https://bugs.dragonflybsd.org/issues/3289>
               <https://bugs.dragonflybsd.org/issues/3290>

dsynth.1: Document hooks

Suggested-and-reviewed-by: swildner

<errno.h>: Make ENOTRECOVERABLE and EOWNERDEAD visible unconditionally.

The problem here is that GCC will expect these errnos to be
visible unconditionally for its C++ headers - and errors in
<bits/error_constants> if they aren't - as soon as we set the
HAVE_E* for them in GCC's config.h.

On the other hand we have software such as www/qt5-webengine
that sets _POSIX_C_SOURCE and/or _XOPEN_SOURCE to older standards
that didn't specify those two errnos.

If anything, it is rather a "fault" of GCC's C++ header handling
than one of qt5-webengine.

Reported-by: tuxillo

<signal.h>/<ucontext.h>: Split those two headers better.

<signal.h> needs only ucontext_t and stack_t from <ucontext.h>. Split
those out to <sys/_ucontext.h> and stop including the full <ucontext.h>
from <signal.h> and vice versa, for userland.

In <ucontext.h>, continue defining siginfo_t for non-POSIX because
third party code expects us to.

This has been tested with a full dports bulk build.

Update the pciconf(8) database.

July 25, 2021 snapshot from https://pci-ids.ucw.cz

<stdio.h>: Clean up the POSIX namespace better.

* Include just <machine/stdint.h> for POSIX, but leave <sys/types.h>
  otherwise for the traditional expectations of third party code.

* POSIX did not require <stdio.h> to define off_t until Issue 7, even
  though ftello() and fseeko() were using it for a long time. This
  seems to be a "bug" in the specification, so adjust the visibility
  of off_t to match that of the functions. Actually use off_t for the
  ftello() and fseeko() prototypes.

Tested with a full bulk build.

Include <inttypes.h> instead of <cpu/inttypes.h> in world.

Remove the unneeded inclusions otherwise.

libc: Clean up the Symbol.maps a bit.

* Remove sysv_cond_wait and sysv_cond_signal because these functions
  were always static.

* Remove tre_have_approx because this function is only available with
  -DTRE_APPROX which we never used, nor build with right away.

* Remove pthread_init since there was never a pthread_init in libc.
  Seems to be just a typo.

* Remove mexitcount which was kernel only.

* Add a comment to a symbol that will only show up when libc is built
  with a debug option.

libc: Clean up some kernel profiling bits.

hammer2 - bulkfree now validates bigmask

* bulkfree now validates that the roll-up bigmask is reasonable
  and adjusts it if it is not.

* Add vfs.hammer2.aux_flags and implement a bigmask override with
  it that, if set, forces bigmask to -1 in the bulkfree.  Should
  not be needed now that bulkfree validates the field.

hammer2 - Only clear the bigmask hint in relaxed mode freemap scans

* When allocating blocks, the bigmask hint allows the allocator to
  skip sub-trees that are known to be fully allocated.  The bit for
  the appropriate radix (block size being allocated) is cleared when
  a full scan reveals no available blocks in the sub-tree.

* When the filesystem starts to fill up, there might not be any blocks
  in class-assigned sub-trees, but there could be blocks in the sub-trees
  for other classes.  Normally the allocator first tries to find a block
  in a matching class, and if that fails it tries to find a block in an
  unrelated class using a 'relaxed' freemap search.

  The bug is that the bigmask hint was being cleared for non-relaxed
  searches that failed, causing the later relaxed search to also fail
  even though blocks might be allocatable.

* Fixed by only clearing the bit when a full relaxed scan determines
  that no blocks are available.

id(1): Fix buildworld.

sbin/hammer2: Fix total_size inconsistency check

This should be errx(). The ondisk total_size != sum of volumes
means total_size is corrupted or volume(s) missing, regardless of
<4 bad volume headers.

sbin/hammer2: Silence -Waddress-of-packed-member warnings

Not a problem on x86_64, but silence warnings caused by callers
passing address of packed (possibly unaligned) struct fields.

id: Add 'a' no-op option for compatibility with other implementations (Solaris)

Taken-from: FreeBSD

tmpfs - Remove debugging kprintf()

* Remove the kprintf("tmpfs: vp %p sleepfail\n", vp), this
  case has been verified to occur in numerous situations and
  the code path is now considered to be tested.

kernel - Add a hold count to struct rman

* Add a hold count to protect against destruction, fixing a race
  between rman list iterations (the sysctl iteration) and device
  activity that adjusts the rman lists.

* Fixes a panic related to Firefox.

kernel - Workaround qemu bug w/ MSR_IA32_ARCH_CAPABILITIES

* qemu allows cpuid report that MSR_IA32_ARCH_CAPABILITIES exists, but
  then fails to implement the MSR.  This causes the kernel to panic
  in early boot.

* Use rdmsr_safe() and report the non-working msr instead of panicing.

* Fixes qemu + DFly on some recent Intel cpus.

refs #3292

<errno.h>: Add ENOTRECOVERABLE and EOWNERDEAD.

These errno constants are really for robust mutexes which we do not
support. However, llvm seems to be abusing ENOTRECOVERABLE for other
purposes, so just add them both.

Reported-by: tuxillo

Add some necessary #include's in signal related headers.

mkdep: Remove the old, never used mkdep.sh.

It was needed on some architectures supported by FreeBSD, which is how
we inherited it.

Rename the mkdep.gcc.sh to mkdep.sh and clean up the Makefile.

mount.8: Fix typo.

gdb.4/sysctl.9: Remove dead .Xr

Sync ACPICA with Intel's version 20210730.

* Various fixes for iasl(8).

* Fixes and additions in table definitions.

For a detailed list, please see sys/contrib/dev/acpica/changes.txt.

ndp(8): Use RT_ROUNDUP to correctly increase the position in the buffer.

Submitted-by: James Cook (falsifian)
Dragonfly-bug: https://bugs.dragonflybsd.org/issues/3291

nvmm.4: Fix section order.

libnvmm.3: Oops, forgot one .Cd correction.

libnvmm.3: Fix .Cd misuse.

libnvmm.3: Extend NAME section and add MLINKS for functions.

nvmm: Some documentation adjustments.

* Fix '.Lb libnvmm' for mandoc(1).

* Use standard list in libnvmm.3's ERRORS section.

* Add a SYNOPSIS to nvmm.4.

* Use short form .Nm in nvmmctl.8.

Revert "WIP"

This reverts commit 5d4c71cc3f59393bac29819031ed5afcedda6359.

Oops, didn't intend to commit this...

WIP

test/nvmm/demo: Clean up header inclusions

* Remove unused header inclusions.
* Reorder header inclusions.
* Define MSR_APICBASE, APICBASE_BSP and APICBASE_EN locally to be more
  OS-independent.

testcases/libnvmm: Remove unneeded header inclusions

They are now provided by the <dev/virtual/nvmm/nvmm.h> header file.

libnvmm: Remove unneeded header inclusions and defines

They are now provided by the <dev/virtual/nvmm/nvmm.h> header file.

nvmm: Adjust comments about TSC sync and gd_reqflags check

Replace QEMU with a more generic "emulator", and adjust the comments
about TSC sync to be more consistent and concise.

nvmm: Move DragonFly-specific code to os_vmspace_create()

Move the DragonFly-specific pmap code to os_vmspace_create() in
nvmm_dragonfly.c, making the nvmm.c code more OS-independent.

nvmmctl(8): Fix installing to a ${DESTDIR} on hosts without the nvmm group.

This affects building master ISO/IMGs on older hosts, or any other
such scenario involving a ${DESTDIR}. If the host's world is too old,
let install(1) use the databases (master.passwd, group) from the source
tree.

installworlds for the purpose of upgrading the machine without ${DESTDIR}
had the databases upgraded earlier in the install and are not affected.

Revert "install(1): Disable -N option in btools."

This reverts commit bf226617061340a3979d19957444da0997124229.

This is too useful to be missing.

sys/vfs/ext2fs: Fix incorrect VFS_VGET() argument in ext2_fhtovp()

A bug introduced when porting from FreeBSD.

kernel/nvmm: Fix doing just 'make depend' in the module directory.

*_if.h and opt_*.h have to be generated before assym.s.

kernel - Rename vm_map_wire() and vm_map_unwire() (3)

Remove a now obsolete comment.

kernel - Rename vm_map_wire() and vm_map_unwire() (2)

* Deconfuse comment

kernel - Rename vm_map_wire() and vm_map_unwire()

* These names are mutant throwbacks to an earlier age and no
  longer mean what is implied.

* Rename vm_map_wire() to vm_map_kernel_wiring().  This function can
  wire and unwire VM ranges in a vm_map under kernel control.  Userland
  has no say.

* Rename vm_map_unwire() to vm_map_user_wiring().  This function can
  wire and unwire VM ranges in a vm_map under user control.  Userland
  can adjust the user wiring state for pages.

kernel - Correct flags argument to vm_map_wire() (no operational change)

* vm/vm_unix.c was making two calls to vm_map_wire() passing FALSE for
  kmflags.  It needs to pass 0 here, not FALSE.  Same value, less
  confusion.

Reported-by: aly

sys/vfs/hammer2: Fix bulkfree message/comments on old ondisk format

in addition to b0ac2d2999bc7ac111dbb5ffbc0f7ffbb4c92988.
The bulkfree descriptions written in 2015 or before were not uptodate
with the current ondisk spec.

freemap leaf block: 64KB -> 32KB (out of 64KB)
freemap level0: 2MB -> 4MB
freemap level1: 2GB -> 1GB

sys/vfs/hammer2: Fix "2MB segs cleaned" message to 4MB

HAMMER2_FREEMAP_LEVEL0_RADIX was 21 (now 22) when this message
first appeared in d0fcd3ec4a1cbbfa32581cf24ecd6f3509f1f57c in 2015.

sys/vfs/hammer2: Rename hammer2_bulk_scan() to hammer2_bulkfree_scan()

Sync with function name in kprintf messages.
This was also the only function without "free" prefix.

sys/vfs/hammer2: Remove unused hammer2_bulkfree_info::saved_mirror_tid

No longer used since c8c0a18a66946d3ec5fd24de73f593da9c4af6ba in 2017.

sys/vfs/hammer2: Remove unused hammer2_chain_save::pri

Never used since first appeared in 125966e80c1aba734d3d5f12a8fcfde2bbcdb018 in 2015.

nvmm: Fix building nvmm into kernel

* Remove 'DIAGNOSTIC' define from 'nvmm_os.h'.  First, 'DIAGNOSTIC' and
  'INVARIANTS' are different options.  Secondly, 'DIAGNOSTIC' should be
  defined in kernel configs, e.g., LINT64 defines it.
* Remove 'LOCORE' define from 'nvmm_x86_{svmfunc,vmxfunc}.S'.  It's
  already defined on the command line, when compiling ASM source files
  with the kernel (i.e., building the module into the kernel).
* Manually define 'LOCORE' for 'nvmm_x86_{svmfunc,vmxfunc}.o'
  compilation in the Makefile, fixing building as a standalone module.

This fixes building nvmm into kernel, like LINT64.

Thanks swildner for reporting the issue and helping with the fix.

syslogd(8): Fix klog may be broken into multiple incomplete lines

Fix readklog() to not emit partial lines by changing it to use a static
buffer for reading log lines from /dev/klog.  Thus we can make it
only emit the line for printing if there is a complete line.

This fixes the issue that a kernel log line may be broken into multiple
incomplete lines that are written into log file by syslogd(8),
especially when the system is under load.

Patch-by: Matt Dillon

nvmm: Fix comm page unmapping issue by doing it on userland side

Previously, we're mapping and unmapping the comm page for userland
process both on the kernel side.  The unmapping was called at the point
of closing the fd.

However, the kernel may destroy process' vmspace before or after closing
the fd, so there is no guarantee that kernel can get the correct address
space to unmap the comm page for the userland process.  Therefore, do
the comm page unmapping on the userland side in libnvmm to fix the above
issue.

In addition, add the 'comm_size' member to 'struct nvmm_capability' to
expose the comm page size to userland, which is required for the
unmapping operation.  This breaks ABI, so bump NVMM_KERN_VERSION.
Update nvmmctl(8) accordingly to print the comm page size.

This commit partially reverts:
"nvmm: Add missing comm page unmapping"

nvmm: Add back NetBSD bits

Bring back the NetBSD bits lost during the porting.  One minor change is
required: MODULE_CLASS_MISC -> MODULE_CLASS_DRIVER.  Otherwise, loading
nvmm.kmod would fail with error:

module error: incompatible module class 1 for `nvmm' (wanted 3)

Now the same code builds and works on NetBSD (of course, NetBSD requires
a different set of Makefiles).

nvmm: Move DragonFly module code in nvmm.c to nvmm_dragonfly.c

Move the OS-specific DragonFly module code in nvmm.c to nvmm_dragonfly.c,
making nvmm.c source file more OS-independent.  Adjust several static
functions and variables for this purpose.