etc/Makefile: Better handle removal of /var/db/entropy as a file.

Move it to the place where other such cases are handled.

<vfs/hammer2/hammer2.h>: Fix buildworld after 120385e8e4086a3b.

<sys/buf2.h>: Remove a number of unneeded #include's.

Only <sys/buf.h> is actually needed for the header.

Adjust some kernel files accordingly.

build - Update pkg-static to version 03, bootstrap https

* There appears to be a database versioning issue between pkg-static
  and pkg on master, re-synchronize the pkg-static tarball.

* Currently the pkg bootstrap installs a df-latest.conf with
  http:// paths instead of https:// paths, because it doesn't
  have the CA root.

  After installing pkg, Makefile.usr now also installs ca_root_nss
  and then copies the df-latest.conf.sample file to df-latest.conf,
  thus installing the official df-latest.conf using https.

* Note that this sequence is not entirely safe because the initial
  bootstrap will be insecure if the CA root certificates are not
  already installed.  They should be installed by our official images,
  but will not be (currently) if one creates an absolutely pristine
  base system with installworld/installkernel/distribution.

  The bootstrap should now work in both situations, but we really
  need to include root certs in the base system I think.

sys/vfs/hammer2: Update ascii-art/comments in hammer2_disk.h

Update old comments written when ondisk layout wasn't stable.

kmalloc.9: Mention M_CACHEALIGN.

While here, move the examples to an EXAMPLES section.

kernel - Replace kmalloc_cachealign() with kmalloc(... M_CACHEALIGN)

* Add M_CACHEALIGN, which ensures that the result is aligned to
  a cache line.

* Remove kmalloc_cachealign(), replacing all uses with kmalloc
  using M_CACHEALIGN.

sbin/mount_hammer2: Fix perror(3) message

": " is added by perror(3) itself.

sbin/hammer2: Add missing info for "show"

Add missing inode fields.
Also add blockref count for indirect blocks (i.e. not necessarily 4).

usr.sbin/fstyp: Minor fix for HAMMER2

sbin/hammer2: Add missing inode fields (0x0084-) for printinode

libefivar: Remove unused PACKAGE from Makefile.

usr.bin/kcollect - Rework the hosthame mismatch cases a bit

- Fix a bug where it was not possible to show data from
  another host.
- Showing host live data won't be possible if there is a hostname
  mismatch between the DB and the host reading from it.

kcollect(8) - Add a description of the output fields.

usr.bin/kcollect - Cleanup prototypes a bit.

sbin/hammer2: Update printinode

Hasn't been updated since 2015.

usr.sbin/fstyp: Add -l option support for HAMMER2

sbin/hammer2: Minor fix

libcrypto: Remove two no longer needed .PATHs.

printf.3: .Fa -> .Dv

sys/vfs/hammer2: Add XXX for obsolete comments on hardlink

kernel/drm: Various cleanups.

* Change further references for the radeonkms.ko -> radeon.ko renaming.

* Remove no longer needed iicbus_if.h from Makefile.

* Cleanup radeon Makefile.

libldns: Remove local copy of ldns.h.

It's identical to the version in contrib/.

boot/stand.h: Remove zipfs_fsops extern.

It was forgotten in f6f7cf3446e6c5f6332bcbf0ec9c442b38ac8652.

who/utmpentry: Remove duplicate include and sort better.

Fix up recent entropy file commits.

* Use spaces, not tabs, in mtree files (see README).

* Move file to the right place in Makefile_upgrade.inc.

sbin/newfs_hammer2: Drop obsolete comment on inode

Drop comment from 2012. Inode is 1024 bytes now.

sys/vfs/hammer2: Fix comments on HAMMER2_FREEMAP_LEVEL*_RADIX

Also see 5cebbe36266c384e5bb3f6a9a2364cdd7d750fe1.

world - Change entropy file location (2)

* Fix missing parenthesis

Reported-by: Aaron LI

debug - Adjust vmpageinfo

* Add the pmap writeable_count and pmap_count to the output.

world - Change entropy file location

* Move entropy to the file /var/db/entropy/reboot, set entropy_dir
  default to /var/db/entropy.

* The 'reboot' file is written out on reboot by default.

* Any file in /var/db/entropy will be added to the entropy on boot.
  (this was already operational)

hier.7: Mention /var/run/shm.

Remove rdate(8).

It is of little use in base, with dntpd(8) around, and a more up to date
version is in dports (sysutils/rdate).

drm/linux: Port kfifo.h to DragonFly

drm/linux: Import linux/kfifo.h from NetBSD

sys/vfs/hammer2: Minor cleanup

H2 code always uses typedef'd if exists.

kernel - Fix rare NFS deadlock

* Fix a rare NFS deadlock which can occur on UIO_NOCOPY reads
  (memory mapped accesses).  VOP_GETATTR cannot be safely called
  in this situation without deadlocking against the VM system.

kernel - Fix panic related to USB cd

* The callouts managed by scsi/scsi_cd.c need to hold the SIM
  lock.

* Fixes an assertion (SIM lock not held).

<signal.h> has to and does provide pid_t, so we can also use it.

drm/radeon: Update to Linux 4.4.180

* Bugfixes and workaround for hardware issues, including
  quirks for various R7 370 and R9 270 models

* VT switching fixes from dillon@

* Fan management improvements

* Improved support for 120+ Hz monitors

drm: Remove no longer required iic code and dependencies

drm: Improve linux/pci.h

kcollect - Add hostname to .db file (2)

* Remove debugging printf().

kcollect - Add hostname to .db file

* Use HEADER2 to indicate the hostname.

* Parse 8 HEADER%d fields generically.

* Automatically update missing or changed header fields in the database.

Update the pciconf(8) database.

June 30, 2019 snapshot from https://pci-ids.ucw.cz

usr.bin/kcollect - Add O flag

- The O flag will allow to specify the output format for the
  kcollect data entries.
- Introduce a new output format: InfluxDB. This will try to
  output the statistics in a influxdb line protocol compatible
  format. Please note that this is experimental and subject to
  change in the future.

sys/vfs/hammer2: Drop obsolete comments on attr_tid/dirent_tid

Removed in 7fece146f268d677c46bde997079860f4cf553d0 in 2016.

telnetd(8): Little followup fix to 0ba3ecdcefa6c94daf.

Remove a few unneeded inclusions of <utmp.h>.

telnetd(8): Add wtmpx support and clean up a bit.

date(1): Log to wtmpx too.

As described in the wtmpx(5) manual page. Also add SUPPORT_UTMP{,X}
checks in preparation for us eventually moving to {u,w}tmpx only.

last(1): Fix typo in an error msg.

i386 removal, part 73/x: Remove the ancient nextboot(8) command.

See FreeBSD's r97957.

Reported-by: aly

kernel/netgraph7: Fix build.

kernel - Zen 2 - Make sure %fs's selector is loaded in AP bootstrap

* Issue load_fs() in the AP bootstrap.  It appears that Zen 2 handles
  %fs in a weird way when the selector isn't loaded, causing the first
  wrmsr(MSR_FSBASE) to quietly fail, and possibly others too.

* For good measure, also issue load_ds() and load_es().

* Fixes DragonFlyBSD's boot on Zen 2.

kernel/netgraph7: Remove unneeded __va_*() definitions.

kernel/hammer2: Use <sys/stdarg.h> in the kernel, not <stdarg.h>.

ACPICA: Remove unneeded __va_*() definitions, include <sys/stdarg.h>.

kernel/drm: Use va_*() instead of __va_*(), just like upstream.

pfctl(8): -DPFDEBUG can be used too now for pfctl(8).

Adding <sys/stdarg.h> fixed compilation with it and as far as I can see
there are a few places where it should give debug info from pfctl(8)
too.

Make va_*() macros available to the kernel in <sys/stdarg.h>.

Previously, the kernel was restricted to __va_*() only but I can't see
any real reason to do that and it also forces stuff like ACPICA and
drm to use workarounds. Those will be cleaned up in subsequent commits.

For now, I've used <sys/stdarg.h>, because everything resolves to
__builtin_va*() in the end. If we ever need more machine specific
definitions, it has to be moved to <machine/stdarg.h>.

Sync ACPICA with Intel's version 20190703.

* Remove legacy module-level support code.

* Clear status of GPEs on first direct enable.

* Various improvements to iasl(8).

For detailed list, please see sys/contrib/dev/acpica/changes.txt.

kcollect(8) - Fix mandoc -Tlint

usr.bin/kcollect - Add F flag

- '-F' option works like '-f' option but it does not show the whole
  kcollect buffer, just the last entries before starting to print a new
  entry every 10 seconds

test (2)

last.1: Fix .Dd

last(1): Switch the default to /var/log/wtmpx.

While here, sync usage() with getopt(), remove a few void casts, and
clean up the manual page a bit too.

Reported-by: Diederik de Groot <info@talon.nl>

drm/linux: Add struct i2c_board_info and i2c_new_device()

libutil/logwtmpx: Remove unneeded #include <utmp.h>.

reboot(8): Log to wtmpx too.

While here, put wtmp and wtmpx logging under SUPPORT_UTMP and
SUPPORT_UTMPX, respectively.

sshd - Make sshd use utmpx / wtmpx

* For now adjust the Makefile for sshd to make it use utmpx and
  wtmpx.  The sshd contrib code expects UTMPX_FILE and WTMPX_FILE
  to be defined in order to use this API.

* sshd's login information is now properly using utmpx/wtmpx so
  'who' whos the full IPV6 address (etc).

Reported-by: dkgroot/NI33

who - Fix buffer termination

* Fix printing output when e.g. the utmp host field fills the whole
  buffer.  This doesn't fix the fact that the host field is too small.

Reported-by: dkgroot/NI33

drm/linux: Add dmi_match()

test

Sync zoneinfo database with tzdata2019b from ftp://ftp.iana.org/tz/releases

* Brazil has canceled DST and will stay on standard time indefinitely.

* Predictions for Morocco now go through 2087 instead of 2037.

* Palestine's 2019 spring transition was 03-29 at 00:00, not 03-30
  at 01:00.

* Fix various past transitions for Hong Kong and Italy.

For a detailed list of changes, see share/zoneinfo/NEWS.

kernel - Fix lwp_tid ranging error

* We intended for lwp_tid's to range from 1..INT_MAX, but we
  had the following code in the kernel and unfortunately GCC
  optimizes out the conditional entirely.

  if (++lp->lwp_tid <= 0)
lp->lwp_tid = 1;

* In addition, the pthreads library actually would like to use
  a few high bits for flags, so fix the limit while we are
  here to 0x3FFFFFFF.  This saves us a pthreads assertion in
  the mutex code if an application is actually able to wind
  the thread id up this high over its life.  Since the TID
  allocation mechanism is pretty simplistic, it is entirely
  possible to do this given heavy thread creation / deletion
  rates and enough time.

* Change the conditional such that GCC does not optimize it out.
  We do not want to depend on -fwrapv for the kernel code to
  compile properly, so we don't use it.

  if (lp->lwp_tid == 0 || lp->lwp_tid == 0x3FFFFFFF)
lp->lwp_tid = 1;
  else
++lp->lwp_tid;

pthreads - Use mmap() for thread->specific data

* Any application which tries to replace malloc() can wind up causing
  pthreads to implode due to its use of malloc() in the early thread
  initialization code.

* Change pthread_setspecific() to use mmap() instead of malloc()
  to allocate the per-thread keys array, allowing applications
  which replace malloc() to use pthread_setspecific() to initialize
  per-thread malloc data if so desired.

  The use of pthread_setspecific() predates TLS (per-thread) variable
  declarations, aka the __thread storage qualifier, which is the
  better way to implement per-thread data, but it is still a reasonable
  choice so make it work.

* For DragonFlyBSD this is not expected to improve chrome because
  our chrome build uses our base malloc() and does not try to replace
  it with tcmalloc().  However, this change might help a limited
  number of other applications that do.

Reported-by: sephe, tuxillo

libc: Build inet/, isc/, and nameser/ from their subdirectories.

Also move inet's documentation to the right place.

libc: Remove an unneeded .PATH.

init(8): Put utmp/wtmp specific code under SUPPORT_UTMP.

drm: Start using flush_delayed_work()

<sys/conf.h>: Move SPECNAMELEN to <sys/param.h>.

Some dports and also stuff in our tree depend on it being public, which
all compensate with local defines for now, some of them not having been
adjusted when SPECNAMELEN was bumped from 15 to 63, such as in
sysutils/{mfi,mpt}d. Patches for these ports have been submitted.

They all could have got at it by defining _KERNEL_STRUCTURES before
including <sys/conf.h> but that didn't catch up it seems.

It's public in <sys/param.h> in FreeBSD and I see no reason why we
shouldn't follow.

Reported-by: aly

<sys/signal.h>: Adjust a number of struct member types to POSIX.

* siginfo_t's si_pid and si_uid, and stack_t's ss_size. For all of
  these, there are no changes in type sizes and signs.

* Also define the pid_t, uid_t and size_t types, as required by
  the standard.

shm_open.3: Some miscellaneous cleanup.

* Bump .Dd

* Start sentences on new lines.

* Put DragonFly specific implementation details into IMPLEMENTATION NOTES.

Remove .Ud in some manual pages.

isa.4: Remove obsolete reference.

mmap.2: Improve markup.

drm/linux: Add flush_delayed_work()

drm/linux: Fix a NULL pointer dereference in signal_pending_state()

Not all kernel threads have an associated userland lwp.

Reported-by: dillon

kernel - VM rework part 21 - Fix excessive paging to swap bug

* Fix a bug where pages on the inactive queue would sometimes not
  get moved to the cache queue after being paged out, and also not
  get its [M]odify bit cleared, causing the pageout demon to repeatedly
  write numerous pages out without making progress.

  This may require some additional work to avoid a double-pageout
  condition, but it fixes the main issue.

* Returns us back to the 'feel' of paging prior to the VM rework,
  and should reduce stuttering in chrome and other paging-related lag
  users might experience.

  The bug was introduced due to differences in how the pmap code
  handle vm_page_protect(..., VM_PROT_READ).

docs - Update shm_open(3) manual page

* Update to detail recent work.

Submitted-by: Lassi Kortela

ahci - Enforce 10-second poll of chipset

* Enforce a poll every 10-seconds when the chipset is idle to try to
  catch any potential lost interrupts.  We have observed a number of
  'impossible' timeouts where the chipset registers indicate command
  completion, which should only be possible if a completion interrupt
  is lost.

kernel - Add TPS balancing mode to scsi_da (da* disks)

* This feature brings write tps down to match read tps when both are
  pending.  Normally both read and write I/Os get at least a few tags,
  but because write I/O is buffered by devices, even giving it one tag
  can complete destroy read performance.

  To accomplish this the feature monitors approximate TPS using a counter
  with exponential decay and will temporarily sets write openings in the
  device queue to zero.

* SSDs usually do a better job on their own, but this feature won't hurt
  so we do not distinguish between HDDs and SSDs.

* New sysctls for this feature (feature is enabled by default):

  kern.cam.da.balance_enable 1 (0=disable, 1=enable)
  kern.cam.da.balance_ratio 100 (read:write ratio, 1:1 is 100)
  kern.cam.da.balance_debug 0 (log to console each second)

  You can adjust the read:write tps ratio as desired.  For example,
  the value 200 will adjust the ratio to 2:1.

Test commit.

ftpd.8: Adjust for recent opie(4) removal.

drm/radeon: Switch to Linux i2c APIs

* Enable radeon.hw_i2c by default

* Sync some code with Linux 3.19.8 in passing

kernel/genassym: Remove some unneeded assyms.

kernel - Change tcp keepalive options from ms to seconds (DISRUPTIVE) (2)

* Refactor the code slightly to adopt the same limits and behavior
  as linux.  Instead of capping out we return EINVAL on any out-of-
  bound value.

* Also note that my history was wrong.  Sephe actually implemented
  these options, not me, and it was in 2011 (8 years ago, not 15+).
  So much for my vague memory!  At the time other operating used wildly
  different metrics, and we chose to use milliseconds.  But in the
  intervening years it looks like the main systems have adopted a
  1-second interval.

  In changing our parameters to match, we avoid a lot of pain when
  porting third party applications that use it, particularly chrome.
  But also a few others.

  If we need sub-second parameters in the future we will implement
  new option keywords for it.

build - Bump __DragonFly_version to 500702 in master

* Bump __DragonFly_version to 500702 for the TCP_KEEP* socket
  options API change from milliseconds to seconds.

  This change corrected a 15+ year old mistake.  Most operating
  systems pass these parameters in seconds, but thinking a finer-grain
  would be grand (long ago), I changed the parameters to milliseconds.
  And we've been paying for it ever since.

man - Adjust tcp(4) for API change

* Adjust tcp(4) for the TCP_KEEP* API change.