drm/ttm: convert to the reservation api

Additional-bugfix-by: dillon

drm: Fully rework the ww_mutex implementation

Fixing various bugs and inaccurate assertions

ufs - Expand time_t support to 48 bits

* Fix time overflow issues in the original 32-bit UFS code in two
  ways.  First, treat the original 32-bit seconds fields as unsigned.
  Second, utilize the spare fields to expand these fields to 48 bits
  each.  Retain the nanosecond-grain accuracy of the nsec fields.

  These changes should be both forwards and backwards compatible within
  the respective supported timestamp ranges for filesystems created by
  DragonFlyBSD and for legacy UFS1 systems.

  However, DFly will no longer be compatible with any modern UFS1
  implementation in other operating systems which reuse the spare fields
  for other purposes.

  Also, dump and restore are still limited to 32-bit time stamps.  This
  should not be an issue since these utilities are basically no longer used
  in modern day.  UFS1 is still useful, but deprecated, and we don't really
  intend for it to be used with later incarnations that might still be in
  use by other OSes.  We do want to make sure that the time fields work
  properly, however, as UFS1 is still useful for certain things.

* The original di_atime, di_mtime, and di_ctime fields were implemented
  as signed 32 bit fields.  Change these to unsigned, extending time_t
  support from 2036 into the 2100 range.

* In addition, use the spare fields in the dinode to provide another
  16 bits to each of atime, mtime, and ctime, expanding the time fields
  to 48 bits (around 9 million years).

Noticed-by: aly

mdoc: Add FreeBSD 11.1 for efidev(4).

drm: CONFIG_AGP is off by default

virtio.4: Add missing newline.

pthread_mutex_getprioceiling.3: Fix .Dd. November had only 30 days.

Fix some self references in our manual pages.

Use .Fn for function names in some manual pages.

kernel - Correct null pointer panic in debug code

* vm_fault pager read errors in kernel threads could panic the
  system due to a null pointer indirection in a kprintf().  Fix
  the kprintf().

Fix some section name typos in various manual pages.

While here, fix some other minor issues like starting new sentences
on new lines etc.

Remove some trailing whitespace in manpage comments.

libusb: Put MLINKS before the <bsd.lib.mk> inclusion in the Makefile.

drm/radeon: Use shorter lockinit identifiers

drm/linux: Add struct rcu_head

kernel/radeon: Remove obsolete #undef.

kernel: Remove libkern.h inclusion from a few files that don't need it.

kernel - Remove vm_map min_offset and max_offset macros

* The symbols 'min_offset' and 'max_offset' are common, do not use
  them as a #define'd macro for vm_map's header.start and header.end.

* Fixes symbol collision related to the drm work.

kernel/hammer: Remove the old inactive live dedup code.

It had been disabled in 6de803f0514ff0019181d026a825d1e8a9a4c404
in 2012 due to issues with it.

kernel: Remove {bus,device}_if.h from where <sys/bus.h> is included.

kernel/acpica: Cleanup header inclusion situation a bit.

* Remove unnecessary headers in OsdStream.c

* In <dev/acpica/acpivar.h>, move acpi_if.h below the rest of the headers
  and remove bus_if.h because it is already included by <sys/bus.h>.

kernel/cam: Fix buildkernel with 'options CAMDEBUG'.

drm/linux: Improve linux/pci.h

drm: Add or improve a few include/linux headers

kernel - Add debug.acpi.silence_all sysctl

* Add the debug.acpi.silence_all sysctl and tunable.  Setting this
  to 1 silences all run-time ACPI messages.  Can be set in loader.conf
  or at run-time.

kernel - Change callout in struct ccb_hdr

* Change the callout declaration in struct ccb_hdr from an embedded
  structure to a pointer, add padding to get the whole structure to its
  original size (prior to the recent callout patch).

* This removes an improper ABI dependency on the kernel struct callout
  structure which was causing 'camcontrol', and 'smartctl' (from
  smartmontools) to fail.

Testing: dillon, tuxillo

top: Cleanup the Makefile and a header a bit.

* Remove unnecessary -I

* Raise WARNS to 2

* Remove ap_* from os.h

top(1): Cleanup no longer needed contrib contents.

This removes last file licensed under Apache 2.0 from our repository.

top(1): Take out from the contrib.

There are several issues:
  * many local modification;
  * no new releases by upstream;
  * vendor/TOP branch was created incorrectly.

Last reason alone is enough to perform this, because vendor/TOP branch
needs to be recreated to prevent future source repository incidents.

In-discussion-with: swildner

bsd.sys.mk: Fix WARNS=2 and 3 handling.

The -Wno-pointer-sign and -Wno-unused-parameter should have been removed
only for specific WARNS levels.

Reported-by: aly, swildner

dhcpcd(8): Set WARNS for sbin/dhcpcd.

upgrade: Clarify deprecated files message.

Suggested-by: swildner

drm/linux/rbtree.h: Rename RB_ROOT to LINUX_RB_ROOT

Preventing clashes with the more general RB_ROOT kernel definition

Remove some IPSec remains via 'make upgrade'.

Reported-by: zrj

kernel/ixgbe: Fix buildkernel, re-apply 9e2814118aabe1f24cf00485.

ix: Sync with Intel ixgbe-3.3.6

- Honor VLAN_HWTAGGING setting when setup RX VLAN tag stripping.
- Add workaround for possible FW hang on X550.

kernel - Add callout debugging

* We still have a few issues where the callout lists become corrupt.
  Add debugging to store the originator of a callout by file/line in
  the structure itself as a debugging aid.

<semaphore.h>: Fix guard comment.

kernel: Remove numerous #include <sys/thread2.h>.

Most of them were added when we converted spl*() calls to
crit_enter()/crit_exit(), almost 14 years ago. We can now
remove a good chunk of them again for where crit_*() are
no longer used.

I had to adjust some files that were relying on thread2.h
or headers that it includes coming in via other headers
that it was removed from.

kernel/sound: Remove local KOBJMETHOD_END defines.

<sys/systm.h>: No need to include <sys/callout.h> here.

Makefile.inc1: Minor fixes for CTOOLS handling.

Simplify logic a bit, remove no longer needed variables and duplicates.
Fix gnu/lib/Makefile (WORLD_CCVER should not be used in tree context).

gpt(8): "show" command support to print partition GUID

The "show" subcommand gains the "-g" option to print the partition GUID
instead of the partition type/label.

This helps to identify the GPT partition corresponding to the UUIDs
shown in "/dev/slice-by-uuid".

gpt(8): Improve "show" subcommand

* Mark unused space with "Unused".
* Catch unknown partition types and print "Unknown"
* Show active MBR partition with the "(active)" mark.  This can be
  helpful for a hybrid GPT/MBR setup.

Obtained-from: NetBSD

Adjust various things for the recent brk(2) removal.

kernel/ena: Fix another error path.

Release the MSI-X vector if we fail after it's been allocated but
before we can use the goto.

kernel/ena: Fix an uninitialized variable issue in an error path.

At this point in initialization, we just return ENXIO on failure.

Reported-by: zrj

drm/linux: Add rcu_assign_pointer()

libc: Remove old MLINKS for fpclassify.3.

I forgot to remove them in b6b35a1b4c682b25f983fc039f153dcd04094189.

Reported-by: zrj

GC: Remove old clang 3.8 that required extern sources.

  In preparations for libc++ import.

gcc50: Mark as deprecated.

  If gcc50 will not be further used as alternative compiler and it's
  private dynamic libraries are no longer needed, it can be safely
  removed from the base system using: make upgrade -DREMOVE_DEPRECATED

Revert "kernel - Temporarily change WORLD_ALTCOMPILER default in master"

This reverts commit 6ef7b2b34b7cd49e3e26cf7316d8217e102e6b75.

  Issue should be resolved by now. Build only gcc47 as alternative compiler
  by default (for time being gcc50 can still be hooked into the build).
  This reduces buildworld time by ~6 minutes.

nrelease: Minor cleanups to the Makefile

nrelease: More unambiguous label based on gitrev.sh

Use the git revision to compose the label to make it more unambiguous.

Use the same label as the .iso volume ID, but truncated to be <= 32
characters.  Thank zrj for the make variable operation :D

Discusssed-with: swildner

nrelease: Use part-by-label to identify root in .img

Previously, the DragonFly .img hardcoded "da8" as the USB device, but
this may not be the case on some systems and requires user interaction
to boot.

Now that DragonFly has "/dev/part-by-label", use this new mechanism
(i.e., the label/name of the disklabel64(5) slice in the .img file) to
better identify the USB device with DragonFly installation image on it.
The label name is "DragonFly_${KERNCONF}" by default.

kernel - Add /dev/part-by-label

* The DragonFly disklabel has a 'label' field which accepts up to
  a 63 byte ascii label.

* When this field is not empty, the kernel will now create a
  "/dev/part-by-label/<label>.<part>" alias.

  For example, if the label is FUBAR and you create a label with
  partitions 'a', 'b', and 'd', then you will get:

  # ls /dev/part-by-label
  FUBAR.a      FUBAR.b      FUBAR.d

* WARNING!  Duplicate labels will replace each other, so the
  label that shows up will be non-deterministic.

Suggested-by: Aaron LI

kernel - Slightly change the behavior of MADV_NOSYNC and MAP_NOSYNC

* When files pages are mapped with the NOSYNC flag, the user program
  is requesting that the kernel not periodically flush the dirty pages
  to the filesystem under normal operation.  Such pages can still be
  flushed due to memory pressure.

* However, if the pages are not set back to MADV_AUTOSYNC, this behavior
  can persist indefinitely (until umount or vnode recyclement), even
  after all the related processes have closed/unmapped the file.  This
  results in very non-deterministic (and likely unexpected) flush behavior.

* Change the behavior to flush such dirty pages during the normal periodic
  filesystem sync if the file is found to no longer be mapped and also
  no longer open for writing.  If the program wants to throw the data away
  permanently, the program should delete or truncate the file.

  In otherwords, the requested NOSYNC behavior is only applicable when the
  file is open for writing or memory mapped.

kernel - Document possible dead code

* Document possible dead code due to the removal of B_MALLOC
  buffers, but do not replace it with an assertion yet.

kernel - Reduce vm_page_list_find2() stalls

* Reduce stalls in vm_page_list_find2() which can occur in low-memory
  situations, as well as in other situations.  The problem is two fold.

  First, that potentially all cpu cores can wind up waiting for a
  single vm_page's spin-lock to be released.

  Second, that a long-held vm_page spin-lock can cause the VM system
  to stall unnecessarily long.

* Change vm_page_list_find() and vm_page_list_find2() to no longer
  unconditionally spinlock a vm_page candidate and then retry if it
  is found to be on the wrong queue.

  Instead the code now spinlocks the queue, then iterates vm_page
  candidates using spin_trylock(), skipping any pages whos spinlocks
  cannot be immediately acquired.  This is lock-order-reversed but
  is ok because we use trylock.  Also, by locking the queue first we
  guarantee that a successfully spinlocked vm_page will be on the
  correct queue.

* Should also reduce IPIQ drain stalls reported to the console as
  shown below.  The %rip sample is often found in vm_page_list_find2().

  send_ipiq X->Y tgt not draining (STALL_SECONDS)

sys/vfs/autofs: Drop .vop_getpages/.vop_putpages

Autofs only supports getattr/lookup/mkdir/readdir for
inmemory directory inodes.

kernel - Implement sbrk(), change low-address mmap hinting (2)

* Fix sysproto.h for the sbrk() change. 'incr' is size_t now.
  (make sysent hadn't been run)

Reported-by: swildner

sys/vm: Fix debug message in generic VOP_GETPAGES() handler

netif/re: Sync with Realtek's re-1.95.

Mainly fix some register settings.

libc/sysvipc: Remove duplicate include.

<semaphore.h>: Whitespace cleanup.

<sys/ioctl.h>: Remove old SunOS compatibility definitions.

Nothing needs this anymore.

Thanks to tuxillo for build-testing dports.

kernel/bktr: Clean up unused code and the Makefile.

There should be no functional change.

Remove <sys/semaphore.h> so that we have <semaphore.h> only.

There is no point for us to go through the kernel for getting at
SEM_VALUE_MAX from sysconf(3), so return it directly and remove
the associated p1003_1b.sem_value_max sysctl.

Beyond that, the kernel didn't need this header. I've found no
ports that need it, either.

For safety, bump __DragonFly_version anyway.

nrelease - Fix target for Makefile.usr

- src-create-repo was merged to src-create in ad8b70e08d. This happens only
  for the GUI build.

drm: Reduce ioctl differences with Linux 4.7.10

Add a pair of missing generic drm ioctls.

libc - Use sbrk() system call, remove brk() (2)

* Change the initial TLS allocation to use mmap() instead of sbrk()
  in order to maintain compatibility with older kernels.

* Using sbrk() will work with a fully updated system, but will not
  work with an old kernel because it returns an error and sets errno,
  but setting errno requires the TLS to already be installed.  So
  even though we have back-off code in libc, it seg-faults before
  it gets to it.

* Only affects a few programs in base such as 'chflags' so not a
  disaster.  But still, the intent was to maintain compatibility
  with older kernels.

LINT64: Add KTR_LAPIC.

<sys/cdio.h>: Remove definitions that are related to unimplemented ioctls.

None of this is handled in the kernel.

<libutil.h>: Remove an orphaned prototype.

Reported-by: tuxillo

ktr.4: Add a few words about KTR_LAPIC.

kernel - Implement sbrk(), change low-address mmap hinting

* Change mmap()'s internal lower address bound from dmax (32GB)
  to RLIMIT_DATA's current value.  This allows the rlimit to be
  e.g. reduced and for hinted mmap()s to then map space below
  the 4GB mark.  The default data rlimit is 32GB.

  This change is needed to support several languages, at least
  lua and probably another one or two, who use mmap hinting
  under the assumption that it can map space below the 4GB
  address mark.  The data limit must be lowered with a limit command
  too, which can be scripted or patched for such programs.

* Implement the sbrk() system call.  This system call was already
  present but just returned EOPNOTSUPP and libc previously had its
  own shim for sbrk() which used the ancient break() system call.
  (Note that the prior implementation did not ENOSYS or signal).

  sbrk() in the kernel is thread-safe for positive increments and
  is also byte-granular (the old libc sbrk() was only page-granular).

  sbrk() in the kernel does not implement negative increments and
  will return EOPNOTSUPP if asked to.  Negative increments were
  historically designed to be able to 'free' memory allocated with
  sbrk(), but it is not possible to implement the case in a modern
  VM system due to the mmap changes above.

  (1) Because the new mmap hinting changes make it possible for
  normal mmap()s to have mapped space prior to the RLIMIT_DATA resource
  limit being increased, causing intermingling of sbrk() and user mmap()d
  regions.  (2) because negative increments are not even remotely
  thread-safe.

* Note the previous commit refactored libc to use the kernel sbrk()
  and fall-back to its previous emulation code on failure, so libc
  supports both new and old kernels.

* Remove the brk() shim from libc.  brk() is not implemented by the
  kernel.  Symbol removed.  Requires testing against ports so we may
  have to add it back in but basically there is no way to implement
  brk() properly with the mmap() hinting fix

* Adjust manual pages.

libc - Use sbrk() system call, remove brk()

* Attempt to use the kernel sbrk() system call.  If it fails
  with EOPNOTSUPP, back-off to the older libc sbrk() emulation
  code which uses still-present but obsolete break() system call.

* Changes support both old and new kernels.  Older kernels do not
  implement the sbrk() system call, causing the call to return
  -1/EOPNOTSUPP.  Note that older kernels did not generate an
  ENOSYS/signal for sbrk().

* sbrk() cannot support negative increments.  Allow only 0 and positive
  increments.

* Fix MPSAFE issues (requires new kernels) while we are here.

* Remove brk() support entirely.  This was also emulated in older
  kernels using break().

* These changes are necessary in order to support mmap() hinting above
  RLIMIT_DATA's current value.  Older kernels only support hinting above
  the system maximum value (above the 32GB mark).  Several languages in
  dports really want to mmap() addresses below 4GB.

Update the pciconf(8) database.

February 13, 2019 snapshot from https://pci-ids.ucw.cz

install(1): Fix usage(), we don't have -T.

Sync ACPICA with Intel's version 20190215.

* Add support for the ACPI specification version 6.3.

* Fix skipping erroneous extended opcodes.

* Some improvements in iasl(8).

* Remove the legacy AcpiGbl_ExecuteTablesAsMethods global and all
  associated code, i.e. the debug.acpi.group_module_level_code tunable
  and acpiexec(8)'s -dp option.

For detailed list, please see sys/contrib/dev/acpica/changes.txt.

manpath.config: Add ravenports paths.

While here, remove an obsolete line.

Reported-by: marino

drm/linux: Add asm/processor.h

drm: Fix Linux/DragonFly PAGE_MASK confusion

* Both Linux and the DragonFly kernel use a PAGE_MASK constant,
  which is unfortunately defined differently in each one

* Define a LINUX_PAGE_MASK macro and use it when applicable in the
  drm code to fix this confusion

* One or two drm/radeon bugs were possibly caught during the process

* This commit based on a patch by tuxillo

Spotted-by: tuxillo
Fixes: https://bugs.dragonflybsd.org/issues/3171

fstab.5: Remove trailing whitespace from 828221af1c1fe3514.

sys/vfs/autofs: Drop <sys/bus.h>

Looks like this is no longer needed just to compile.

Move some accidentally separated text back to the correct spot.

dd(1): Sync with FreeBSD

Some highlights:
* Add the "fillchar" operand.
* Add the "speed" operand to limit the speed.
* Support to specify the output data parity in the "conv" operand.
* Add tests, which can be run with "make test".

I adjusted the device names in the examples of the man page.  Some minor
tweaks (e.g., styles, function prototypes, comments) were also applied.

dd(1): Implement GNU's extension of "status" operand

* status=none: do not print status information
* status=noxfer: do not print transfer  statistics

  This feature is useful because the statistics information can
  sometimes be annoying, and redirecting stderr to /dev/null would also
  lost error messages.

  Obtained from FreeBSD (revision 264059)

* status=progress: report the current status on a single line every
  second.

  Obtained from FreeBSD (revisions 337505,337865,338646)

dd(1): Rework the time interval calculation

dd(1) uses gettimeofday(2) to compute the throughput statistics.
However, gettimeofday returns the system clock, which may jump forward
or back, especially if NTP is in use.  If the time jumps backwards, then
dd will see negative elapsed time, round it up to 1usec, and print an
absurdly fast transfer rate.

The solution is to use clock_gettime(2) with CLOCK_MONOTONIC as the
clock_id.  That clock advances steadily, regardless of changes to the
system clock.

Don't sacrifice precision by converting the output of clock_gettime() to
a double and then comparing the results.  Instead, subtract the values
of the two clock_gettime() calls, then convert to double.

Obtained-from: FreeBSD (revisions 265472,265698)

dd(1): Make signal handler async safe

Obtained-from: FreeBSD (revision 250469)

sys/sys/mutex2: Fix mutex(9) man page

"mtxex" does no exist after cabfc9f6989fa1e4dbccc61162309bd2ec6891c9.

rtld-elf - Allow dynamic (late) relocations to relro section (2)

* Add missing header file adjustment

ipfw3: allow the ipfw_insn with only the basic action

rtld-elf - Allow dynamic (late) relocations to relro section

* Normally the relro section is mprotect()ed to read-only after normal
  load relocations.

* It appears that some programs can issue dynamic relocations at
  run-time to such sections.

* If the relro mprotect has been done on an object, temporarily mprotect
  the object back to RW to execute the relocation, then mprotect it back
  to RO.

Reported-by: marino

bsd-family-tree: Sync with FreeBSD (add macOS 10.14).

makefs(8): DragonFly porting.

Some notes:

* UFS2 support has been disabled for now. It would require more UFS2
  related pieces in our UFS kernel headers. I might look at enabling
  this in the future.

* Our CGSIZE() macro causes issues when used in makefs(8), which is
  why I'm using FreeBSD's currently.

* makefs(8) uses a local daddr_t type which is 64 bits wide, since
  ours is 32 bits.

* I added cg_blks() and cg_blktot() calls in a few places because
  our fsck(8) checks them in pass 5. I'm not sure if the associated
  fields are actually needed anymore.

Bring in most of makefs(8) from FreeBSD unchanged.

To create filesystem images without kernel involvement. We can use it
to create our initrd without needing vn(4).

Originally from NetBSD.

Fix pkg "-f" flag in the "make upgrade" message

rc.d/sysctl: Only set a sysctl when give a new value

For a sysctl, compare the given value with its current value, and only
update the value if the new value is different.  This suppresses
unhelpful messages on the console.

Reported-by: sephe

kernel - Fix panic in mlock() and munlock()

* Fix a degenerate case when mlock() or munlock() is called
  with a size of 0.  Silently allow the case and return success
  (0).

* Fixes vm_map panic.