sbin/mount_msdos: Bring in FreeBSD/Git 0c5ae3a9 (add -M option)

rc.d/dhcpcd: Start before netif

This ensures that in the silly case where dhcpcd is enabled
AND ifconfig_foo=DHCP is set then a second dhcpcd instance is not
started.

sys/net: Rename if_route_dispatch to if_up_dispatch

The word route here is misleading and is heavily influenced with
the addition of removed subnet routes when taken down which is
no longer the case.
While here, remove pointless flag and family from the message
object.

Do the same for unroute.

net/if_gre: unhook rip_ctlinput

It no longer exists, see prior commit.

sbin/mount_msdos: Bring in FreeBSD/Git 7e476e89

sbin/mount_msdos: Whitespace cleanups

inet: unhook and remove rip_ctlinput

This is no longer needed thanks to rt_purgecloned.
This also fixes two problems where we would lie about the address
being removed via RTM_DELADDR and the assumption that the
subnet route should be removed / moved to another interface.

inet: hookup in6_if_down with rt_purgecloned

inet: hookup in_if_down with rt_purgecloned

route: introduce rt_purgecloned

This function walks the route tree for the given address family
and deleted any cloned route for the given interface.

sys/net: Call in6_if_up from the domain rather than directly

sys/net: Add dom_if_up and dom_if_down

Domain functions for when the interface goes up and down.

route: Don't install a cloned route when interface is down

When an interface is taken down, all subnet routes are removed
and thus all cloned routes are flushed.

It's possible, although unlikely, for userland to add a subnet
route when the interface is down.

In this state, EHOSTDOWN would be returned regardless, but a
cloned route would be created locked to the interface.
Instead, check if interface is down before creating the cloned
route so it's not made needlessly.

<netinet/in_var.h>: Adjust visibility.

 It appears that only struct in_ifaddr and in_aliasreq need to be exposed
 to the userland.

 While there, disable two macros that do not seem to be used by DPorts.

<netinet/in_var.h>: Include sys/fnv_hash.h only for _KERNEL.

 Many dports have their own hash-32.c and hash-fnv.cc implementations.
 This makes the lib/libkvm/kvm_minidump_x86_64.c the only consumer of
 <sys/fnv_hash.h> in userland.

<sys/fnv_hash.h>: Remove unused fnv_64*() inline functions.

 Unused in base (neither OpenBSD or NetBSD has this header).  Once needed
 64 variants can be added from www.isthe.com/chongo/src/fnv/hash_64.c
 For now keep fnv_32_str() inline, but disable it.  It could be used in
 several kernel places instead of fnv_32_buf().  The smbfs_hash() in
 sys/vfs/smbfs/smbfs_node.c could be adjusted to use <sys/fnv_hash.h>.

 Reduces kernel.stripped size by 72 bytes.

<sys/dmsg.h>: Reduce userland namespace pollution.

 Do not include <sys/malloc.h> and <sys/thread.h> for userland here.
 This removes dependencies on these headers for all dmsg consumers like:
  fstyp(8), hammer2(8), mount_hammer2(8), newfs_hammer2(8) and libstand
 which is desired in standalone boot environment.
 Add missing <machine/param.h> for libstand/hammer2.c that needs the
 DEV_BSHIFT definition, previously it was visible through <sys/malloc.h>
 namespace pollution.

 While there, mark some guards for clarity too.

 Noticed while investigating .depend ​violations.

<sys/device.h>: Adjust userland visibility.

 While there, do the same to sys/devfs.h and sys/vfsops.h.

 No functional change for base.

<sys/device.h>: Disable some no longer used types.

 Some additional cleanup in sys/devfs.h and sys/vfsops.h:
 * dev_args_union/vop_args_union unused since introduced in
   fef8985e09e16aeee4a2014876e2e4b758656ac2 and
   2d3e977e265c8a4a48b58061b9d91ad235ed2265
 * devfs_unit_hash unused since 898c91ee87ff48eab03bcce3add7afc16a58754e
 * D_NAGGED unused since 335dda388a5c13edd38c87c32b72e51eaaedce75
 * DEVFS_ISDIGIT unused since 07dfa375a25f4ef43c956ee33c739661306f601

 While there, minor trailing whitespace cleanup in sys/vfsops.h.

<cpu/param.h>: Change visibility for several macros.

 While there, remove two unused ones since introduced in
 c8fe38ae0761c8117b13caf9b76ad5fb86ac2135

kernel: Remove kvtop() remnant form early x86_64 port.

platform/pc64: Remove unused pte_store() and pde_store().

 Never used since introduced in 48ffc2362a11e481bf0398dc7ce5e4815acd2190

<machine/param.h>: Remove unused KSTACK_PAGES.

 Unused since 4611d87f91be625f8ef4c7ea2709b86abe035b65

<sys/serialize.h>: Limit prototypes to kernel only.

 The "struct lwkt_serialize" must be left userland visible for if_net.

<sys/jail.h>: Use forward declarations for private members.

 This reduces dependencies on <sys/sysctl.h> in both kernel and userland.

libc: Add gets_s(3) from ISO/IEC TR 24731-1.

For more information see the Technical Report (drafts of it are on
the web) or e.g. http://en.cppreference.com/w/c/io/gets.

This also adds set_constraint_handler_s(), abort_handler_s(),
ignore_handler_s(), the RSIZE_MAX define, and the types rsize_t,
errno_t and constraint_handler_t.

Visibility is restricted to our default environment by default, but
can be enabled by defining __STDC_WANT_LIB_EXT1__ to 1, per the TR.

While here, put gets()'s documentation into a manual page of its own
with a note that it is depracated. We'll likely remove it from libc
too at a later point in time.

Requested-by: zrj
Taken-from:   FreeBSD (with some adjustments)

<sys/cdefs.h>: Add a macro to control ISO/IEC TR 24731-1 visibility.

The __STDC_WANT_LIB_EXT1__ macro controls visibility for code that
wants to use it. In addition, visibility is enabled for our default
environment that exposes everything.

Taken-from: FreeBSD

inet: return EHOSTDOWN if we cannot resolve an address in time

This allows programs to make informed decisions about what to do
if anything goes wrong trying to resolve the address.

For example, ping(8) now reports sendto: Host is down, which is
more useful than not reporting anything.

Taken-from: NetBSD

inet: Don't mark cloned route as RTF_REJECT on RTM_MISS

With the current behaviour, the cloned route is marked as
RTF_REJECT which means subsequent use is delayed until either an
ARP reply comes in or the ARP entry times out and resolution
can then begin again.

Instead, no longer mark the route for RTF_REJECT and allow more
ARP requests to go out if something really wants to use it.
This mirror the current behaviour for inet6.

sbin/newfs_msdos: Bring in -A/-T options from FreeBSD

Basically from FreeBSD/Git 284893ba and 8255b708.

newfs_msdos.8: Re-fix typo. :)

sbin/newfs_msdos: Sync newfs_msdos.8 with FreeBSD

sbin/newfs_msdos: Bring in FreeBSD/Git 47266d91, b25a2bc0

sys/vfs/msdosfs: Bring back EXBOOTSIG2 (unbreak lib/libfsid build)

Note that fatgen103 doesn't mention such thing.
FreeBSD/NetBSD don't have it either.

openresolv: correct README

resolvconf: We need the onestatus argument

As status suffers the same flaw as FreeBSD.
Namely it returns 0 if not running AND not enabled.

openresolv: Update README

Merge branch 'vendor/OPENRESOLV' with the following changes:
  *  dnsmasq: clear cache after updating servers via dbus
  *  pdns_recursor: Fix global forwards (thus now installed by default)
  *  man: layout and misc fixes

Import openresolv-3.9.2 to vendor branch.

sbin/newfs_msdos: Bring in FreeBSD/Git 902f77041b477be4d9d99608b463be01ac7611ea

Invalidate FSI_Nxt_Free hint in FSInfo for FAT32.

sys/vfs/msdosfs: Sync with FreeBSD (non functional diffs)

route: Seperate route messages from creation/lookup.

This allows a more fine grained choice about whether to announce
messsages via route(4) or not.

For example, a freshly added clone route is useless without the
resolved hardware address it's talking to.
Instead, announce the route when the hardware address has
been resolved, changed or if it's not resolvable.

For IPv6 destinations, we can now interpret RTM_MISS as unreachable.
This allows listening software to take action, such as soliciting
a new router if the destination missed was originally a router.

Reviewed-by: sephe

sys/vfs/msdosfs: Cleanups

sys/vfs/msdosfs: u_int*_t -> uint*_t

ieee80211: set link state before notifying of link state change

Unknown link state is no good for any interface.
Set the state before calling out.
Now dhcpcd can see that wireless links are actually up

ftpd(8): No need to specify WFORMAT=0 explicitly in the Makefile.

sys/vfs/msdosfs: Drop redundant msdosfsmount::pm_fatsize

No need to keep incore FAT byte size in ulong.

route: ensure RTM_IFINFO is sent first when bring interface down/up

Taking an interface down can generate a lot of route messages.
This can overflow the route socket, so ensure that the most
important message is sent first - that of the interface state.

While here, these functions can be made static.

sys/vfs/msdosfs: Add description for fatblock()

sbin/route: Improve display of socket errors

sbin/route: Add support for printing link state from RTM_IFINFO

Taken-from: NetBSD

sbin/route: Add support for printing RTM_IEEE80211 messages

Taken-from: NetBSD

sbin/route: Add support for SO_RERROR and log errors for monitor

sbin/hammer2: Remove unused if0'd malloc/free wrappers

Unused since 0c3a8cd0eb169fa13895a5691f9a1c298c489721 in 2012.
Prototypes have also been removed from header.

lib/libc: Whitespace fix

dhcpcd: Fix buildworld

  - Fix based on 31f23bc71ced3b. Also pointed out by
    kworr.

dhcpcd: Remove left over patches.

drm/linux: Add atomic64_inc_return()

Obtained-from: OpenBSD

drm/radeon: Correct FIRMWARE_BONAIRE definition

Submitted-by: zrj

dhcpcd: Adjust Makefile for dhcpcd-8.0.4

dhcpcd: Import new config.h

dhcpcd: Add README.DRAGONFLY

Merge dhcpcd-8.0.4 from branch 'vendor/DHCPCD'

sbin/Makefile: Sort SUBDIR.

Import dhcpcd-8.0.4 to vendor branch.

dsynth - Add hook_* support (2)

* Fix bug in call to doHook()

lib/libdmsg: Fix compile warnings on Linux distros

--
crypto.c:210: warning: pointer targets in passing argument 5 of 'EVP_EncryptInit_ex' differ in signedness
/usr/include/openssl/evp.h:586: note: expected 'const unsigned char *' but argument is of type 'char *'
crypto.c:216: warning: pointer targets in passing argument 2 of 'EVP_EncryptUpdate' differ in signedness
/usr/include/openssl/evp.h:588: note: expected 'unsigned char *' but argument is of type 'char *'
crypto.c:216: warning: pointer targets in passing argument 4 of 'EVP_EncryptUpdate' differ in signedness
/usr/include/openssl/evp.h:588: note: expected 'const unsigned char *' but argument is of type 'char *'
crypto.c:221: warning: pointer targets in passing argument 2 of 'EVP_EncryptFinal' differ in signedness
/usr/include/openssl/evp.h:591: note: expected 'unsigned char *' but argument is of type 'char *'
...

lib/libdmsg: Fix compile warnings on Linux distros

--
crypto.c: In function 'dmsg_crypto_negotiate':
crypto.c:552: warning: pointer targets in passing argument 2 of 'RSA_private_encrypt' differ in signedness
/usr/include/openssl/rsa.h:305: note: expected 'const unsigned char *' but argument is of type 'char *'
crypto.c:552: warning: pointer targets in passing argument 3 of 'RSA_private_encrypt' differ in signedness
/usr/include/openssl/rsa.h:305: note: expected 'unsigned char *' but argument is of type 'char *'

dsynth - Add hook_* support

* Add hook_* support.  Note that hook_run_start and hook_run_end are
  serialized, but all package-building hooks can run concurrently with
  each other.

  The package-building hooks are: success, failure, ignored, and
  skipped.

sys/vfs/msdosfs: Cleanups

sys/vfs/msdosfs: Add mprintf()

sys/vfs/msdosfs: Cleanups

sys/vfs/msdosfs: Cleanups

sys/vfs/msdosfs: Whitespace cleanups

Mostly trailing whitespace and >80 chars per line.
Also remove redundant static function prototypes.

cdefs.h/libm: Add __sym_{compat,default}() helper macros and use in libm.

While here, change the "past<function>" naming scheme to "past_<function>"
like it is already for "weak_" and "imprecise_" cases.

Macros-taken-from: FreeBSD

sbin/hammer2: Introduce hammer2_media_config::thread_started

Don't test ->thread address itself to test if a pthread is running.
Having assumption on actual type breaks portability.

sbin/hammer2: Don't assume pthread_t is a pointer

NULL initialization isn't necessary.
Also having assumption on actual type breaks portability.

who/utmpentry: Clean up a bit.

* Use _Static_assert() for assertions.

* Remove #if 1.

env(1)/printenv(1): Bump .Dd, remove (void) casts.

Sync utmp_update(8) with NetBSD.

Not much to see here.

setutxdb(3): Constify the file name argument.

Taken-from: FreeBSD

libc/utmpx: Some updates from NetBSD.

* Open some various descriptors as close-on-exec.

* Remove dead code.

* Use VIS_NOLOCALE in the strvisx().

<utmpx.h>: Some small updates.

* Add comments to the standard ut_type constants. Taken from FreeBSD.

* Put a number of non-standard structs, enums and constants under
  __BSD_VISIBLE. Add some explaining comments. Taken from NetBSD.

init(8): Pass waitpid() status to clear_session_logs() and log to wtmpx.

Taken-from: NetBSD

drm/linux: Add kstrtol()

Obtained-from: FreeBSD

drm: Make it clear CONFIG_GENERIC_ATOMIC64 is not set on x86

jail.8 - Adjust manpage for the new changes

rc: Adjust rc.d/jail for the new changes

jail - Remove MPLOCK

  - Replace with a lockmgr global lock.

jail - Rework sysctl configuration variables

- Jail sysctls are now jail-specific so that different jails
  can have different settings.
  Each jail will have its own subtree which can be operated
  directly with sysctl(8).

  Naming convention:

      jail.<n>.<setting>

- All previous sysctls are now moved to 'jail.defaults' and they
  are used as a template for any newly created jail.

  Example:

  # jls
  JID     Hostname        Path            IPs
  2       t02.local       /jails/02       10.0.0.3
  1       t01.local       /jails/01       10.0.0.2

  # sysctl jail
  jail.jailed: 0
  jail.list: 2 t02.local /jails/02 10.0.0.3
  1 t01.local /jails/01 10.0.0.2
  jail.defaults.allow_raw_sockets: 0
  jail.defaults.chflags_allowed: 0
  jail.defaults.sysvipc_allowed: 0
  jail.defaults.socket_unixiproute_only: 1
  jail.defaults.set_hostname_allowed: 1
  jail.1.set_hostname_allowed: 1
  jail.1.socket_unixiproute_only: 1
  jail.1.sysvipc_allowed: 0
  jail.1.chflags_allowed: 0
  jail.1.allow_raw_sockets: 0
  jail.2.set_hostname_allowed: 1
  jail.2.socket_unixiproute_only: 1
  jail.2.sysvipc_allowed: 0
  jail.2.chflags_allowed: 0
  jail.2.allow_raw_sockets: 0

  # sysctl jail.2.allow_raw_sockets=1
  jail.2.allow_raw_sockets: 0 -> 1

  # jexec 2 ping -q -c 1 10.0.0.1
  PING 10.0.0.1 (10.0.0.1): 56 data bytes

  --- 10.0.0.1 ping statistics ---
  1 packets transmitted, 1 packets received, 0.0% packet loss
  round-trip min/avg/max/stddev = 0.766/0.766/0.766/0.000 ms

  # jexec 1 ping -q -c 1 10.0.0.1
  ping: socket: Operation not permitted

  # service jail stop
  Stopping jails: t01.local t02.local.

  # sysctl jail
  jail.jailed: 0
  jail.defaults.allow_raw_sockets: 0
  jail.defaults.chflags_allowed: 0
  jail.defaults.sysvipc_allowed: 0
  jail.defaults.socket_unixiproute_only: 1
  jail.defaults.set_hostname_allowed: 1

drm: Enable drm_pcie_get_max_link_width()

Partially obtained from FreeBSD.

dsynth - Abstract the run-status infrastructure

* Abstract the run-status infrastructure and add skeletons for html
  and a 'dsynth monitor' style monitor.

  Neither is implemented yet but this moves most of the hard work
  out of gui.c (and renames it to ncurses.c) so it doesn't have to
  be replicated for the other two.

dsynth - Make rebuild-repository work again

* Provide a meta file for the package format since it is
  different from the default.

* Fixes the rebuild-repository directive.

dsynth - Fix bug in pty interlock handshake

* login_tty() closes slavefd so the handshake wasn't working.
  Read from descriptor 0 instead, which login_tty() has set
  up with the slave tty.

dsynth - Cleanup

* Fix a minor issue where some Ignored packages were being put in
  the Skip list instead.

* Adjust setproctitle() calls to include the flavor, if any for
  the workers.

* Minor cleanup and code safety.

dsynth - Implement 'test' and 'force', conditional /usr/src, etc

* Implement the 'test' and 'force' directives.  Implement
  removal of manually specified packages.  If a generic flavor
  or a meta-port is specified, its direct dependency list will
  also be removed.

* If /usr/src exists under the system directory, mount it in the
  chroot (to support USES=kmod modules).

* Wire up UseCCache but leave disabled and require it to be
  disabled for now.

* Print a build summary at the end.

dsynth - Add missing env vars for dports scan

* PACKAGE_BUILDING was being set in the builder but not in the initial
  dports scan.

* Refactor part of the BuildEnv API to allow the code to set variables
  for the scan vs generally.

dsynth - Fix master/slave pty race on fork()

* If we try to re-open the slave in the forked child of the WORKER monitor,
  the worker monitor may race the child when it tries to read from the
  master side fd before the child has opened the slave, causing an error.

* If we re-open the slave in the WORKER monitor then the worker monitor
  must not block when it close()s the slave descriptor after forking a
  child.  But it will if the child has written anything.

  The solution is to re-open the slave in the master but to have the
  master write 1 char to the slave after close()ing the slavefd.  The
  forked slave will read this character before proceeding, thus ensuring
  that there is no output in the buffer when the master close()es
  its slavefd.

kernel - Fix devfs bitmap races for pty and other devices (2)

* Fix bug in 1991e949fd5da due to misinterpretation of how
  devfs_clone_bitmap_get() worked in the vn code.

Partial revert of "drm: Partially sync drm_ioctl() with Linux 4.7.10"

This reverts commit c22b03749c861bc699168784bdafe2e43317465f.

It was causing application hangs with 100% cpu usage.