Make getpbuf(), trypbuf(), and relpbuf() MPSAFE.

Make biowait() MPSAFE.

buffer cache - Control all access to the buf red-black trees with vp->v_token

Access to the buffer cache's RB trees is now controlled via vp->v_token
instead of a critical section.  We still hold the BGL but this is not
quite as simple as it seems because an interrupt calling biodone() on a
B_INVAL buffer may now potentially block, where as it would not have before.
The buffer is locked.

lwkt_token - Add ASSERT_LWKT_TOKEN_HELD(token) macro.

bio_track - fix bug in last commit (the negative count assertion was wrong)

Make operations on struct bio_track MPSAFE.

Use atomic ops to make reference counting and waiting on bio_track structures
MPSAFE.

vnode - move v_pollinfo.vpi_token to v_token

* Rename the lwkt_token used for the vnode's v_pollinfo for general use by
  the vnode.  This token will soon be used to lock the buffer cache.

pipe - fix UP build error.

Reported-by: Hasso Tepper <hasso@estpak.ee>

SYSPERF - update pipe1, pipe2

* pipe1 now does a 1-second timing run.

* pipe2 now does a 2-second timing run, just so it runs just a tad longer.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

pipe - replace use of DELAY() with a better solution, add features.

* Use the new tsc functions to poll for new read data in a pipe for a short
  period of time on a SMP box.  This greatly increases the odds of a pipe
  writer on one cpu being able to pipeline data to a reader on another cpu
  without having to use an IPI or tsleep/wakeup.

  For the pipe1 test this brings the synchronous communications path
  over a pipe (Awrite, Bread, Bwrite, Aread) down from 7uS to around 2uS.

  For the pipe2 test this value greatly reduces the number of IPIs
  and improves bandwidth by a few hundred megabytes/sec (the old DELAY
  did the same thing so there is no change for the pipe2 test).

* Add sysctl kern.pipe.delay which defaults to 5000 nanoseconds (5uS).
  This is the maximum a pipe reader will wait for additional data before
  falling back to tsleep/wakeup (and related ipis).  pipe_delay may be
  set to 0 to disable the function.  I value of at least 3000 is
  recomended.  Pipelining large buffers efficiently requires a higher value,
  say up to 8000 or so.

* Allow kern.pipe.mpsafe to be set to 2 which adds a predictive wakeup
  when a writer is found to be stalled.  This currently has no significant
  effect on operations due to token collisions.

* Add statistics: kern.pipe.wblocked and kern.pipe.rblocked, counting
  the number of times a pipe blocks in "pipewr" or "piperd".

* Fix MP races in pipe_ioctl().

clocks - Add fine-grained spin delay function via TSC

Add int64_t target = tsc_get_target(ns) and tsc_test_target(target).
See routines for details.  These functions are available when the system
supports an extremely fine-grained counter such as a TSC and may be used
to generate finely tuned delays.

libtelnet: Fix some mis-usage of NULL and raise WARNS to 2.

Oops!  Actually install /usr/libexec/telnetd.

Noticed-by: swildner

bootpgw:  Use err(3).

Obtained-from: FreeBSD

pipe - Fix piperd/pipewr deadlock in mpsafe case

* Fix a bug where piperd and pipewr could be entered simultaniously
  by the reader and writer and neither gets woken up.

* Redo the hysteresis slightly to reduce IPIs even more.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

pipe - Make pipe r/w MPSAFE, add kern.pipe.mpsafe (disabled by default)

* Make pipe_read and pipe_write MPSAFE.

* Add a sysctl kern.pipe.mpsafe which defaults to disabled.  Set to
  1 to test the MPSAFE pipe code.  The expectation is that it will be
  set to 1 for the release.  Currently only pipe_read and pipe_write
  is MPSAFE.

* The new code in mpsafe mode also implements a streaming optimization
  to avoid unnecessary tsleep/wakeup/IPIs.  If the reader and writer
  are operating on different cpus this feature results in more uniform
  performance across a wide swath of block sizes.

* The new code currently does not use any page mapping optimizations.
  Page table overhead is fairly nasty on SMP so for now we rely on cpu
  caches and do an extra copy.  This means the code is tuned better for
  more recent cpus and tuned worse for older cpus.  At least for now.

OLD pipe code:  dwe = dwrite_enable, sfb = dwrite_sfbuf mode
NEW pipe code:  mpsafe = 0 (gets bgl) or 1 (does not use bgl)

Using /usr/src/test/sysperf/pipe2.c to test, all results in MBytes/sec

  8K  16K  32K  64K 128K 256K
---- ---- ---- ---- ---- ----
OLD dwe=0 1193 1167 1555 1525 1473 1477
OLD dwe=1 sfb=0  856    1458 2307 2182 2275 2307
OLD dwe=1 sfb=1  955 1537 2300 2356 2363 2708
OLD dwe=1 sfb=2  939 1561 2367 2477 2379 2360

NEW mpsafe=0 1150 1369 1536 1591 1358 1270
NEW mpsafe=1 2133 2319 2375 2387 2396 2418

priv: Finally get completely rid of PRISON_ROOT flag.

This means that from now on, what is allowed within a jail
is purely defined in function prison_priv_check().

priv: Define and use PRIV_PROC_TRESPASS

priv: Define and use PRIV_SETHOSTNAME

priv: Define and use PRIV_VARSYM_SYS

Simplify expressions

priv: Define and use PRIV_HAMMER_IOCTL

priv: Use PRIV_DEBUG_UNPRIV in procfs

priv: Use PRIV_VFS_SETGID

Note that in case of UFS, the priv_cred_check() call will now
succeed in a jail, whereas it failed before.

priv: Sync ext2_quotactl() with ufs_quotactl() implementation

priv: Use PRIV_VFS_CHMOD and PRIV_VFS_CHOWN

math.3: Mention f{max,min,dim}.

libm: Import fdim{,f,l} functions from FreeBSD.

libm: Import fmax{,f,l} and fmin{,f,l} functions from FreeBSD.

priv: Refactor UFS quota permissions

Remove duplicate line

priv: Use PRIV_VFS_CHMOD and PRIV_VFS_CHOWN

priv: Introduce and use PRIV_VFS_SETATTR in xxx_setattr()

Replace PRIV_ROOT, PRISON_ROOT combination in xxx_setattr() function
(e.g. ext2fs_setattr()) of several filesystems with PRIV_VFS_SETATTR.

priv: Use PRIV_NETINET_RAW

priv: Use PRIV_NETINET_RESERVEDPORT

priv: Use PRIV_NETINET_RESERVEDPORT

priv: Comment PRIV_NETINET_RAW as FreeBSD does

priv: Use PRIV_NETINET_RAW

priv: Introduce and use PRIV_VFS_REVOKE

priv: Use PRIV_VFS_CHFLAGS_DEV

priv: Use PRIV_VFS_LINK

priv: Introduce and use PRIV_VFS_CHMOD

priv: Remove some uses of PRIV_ROOT/PRISON_ROOT

kmod.mk: Remove some dead code supposed to handle modules' manual pages.

It was ignored previously and since we do not keep kernel related
manual pages in sys/ the whole idea is bogus anyway.

Remove crunchgen(8).

Merge branch 'master' of /home/www-data/gitweb/dragonfly

pipe - pre-MP work, change indexing to circular FIFO rindex/windex.

Document various get-time functions and vfs_timestamp() as MPSAFE.

pipe - pre-MP work, remove direct map and sfbuf features

To help with the initial MPSAFE work we are removing the direct-write
optimizations.  This represents a slight nerf on a SMP box on a modern
cpu, but not really enough to matter in the grand scheme of things.
They may return at some future date.

Stop building multiple versions of telnet.

It's ok to move this code outside of crypto/ because it doesn't actually
contain any crypto -- only routines that call the crypto functions.
This keeps the code centralized, and the usual make.conf defines will
control what gets built (the default is still non-kerberos and with
crypto).

getdevpath.[38]: mdoc cleanup

vrevoke/single-user - fix more revoke issues.

* vrevoke() no longer clears vp->v_rdev.  Doing so interferes with specfs's
  ability to call dev_dclose().  Fixing this will allow the regular close
  of the vnode to close the underlying device.

  Since the revoke code detaches the vnode from any user-visible file
  descriptors the vnode will end up being closed the moment the last
  referenced to the detached fp goes away.

* kill 1 no longer leaves the syscons in a state where both /dev/ttyv0 and
  /dev/console are marked open (due to the above bug).  This state would
  cause the keyboard to stop working sometimes when dropping into single
  user.

* Add dev_drevoke() and friends.  This allows a device to do something
  when an attempt is made to revoke() the related vnode.

  TTY and PTY devices now attempt to break out of any ttysleep() operation
  (such as when processes are blocked in read()).  This is advisory and
  if it fails to break a process out of a blocked condition that process
  will still detach after the blocked condition is resolved normally.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

getdevpath - add _PATH_DEVTAB_PATHS

Reminded-by: Sascha Wildner <saw@online.de>

Get rid of PCI_MAP_FIXUP and opt_pci.h

ACPI: Make acpi_pci* compile; they are not used yet.

Submitted-by: Alexander Polakov <polachok@gmail.com> w/ modification

amd64: Copy MPTable PCI interrput routing code from i386

Following three commits on i386 are merged:
eaec4152c00f8d7503f218f2a246802044d2600e
566f2cdcd40f5829aedb2c0b2a8339e189c7570d
6fd2232c44c5937a832a5b929989de0b1ddfc9de

MPTable PCI interrupt routing: Verbose logging if an ISA IRQ is to be tried.

Use same interrupt vector handler for fast/slow interrupt handlers

Slow interrupt vector handler is removed.  Fast interrupt vector handler,
ithread_fast_handler(), now schedules slow interrupt handlers if necessary:
o  No fast interrupt handlers are registered
o  Mixed fast and slow interrpt handlers are registered
o  Non-MPSAFE fast interrupt handlers could not get BGL

i386/amd64: gd_ipending field in mdglobaldata is revoked, which is only
used by slow interrupt vector handler.

ithread_fast_handler()'s invoking convetion is changed:
- ithead_fast_handler() must be called with critical section being held
- Callers of ithead_fast_handler() no longer bump gd_intr_nesting_level

Discussed-with: dillon@
Reviewed-by: dillon@

pci: Add MPTable Host-PCI/PCI-PCI bridges drivers.

- This driver overrides PCI bridge interrupt routing method.
- Nuke APIC_IO workaround in PCI configuration reading functions.

Obtained-from: FreeBSD

IO APIC: Assign pins dedicated to PCI in the early stage.

After this, we no longer need to reprogramme IO APIC every time
an interrupt handler is to be registered, which is potentially
dangerous.

ACPI MADT: Hide debug prints under bootverbose

Remove unused code in pc32/ipl.s

Remove unused code in pc32/apic_vector.s

IO APIC: Get rid of apic_imen

Add IOAPIC_IM_FLAG_MASKED to apic_intmapinfo, which indicates the
IRQ is currently masked.  Use it instead of apic_imen.

IO APIC: Get rid of apic_pin_trigger

- Expend apic_intmapinfo from 16bytes to 32bytes
- Add flags field in apic_intmapinfo, which now records irq's trigger mode

Use genassym to replace magic numbers in pc32/apic_{vector,ipl}.s

APIC vector: Compact redirect entry's mask bit setting and clearing

Use IOAPIC_WINDOW in pc32/apic_ipl.s

Remove unused code in pc32/ipl.s

Remove unsued code in kern/kern_intr.c

fast intr: Don't dispatch to the BGL owner, if BGL could not be holden;
just reschedule ithread.

Discussed-with: dillon@

Move to the interrupt's destination CPU before tearing down the interrupt

Turn on PG_N (nocache) when mapping ioapic

Noticed-by: Jordan Gordeev <jgordeev@dir.bg>

procfs - fix incremental reads of /proc/*/rlimit

The rlimit code was only properly copying data for all-in-one-go reads,
and mishandling incremental reads.

Submitted-by: Beket@@irc

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

Add /sbin/getdevpath utility - userland convenience utility for getdevpath(3).

libutil - add getdevpath()

Add the getdevpath() function which translates a device name such as "da0",
or label such as "fubar", into a device path.  This function searches
/usr/local/etc/devtab, /etc/devtab, and /etc/defaults/devtab for labels.
Device names beginning with '/' or '.' are assumed to be paths and passed
through.

pthread_once.3: Fix typo.

pthread_barrierattr.3: Remove empty section.

sigwait.3: Add missing '.'

pthread*.3: Sync the pthread manpages with FreeBSD.

Brings in some missing pages and some small fixes.

Reminded-by: hasso

pci.9: Sync with FreeBSD.

amd64: Sync header 'int_limits.h' with i386.
Helps building of GNU m4 (and other GNU stuff).

Remove obsolete kernel options: PCI_ENABLE_IO_MODES & PCI_QUIET.

Remove hardcoded -g in several Makefiles.

CAM - disable cache synchronization by default for USB attachments.

Instead of trying to blacklist particular usb mass storage devices which
do not support the cache synchronization command, just default to not
supporting it for ALL usb mass storage attachments.  Too many usb devices
brick when sent the command.

It matters more now that people are using HAMMER, and HAMMER utilizes the
cache synchronization command to delineate flushes.  We will now by
definition not be able to guarantee recovery if HAMMER is used on a USB
mass storage device.  It will probably work anyway, though.

Reported-by: Many people

AMD64 - Fix identcpu.

AMD64 - Include NULLFS in JG64

libc - use a valid pointer for malloc(0).

This fixes an issue with qsort()ing 0 elements.

Reported-by: smtms

AMD64 - Use ld -r to generate .ko for modules.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

AMD64 - Enable module building, sync i386 headers etc as needed.

* Enable module building (platform/pc64/Makefile.inc)

* Copy files and make changes as needed to bring amd64 up to date.

hammer.8: Comment out rebalance which is not part of cleanup yet.

AMD64 - Fix native-built sys/boot install

* Pass the proper elf format to the linker when compiling programs in
  sys/boot.

* include btxld in the 64 bit buildworld.  It is needed by sys/boot.

* a.out.h / imgact_aout.h needed a special case to generate a 32 bit
  struct exec when compiled from a 64 bit environment.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

AHCI - Do not try to attach as AHCI unless INTEL part identifies as AHCI

Do not try to attach as AHCI if the BIOS has configured an INTEL part
as legacy ATA instead of AHCI.  This is a temporary hack until the
code can be cleaned up more generally.

Reported-by: corecode

pciconf(8): Fix some warnings.