Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

rcng - add rcng script to fixup kern.bootfile

In BOOT+ROOT setups the boot loader does not realize that the boot partition
will be mounted as /boot under the root partition.  This RCNG script fixes
up the kern.bootfile sysctl.

libstand - remove iaddr_t, do not assume long double is a power of 2, clean up

* Remove iaddr_t.  Use uintptr_t instead.

* Remove use of long double to determine alignment.  Use a fixed 16 byte
  alignment instead.

* General cleanup

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

AMD64 - Support -m32 by conditionalizing 32 and 64 bit typedefs.

Conditionalize the typedefs in amd64-specific headers to support -m32
compilation.  This fixes the compilation of the boot loader from the
amd64 build.

Add some sysctl info so that we can see what is going on with vblanks.

Obtained-from: FreeBSD

Only release irq resources if we were actually using them.

Obtained-from: FreeBSD

Remove signals for vblank events code.

Using signals for vblank events is prone to issues.  There have never
been any consumers and likely will never be.  Furthermore, we have
never enabled the code for it, so just get rid of it.

Obtained-from: FreeBSD

More meaningful timeout for sleep.

Given that vblanks generally occur 60 times a second, waiting 3 seconds
seems rather excessive.

Obtained-from: FreeBSD

Don't corrupt hardware vblank counter.

vblank[crtc].last represents the hardware counter while request.sequence
represents the software counter.

Obtained-from: FreeBSD

Hold the lock while we save/restore register for suspend/resume.

Obtained-from: FreeBSD

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

USB - Fix compiler warning.

AMD64 - More %llX format fixes

Make atomic_load_acq_* and atomic_store_rel_* actually work.

Obtained-from: FreeBSD

AMD64 - Fix many compile-time warnings.  int/ptr type mismatches, %llx, etc.

usb ehci - Fix machine freezes from shutdown race (missing commit)

EHCI's shutdown code was killing the chipset without first killing the
interrupt, and it was also handing EHCI back to the BIOS without first
waiting for the shutdown reset to complete.  Either can lock the machine

HAMMER Util: Fix missing check on fopen result.

Fix a missing check when the fopen() to create a new period file fails.

Reported-by: Antonio Huete Jimenez <tuxillo@quantumachine.net>

usb ehci - Fix machine freezes from shutdown race

EHCI's shutdown code was killing the chipset without first killing the
interrupt, and it was also handing EHCI back to the BIOS without first
waiting for the shutdown reset to complete.  Either can lock the machine
up on shutdown/reboot.

usb - More interrupt livelock fixes.

Fix additional interrupt livelocks which occur during initialization due to
interrupts being enabled too early.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

kernel diskmbr handling - Detect maxed out slice ds_size field.

If the DOS slice field is found to be maxed out (0xFFFFFFFFU), use the
actual media size for calculations instead of ds_size.  This allows
disks > 2TB to have a conventional slice table and still contain a
disklabel64 which covers the actual size of the media.

disklabel - expand warning if the media is too large.

Instead of just warning that the media is too large and exiting, also
now suggest that disklabel64 be used.

fdisk - allow media sizes larger then 2TB

If the media size is larger then 2TB set the 32 bit slice logical
size field, ds_size, to its maximum value of 0xFFFFFFFFU instead of
overflowing the field.

Add sili(4) and drm(4) manpages (from OpenBSD and NetBSD, respectively).

Thanks to Hasso Tepper for helping with the drm(4) one.

make upgrade: Remove GNU cpio's info file, too.

Make all G4X chips use the new framecount register.

The G45 docs indicate that all G4X chips use the new framecount register.
Intel agrees with my reading of the docs, make it so for all G4X chips.

The new register also has a 32 bit width as opposed to 24 bits.  Fix
things up so that the counters roll over properly.

Obtained-from: FreeBSD

krealloc() behaves identically to kmalloc when passed a NULL object pointer.

If an error does occur we would have left max_context with an incorrect
value.

Obtained-from: FreeBSD

Don't panic if drm_rmmap is called with a NULL map pointer.

Obtained-from: FreeBSD

Don't try to setup interrupts for drivers that don't support them.

This causes sis and probably a couple of other drivers to panic and fail.

Obtained-from: FreeBSD

Check offsets for R300_ZB_ZPASS_ADDR.

Obtained-from: FreeBSD

Add regs required for occlusion queries support.

Obtained-from: FreeBSD

Add support for RV790 (HD 4890) asics.

Obtained-from: FreeBSD

Radeon microcode handling cleanup.

A little more cleanup from AMD, if we don't have the right microcode
there is no reason to mess with the chip.

Obtained-from: FreeBSD

MP table: Don't mix lapic/ioapic/imcr configuration information extraction

Merge mptable_check() into mptable_probe()

Use madt_iterate_entries() in madt_pass2()

ACPI MADT: When locating lapic address, take Local APIC Address Override
into consideration.

ACPI MADT: Check existance of BSP in madt_check()

ACPI MADT: Add madt_iterate_entries()

Use mptable_iterate_entries() in mptable_pass2()

Pull IMCR setting out of mptable_pass2()

Let mptable_pass2() call mptable_default()

mptable_default() only configures ioapic stuffs

Use mptable_iterate_entries() in mptable_pass1()

MP table: Remove global variables for HT fixup

NAPICID 16 -> 256.

This also makes sure that we could actually do 32 (MAXCPU) CPUs
instead of 16.

mptable_lapic_enumerate(): Fix comment

Rearrange mptable_lapic_enumerate() by factoring out mptable_lapic_default()

Add APIC_ID to extract apic id from local apic id field

Add lapic_init() to map local apic

MP table: Pull lapic related information extraction into seperate function

MP table: Do preliminary checks before claiming that the MP table is valid

Put mp_nbusses and bus_data under APIC_IO

Staticize mp_nbusses

Remove bsp_apic_ready

Correct the logical_cpus calculation in mptable_hyperthread_fixup()

The original code extracts logical_cpus directly from the output of
cpuid(eax=1), however,
According to Intel's #253668, section 7.7
"(CPUID.1:EBX[23:16]) -- Indicates the maximum number of addressable
 ID for logical processors in a physical package."
According to AMD's #25481 CPUID Fn0000_0001_EBX
"LogicalProcessorCount is the number of threads per CPU core times the
 number of CPU cores per processor."

So what we originally saved in logical_cpus is actually the upper limit
of the logical CPUs per phyical CPU package.  It may work correctly if
there is only one logical CPU per physical CPU package detected in MP
table.  But if more than one logical CPUs per phyical CPU package are
detected in the MP table, then the missing logical CPUs will not be
detected later, since the code assumed that logical_cpus is the number
of logical CPUs missed between two detected logical CPUs.

We try to fix the problem by calculating the distances between two nearest
APIC IDs.  If all such distances for all detect logical CPUs are same,
then the logical_cpus is set the calculated distance.  The value extracted
from cpuid(eax=1) just serves as the upper limit of the logical_cpus now.

Reported-and-Tested-by: Robert Luciani <rluciani@gmail.com>

Merge branch 'vendor/LIBARCHIVE'

Add README.DELETED to libarchive's vendor branch.

Merge branch 'vendor/LIBARCHIVE'

Merge branch 'vendor/LIBARCHIVE' (early part)

Rename libarchive-2/ to libarchive/.  No need for it to be versioned.

Remove old versions of libarchive.

Remove GNU cpio.

pnpinfo(8): Oops, add missing semicolons.

diff(1): Commit our patches to contrib/ and get rid of -I-.

Merge branch 'master' of /home/www-data/gitweb/dragonfly

Merge branch 'vendor/LESS'

Upgrade to less-429.

* The -D option with one number now means use the normal background color.
* Don't change permissions on history file if it is not a regular file.
* Fix non-ANSI-compliant code that caused problems with some compilers.
* Fix binary file detection in UTF-8 mode.
* Fix display problems with long lines on "ignaw" terminals.
* Fix problem interrupting the line number calculation for initial prompt.
* Fix SGR emulation when dealing with multiple attributes (eg.
bold+underline).
* Fix highlight bug when searching for underlined/overstruck text.
* New "&" command allows filtering of lines based on a pattern.
* Status column now displays a search match, even if the matched string is
scrolled off screen because -S is in effect.
* Improve behavior of -F option.
* Allow CSI character (0x9B) to work in UTF-8 mode.
* Output carriage return at startup in case terminal doesn't default to
column 1.
* Fix bug in '' (quote, quote) command after G command.

Add README.DELETED to the vendor/LESS branch.

Merge branch 'vendor/LESS'

pnpinfo(8): isolation_protocol() takes no arguments.

While here, clean up a bit, fix a couple of warnings and raise WARNS to 6.

Move less-4/ to less/.  No need for versioned directories.

Remove old versions of less.

Add MD, optimized versions of string functions for amd64.

Obtained-from: FreeBSD

Add amd64 assembly versions of div(3), ldiv(3), and lldiv(3).

Obtained-from: FreeBSD

Update some of the amd64 parts of libc:

* Change the syscall stub branch orders so that the static branch
prediction will assume that syscalls will succeed rather than fail.

* Add error handling for PSEUDO syscalls.

* Add END() macros for Assembler code. This causes the symbol
table to include the size of the function.

* ldexp:  Fix a typo in the !__GNUC__ case and remove an obsolete
comment.

* setjmp/longjmp changes:
-Save and restore the control part of the MXCSR in addition to the
i387 control word to ensure that the two are consistent.
-Don't clobber the FPU exception flags in longjmp. C99 requires them
to remain unchanged.

Obtained-from: FreeBSD

Sync with i386's _fpmath.h:

* Define LDBL_NBIT to be a mask indicating the position of the integer
bit in a long double.

* Add an alternative view of the bits in an 80-bit long double (64+16
instead of 32+32+15+1).

Obtained-from: FreeBSD

Define an END() macro for use in i386 and amd64 assembly code.

Obtained-from: FreeBSD

Remove dead code (_ARCH_INDIRECT) from <machine/asm.h>.

Allow pre-2.3 systems to build the new version of file.

Add a few things under COMPILE_ONLY so systems without strtof and/or
daylight can still build the host tool.

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

HAMMER VFS - Implement inode number matching against the directory hash

Change hammer_create_inode() and hammer_alloc_objid() to take the upper
10 bits of the filename hash and attempt to use them as the lower 10 bits
of the inode number.

hammer_alloc_objid() now utilizes a small two-level 1024-bit bitmap to
assign the low 10 bits of the inode number, on a per-directory basis.
If a collision occurs a nearby value is used instead.

The idea is for inode numbers to have approximately the same linearity
as the directory read scan order, so programs such as cpio, tar, cpdup,
find, and ls which do recursive scans of the directory tree get much
better locality of reference for stat() and other related system calls.

Based-on: Numerous discussions with people, esp corecode.

cpdup - Do not create a .tmp file and rename if the target does not exist.

* When copying if the target does not exist use the target's actual name
  instead of the name of a temporary file.

  This helps filesystems (aka HAMMER) which use hashed directories.  Inode
  numbers can be selected by the FS on the basis of the file-name in
  order to maintain directory-order linearity.  If the copy program creates
  the target file with one name and then renames it to the real name,
  however, the feature is lost and we get one big scramble again.

Merge branch 'vendor/FILE'

Upgrade to file-5.03.

Changes can be viewed in the ChangeLog file.

HAMER VFS - Cache additional b-tree nodes in directory.

* Cache inode record cursors in the directory at dip->cache[2] to reduce
  cpu overhead when iterating a directory.

* Cache file object record cursors in the file's governing directory at
  dip->cache[3] after reading the last data record in a file, to reduce
  cpu overhead when chain-reading files.

* Also add vfs.hammer.stats_btree_root_iterations, a counter which
  is incremented whenever a B-Tree search is initiated from the root
  node.

Merge branch 'vendor/FILE'

Add README.DELETED to file's vendor branch.

Merge branch 'vendor/FILE'

Merge branch 'vendor/FILE' (early part)

Move file-4/ to file/.  We don't need a versioned directory.

Remove old versions of file.

HAMMER VFS - Add hinting capability to block allocator, hint B-Tree

* A hammer_off_t can now be supplied to the blockmap allocator as a hint.

* Use the hinting mechanism to better-localize B-Tree node allocations
  and meta-data updates.

iostat - Increase the tps field width from 3 to 4.

* Standard workloads now easily push the tps rate into the 4 digits.
  Increase the tps field with to 4.

Merge branch 'vendor/OPENSSH'

Upgrade to OpenSSH-5.2p1.

Security:

 * This release changes the default cipher order to prefer the AES CTR
   modes and the revised "arcfour256" mode to CBC mode ciphers that are
   susceptible to CPNI-957037 "Plaintext Recovery Attack Against SSH".

 * This release also adds countermeasures to mitigate CPNI-957037-style
   attacks against the SSH protocol's use of CBC-mode ciphers. Upon
   detection of an invalid packet length or Message Authentication
   Code, ssh/sshd will continue reading up to the maximum supported
   packet length rather than immediately terminating the connection.
   This eliminates most of the known differences in behaviour that
   leaked information about the plaintext of injected data which formed
   the basis of this attack. We believe that these attacks are rendered
   infeasible by these changes.

New features:

 * Added a -y option to ssh(1) to force logging to syslog rather than
   stderr, which is useful when running daemonised (ssh -f)

 * The sshd_config(5) ForceCommand directive now accepts commandline
   arguments for the internal-sftp server.

 * The ssh(1) ~C escape commandline now support runtime creation of
   dynamic (-D) port forwards.

 * Support the SOCKS4A protocol in ssh(1) dynamic (-D) forwards.
   (bz#1482)

 * Support remote port forwarding with a listen port of '0'. This
   informs the server that it should dynamically allocate a listen
   port and report it back to the client. (bz#1003)

 * sshd(8) now supports setting PermitEmptyPasswords and
   AllowAgentForwarding in Match blocks

Bug and documentation fixes

 * Repair a ssh(1) crash introduced in openssh-5.1 when the client is
   sent a zero-length banner (bz#1496)

 * Due to interoperability problems with certain
   broken SSH implementations, the eow@openssh.com and
   no-more-sessions@openssh.com protocol extensions are now only sent
   to peers that identify themselves as OpenSSH.

 * Make ssh(1) send the correct channel number for
   SSH2_MSG_CHANNEL_SUCCESS and SSH2_MSG_CHANNEL_FAILURE messages to
   avoid triggering 'Non-public channel' error messages on sshd(8) in
   openssh-5.1.

 * Avoid printing 'Non-public channel' warnings in sshd(8), since the
   ssh(1) has sent incorrect channel numbers since ~2004 (this reverts
   a behaviour introduced in openssh-5.1).

 * Avoid double-free in ssh(1) ~C escape -L handler (bz#1539)

 * Correct fail-on-error behaviour in sftp(1) batchmode for remote
   stat operations. (bz#1541)

 * Disable nonfunctional ssh(1) ~C escape handler in multiplex slave
   connections. (bz#1543)

 * Avoid hang in ssh(1) when attempting to connect to a server that
   has MaxSessions=0 set.

 * Multiple fixes to sshd(8) configuration test (-T) mode

 * Several core and portable OpenSSH bugs fixed: 1380, 1412, 1418,
   1419, 1421, 1490, 1491, 1492, 1514, 1515, 1518, 1520, 1538, 1540

 * Many manual page improvements.

Add README.DELETED to the OpenSSH's vendor branch.

Merge branch 'vendor/OPENSSH'

Merge branch 'vendor/OPENSSH' (early part)