vkernel - cpu_disable_intr adjustments

* cpu_disable_intr() also disables IPI interrupts now.

kernel - Fix rare IPIQ freezes

* Ensure that an IPI interrupt is sent went waiting for an IPIQ
  to drain.  The IPIQ can be pushed up by passive IPIs and not
  necessarily have a signal pending on the target cpu, so we
  have to put the check in our drain loop rather than outside
  the loop.

* Add a cpu_pause() to reduce power use for the IPIQ drain case.

* Normalize the use of gd_intr_nesting_level and clean up the
  code syntax for the ipiq_optimized case.

* Remove the previous temporary IPI interrupt signaling fix, it
  was incomplete.

* Fix a missing crit_exit() in the ENOENT case for
  lwkt_send_ipiq3_nowait().

* Track cpu's which are in the middle of ipiq processing and
  assert that a cpu is not in an IPIQ processing loop when
  switching between threads.

* Normalize the use of ip->ip_npoll in the IPIQ code.  This
  field is used to avoid unnecessary IPI interrupts.

vkernel - Fix lockup with [v]kernel due to missing ipiq signal

* If the target ipiq has nothing but passively queued entries the target
  cpu will normally just process the ipi's on the next clock interrupt.

  However, if the originating cpu is forced to live-loop waiting for the
  target to the drain the target may not be aware that it needs to drain
  ASAP.

* The fix is for the originating cpu to ensure that an ipi interrupt is
  sent to the target cpu before live looping.

* This appears to primarily effect vkernels.

Reported-by: ftigeot, tuxillo

vkernel - do not set SA_NODEFER for SIGIO and SIGUSR1

* Do not set SA_NODEFER for SIGIO and SIGUSR1 in vkernels.  This fixes a
  stack overflow which can occur under heavy I/O or IPI loads.

kernel - Fix signal delivery races

* The send side was using p->p_token but the processing code from trap
  was still using the mp_lock.  Fix the trap processing code to use
  p->p_token.

* This fixes several nasty races that can cause signals to be lost and
  vkernels to freeze, and possibly other programs which depend on signals
  between threads.

kernel - Fix a small race in the umtx code

* Add an additional check after registering the vm_page action before
  actually going to sleep, closing a potential vm_token race.

vga(4): Remove a bogus check.

These are the remains of a larger chunk of code that I removed in
4e193d20. It was used to determine whether a MGA, CGA, EGA or VGA
was present in the box. I left the check in at the time because I
thought, why not?

However, ASpeed's VGA BIOS (at least as found on some Tyan S8230*
series motherboards) seems to have some flaws and ends up returning
0xf instead of 0x9. This caused vga(4) initialization to fail early
in the boot and no kernel messages would go to the screen.

Since the only thing that interests us is whether a VGA is present
or not, remove this check. There are other tests later on that will
detect what we want (such as checking the CRTC's address).

Reported-by: Francois Tigeot <ftigeot@wolfpond.org>

ktrdump: handle %c in ktr format strings

ktrdump: fixup size modifiers for integers

The 'j' modifier is actually {u,}intmax_t, not {s,}size_t. Correct that
and add support for 'z' while at it.

vga(4): Fix the kernel build with VGA_NO_BIOS set.

Reported-by: Francois Tigeot <ftigeot@wolfpond.org>

kernel - Fix directory scanning bug in Samba

* Bring in the patch from FreeBSD PR 78953

Taken-from: http://www.freebsd.org/cgi/query-pr.cgi?pr=kern/78953
Reported-by: uv <uv.negativa@gmail.com>

df - Properly handle paths passed when -t is used.

Show only the related mount points for the specified filesystem(s) when
option -t is used.

Obtained-from: FreeBSD

kernel: Fix buildkernel for kernel w/ 'options IPSEC', but w/o IPSEC_ESP

Merge commit 'crater/DragonFly_RELEASE_2_10' into rel2_10

hammer(8) - Fix snapshot count in info directive.

- We were wrongly using the HAMMER filesystem fd instead of a per-PFS one.
- Adapt the snapshot count in the case of error

Sync zoneinfo database with tzdata2011h from elsie.nci.nih.gov

antarctica:     8.8  -> 8.9
asia:           8.64 -> 8.65
europe:         8.32 -> 8.33
iso3166.tab     8.6  -> 8.9
southamerica:   8.49 -> 8.50
zone.tab:       8.43 -> 8.45

* antarctica: Remove unused RussAQ rules.

* asia: Add comment on retaining "old" Russia rules for the benefit
    of Armenia.

* europe: Russia abandons DST in 2011 (thanks to Alexander Krivenyshev).
    "Old" Russia rules retained for now for Belarus.

* iso3166.tab: Change AN (Netherlands Antilles) to CW (Curacao).

* southamerica: Use links for places with new iso3166 codes.

* zone.tab: Change AN (Netherlands Antilles) to CW (Curacao).

kernel - Fix a 'vm_page_unhold: hold count < 0' panic in kern_execve()

* imgp->firstpage is preloaded with lwbuf storage but we failed to NULL
  it out on error, causing the code to later attempt to release a bogus
  lwbuf.

* Fixes a hold count panic on random vm_page's.

kernel - Allow signal delivery via KQ even if the process SIG_IGN's the signal

Reported-by: swildner@

kernel - Fix netgraph MP race

* Fix a netgraph MP race due to netgraph not acquiring required tokens
  when manipulating the socket's sockbuf structure.

Reported-by: Francois Tigeot <ftigeot@wolfpond.org>

kernel -- snp: Correct bug in snpfilter_detach().

Signed-off-by: Nathaniel Filardo <nwfilardo@gmail.com>
Submitted-by: Nick Prokharau <nickprok@gmail.com>

AF_UNIX: Hold a reference of the unp_conn before executing blocking code

Since unp_token will be automaticly released upon execution of blocking
code, close of unp_conn could race any code paths that references unp_conn
after executing blocking code.  To fix these races, we simply increment
the reference count of the unp_conn before executig any possibly blocking
code and release the reference count of unp_conn, which may release unp_conn
itself.  This _currently_ does not suffer 0-ref race, since unp_token is
always being held.

AF_UNIX: Allocate pcb using M_WAITOK|M_NULLOK instead of M_NOWAIT

So the allocation will not fail mysteriously while the system will not
panic if the system is really out of memory.

intr: Call machintr_intren() only for hardware interrupts

mail(1) & battlestar(6): Rename some files.

All these files had names which are reserved in Windows, which led
to our tree being not correctly checked out to NTFS, for example.

Reported-by: Adam Hoka <adam.hoka@gmail.com>

Use OpenBSD's glob in OpenSSH.

This fixes a bus error caused by globbing in the ssh utils (specifically
'ls *' in sftp).

Merge branch 'vendor/OPENSSH' into DragonFly_RELEASE_2_10

Add OpenBSD's compat glob.c for OpenSSH.

The latest version of OpenSSH uses OpenBSD-specific features.

binutils221: Remove /usr/{local,pkg}/lib as libdirs from ld(1).

make upgrade - removal additional obsolete files

* Remove /usr/lib/libc_r.so.5, libthread_xu.so.2, libc_r_p.a, and
  libthread_xu_p.a, in addition to the base libc_r and libthread_xu
  libraries.

* All of these were relocated to /usr/lib/thread/

make upgrade - Allow removal of protected files

* chflags -Rf noschg <blah> from the files to be deleted list
  before attempting to rm -rf <blah>.

* Fixes the proper removal of obsolete or moved libraries.

libpthread - Always override the symlinks

* Always override the symlinks for /usr/lib/libpthread* to ensure that
  very old systems are properly upgraded.

* If the user wants to point the symlink at a different threading library
  the use rcan set THREAD_LIB in /etc/make.conf.

Reported-by: Vitaly Shevtsov <loki.vt@gmail.com>

gcc 4.4: Remove PIE profiling trigger

The support for Position Independent Executables came from FreeBSD.
Unfortunately, a bug in their initial commit was also carried over.
Removing the GCRT define from the i386 crtstuff makefile will stop
PIE binaries from generating *.gmon files as they are executed.  The main
software that suffers this are cups and samba.  Rebuilding those ports
after rebuilding world will fix this issue on the i386 platform, the only
one affected.

Report by mroland, issue 2063

kernel/ddb: Fix examine's z format (for signed hex).

This was previously attempted to be printed with a special %z conversion
specifier of kprintf(). But our kprintf() doesn't support this specifier.
Either support for it got lost along the way or we never had it, I didn't
check.

Since we want to get rid of non-standard conversion specifiers (because
they require compiler modification for silencing format warnings), use a
db_format_hex() function that does the same as %z was supposed to do.

Taken-from: NetBSD

installkernel: Copy /boot/kernel/initrd.img to /boot/kernel.old too.

Reported-by: Tim Darby <t+dfbsd@timdarby.net>
Dragonfly-bug: <http://bugs.dragonflybsd.org/issue2059>

gcc44: provide pragma pack(push) & pragma pack(pop) support

swapon(8): Fix "swapctl -l".

Without -s, swapctl -l would report 0 for swap size and used swap because
some variables were initialized only for the -s case. Just remove the
"if (sflag)" around the calculation.

Reported-by: Joachim de Groot <jdegroot@web.de>
Taken-from:  FreeBSD

dm(4): Fix a typo in the code.

sysv_msg: Fix a typo in the code.

ng_pppoe(4): Fix a typo in the code.

dummy commit w/new tag

kernel - Try to reduce 'busy buffers problems' during halt/reboot

* Ignore busy buffers related to TMPFS in pass 1, and busy buffers related
  to TMPFS, NFS, SMBFS, and MFS in the final check.

Sync zoneinfo database with tzdata2011g from elsie.nci.nih.gov

africa:         8.30 -> 8.31
europe:         8.28 -> 8.32
southamerica:   8.47 -> 8.49

* africa: Egypt's interim cabinet decided to cancel daylight
    saving time.

* europe: Eliminate some doubled words.

* southamerica: As a trial, the Falkland Islands will remain on
    summer time throughout 2011. Also eliminate some doubled
    words.

aesni(4): Sync with FreeBSD.

* Add support for CRYPTO_AES_XTS.

* Fix some bugs in aeskeys_*.S and aesni_wrap.c

* Add support for CRD_F_KEY_EXPLICIT flag.

* Remove DEBUG sections.

* Simplify code a bit.

installer: For bootblocks, only offer the disk that was installed to.

In the "Disk Utilities" menu, we still offer all disks.

Requested-by: dillon

aesni(4): Avoid panicking when kmalloc() returns an unaligned pointer.

Instead, align it ourselves and keep the original address for kfree().
This is a bit hacky but not too hacky (and it is done the same way in
padlock(4)).

In the middle run, we probably need some kmalloc() flavor that can do
alignment.

In-discussion-with: alexh

Merge branch 'DragonFly_RELEASE_2_10' of ssh://crater.dragonflybsd.org/repository/git/dragonfly into DragonFly_RELEASE_2_10

kernel - enable carrier/modem-status for usb serial devices (/dev/ucomX)

* Fix an incorrect return code from umodem which was preventing
  ucom from processing TIOCMGET and other related modem control
  ioctls.

* For the moment comment out a panic condition dealing with an
  abort sent from an interrupt context.

pf(4): Fix compilation without INET6.

Merge branch 'DragonFly_RELEASE_2_10' of ssh://crater.dragonflybsd.org/repository/git/dragonfly into DragonFly_RELEASE_2_10

ftpd - Remove the use of GLOB_LIMIT

* The problem with this flag is that it currently arbitrarily limits
  stat and other operations and completely breaks anonymous ftp on
  directories with large numbers of files (like packages/All).

  Remove its use for now.

kernel - Fix a rare nfsnode destruction race

* Clear np->n_vnode atomically (w/ the token held) when removing a
  node from the hash table.  The field was previously not being
  cleared at all which could race the nfsnhash lookup code despite
  the vnode interlock and check the lookup code was performing.

* Remove unnecessary tokens around the remaining nfsnode freeing code
  in the reclaim path.

kernel - Add mtrr support for x86-64

Taken-From: FreeBSD

binutils220: Fix a copy/paste error.

Set the DragonFly version to 2.10 for 2.10.

kernel - Fix panic when unloading a module on x86-64

* Fix a vm_object ref count panic during a module unload,
  including unloads which occur after failed loads.

release - pkgsrc-2011Q1 is the standard pkgsrc branch now

* Adjust default pkgsrc branch to 2011Q1

release - remove xchat from gui build

* xchat has build problems, remove it

release - Branch 2.10

* Edit sys/sys/param.h, sys/conf/newvers.sh

kernel - Add kqueue support to ulpt for CUPS printing

* Adjust the ulpt driver to add kqueue support (reporting always write-ready).
  Otherwise CUPS will stall indefinitely on a usb printer device.

* NOTE: For CUPS operation /dev/ulpt* must be chgrp'd lp and modes 664,
by adding this to your /etc/devfs.conf:

perm ulpt* root:lp 664

(group 'lp' is added by the CUPS package).

newfs_hammer: update checks on undosize and fssize minimum

Unless -f options given undosize must be at least 500MB
and fssize at least 10GB (50GB recommended).

Also fix a few extra spaces.

hammer.8: improve general description and markup

hammer.5: add info on dedup and improve general description and markup

nrelease - index.html: fix stale links

nrelease - update README w/ HAMMER instructions etc

 - Add instructions on manual HAMMER install
 - Default USB disk name is 'da8'
 - SILI disks uses 'da' name, default 'da0'
 - EHCI (USB 2.0) is enabled by default

hammer - Fix version output

Do not try to display WIP version if there isn't one.

bitstring.h -- Correct bit_fls and bit_nsearch

bit_nsearch was searching for one-too-many bits and was walking the whole set.

Submitted-by: Luis Useche <useche@gmail.com>

acpi: Reduce log verbosity

test from machine bugg

Add a final newline to the last file that didn't have one.

editline(3): Use getpwnam_r() and getpwuid_r() and raise WARNS to 6.

kbdcontrol(1): Raise WARNS to 6 and fix warnings.

vknetd(8): Raise WARNS to 6 and fix warnings.

installer/LiveCD: Do no longer set kern.emergency_intr_enable to 1.

In-discussion-with: sephe

acpi/pcib: If bus does not present, give other bus drivers chance

- Call acpi_DeviceIsPresent() during probing, so that if bus does not
  present other bus drivers could have chance to take over the bus.
- In acpi_pcib_attach(), assert that bus is present, since the presence
  of the bus is checked during probing.

Reported-by: swildner@

ioapic/abi; Reduce log verbosity

acpi: FACS is already loaded, don't load it manually again

acpi: Enable ACPI reset by default

- Enable ACPI reset if FADT has this feature bit set
- During ACPI reset, use AcpiReset() instead of rolling our own

Obtained-from: FreeBSD (r213755 jkim@freebsd.org)

acpi/pstate: Add tunable to allow BIOS whacking start/max FID/VID

This tunable is set to 1 (stringent check) by default.

DragonFly-issue: http://bugs.dragonflybsd.org/issue2025

powerd: Wait hw.acpi.cpu.px_dom* sysctl to be created by kernel

Since hw.acpi.cpu.px_dom* creation is queued into ACPI taskqueue
and ACPI taskqueue is shared across various ACPI modules, any delay
in other modules may cause hw.acpi.cpu.px_dom* to be created at
quite a later time (e.g. cmbat module's task could take quite a lot
of time).

acpi: Enable GPE for button and lid, if they have _PRW object

For devices which has _PRW object, AcpiSetupGpeForWake() will be called,
however, AcpiSetupGpeForWake() will disable GPE, which causes devices
like button and lid to stop function if they have _PRW object.  So for
button and lid, we explicitly enable GPE if they have _PRW object.

Reported-by: y0netan1@

acpi: Skip \_SB_ and \_TZ_ only for devices.

Obtained-from: FreeBSD (r214765 jkim@freebsd.org)

  Adjust a comment to clarify why \_SB_ and \_TZ_ are defined as device
  type in ACPICA.  Reshuffle the code a bit to make sure this kludge only
  applies to these two specical cases and to make it cleaner.

acpi: Restore old AcpiWalkNamespace semantic

Noticed-by: y0netan1@

Sh: Add test for getting length of string in double-quotes.

sh: Add test for obscure and ambiguous ${#?}.

Obtained-from: FreeBSD

sh: Add test for expanding of quoted positional parameters in case.

sh: Add some tests for ${#parameter}.

Obtained-from: FreeBSD

sh: Add some tests for omitting whitespace.

Obtained-from: FreeBSD

sh: Split off some special behavior into separate regress tests.

Obtained-from: FreeBSD

sh(1): Describe subshell environment, command substitution better

POSIX does not require the shell to fork for a subshell environment, and
we use that possibility in various ways (command substitutions with a
single command and most subshells that are the final command of a shell
process).  Therefore do not tie subshells to forking in the man page.

Also, fix some sentences with excessive semicolons.

Obtained-from:  FreeBSD

sh: Fix some parameter expansion variants ${#...}.

These already worked: $# ${#} ${##} ${#-} ${#?}
These now work as well: ${#+word} ${#-word} ${##word} ${#%word}

There is an ambiguity in the standard with ${#?}: it could be the length of
$? or it could be $# giving an error in the (impossible) case that it is not
set. We continue to use the former interpretation as it seems more useful.

Obtained-from:  FreeBSD

sh:  Reduce diffs to FreeBSD in the arith code.

Obtained-from:   FreeBSD

ctags(1): Raise WARNS to 6 and fix warnings.

talk(1): Raise WARNS to 6 and fix warnings.

usbhidctl(1): Raise WARNS to 6 and fix warnings.

acpi/ec: Bring in more GPE fixes from FreeBSD head (acpi_ec.c r216965)

acpi: Sync ec with FreeBSD 8

mount/umount: Small whitespace fix in the usage().

mount, umount: Implement the '-F' option to specify an alternate fstab file.

This also fixes jail_${jail}_fstab option in /etc/rc.d/jail .

Taken-from: FreeBSD (r113220 by mdodd@freebsd.org)

kernel - Fix apparent timing race in early usb keyboard polling code

* Fix an apparent timing race where a USB command does not complete
  prior to the poll issued with the command.  Perform another poll
  in a loop to deal with it.

* Problem appears to occur w/ohci's early poll prior to ehci attachment.

Reported-by: Antonio Huete Jimenez <ahuete.devel@gmail.com>

asf(8): Fix module path.