ioapic: Save interrupt source override information

ioapic: Save I/O APIC information for later configuration

mptable: Get pin count of I/O APIC and calculate GSI base accordingly

kernel: In the x86_64 kernel, add a missing include to trap.c.

Some bits of code in trap() regarding the handling of T_NMI were not
compiled in due to NISA not being defined.

While I'm here, put some more code in "#if NISA > 0", like it is for
i386.

kernel: Fix x86_64 building without 'options DDB'.

kernel: Improve #ifdef a bit.

kernel: Fix building without 'options P1003_1B'.

kernel: Fix building without 'options INVARIANTS'.

kernel: Fix building without 'options INET'.

acpi/pstate: Adjust FID/VID verification for AMD 0Fh family CPUs

- If min/max are same, then there is only one P-State, which does
  not make sense to have the P-State sysctl tree.
- If the first and last P-State entres do not match max/min, then
  just log a warning message.
- The original FID/VID checks should only be applied to intermediate
  P-States.
- Correct FID check against min FID.

acpi/pstate: Fix error logging messages

kernel -- Remove mplock2.h header from files not using the mplock.

kernel -- Mark MQUEUE filterops MPSAFE.

MQ filterops use lockmgr locks to synchronize; don't need MPLOCK.

kernel -- Remove MPlock in sys_pselect().

Signal mask is synchronized by per-process token, not MPLOCK.

kernel - Remove no longer needed MCLSHIFT kernel option.

bsd-family-tree: Sync with FreeBSD.

Sync zoneinfo database with tzdata2011d from elsie.nci.nih.gov

australasia:    8.22 -> 8.23
etcetera:       8.2  -> 8.3
europe:         8.27 -> 8.28
northamerica:   8.41 -> 8.42

* australasia: Samoa's DST will end on April 2, instead of April 3, as
    previously assumed. Thanks to Raymond Hughes for information on the
    change.

* etcetera: Remove obsolete material on angle brackets in the TZ
    environment variable.

* europe: Due to a nationwide exam on March 27, Turkey will change into
    summer time zone one day later.

* northamerica: Cuba will start DST on March 20, one week later than
    previously assumed. Thanks to Steffen Thorsen for the first report
    of the change.

UPGRADING: Say that a full build is actually a must for gcc41 -> gcc44.

In order for the fix for silencing the inline warnings to be picked
up, a new cross-compiler must be built (which will later be used for
compiling the kernel where the fix is needed). This won't work with
quickworld since quickworld skips the cross-tools step.

Reported-by: tuxillo

ioapic: Add tunable hw.ioapic_use_old

Mainly to ease following new I/O APIC related code testing.

ioapic: Remove unused TUNABLE_INT

Since apic_io_enable will be needed very early during boot,
its value is fetched explicitly by calling TUNABLE_FETCH_INT()

mbuf - Factor common code out of m_getjcl() and m_getcl().

mbuf - Fix m_getjcl()'s size argument's type.

Use size_t in both the declaration and definition of m_getjcl().

Reported-By: Thomas Nikolajsen <thomas.nikolajsen@mail.dk>

wpi(4) - Use MJUMPAGESIZE mbuf clusters.

Based-On: FreeBSD

mbuf - Add MJUMPAGESIZE mbuf cluster support.

This is needed by Intel WiFi chipsets which require larger than usual
clusters.

Revert MCLSHIFT back to 11 to reduce mbuf cluster space usage and make
non-Intel Wifi NICs work without needing to adjust MCLSHIFT.

Merge branch 'master' of git://crater.dragonflybsd.org/dragonfly

gcc44: Prevent __stack_chk_fail_local references from being hidden.

Dragonfly-bug: <http://bugs.dragonflybsd.org/issue2024>

Add missing wcsdup() prototype to <wchar.h>.

This allows C++ programs to access this function at all.

Reported-by: Pierre Abbat <phma@phma.optus.nu>

kernel - missing PRELE() in ptrace(PT_DETACH).

amd(8): Fix a warning from the days when NULL was 0.

Fix compilation with gcc44 and -fstack-protector.

Reported-by: various people

ioapic: Function renaming

lapic: Record the max LAPIC APIC ID

kernel - Add vm.cache_vmspaces boot-time tunable

* Add vm.cache_vmspaces boot-time tunable, defaulting to 32 objects.
  This controls how many free vmspace+pmap structures can be maintained
  in the objcache.

* Change the sysref API a bit.  mag_capacity becomes nom_cache.

Related-to: IRC conversion thesjg & vsrinivas

kernel - Add lwkt.cache_threads boot-time tunable

* Add lwkt.cache_threads boot-time tunable.  This has to be set in
  /boot/loader.conf and controls how large a thread+kstack cache the
  kernel should maintain.

* Increase the default thread+kstack cache from 6 to 32 threads.

* Change the objcache_create*() API a little.  Instead of passing a
  mag_capacity field pass a nom_cache (nominal free objects to keep cached)
  field.

* Change the mag_capacity calculation to take into account small caches
  (the exec args cache) and remove the too-small-for-ncpus warning.

Related-to: IRC conversion thesjg & vsrinivas

kernel - Add kern.zone_cache sysctl

* Add a sysctl to adjust how many empty zones each cpu caches for the
  slab allocator.  sysctl kern.zone_cache.

* Increase the default from 2 to 32 zones.

Related-to: IRC conversion thesjg & vsrinivas

Merge branch 'master' of git://crater.dragonflybsd.org/dragonfly

kernel - Fix null pointer panic related to setproctitle()

* Fix a missing NULL check when setproctitle() is called for a
  program whos args were previously too large to fit in the
  per-process p_args cache.

Reported-by: John Marino <dragonflybsd@marino.st>

kernel - Fix ktrace -C and -d

* Fix a system lockup when ktrace -C / -d is used (bug introduced with
  recent MP work).

Sync zoneinfo database with tzdata2011c from elsie.nci.nih.gov

leapseconds:    8.10 -> 8.11
northamerica:   8.40 -> 8.41
southamerica:   8.44 -> 8.45
zone.tab:       8.40 -> 8.41

* leapseconds: Update notice from IERS (no leap second at the end of
    June 2011).

* northamerica: Replace Juneau (Alaska) with Juneau, Sitka and
    Metlakatla.

* southamerica: Delay the end of the Chilean DST in 2011 until the
    first Sunday in April.

* zone.tab:  Replace Juneau (Alaska) with Juneau, Sitka and
    Metlakatla.

mdocml: Remove old files outside contrib/

mdocml: Switch to using the files in contrib/mdocml

Merge remote branch 'crater/vendor/MDOCML' into HEAD

mdocml: Add README.DRAGONFLY

Import mdocml-1.10.9

install - Makefile.usr to use 2010Q4 on master

* Use pkgsrc-2010Q4 on master for Makefile.usr

Submitted-by: Max Herrgard <herrgard@gmail.com>

kernel - Make sure thread is released before migrating

* Make sure the current thread is in a released state before migrating it
  to another cpu.  Doing the release inside the lwkt_switch(), after we
  send the IPI, can result in a livelock.

Reported-by: Peter Avalos <peter@theshell.com>

install - Add the src-create-shallow directive to Makefile.usr

* Add the src-create-shallow directive to Makefile.usr

Submitted-by: John Marino <dragon@marino.st>

Merge branch 'master' of ssh://crater.dragonflybsd.org/repository/git/dragonfly

kernel -- file desc malloc zone overflow handling.

Allow null return from mallocs for file descriptor arrays. Fork and exec
will ENOMEM when we cannot allocate FD arrays.

This is only a partial solution to bug 2019.

Revert "<float.h>: Use compiler builtins for some constants, if they are available."

This reverts commit 7a0a994307056aae0718f7c17fa081f57d19f2c1.

It does more harm than it fixes and needs more investigation.

For now, lower WARNS in xlint/lint1 to 0.

Reported-by: vsrinivas

Fix a compilation error on x86_64.

bus_dma_tag_create() expects a bus_addr_t parameter for its lowaddr argument.

kernel - Fix a few MP races against process status

* proc->p_token is required when traversing p->p_lwp_tree.

* Reorder lwp insertion on lwp_fork() so scan races see a whole lwp
  instead of a partially initialized one.

* Check for NULL p->p_pgrp and friends when only using proc_token to
  scan the process list to deal with new processes that are still in the
  middle of being fork()'d.

Reported-by: Peter Avalos <peter@theshell.com>,
     Antonio Huete Jimenez <tuxillo@crater.dragonflybsd.org>

ps - Handle unexpected output order when sorting by memory or cpu

* When sorting by memory or cpu, including when using 'u' as in 'ps aux',
  if the primary sort critera is an exact match fall back to the default
  sort critera (tty and then pid).

Reported-by: swildner

kernel - Major bridging functionality added (bug fixes 2)

* Recalculate the port configuration after enabling a member interface,
  fixing an issue where openvpn brings up a TAP interface after
  authenticating the link but whos weights then go unrecognized by the
  bridge.

  The port configuration was already being recalculated after a member
  interface becomes disabled.

* Reinitialize the bridge when the link0, link1, and/or link2 interface
  flag changes state, so the sysop doesn't have to bring the interface
  down and up manually to recognize the new settings.

kernel -- vm_map: Remove infork field from vm_map.

The infork field was never being read.

ifconfig.8: Fix a typo.

Merge branch 'master' of git://crater.dragonflybsd.org/dragonfly

ie(4): Fix a gcc44 warning.

kernel -- vm_object locking Part 2: Lockup a few vm_object users.

UPGRADING: Fix typo.

At long last, switch us to using GCC 4.4 as the default compiler.

[I've put some notes into UPGRADING which I quote here.]

That means that any settings that set CCVER to 'gcc44' are not needed
anymore. Instead, CCVER can be set to 'gcc41' to go back to using
GCC 4.1.

The NO_GCC44 options has been removed and will not affect the build
anymore. There is now a NO_GCC41 option that will prevent GCC 4.1 from
building in a similar fashion.

Also, we recommend to do a full buildworld/buildkernel for upgrading.

Thanks-to: sephe, Max Herrgard and everybody else who helped with
           testing and fixing.

kernel -- vm_object locking Part 1: Primitives

   * Create per-vm_object 'hold count'; the hold count ensures that a
     vm_object is not deallocated or collapsed till it transitions 1->0.
     Hold count is waited for in vm_object_terminate and _collapse.

   * Convert vm_object_lock/_unlock to use pool tokens; pool tokens do not
     share storage with the vm_object, simplifying lifetime.

Cleanups:

   * Remove first attempts at vm_object locking; it just wasn't clear
     what each token was protecting earlier.

   * Eliminate vestigial fields from vm_object structure.

   * Clean vm_object_pip_wakeup (just call _wakeupn)

   * Remove vm_page_(un)lock for now

Discussed-with: dillon@

kernel -- POSIX Message Queues: Remove objcache for MQ messages.

The MQ code was using objcache for messages upto the default max size;
objcache was not really useful over kmalloc here, however. The messages did
not have any constructed object state to store and using kmalloc leads to using
appropriately sized message buffers each time.

kernel -- Prevent POSIX MQ from overflowing malloc zones.

UPDATING: Use '-' instead of '=' for underlining to avoid git confusion.

<float.h>: Use compiler builtins for some constants, if they are available.

I've left the original values in as fallbacks, should any compiler have
no builtins. But they are no longer used for the GCCs with this commit.

groff: Fix a gcc44 warning.

csh(1): Remove redundant check (silences gcc44 warning).

Fix buildworld (netstat(1)).

Taken-from: FreeBSD

mptable: Assign index for each IOAPIC

IOAPIC information is saved into list ordered by ascending order
of IOAPIC's APIC ID and each IOAPIC is assigned an index according
to the order.

In this way we could use IOAPIC information extracted from ACPI
MADT and MPTABLE in the same fashion when routing PCI interrupts,
i.e. using index instead of APIC ID.  It has been observed that on
some machines, the APIC ID of IOAPIC in ACPI MADT is different from
the one in MPTABLE, but the order (index) is same.

PCI interrupt routing information now saves IOAPIC's index instead
of IOAPIC's APIC ID.

growfs(8): Silence a gcc44 warning.

mptable: Simplify bus id duplication check logic

Update queue(3) for the REMOVE_NEXT -> REMOVE_AFTER rename.

While I'm here, sync with FreeBSD:
-Remove extra note about O(n) removal.

Obtained-from: FreeBSD

Fix forgotten _REMOVE_NEXT -> _REMOVE_AFTER rename.

atmarpd(8) & scspd(8): Silence some gcc44 warnings.

ppp(8): Silence some gcc44 warnings.

spppcontrol(8): Silence some gcc44 warnings.

window(1): Fix a gcc44 warning.

While here, remove an unused file which I missed when I upgraded it to
NetBSD's.

<sys/queue.h>: Sync with FreeBSD

-Add _SWAP macros.
-Avoid corrupting the list or queue if _REMOVE is invoked with a
reference to the head and QUEUE_MACRO_DEBUG is defined.
-Rename _REMOVE_NEXT to _REMOVE_AFTER since the name matches the _INSERT
macros.

Obtained-from: FreeBSD

Remove insque()/remque() from kernel code.

This transitions everything over to using the appropriate macros from
<sys/queue.h>.

IPX/SPX:  Remove unused code.

Merge branch 'master' of git://crater.dragonflybsd.org/dragonfly

kernel: Fix the remaining gcc44 warnings for the kernel.

aicasm: Add two YY_NO_INPUTs (silences gcc44 warnings).

gcc44: Don't emit warning about inline failure due to optimization

gcc44 tries to guess the hotness of the code path and refuses to inline
functions on cold code path even if the function has __inline attribute.
The warning caused by this kind of inline failure is extremely annoying
and it actually has nothing to do with possible software bugs.

kernel - Refactor dsched ref/unref routines

* Refactor the dsched ref/unref routines to handle 1->0 transitions
  atomically and to properly deal with 1->0 races related to any
  re-referencing of the structure which can occur concurrently.

  Such races can occur because the structure must acquire other locks
  while removing itself from the various lists it is on and thus can
  be accessed via those lists in the mean time.

  Instead of using -0x400 as a separate atomic op after a 1->0 transition
  we directly transition from 1 to 0x80000000, removing a race condition.

  This also allows temporary references to be made during destruction.

* Get a temporary ref and re-check flag state after acquiring a lock to
  determine if the structure in question is still on the list we are trying
  to remove it from.

kernel - Use do/while sequences to protect multi-line dsched macros

* Use do/while sequences to protect multi-line dsched macros in case
  they are used in statement sequences without braces, as in
  'if (fubar) dsched_macro;', or similar circumstances.

libstand/printf.c: Oops, fix a braino.

libstand: Sync libstand's printf() with FreeBSD.

The main change is to add various missing conversions, such as %ll, %j, %q,
%z, %X, %h, %hh etc.

kern.mk: Prevent gcc4.4 from generating SSSE3, SSE4 and AVX instructions

kernel: Don't store FPU status into the reserved area of fxsave

Since each time before the old sv_ex_sw is accessed, fnstsw() is
always called, it no longer makes any sense to save the temporary
in the reserved area for fxsave.  And more important: saving the
FPU status into fxsave area overwrites saved xmm register value.

ps(1): Use alias syntax for the 'comm' alias.

kernel - Major bridging functionality added (bug fixes)

* The root bridge was not taking into account the peer's weightings when
  calculating path costs.

  In order to do this the root bridge must use available peer info.  The
  peer info should already include both the local and remote's path costs
  since 'we' are the root, so our path cost will already be directly
  incorporated in the path cost the peer reports to us.

* Fixes issue where not-weighted path costs on root bridge were not
  synchronized with the weighted path costs of one or more of its peers.

Use g++ 4.4 from base for CCVER=gcc46.

Add 'pcc' as a CCVER value (using /usr/pkgsrc/lang/pcc-current).

It doesn't compile a full world or kernel yet but is quite fast and
a lot of our stuff builds with it (bin/, games/, secure/, most of
sbin/ and usr.bin/ and probably more).

If anyone wants to look at the remaining issues, be our guest.

Merge branch 'master' of git://crater.dragonflybsd.org/dragonfly

kernel: Use the system's offsetof() macro instead of cooking our own.

While here, #undef ROUNDUP again after usage.

gnu/lib/csu: Add -fno-asynchronous-unwind-tables to the CFLAGS.

Quoth FreeBSD's commit msg:

Often reported issue with newer ld is:
error in /usr/lib/crtendS.o(.eh_frame); no .eh_frame_hdr table will
be created.

The issue is that crtend is compiled with unwind table, and also it
places the special CIE into the .eh_frame indicating the end of
section, that is located before generated unwind table. New ld has
assertion that verifies that closing CIE is indeed the last CIE,
causing the crypting message to be issued, and refusing to generate
dwarf unwind.

Add -fno-asynchronous-unwind-tables to disable unwind table generation
for crtbegin/crtend.

Taken-from: FreeBSD

kernel: Remove some variables that are set but not used.

lib/csu: Fix typo