Security Fix:

     Fix a BSS buffer overflow caused by makeargv() writing past the
     end of margv[] when an input line contains 20 or more space
     separated words.

Obtained from: FreeBSD

Data reads and writes should not need credentials, and most filesystems
ignore the ucred argument.  NFS does, though, and FreeBSD-4.x had some
terrible hacks to associate credentials with data that only 'mostly' worked.
There were VM paging and buffer reconstitution cases which broke the
credentials even in 4.x.  The hacks were removed from DragonFly during
the VFS messaging reorganization.

In DragonFly credentials are checked on open() but no credentials are
required for read and write ops.  I had NFS just use the 'root' credential
for the RPC.  However, this breaks NFS mounts which do not use the -maproot
(server side) directive.  Really the bug is on the server side, but to
maintain general compatibility with NFS servers we have to provide a
non-root credential if root did not issue the I/O.  This commit hacks up
the NFS code (rather then hacking up the rest of the kernel) to restore
the hacks that were previously removed from the kernel.  Unfortunately it
can lead to a proliferation of ucred structures (FreeBSD-4.x did as well),
but that's the price we have to pay for now.

Report-by: Galen Sampson <galen_sampson@yahoo.com>

namecache work stage 3a: Adjust the VFS APIs to include a namecache pointer
where necessary.  For the moment we pass NULL for these parameters (the old
'dvp' vnode pointer's cannot be ripped out quite yet).

Sync with FreeBSD-5, fix-up the use of certain flags variables.

Use the _KERNEL_STRUCTURES define to allow userland to bring in kernel
structures without also bringing in kernel prototypes.

Define _KERNEL_STRUCTURES instead of _KERNEL to get just the
kernel structures without the kernel prototype pollution.

Add _KERNEL_STRUCTURES support for userland use of this header file.

Fix a bug in the last commit where sendfile() would forget to drop a file
pointer if the file wasn't of type DTYPE_VNODE.

Introduce the function iovec_copyin() and it's friend iovec_free().
These remove a great deal of duplicate code in the syscall functions.
For those who like numbers, this patch uses iovec_copyin() four times
in uipc_syscalls.c, two times in linux_socket.c and two times in
43bsd_socket.c.  Would somebody please comment on the inclusion of
sys/malloc.h in sys/uio.h?

Remove sockargs() which was used once in the svr4 emulation code.  It
is replaced with a small piece of code that gets an mbuf and copyin()'s
to it's data region.

Remove the osendfile() syscall which was inapropriately named and placed
in the COMPAT_43 code where it doesn't belong.

Split the socket(), shutdown() and sendfile() syscalls.  All of the
syscalls in kern/uipc_syscalls.c are now split.

Prevent a panic due to m_freem()'ing a dangling pointer in recvmsg(),
orecvmsg(), linux_recvmsg().

This patch completely removes COMPAT_43 from kern/uipc_syscalls.c.

Disable background bitmap writes.  They appear to cause at least two race
conditions:  First, on MP systems even an LK_NOWAIT lock may block,
invalidating flags checks done just prior to the lock attempt.  Second, on
both MP and UP systems, the original buffer (origbp) may be modified during
the completion of a background write without its lock being held and these
modifications can race against mainline code that is also modifying the same
buffer with the lock held.

Eventually the problem background bitmap writes solved will be solved more
generally by implementing page COWing durign device I/O to avoid stalls on
pages undergoing write I/O.

The splash_bmp and splash_pcx builds were missing some symbols, add the
appropriate files to the Makefile.

Unroll obfuscated loop.

The CMOV family of instructions do not work across all cpu families.  In
particular they do not work on some of the oldest pentiums or 486's, and
probably do not work on some non-intel cpus either.

Replace the cmovcl in the preload code's inline assembly with a jnc/movl
combination.

Located by the persistence of:  Galen Sampson <galen_sampson@yahoo.com>

* Fix a typo that was introduced from the last change.

* Correct several integer underflows/overflows in linprocfs
  by making use od the uiomove_frombuf routine.

Reported by:    Joost Pol <joost@pine.nl>

* Try to make gencat(1) recognize.

Fix a spelling mistake.

K&R style function removal.  Update functions to ANSI style.

While I am there, add $DragonFly$ IDs to these files, or the
commit just busts up.  Also fixup C Style comments on the
files.

Patch has been tested by submitter and me.

Submitted by: Eirik Nygaard <eirikn@bluezone.no>
Reviewed by: Hiten Pandya

Modify linux_{send,recv}msg() and linux_{set,get}sockopt() to use the
split syscalls.

Add a sanity check to linux_copyout_sockaddr().

Remove two functions that used stackgap allocations.

Modify kern_{send,recv}msg() to take struct uio's, not struct msghdr's.
Fix up all syscalls which use these functions, including the 43bsd
syscalls.

Also, fix some spots where I forgot to pass the message flags in the
emulation code.

Addendum:  Many thanks for continuing to Galen Sampson for running such an
old platform, that brought all the bugs found in the prior commit to light.

Fix a number of interrupt related issues.

* Don't access kernel_map in free(), defer such operations to malloc()

* Fix a slab allocator panic due to mishandling of malloc size slab
  limit checks on machines with small amounts of memory (the slab allocator
  reduces the size of the zone on low-memory machines but did not handle the
  reduced size properly).

* Add thread->td_nest_count to prevent splz recursions from underflowing
  the kernel stack.  This can occur because we drop the critical section
  when calling sched_ithd() in order to allow it to preempt.

* Properly adjust intr_nesting_level around FAST interrupts

* Adjust the debugging printf() in lockmgr to only complain about blockable
  lock requests from interrupts.

Rename:

- vm_map_pageable() -> vm_map_wire()
- vm_map_user_pageable() -> vm_map_unwire()

 * Turn on debugging options by default

correct a comment.

Describe the hw.physmem loader variable.

 Introduce a uiomove_frombuf helper routine that handles computing and
 validating the offset within a given memory buffer before handing the
 real work off to uiomove(9).

 Use uiomove_frombuf in procfs to correct several issues with
 integer arithmetic that could result in underflows/overflows.  As a
 side-effect, the code is significantly simplified.

 Add additional sanity checks when computing a memory allocation size
 in pfs_read.

 Reported by:    Joost Pol <joost@pine.nl>  (integer underflows/overflows)
 Originated from: FreeBSD

K&R style function removal.  Update functions to ANSI style.

Patch has been tested.

Submitted by: Eirik Nygaard <eirikn@bluezone.no>
Reviewed by: Hiten Pandya

  Correct a case in readv(2) where the file descriptor reference count
  should have been decremented but was not.

  Reported by:    Joost Pol <joost@pine.nl>
  Obtained from:  FreeBSD

Fix a bug in lwkt_trytoken(), it failed to exit its critical section on
failure.  It is supposed to return with a critical section held on success.

Fix a negative cache entry reaping bug, cache_zap() expects ncp's ref count
to be bumped on call.

Move the pst device from dev/misc to dev/raid.

Add pst to the raid Makefile

Move pst from dev/misc to dev/raid, add a Makefile for 'pst'.

 * Add the Promise Supertrack to the build

 * Add #include <sys/buf2.h>
so as to fix the build

Cleanup: get rid of the CNP_NOFOLLOW pseudo-flag.  #define 0'd flags are a
really bad idea.

Fix L2 internal cache reporting when it is an AMD Duron rev. A0 chip.

Obtained from: FreeBSD GNATS (PR #21672)

Sort Copyright order.

Split getsockopt() and setsockopt().

Hash the link-check data to improve performance on filesystems containing a
lot of hard links.

Submitted-by: Hiten Pandya <hmp@backplane.com>

K&R style function removal.  Update functions to ANSI style.

Patch has been tested.

Submitted by: Eirik Nygaard
Reviewed by: Hiten Pandya

namecache work stage 2: move struct namecache to its own header file and
have vnode.h include it for now.  Re-engineer the namecache topology to make
it possible to track different parent directories and to make it possible
to namei/lookup paths using the namecache structure as the primary placeholder
rather then a directory vnode.  Add a few minor hacks to stabilize the system
that will be removed (no longer be necessary) in stage 3.  Get rid of the
leafonly sysctl and make its effect the default, but in order to avoid
doing too much in this stage it is still possible to disassociate a vnode
from its namecache entry, which a lot of filesystems (e.g. NFS) depend on
as a poor-man's way of invalidating entries.  The namecache topology itself,
however, will be left intact even if a vnode is disassociated in the middle
of a path.

Try to generate more debugging information when the critical nesting count
gets too deep (which indicates a crit_enter/exit or lwkt_gettoken/reltoken
mismatch somewhere).

Remove the NO_KMEM_MAP and USE_SLAB_ALLOCATOR kernel options.  Temporarily
add the USE_KMEM_MAP and NO_SLAB_ALLOCATOR kernel options, which developers
should generally not use.

We now use the slab allocator (and no kmem_map) by default.

Remove the NO_KMEM_MAP and USE_SLAB_ALLOCATOR kernel options.  Temporarily
add the USE_KMEM_MAP and NO_SLAB_ALLOCATOR kernel options, which developers
should generally not use.

We now use the slab allocator (and no kmem_map) by default.

Allow unlock and non-blocking lock operations from FAST interrupts.
For now generate a warning for other operations.  The warning will
turn into a panic in a later commit.

Fix a number of mp_lock issues.  I had outsmarted myself trying to deal with
td->td_mpcount / mp_lock races.  The new rule is: you first modify
td->td_mpcount, then you deal with mp_lock assuming that an interrupt might
have already dealt with it for you, and various other pieces of code
deal with the race if an interrupt occurs in the middle of the above two
data accesses.

Do not attempt to access kernel_map in free().  It's a bad idea, and doubly
so because free() can be called through a remote IPI.  Instead the slab's
freelist hysteresis has been moved into malloc().

This fixes a number of reported panics.

Apply FreeBSD Security Advisory FreeBSD-SA-03:14.arp.  Fix DOS crash due
to arp starvation.

Cleanup td_wmesg after a tsleep completes for easier debugging.

oops, remove some namecache leakage that is not ready for prime time yet.

Clean up thread priority and critical section handling during boot.  The
initial kernel threads (e.g. thread0/proc0) had a priority lower then userland!
Default them to the minimum kernel thread priority.

Thread0 was also unnecessarily left in a critical section, which prevented
certain device probes, such as the APIC 8254 timer test code, from working.

Looks like we can't have comments on the same
lines that are being parsed.

Forgot another one.

* Finish up last commit.

*  Intel ACPI 20030228 distribution with local DragonFly changes.

*  OSPM ACPI driver.  Note that this driver does not include
   support for PCI interrupt routing or enumeration of ISA bridges or
   Host to PCI bridges.  While functional on some machines, this driver
   should be considered experimental and should be tested prior to being
   deployed in a production environment.

Original work done by John Baldwin
  Sponsored by:   The Weather Channel

namecache work stage 1: namespace cleanups.  Add a NAMEI_ prefix to
CREATE, LOOKUP, DELETE, and RENAME.  Add a CNP_ prefix too all the name
lookup flags (nd_flags) e.g. ISDOTDOT->CNP_ISDOTDOT.

Add notation on the alignment requirement for the twe driver.

The twe driver requires all requests, including non-data requests, to be
512-byte aligned.  The old malloc() code only did this incidentally.  We
have to explicitly size the request to a power-of-2 to get the required
alignment out of the slab allocator.

Report-by: David Rhodus <drhodus@catpa.com>

For performance reasons, kernel sends should not be subject to sockbuf
limit checks.  This revert FreeBSD rev 1.111.

* de-__P()

* de- __P()

* de- __P()

Fix IPFW2 build.

Submitted by: qhwt@myrealbox.com

Separate all of the send{to,msg} and recv{from,msg} syscalls and create
kern_sendmsg() and kern_recvmsg().  The functions sendit() and recvit()
are now no more.

Rewrite the related legacy syscalls and place them in the 43bsd emulation
directory.  Also move the definition of omsghdr to the emulation directory.

Import prebinding code into DragonFly, based on Matthew N. Dodd's
patch for FreeBSD-5.

Submitted-by: "Simon 'corecode' Schubert" <corecode@fs.ei.tum.de>
Minor-Security-Additions-by: dillon

Optimize out an unneeded bzero().

Reset the retransmit counter when setting the timer on a failed
ip_output().  This prevents ENOBUFS errors from later inadvertently
timing out a connection prematurely.

Switch over to the persist timer while we're at it.

Problem reported by: Jayanth Vijayaraghavan <jayanth@yahoo-inc.com>
Obtained from: BSD/OS

Add the linux(4) manual page.

Obtained from:    FreeBSD

Correct address parsing bug that is believed to be remotely exploitable.

Clean up.

s/^$/\n\/g inside of strings

Additional ssh patches relating to the same fatal() cleanup issue.  They
should just fix 'fatal' to not try to clean things up but, oh well.  This
is a slightly modified security fix from 3.7.1.

Fix a DIAGNOSTIC check in the heavy-weight switch code.  A thread's process is
normally in the SRUN state but can also be preempted while moving into
the SZOMB (zombie) state.

Report-by: "David P. Reese, Jr." <daver@gomerbud.com>

Leftover netisr consolidation cleanups.

Submitted by: hmp

Additional comments: ssh may attempt to zero and free the buffer from
fatal().  The incorrect buffer size at the time fatal() is called will
cause it to zero an area larger then has actually been allocated.  Since
meta-data is not inline with the allocation on FreeBSD (and hence DragonFly)
systems it is believed that the worst that can happen is a crash.  On linux
systems, however, it may be possible to exploit the flaw to gain elevated
privs.

update version to match FreeBSD after buffer security fix.

 Do not record expanded size before attempting to reallocate
 associated memory.

Leftover netisr consolidation cleanups.

Leftover netisr consolidation cleanups.

Leftover netisr consolidation cleanups.

Add missing interface queue.

Centralize if queue handling.

Original patch against FreeBSD submitted by Jonathan Lemon.
Reviewed by Matt Dillon.

Permanently fix the 'allocating low physmem in early boot' problem which
can prevent device drivers from attaching ISA DMAable memory.  New pages
are added bottom-up, alternating between the head and the tail of the
VM page free list, so both normal and zero'd-page requests allocate
free pages with higher physical memory addresses first.  This allows
contigmalloc*() to locate free memory at lower physical addresses.

Remove unused thread pointers.

Change argument from proc to td.

Cleanup.  Remove unused variable.

Non-semantic changing cleanups:
  remove used variable
  remove unneeded splnets
  use a stack variable instead of dynamically allocating it.

Request room for one more syncache entry to guarantee
successful allocation later.

Consulted with:  Jonathan Lemon <jlemon@flugsvamp.com>
Tested by:  drhodus

Create an emulation/43bsd directory and move the recently modified
compatibility syscalls there. Any future work on the COMPAT_43 code
should be split from the rest of the kernel and moved here.

Everything in the kernel that explicity uses the osockaddr structure
has been modified to include "emulation/43bsd/43bsd_socket.h".

There was one case where struct osockaddr was used in userland,
talk/talkd.  This commit has a temporary fix for talk/talkd.

allow this to compile
From Joerg Sonnenbergh

The first a bug in pax and should be commited to FBSD, too.
Further info in OpenBSD's system/3455.

From: Joerg Sonnenberg

The second fixes a dependency problem if compiling kernels
with ppp after "make depend".

from Joerg Sonnenberger

Add a cvsup tag, cvs-dfports

rename dport -> dfport

rename /usr/dports to /usr/dfports.  Includes some CVS surgery.

Linux emulation has been working well for a while now, remove notice.

Add UPDATING note on /usr/dports

add relpath to the build Makefile

Add bsd.dport.mk, which Makefile's in /usr/dports will use instead of
bsd.port.mk.  Modify bsd.port.mk to check for the existance of the same
port in /usr/dports and, if found, to cd into the dport and run the target
there.

NOTE: /usr/bin/relpath is required (see /usr/src/usr.bin/relpath).

Add the relpath utility which /usr/share/mk/bsd.port.mk will use to
figure out the relative port path so it can check for an override in
/usr/dports/