Change the include order of archive_string.h and archive_prviate.h.
The original order doesn't play well with the patching framework,
because the C preprocessor looks into the source directory first
for #include "".

Cleanup some ESTALE issues on the client when files are replaced on
an NFS server.  Even though the attribute cache has expired DragonFly
still maintains a vnode in the namecache.  If a file is replaced on the
server the vnode's file handle will become invalid.

Force re-resolution of the namecache entry rather then replacing the vnode's
file handle, so programs with open descriptors to the dead file continue to
get a proper error return while lookups succeed in finding the new version
of the file.

In this patch ESTALE is checked in strategic places:  stat(), access(), and
open().  It is an imperfect solution at the moment but it seems to work pretty
well.  This should bring NFS client operations back up to FreeBSD-4.x
standards.

o Give make(1) the ability to use KQUEUE to wait for worker
  processes instead of polling for them.
o Bootstrapping aid from pre-kqueue(2) systems, e.g.
  4.0-RELEASE.
o Treat kevent(2) returning an error EINTR as the non-error
  it is.

Note: the KQUEUE feature is disabled in FreeBSD and in DragonFly.

Submitted-by: Max Okumoto <okumoto@home>
Taken-from: FreeBSD

o Fix proto type
o Mention that the left-hand side of the comparison conditional
  must always be a variable expansion.  Do not lie that
  debugging .for loops is a no-op.
o Update tutorial.
o Update man page.
o Fixed the abuses of .Ql visible on stderr in troff mode.
o Fix typos, mostly s/ an / a / where appropriate and a few s/an/and/
  Add FreeBSD Id tag where missing.

Submitted-by: Max Okumoto <okumoto@ucsd.edu>
Taken-from: FreeBSD

o Pacify ``make -f /dev/null -V FOO''.
o Add empty default cases where they should be, remove
  non-local execution stuff in compat.c which doesn't even
  have preprocessor-conditional-hidden support code, and
  add a debugging statement where we might end up with a
  nil list somehow, but where I doubt it.
o Makeing make(1) WARNS=6 cleanup
o In lieu of a good way to prevent every possible looping
  in make(1), stop there from being more than 500 processes
  forked by make(1), to prevent a forkbomb from happening,
  in a dumb and mechanical way.
o Some ANSI changes that we missed

Submitted-by: Max Okumoto <okumoto@ucsd.edu>
Taken-from: FreeBSD

o Print a warning when we are given two scripts for one target.
  This is neither as wide-reaching nor intensive as NetBSD's
  similar, but the warning uses the same text.
o Remove local prototypes for main().
o Don't declare things as extern when they will be static.
o When formatting the time for a target, use %H instead of %k,
  which is mostly the same, but uses a non-extension option.
o Document the parsing bug.
o Fix spurious three-space indentation in a four-space indentation
  file.
o Remove 6-years-stale #if0, the behaviour isn't ever going to
  be limited to compatible mode, as far as I know, since we use
  it...
o Code that has been #if0'd with the comment "WHY" since revision
  1.1 can disappear.

Submitted-by: Max Okumoto <okumoto@ucsd.edu>
Taken-from: FreeBSD (as with the previous patches)

patch-4.10: Clean some includes and remove ifdef __STDC__, -Wall cleanup,
unifdef -D__STDC__, Sort #includes, remove <sys/types.h> (made redundant
by <sys/param.h>), add <signal.h> (needed for sigaction()),
Unbreak compilation on RELENG_4.

Submitted-by: Max Okumoto <okumoto@ucsd.edu>

Add a SECURITY section which describes the kern.ckptgroup sysctl among
other things.

While I am here, cleanup the manual page:

- correct mdoc(7)
- restructure some sentences for readability
- add reference to signal(3) under SEE ALSO

Remove the checkpoint module.  checkpointing is now integrated into the kernel
via kern/kern_checkpoint.c (same code as checkpt.c and support.c just
migrated to a new file).

Remove checkpt/ from Makefile.modules.  checkpt is not integrated into the
kernel as kern/kern_checkpoint.c

It is sys_checkpoint.2 not checkpoint.2

Submitted by: Michal Belczyk <diavul@bsd.krakow.pl> and
              Michael Neumann <mneumann@ntecs.de>

- Add newgrp(1) into the build

- Import newgrp(1) from FreeBSD
- Add WARNS?= 6

Ok'ed by: Joerg

Add the sys_checkpoint(2) manual page and expand checkpt(1).
sys_checkpoint(2) is our checkpoint system call interface.  It is capable
of checkpointing and checkpoint-restoring programs with certain restrictions.

There is enough demand for Kip Macy's checkpointing code to warrent
permanent integration into the kernel.  Add a fixed system call,
sys_checkpoint(2), to support the checkpt(1) utility as well as user
programs which want to install their own signal handler (SIGCKPT).

Test Commit

Document the mandatory use of vget() prior to modifying vnode/inode ops.

Fix a bug in chown, chmod, and chflags.  When the setfflags(), setffown(),
and setfmode() API was cleaned up to not remove vrefs maintained by the
caller it resulted in an incorrect vref+vn_lock combination which fails
to clear the VINACTIVE bit on the vnode.  vget() clears this bit as part of
its work.  This prevented the filesystem from synchronizing the changes
out to the inode unless other modifications were made to the file as well,
which resulted in weird errors such as ./MAKEDEV all creating /dev/null with
perms 600 (the chmod it does afterwords doesn't always take effect), and
other things.

Additional thanks to walt for providing the information that led to the
diagnosis.

Reported-by: "Simon 'corecode' Schubert" <corecode@fs.ei.tum.de>,
             walt <wa1ter@myrealbox.com>,
     Andreas Hauser <andy@splashground.de>

Correct spelling.

Fix the PRI field to not display bogus process priorities for pure
threads.  Add TDPRI (-o tdpri) to display the actual thread priority
and critical section count.

The fp argument to vn_open() is optional but the code wasn't treating it
that way entirely.

Add support for adjusting the interrupt throttling rate via
hw.emX.int_throttle_ceil, and change the default from 8000hz
to 10000hz to improve throughput with default TCP window sizes
through a GiGE switch in a LAN environment.

Note the following test results using iperf between two machines:

    * Shuttle Athlon 64 3200+ box, EM card in 32 bit PCI slot
    * 2 machines connected through a GiGE switch
    * All other hw.em0 delays set to 0 on both sides
    * throttle settings set on both sides
    * -w option set on iperf client AND server for 63.5KB window
    * software interrupt throttling has been turned off for these tests

    throttle    result          result
    freq        (32.5KB win)    (63.5KB win)
                (default)
    --------    --------------  -----------

  maxrate       481 MBit/s      533 MBit/s      (not sure what's going on here)
  120000        518 MBit/s      558 MBit/s      (not sure what's going on here)
  100000        613 MBit/s      667 MBit/s      (not sure what's going on here)
   70000        679 MBit/s      691 MBit/s
   60000        668 MBit/s      694 MBit/s
   50000        678 MBit/s      684 MBit/s
   40000        694 MBit/s      696 MBit/s
   30000        694 MBit/s      696 MBit/s
   20000        698 MBit/s      703 MBit/s
   10000        707 MBit/s      716 MBit/s
    9000        708 MBit/s      716 MBit/s
    8000        710 MBit/s      717 MBit/s      <--- drop off pt 32.5KB win
    7000        683 MBit/s      716 MBit/s
    6000        680 MBit/s      720 MBit/s
    5000        652 MBit/s      718 MBit/s      <--- drop off pt 63.5KB win
    4000        555 Mbit/s      695 MBit/s
    3000        522 MBit/s      533 MBit/s      <--- GiGE throttling likely
    2000        449 MBit/s      384 MBit/s      (256 ring descriptors =
    1000        260 MBit/s      193 MBit/s        2500 hz minimum)

Cleanup the 'cache_lock: blocked on..' warning message.  Fix a minor
issue that was causing the message to be bogusly displayed when more then
one process was stuck on the lock.  Plus add a sysctl, debug.nclockwarn,
which allows the warning timeout to be set (in ticks), default one second.

Reported-by: various.

lwkt_runnable is declared in <sys/thread2.h>

Fix a number of SMP issues.

* Add required pause instructions in code paths that skip running "HLT".  This
  occurs when e.g. cpu #1 is running code with the BGL while cpu #2's only
  runnable thread requires the BGL.  cpu #2's LWKT scheduler spins in that
  case.  Similar situations can occur when the only runnable threads on a
  cpu are waiting for a token.

* Add required pause instructions to spin loops.  DragonFly has very few spin
  locks (e.g. things like com_lock()) but its a good idea anyway to avoid
  known livelock issues on Intel cpus.

* Fix a pending interrupt / HLT race.  We were not atomically retiring
  pending interrupts prior to potentially HLTing the cpu.  This could
  result in an SMP machine's network locking up until a key is hit on
  the console, then magically resuming.

Lockups-reported-by: Peter Avalos <pavalos@theshell.com>

sendfile() was seriously broken.  It was calling vm_page_free() without
busying the underlying page, causing a panic on kernels compiled with
INVARIANTS and potentially corrupting data on kernels compiles without
INVARIANTS.  Change the calls to vm_page_try_to_free().

Symtoms: system crash when Apache2 tries to use sendfile() to send large files.
Reported-by: Jedi/Sector One <j@pureftpd.org>

Add code to the BIOS VM86 emulator to detect writes to the 8254.  If a
write is detected the 8254 is reset after the bios call returns and the
event is reported.  Some bioses, in particular video bioses, uses timer 2
for timing things.  We need timer 2 for our master clock.

Remove restoreclocks().  This was causing gd_cpuclock_base to reverse index
and jump the time ahead an hour with a flurry of hardclock interrupts.

Introduce a new systimer API call, systimer_init_periodic_nq(), which
installs a non-queued periodic systimer.  Non-queued means that if multiple
events built-up (due to an 8254 glitch, sleep, or other event), only one
event will be reported.

This should fix the BIOS/8254 glitching, the 'hour jump' problem, and
hopefully other timer jumping issues as well.

Bugs-reported-by: Andreas Hauser <andy@splashground.de>,
Jonathon McKitrick <jcm@FreeBSD-uk.eu.org>,
and others

Fix a conditional.  sdl was not unconditionally being checked for NULL.

Found-by: Mikhail Teterin <mi+kde@aldan.algebra.com>

Give init the ability to chroot to a directory based on kernel environment
variable, 'init_chroot'.  This makes building multi-boot DVDs a lot easier.

Submitted-by: Oliver Fromme <olli@haluter.fromme.com>
w/ minor cleanups by Matt

Make the code WARNS= 6 clean.

- Add WARNS?= 6
- Make signaled volatile sig_atomic_t
- Static functions
- Fix most of the warns

- Add $DragonFly$ tag
- Add WARNS?= 6
- Remove registers
- Static functions

Re-enable SACK by default.  Jeff fixed the corruption issue reported by
H.Miyamoto and downloads now test good again.

Originally-reported-by: H.Miyamoto (aka "Yuukis"). <Ys@PixyGarden.net>
Additional-reports/testing: H.Miyamoto,
Joerg Sonnenberger <joerg@britannica.bec.de>,
walt <wa1ter@myrealbox.com>

Cleanup some dangling issues with cache_inval().  A lot of hard work went
into guarenteeing that the namecache topology would remain connected, but
there were two cases (basically rmdir and rename-over-empty-target-dir)
which disconnected a portion of the hierarchy.

This fixes the remaining cases by having cache_inval() simply mark the
namecache entry as destroyed without actually disconnecting it from the
topology.  The flag tells cache_nlookup() and ".." handlers that a node has
been destroyed and is no longer connected to any parent directory.

The new cache_inval() also now has the ability to mark an entire subhierarchy
as being unresolved, which can be a useful feature to have.

In-discussion-with: Richard Nyberg <rnyberg@it.su.se>

Replace lvalue cast.

Use kinfo_get_vfs_bufspace instead of kvm.

Add kinfo_get_vfs_bufspace(). Remove some junk from Makefile.

Include Makefile

Add a new system library, libkinfo. It is intended to replace libkvm for
most userland tools, which want to deal with a living kernel, not
post-mortem analysation.

Change the kern.file backing from a struct file array to a struct kinfo_file
array. The later is an independent structure, which includes the information
useful for userland. This allows changing the kernel-internals without
having to recompile libkinfo and derived programs. This is inspired by the
changes DES did in FreeBSD 5 (struct xfile).

Partly-obtained-from: FreeBSD (kern_descrip.c changes)

Revert a part of the last commit. The changes to use sysctl interface
wasn't meant for the repository and will be superseded by a different
patch.

Lots of bug fixes to the checkpointing code.  The big fix is that you can
now checkpoint a program that you have checkpoint-restored.  i.e. you run
program X, you checkpoint it, you checkpoint-restore X from the checkpoint,
and then you checkpoint it again.  The issue here is the when a checkpointed
program is restored the checkpoint file is used to map portions of the image
of the restored program.  If you then tried to checkpoint the restored image
the system would overwrite or destroy the original checkpoint file and
the new checkpoint file would have references to the old file (now
non-existant) file.  Any attempt to restore the recursed checkpoint would
result in a seg-fault.  That is now fixed.

* Remove the previous checkpoint file before saving the new one.  If the
  program we are checkpointing happens to be a checkpoint restore from the
  same file then overwriting the file would wind up corrupting the
  image set we are trying to save.

* When checkpointing a program that has been checkpoint-restored do not
  attempt to save the file handles for the vnode representing the
  checkpoint-restored program's own checkpoint file (which is a good chunk
  of its backing store), because this vnode is likely to be destroyed the
  moment we close the handle, since we are likely replacing the previous
  checkpoint file.  Instead, the backing store representing the old
  checkpoint file is copied to the new one.

* Re-checkpointing a program (hitting ^E multiple times) now properly
  replaces the checkpoint file.

* Properly close any file descriptors from the checkpt(1) program itself
  when restoring a checkpointed program, properly replace any file descriptors
  that need replacing.

* Properly replace p_comm[] when restoring a checkpoint file, so checkpointing
  again saves under the same program name.  'ps' output is still wrong,
  though.

TODO LIST:

* Add an iterator to the checkpoint file, accessible via kern.ckptfile,
  so successive checkpoints save to a blah.ckpt.1, blah.ckpt.2, etc,
  rather then always overwriting blah.ckpt (the iterator could be saved
  in the proc structure).

* Add back as a 'feature' the ability for the new checkpoint file to
  reference the old one.  That is, each new checkpoint file would represent
  a delta relative to the old one.  This might be useful when checkpointing
  programs with ever growing data setse so as not to have to copy the
  entire contents of the program to the checkpoint file each time you want
  to make a new checkpoint.  It would be hell on the VM system, but it
  would work.

* Add an option to checkpt(1) so you can checkpoint-restore-enter-gdb all
  in one go, to be able to debug a checkpointed file more easily.

Inspired by: Brook Davis's HPC presentation.  He expressed an interest in
     possibly porting the checkpoint code so I figure I ought to
     fix it up.

Make pstat WARNS=6 clean.

Change the name entry in struct nlist to const char *.

Merge FreeBSD SA 04:16 security fix.

Submitted by: the kind FreeBSD security officer folks

Clear the NOCORE flag on any text mappings that the RTLD modifies due to
text relocations or compacted BSS areas.  Otherwise the checkpt code will
not write out the modified areas.

Also note that if you mmap() a file MAP_PRIVATE, then modify portions of it
so the mapping is changed from OBJT_VNODE to OBJT_DEFAULT->OBJT_VNODE,
the current ELF coredump code will *NOT* write out a file handle record for
the backing vnode.  This means that the entire vm_map_entry containing
the modified portions must be marked as COREable if it was previously mapped
NOCORE.

In the case of the RTLD code the text area is mapped read-only.  The text
area is temporarily remapped read-write for the relocation pass and so
the whole area is still represented by a single vm_map_entry and thus the
whole area must be marked COREable.  For the BSS fixup only the last page
is remapped read-write and so it gets its own private vm_map_entry and
thus only the last page must be marked COREable.

The DEFAULT->VNODE backing issue is actually a bug in the elf coredump code,
but even if it were fixed core dump sizes would not get much smaller because
relocations tend to be all over the map.

Checkpt-Nonworking-Bug-Reported-by: Michael Neumann <mneumann@ntecs.de>

Bring in various fixes from FreeBSD:

* MAXPATHLEN includes the trailing NUL, Correct array sizes to reflect this.
* Correct NUL termination after strncpy.
* Make ${.OBJDIR} canonical.
* -Wall cleanup.
* unifdef -D__STDC__
* Sort #includes, remove <sys/types.h> (made redundant by <sys/param.h>),
  add <signal.h> (needed for sigaction())
* Unbreak compilation on RELENG_4.
* unifdef -UWANT_ENV_PWD. No one ever going to use this bugfeature.
* Reorder #include. Cast arg #2 of lseek to an off_t when constant. No need to
  test if failsafe memory allocation fails, it can't. perror -> warn. Use
  failsafe memory allocation provided.
* And some other doc cleanup.
* Reduce diffs between FreeBSD and DragonFly Makefile
* Added the MAKE_VERSION global that could be useful in determining
  if a given make(1) is feature-compatible with a set of makefiles.
  When merged, this will be used to replace the ugly upgrade_checks
  hacks in src/Makefile.
  Version has the RYYYYMMDDX format, where R is from RELENG_<R> and
  X allows for 10 distinguishable changes per day.
* make(I) appeared in PWB UNIX.
* Add MAKE_VERSION variables
* Don't do stupid things to avoid unused parameters, mark them __unused.
* Use %p to print a pointer, not %lx and a cast to (unsigned long).  Yuck.
* Avoid classy use of a variable one time with a constant value.
* Bit-width fields should be of type 'int'.

Submitted-by: Max Okumoto <okumoto@home>

Do a cleanup pass on the mbuf allocator.  Reorder the mmbfree cache tests
to improve the critical path.  Use critical sections instead of spls for
protection.

Remove unused junk from the slab allocator.

Remove M_FAILSAFE and M_INTALLOC.  M_FAILSAFE was a double check for
interrupt-time allocations but using it was problematic at best and as
a consequence it was never used.  M_INTALLOC was a macro that used
M_FAILSAFE and was also never used.  The standard M_ flags for interrupt
time allocations are M_INTNOWAIT and M_INTWAIT.

Properly propagate the FIN flag from the following to-be-coalesced segment.

Questionable use of logical AND caught by: Matt Dillon

Normally we want to warn if the local IP address is used by a different
host. This isn't useful for 0.0.0.0, because it is used by dhclient
when no address is known.

Fix bug with wrong length being used when coalescing out-of-order segments.

Follow NOFSCHG if defined.  (It's needed to be able to run make installworld
in a jail, in FreeBSD 5).

Submitted-by: Suleiman Souhlal <ssouhlal@FreeBSD.org>

Cave in and remove NULL checks for M_WAITOK mallocs.  DragonFly's M_WAITOK
malloc will panic rather then return NULL, unless M_NULLOK is also specified,
so we don't actually have to check for NULL most of the time.

Submitted-by: Andrew Atrens <atrens@nortelnetworks.com>

Fix a bug in the checking of malloc()'s return value.  It turns out to have
been masked by the fact that M_WAITOK does not return NULL anyway.

Submitted-by: Andrew Atrens <atrens@nortelnetworks.com>

Use the YACC source for c-exp.y and f-exp.y, not the pre-built
BISON parse. This solves the *very* strange build problem with
-jX in buildworld, where make tries to build this files from
source using the default rules. Those rules are not save for
parallel builds.

Always use the width field from the varent, not the original width.
This fixes the output of oversized fields messing the overall table
layout.

Reported-by: Peter Avalos <pavalos@theshell.com>

Temporarily change the net.inet.tcp.sack default from 1 to 0 after confirmed
reports of file corruption in downloads.  This will be changed back to 1
after we figure out and fix the issue.

Corrupted-downloads-reported-by: walt <wa1ter@myrealbox.com>

Replace spkrtest script with a shell version.

Obtained-from: FreeBSD

Don't install the undocumented scriptdump Perl script.

Override USE_GCC=3.4, we want to use our system compiler in that case.

- Use the correct error functions
- Use the correct function to close the client

- Set the clnt error functions 's' argument to const char *
- Update rpc.3

- Set the clnt error functions protos from char * -> const char *

Do not overwrite z*grep commands with shell wrappers in this directory.
These z*grep shell wrappers rely on `--label' option when they deal with
multiple files, and our version of grep doesn't have that option.

Move away from GNU traceroute and use the BSD licensed one.

Fix traceroute.
sendto() to a inet socket wants wants ip->ip_len to be in host order, not
network order.

Submitted by: Simon 'corecode' Schubert <corecode@fs.ei.tum.de>

Fix a bug in parsefmt where a string still referenced would be freed.

Submitted-by: YONETANI Tomokazu <qhwt+dfly@les.ath.cx>
Slightly modified from the original version.

- use STAILQ, instead of hand grown implementation
- split VARENT/VAR into varent with a const point to var and header, width
  and dwidth as modifiable fields
- change users of most VARENT fields to use the modifiable fields
- make VAR[] var static const now
- remove dwidth field from VAR, not needed now
- while changing prototypes anyway, remove the unneeded space before the
  argument list

WARNS= 6 cleanup.

Add some more hacks for dfport handling, to allow make index to mostly
work.

Back out constification. This caused a SIGBUS becaus a functon wanted to write
to the var struct.

Noticed by: YONETANI Tomokazu <qhwt+dfly@les.ath.cx>

Cleanup send-pr and ptx on next update.

Remove the old release infrastruture. Certain parts e.g. sysinstall or
the picobsd stuff should be kept for future reference in the attic.

Sync with FreeBSD. This removes the need for perl.

Add preprocessor handling for newer processor, they should get the better
assembler too.

The code and sources here haven't been used since FreeBSD 2.x, nuke
them.

Inspired-by: FreeBSD

Remove ptx, it isn't maintained and hasn't been used by base for years.

Inspired-by: FreeBSD
Remove send-pr, once we have an official bugtracker, we can replace it
with a matching script. But we don't want to use GNATS, so no need for
send-pr.

Sync with FreeBSD. Most importantly, this removes the need for perl.

Fix an inverted conditional which could lead to nameBuf being truncated in
the later snprintf().

Noticed-by: Max Okumoto <okumoto@home>

- Remove sys/time.h
- Use __unused in the sig handlers
- Static functions
- Other minor changes

Note: The sig handler nonfs is not save. Joerg is going to work on this
himself.

Continuing synchronization from FreeBSD.

Submitted-by: Max Okumoto <okumoto@ucsd.edu>

Fix a lhs-cast by casting first to unsigned char and then to the
type-correct char.

Remove the dependency on either asprintf or va_copy. This will be included
in later versions by default.

Obtained-from: Tim Kientzle <tim@kientzle.com>

Remove CFLAGS?= 2

-Wall -Wstrict-prototypes already in CFLAGS.

-W is included in CFLAGS already.

Fix an endian bug in pflog. The DragonFly version of PF uses the normal
host byte order instead of network byte order as used by OpenBSD and
FreeBSD. Normally the ether_output code converts this back, but for
pflog, we shortcut these code. Therefore, before calling bpf_mtap, switch
the byte order back to network order and revert it afterwards.

Problem-reported-by: Erik P. Skaalerud

Remove xpt_release_simq_timeout(), this function has not been in use since the
timeout/untimeout ==> callout_* transformation.

If the first slot is empty, don't continue scanning. This fixes hangs
on some machines.

Obtained-from: FreeBSD

Merge from vendor branch GDB:
Add solib-legacy.c, it is needed for proper attach support.

I don't really understand why gdb doesn't include this file for itself.

Add solib-legacy.c, it is needed for proper attach support.

I don't really understand why gdb doesn't include this file for itself.

Add solib-legacy.c, it is needed for proper attach support.

I don't really understand why gdb doesn't include this file for itself.

Constify VAR.

Submitted by: joerg

WARNS=6 cleanup.

direct sysargs to /dev/null for the emualtion system call sets to avoid a
make all_sysent build error.

Partial sync from FreeBSD, add dummy syscalls for extended attribte
operations to return ENOATTR rather then ENOSYS (which causes a core dump).

Reported-by: John Duncan <agley@optusnet.com.au>

Implement SACK.

* Restore indentation to tabs.
* Make it WARNS?=6 clean.
* Remove an unnecessary void cast.
* Declare static functions as static..
* Remove some unnecessary return statements at the end of void functions.

Submitted-by: Sascha Wildner <saw@online.de>

Add support for the ATI Radeon 9600 XT and XT_S.

Submitted-by: "Pablo M<E9>ndez Hern<E1>ndez" <ciph3r@telefonica.net>

Spelling corrections.

Submitted-by: Max Okumoto <okumoto@home>
Taken-from: FreeBSD (2001/02/18 10:43:32)

Remove left-over '{'.