dragonfly.git
15 years agoRemove some !FreeBSD compat code, which produces warnings on DragonFly.
Joerg Sonnenberger [Fri, 26 Nov 2004 14:47:04 +0000 (14:47 +0000)]
Remove some !FreeBSD compat code, which produces warnings on DragonFly.

15 years agoDon't define the .BEGIN with the override message twice for modules
Joerg Sonnenberger [Fri, 26 Nov 2004 14:06:57 +0000 (14:06 +0000)]
Don't define the .BEGIN with the override message twice for modules
using bsd.port.pre.mk / bsd.port.post.mk.

Pointed-out-by: YONETANI Tomokazu <qhwt+dfly@les.ath.cx>
15 years ago- Add new -vv option. If the -v flag is specified more than once,
Liam J. Foy [Thu, 25 Nov 2004 19:45:30 +0000 (19:45 +0000)]
- Add new -vv option. If the -v flag is specified more than once,
  chown will print the filename, followed by the old and new numeric
  user/group ID. (Obtained from FreeBSD with my modifications)
- Static functions and globals
- Remove global hflag
- Fix some casts
- Make WARNS?= 6 clean
- Add WARNS?= 6
- Constify id()
- Remove '?' case
- Update chown.8 for the addition of +vv

Ok'ed: Joerg@

15 years agoFix warnings about yyerror, yylex and yy_unput
Joerg Sonnenberger [Thu, 25 Nov 2004 01:20:33 +0000 (01:20 +0000)]
Fix warnings about yyerror, yylex and yy_unput

15 years agoFix parameters for comparision function.
Joerg Sonnenberger [Thu, 25 Nov 2004 01:01:33 +0000 (01:01 +0000)]
Fix parameters for comparision function.

15 years agoAdd the basic of libkcore. Switch pstat to use kcore/kinfo backing,
Joerg Sonnenberger [Wed, 24 Nov 2004 22:51:01 +0000 (22:51 +0000)]
Add the basic of libkcore. Switch pstat to use kcore/kinfo backing,
defaulting to kcore for now.

15 years agoComment out extra tokens after #else and #endif.
Joerg Sonnenberger [Wed, 24 Nov 2004 12:49:27 +0000 (12:49 +0000)]
Comment out extra tokens after #else and #endif.

15 years agoChange the include order of archive_string.h and archive_prviate.h.
Joerg Sonnenberger [Wed, 24 Nov 2004 10:20:45 +0000 (10:20 +0000)]
Change the include order of archive_string.h and archive_prviate.h.
The original order doesn't play well with the patching framework,
because the C preprocessor looks into the source directory first
for #include "".

15 years agoCleanup some ESTALE issues on the client when files are replaced on
Matthew Dillon [Wed, 24 Nov 2004 08:37:16 +0000 (08:37 +0000)]
Cleanup some ESTALE issues on the client when files are replaced on
an NFS server.  Even though the attribute cache has expired DragonFly
still maintains a vnode in the namecache.  If a file is replaced on the
server the vnode's file handle will become invalid.

Force re-resolution of the namecache entry rather then replacing the vnode's
file handle, so programs with open descriptors to the dead file continue to
get a proper error return while lookups succeed in finding the new version
of the file.

In this patch ESTALE is checked in strategic places:  stat(), access(), and
open().  It is an imperfect solution at the moment but it seems to work pretty
well.  This should bring NFS client operations back up to FreeBSD-4.x
standards.

15 years agoo Give make(1) the ability to use KQUEUE to wait for worker
Matthew Dillon [Wed, 24 Nov 2004 07:24:17 +0000 (07:24 +0000)]
o Give make(1) the ability to use KQUEUE to wait for worker
  processes instead of polling for them.
o Bootstrapping aid from pre-kqueue(2) systems, e.g.
  4.0-RELEASE.
o Treat kevent(2) returning an error EINTR as the non-error
  it is.

Note: the KQUEUE feature is disabled in FreeBSD and in DragonFly.

Submitted-by: Max Okumoto <okumoto@home>
Taken-from: FreeBSD

15 years agoo Fix proto type
Matthew Dillon [Wed, 24 Nov 2004 07:20:51 +0000 (07:20 +0000)]
o Fix proto type
o Mention that the left-hand side of the comparison conditional
  must always be a variable expansion.  Do not lie that
  debugging .for loops is a no-op.
o Update tutorial.
o Update man page.
o Fixed the abuses of .Ql visible on stderr in troff mode.
o Fix typos, mostly s/ an / a / where appropriate and a few s/an/and/
  Add FreeBSD Id tag where missing.

Submitted-by: Max Okumoto <okumoto@ucsd.edu>
Taken-from: FreeBSD

15 years agoo Pacify ``make -f /dev/null -V FOO''.
Matthew Dillon [Wed, 24 Nov 2004 07:19:14 +0000 (07:19 +0000)]
o Pacify ``make -f /dev/null -V FOO''.
o Add empty default cases where they should be, remove
  non-local execution stuff in compat.c which doesn't even
  have preprocessor-conditional-hidden support code, and
  add a debugging statement where we might end up with a
  nil list somehow, but where I doubt it.
o Makeing make(1) WARNS=6 cleanup
o In lieu of a good way to prevent every possible looping
  in make(1), stop there from being more than 500 processes
  forked by make(1), to prevent a forkbomb from happening,
  in a dumb and mechanical way.
o Some ANSI changes that we missed

Submitted-by: Max Okumoto <okumoto@ucsd.edu>
Taken-from: FreeBSD

15 years agoo Print a warning when we are given two scripts for one target.
Matthew Dillon [Wed, 24 Nov 2004 07:15:46 +0000 (07:15 +0000)]
o Print a warning when we are given two scripts for one target.
  This is neither as wide-reaching nor intensive as NetBSD's
  similar, but the warning uses the same text.
o Remove local prototypes for main().
o Don't declare things as extern when they will be static.
o When formatting the time for a target, use %H instead of %k,
  which is mostly the same, but uses a non-extension option.
o Document the parsing bug.
o Fix spurious three-space indentation in a four-space indentation
  file.
o Remove 6-years-stale #if0, the behaviour isn't ever going to
  be limited to compatible mode, as far as I know, since we use
  it...
o Code that has been #if0'd with the comment "WHY" since revision
  1.1 can disappear.

Submitted-by: Max Okumoto <okumoto@ucsd.edu>
Taken-from: FreeBSD (as with the previous patches)

15 years agopatch-4.10: Clean some includes and remove ifdef __STDC__, -Wall cleanup,
Matthew Dillon [Wed, 24 Nov 2004 07:11:33 +0000 (07:11 +0000)]
patch-4.10: Clean some includes and remove ifdef __STDC__, -Wall cleanup,
unifdef -D__STDC__, Sort #includes, remove <sys/types.h> (made redundant
by <sys/param.h>), add <signal.h> (needed for sigaction()),
Unbreak compilation on RELENG_4.

Submitted-by: Max Okumoto <okumoto@ucsd.edu>
15 years agoAdd a SECURITY section which describes the kern.ckptgroup sysctl among
Hiten Pandya [Wed, 24 Nov 2004 02:56:43 +0000 (02:56 +0000)]
Add a SECURITY section which describes the kern.ckptgroup sysctl among
other things.

While I am here, cleanup the manual page:

- correct mdoc(7)
- restructure some sentences for readability
- add reference to signal(3) under SEE ALSO

15 years agoRemove the checkpoint module. checkpointing is now integrated into the kernel
Matthew Dillon [Tue, 23 Nov 2004 20:04:10 +0000 (20:04 +0000)]
Remove the checkpoint module.  checkpointing is now integrated into the kernel
via kern/kern_checkpoint.c (same code as checkpt.c and support.c just
migrated to a new file).

15 years agoRemove checkpt/ from Makefile.modules. checkpt is not integrated into the
Matthew Dillon [Tue, 23 Nov 2004 20:03:40 +0000 (20:03 +0000)]
Remove checkpt/ from Makefile.modules.  checkpt is not integrated into the
kernel as kern/kern_checkpoint.c

15 years agoIt is sys_checkpoint.2 not checkpoint.2
Eirik Nygaard [Tue, 23 Nov 2004 19:05:53 +0000 (19:05 +0000)]
It is sys_checkpoint.2 not checkpoint.2

Submitted by: Michal Belczyk <diavul@bsd.krakow.pl> and
              Michael Neumann <mneumann@ntecs.de>

15 years ago- Add newgrp(1) into the build
Liam J. Foy [Tue, 23 Nov 2004 16:34:34 +0000 (16:34 +0000)]
- Add newgrp(1) into the build

15 years ago- Import newgrp(1) from FreeBSD
Liam J. Foy [Tue, 23 Nov 2004 16:26:04 +0000 (16:26 +0000)]
- Import newgrp(1) from FreeBSD
- Add WARNS?= 6

Ok'ed by: Joerg

15 years agoAdd the sys_checkpoint(2) manual page and expand checkpt(1).
Matthew Dillon [Tue, 23 Nov 2004 07:36:33 +0000 (07:36 +0000)]
Add the sys_checkpoint(2) manual page and expand checkpt(1).
sys_checkpoint(2) is our checkpoint system call interface.  It is capable
of checkpointing and checkpoint-restoring programs with certain restrictions.

15 years agoThere is enough demand for Kip Macy's checkpointing code to warrent
Matthew Dillon [Tue, 23 Nov 2004 06:32:39 +0000 (06:32 +0000)]
There is enough demand for Kip Macy's checkpointing code to warrent
permanent integration into the kernel.  Add a fixed system call,
sys_checkpoint(2), to support the checkpt(1) utility as well as user
programs which want to install their own signal handler (SIGCKPT).

15 years agoTest Commit
Hiten Pandya [Tue, 23 Nov 2004 05:25:10 +0000 (05:25 +0000)]
Test Commit

15 years agoDocument the mandatory use of vget() prior to modifying vnode/inode ops.
Matthew Dillon [Tue, 23 Nov 2004 04:05:36 +0000 (04:05 +0000)]
Document the mandatory use of vget() prior to modifying vnode/inode ops.

15 years agoFix a bug in chown, chmod, and chflags. When the setfflags(), setffown(),
Matthew Dillon [Tue, 23 Nov 2004 04:03:26 +0000 (04:03 +0000)]
Fix a bug in chown, chmod, and chflags.  When the setfflags(), setffown(),
and setfmode() API was cleaned up to not remove vrefs maintained by the
caller it resulted in an incorrect vref+vn_lock combination which fails
to clear the VINACTIVE bit on the vnode.  vget() clears this bit as part of
its work.  This prevented the filesystem from synchronizing the changes
out to the inode unless other modifications were made to the file as well,
which resulted in weird errors such as ./MAKEDEV all creating /dev/null with
perms 600 (the chmod it does afterwords doesn't always take effect), and
other things.

Additional thanks to walt for providing the information that led to the
diagnosis.

Reported-by: "Simon 'corecode' Schubert" <corecode@fs.ei.tum.de>,
             walt <wa1ter@myrealbox.com>,
     Andreas Hauser <andy@splashground.de>

15 years agoCorrect spelling.
Hiten Pandya [Tue, 23 Nov 2004 02:20:40 +0000 (02:20 +0000)]
Correct spelling.

15 years agoFix the PRI field to not display bogus process priorities for pure
Matthew Dillon [Mon, 22 Nov 2004 06:50:12 +0000 (06:50 +0000)]
Fix the PRI field to not display bogus process priorities for pure
threads.  Add TDPRI (-o tdpri) to display the actual thread priority
and critical section count.

15 years agoThe fp argument to vn_open() is optional but the code wasn't treating it
Matthew Dillon [Mon, 22 Nov 2004 00:53:54 +0000 (00:53 +0000)]
The fp argument to vn_open() is optional but the code wasn't treating it
that way entirely.

15 years agoAdd support for adjusting the interrupt throttling rate via
Matthew Dillon [Mon, 22 Nov 2004 00:46:14 +0000 (00:46 +0000)]
Add support for adjusting the interrupt throttling rate via
hw.emX.int_throttle_ceil, and change the default from 8000hz
to 10000hz to improve throughput with default TCP window sizes
through a GiGE switch in a LAN environment.

Note the following test results using iperf between two machines:

    * Shuttle Athlon 64 3200+ box, EM card in 32 bit PCI slot
    * 2 machines connected through a GiGE switch
    * All other hw.em0 delays set to 0 on both sides
    * throttle settings set on both sides
    * -w option set on iperf client AND server for 63.5KB window
    * software interrupt throttling has been turned off for these tests

    throttle    result          result
    freq        (32.5KB win)    (63.5KB win)
                (default)
    --------    --------------  -----------

  maxrate       481 MBit/s      533 MBit/s      (not sure what's going on here)
  120000        518 MBit/s      558 MBit/s      (not sure what's going on here)
  100000        613 MBit/s      667 MBit/s      (not sure what's going on here)
   70000        679 MBit/s      691 MBit/s
   60000        668 MBit/s      694 MBit/s
   50000        678 MBit/s      684 MBit/s
   40000        694 MBit/s      696 MBit/s
   30000        694 MBit/s      696 MBit/s
   20000        698 MBit/s      703 MBit/s
   10000        707 MBit/s      716 MBit/s
    9000        708 MBit/s      716 MBit/s
    8000        710 MBit/s      717 MBit/s      <--- drop off pt 32.5KB win
    7000        683 MBit/s      716 MBit/s
    6000        680 MBit/s      720 MBit/s
    5000        652 MBit/s      718 MBit/s      <--- drop off pt 63.5KB win
    4000        555 Mbit/s      695 MBit/s
    3000        522 MBit/s      533 MBit/s      <--- GiGE throttling likely
    2000        449 MBit/s      384 MBit/s      (256 ring descriptors =
    1000        260 MBit/s      193 MBit/s        2500 hz minimum)

15 years agoCleanup the 'cache_lock: blocked on..' warning message. Fix a minor
Matthew Dillon [Sun, 21 Nov 2004 19:39:35 +0000 (19:39 +0000)]
Cleanup the 'cache_lock: blocked on..' warning message.  Fix a minor
issue that was causing the message to be bogusly displayed when more then
one process was stuck on the lock.  Plus add a sysctl, debug.nclockwarn,
which allows the warning timeout to be set (in ticks), default one second.

Reported-by: various.
15 years agolwkt_runnable is declared in <sys/thread2.h>
YONETANI Tomokazu [Sun, 21 Nov 2004 09:07:14 +0000 (09:07 +0000)]
lwkt_runnable is declared in <sys/thread2.h>

15 years agoFix a number of SMP issues.
Matthew Dillon [Sat, 20 Nov 2004 20:50:36 +0000 (20:50 +0000)]
Fix a number of SMP issues.

* Add required pause instructions in code paths that skip running "HLT".  This
  occurs when e.g. cpu #1 is running code with the BGL while cpu #2's only
  runnable thread requires the BGL.  cpu #2's LWKT scheduler spins in that
  case.  Similar situations can occur when the only runnable threads on a
  cpu are waiting for a token.

* Add required pause instructions to spin loops.  DragonFly has very few spin
  locks (e.g. things like com_lock()) but its a good idea anyway to avoid
  known livelock issues on Intel cpus.

* Fix a pending interrupt / HLT race.  We were not atomically retiring
  pending interrupts prior to potentially HLTing the cpu.  This could
  result in an SMP machine's network locking up until a key is hit on
  the console, then magically resuming.

Lockups-reported-by: Peter Avalos <pavalos@theshell.com>
15 years agosendfile() was seriously broken. It was calling vm_page_free() without
Matthew Dillon [Sat, 20 Nov 2004 20:35:33 +0000 (20:35 +0000)]
sendfile() was seriously broken.  It was calling vm_page_free() without
busying the underlying page, causing a panic on kernels compiled with
INVARIANTS and potentially corrupting data on kernels compiles without
INVARIANTS.  Change the calls to vm_page_try_to_free().

Symtoms: system crash when Apache2 tries to use sendfile() to send large files.
Reported-by: Jedi/Sector One <j@pureftpd.org>
15 years agoAdd code to the BIOS VM86 emulator to detect writes to the 8254. If a
Matthew Dillon [Sat, 20 Nov 2004 20:25:13 +0000 (20:25 +0000)]
Add code to the BIOS VM86 emulator to detect writes to the 8254.  If a
write is detected the 8254 is reset after the bios call returns and the
event is reported.  Some bioses, in particular video bioses, uses timer 2
for timing things.  We need timer 2 for our master clock.

Remove restoreclocks().  This was causing gd_cpuclock_base to reverse index
and jump the time ahead an hour with a flurry of hardclock interrupts.

Introduce a new systimer API call, systimer_init_periodic_nq(), which
installs a non-queued periodic systimer.  Non-queued means that if multiple
events built-up (due to an 8254 glitch, sleep, or other event), only one
event will be reported.

This should fix the BIOS/8254 glitching, the 'hour jump' problem, and
hopefully other timer jumping issues as well.

Bugs-reported-by: Andreas Hauser <andy@splashground.de>,
Jonathon McKitrick <jcm@FreeBSD-uk.eu.org>,
and others

15 years agoFix a conditional. sdl was not unconditionally being checked for NULL.
Matthew Dillon [Sat, 20 Nov 2004 04:14:29 +0000 (04:14 +0000)]
Fix a conditional.  sdl was not unconditionally being checked for NULL.

Found-by: Mikhail Teterin <mi+kde@aldan.algebra.com>
15 years agoGive init the ability to chroot to a directory based on kernel environment
Matthew Dillon [Sat, 20 Nov 2004 04:09:34 +0000 (04:09 +0000)]
Give init the ability to chroot to a directory based on kernel environment
variable, 'init_chroot'.  This makes building multi-boot DVDs a lot easier.

Submitted-by: Oliver Fromme <olli@haluter.fromme.com>
w/ minor cleanups by Matt

15 years agoMake the code WARNS= 6 clean.
Eirik Nygaard [Fri, 19 Nov 2004 19:01:52 +0000 (19:01 +0000)]
Make the code WARNS= 6 clean.

15 years ago- Add WARNS?= 6
Liam J. Foy [Fri, 19 Nov 2004 18:35:29 +0000 (18:35 +0000)]
- Add WARNS?= 6
- Make signaled volatile sig_atomic_t
- Static functions
- Fix most of the warns

15 years ago- Add $DragonFly$ tag
Liam J. Foy [Fri, 19 Nov 2004 17:46:40 +0000 (17:46 +0000)]
- Add $DragonFly$ tag
- Add WARNS?= 6
- Remove registers
- Static functions

15 years agoRe-enable SACK by default. Jeff fixed the corruption issue reported by
Matthew Dillon [Thu, 18 Nov 2004 20:12:26 +0000 (20:12 +0000)]
Re-enable SACK by default.  Jeff fixed the corruption issue reported by
H.Miyamoto and downloads now test good again.

Originally-reported-by: H.Miyamoto (aka "Yuukis"). <Ys@PixyGarden.net>
Additional-reports/testing: H.Miyamoto,
Joerg Sonnenberger <joerg@britannica.bec.de>,
walt <wa1ter@myrealbox.com>

15 years agoCleanup some dangling issues with cache_inval(). A lot of hard work went
Matthew Dillon [Thu, 18 Nov 2004 20:04:28 +0000 (20:04 +0000)]
Cleanup some dangling issues with cache_inval().  A lot of hard work went
into guarenteeing that the namecache topology would remain connected, but
there were two cases (basically rmdir and rename-over-empty-target-dir)
which disconnected a portion of the hierarchy.

This fixes the remaining cases by having cache_inval() simply mark the
namecache entry as destroyed without actually disconnecting it from the
topology.  The flag tells cache_nlookup() and ".." handlers that a node has
been destroyed and is no longer connected to any parent directory.

The new cache_inval() also now has the ability to mark an entire subhierarchy
as being unresolved, which can be a useful feature to have.

In-discussion-with: Richard Nyberg <rnyberg@it.su.se>

15 years agoReplace lvalue cast.
Joerg Sonnenberger [Thu, 18 Nov 2004 15:53:40 +0000 (15:53 +0000)]
Replace lvalue cast.

15 years agoUse kinfo_get_vfs_bufspace instead of kvm.
Joerg Sonnenberger [Thu, 18 Nov 2004 14:35:08 +0000 (14:35 +0000)]
Use kinfo_get_vfs_bufspace instead of kvm.

15 years agoAdd kinfo_get_vfs_bufspace(). Remove some junk from Makefile.
Joerg Sonnenberger [Thu, 18 Nov 2004 14:33:01 +0000 (14:33 +0000)]
Add kinfo_get_vfs_bufspace(). Remove some junk from Makefile.

15 years agoInclude Makefile
Joerg Sonnenberger [Thu, 18 Nov 2004 13:57:35 +0000 (13:57 +0000)]
Include Makefile

15 years agoAdd a new system library, libkinfo. It is intended to replace libkvm for
Joerg Sonnenberger [Thu, 18 Nov 2004 13:56:56 +0000 (13:56 +0000)]
Add a new system library, libkinfo. It is intended to replace libkvm for
most userland tools, which want to deal with a living kernel, not
post-mortem analysation.

Change the kern.file backing from a struct file array to a struct kinfo_file
array. The later is an independent structure, which includes the information
useful for userland. This allows changing the kernel-internals without
having to recompile libkinfo and derived programs. This is inspired by the
changes DES did in FreeBSD 5 (struct xfile).

Partly-obtained-from: FreeBSD (kern_descrip.c changes)

15 years agoRevert a part of the last commit. The changes to use sysctl interface
Joerg Sonnenberger [Thu, 18 Nov 2004 13:35:52 +0000 (13:35 +0000)]
Revert a part of the last commit. The changes to use sysctl interface
wasn't meant for the repository and will be superseded by a different
patch.

15 years agoLots of bug fixes to the checkpointing code. The big fix is that you can
Matthew Dillon [Thu, 18 Nov 2004 13:09:55 +0000 (13:09 +0000)]
Lots of bug fixes to the checkpointing code.  The big fix is that you can
now checkpoint a program that you have checkpoint-restored.  i.e. you run
program X, you checkpoint it, you checkpoint-restore X from the checkpoint,
and then you checkpoint it again.  The issue here is the when a checkpointed
program is restored the checkpoint file is used to map portions of the image
of the restored program.  If you then tried to checkpoint the restored image
the system would overwrite or destroy the original checkpoint file and
the new checkpoint file would have references to the old file (now
non-existant) file.  Any attempt to restore the recursed checkpoint would
result in a seg-fault.  That is now fixed.

* Remove the previous checkpoint file before saving the new one.  If the
  program we are checkpointing happens to be a checkpoint restore from the
  same file then overwriting the file would wind up corrupting the
  image set we are trying to save.

* When checkpointing a program that has been checkpoint-restored do not
  attempt to save the file handles for the vnode representing the
  checkpoint-restored program's own checkpoint file (which is a good chunk
  of its backing store), because this vnode is likely to be destroyed the
  moment we close the handle, since we are likely replacing the previous
  checkpoint file.  Instead, the backing store representing the old
  checkpoint file is copied to the new one.

* Re-checkpointing a program (hitting ^E multiple times) now properly
  replaces the checkpoint file.

* Properly close any file descriptors from the checkpt(1) program itself
  when restoring a checkpointed program, properly replace any file descriptors
  that need replacing.

* Properly replace p_comm[] when restoring a checkpoint file, so checkpointing
  again saves under the same program name.  'ps' output is still wrong,
  though.

TODO LIST:

* Add an iterator to the checkpoint file, accessible via kern.ckptfile,
  so successive checkpoints save to a blah.ckpt.1, blah.ckpt.2, etc,
  rather then always overwriting blah.ckpt (the iterator could be saved
  in the proc structure).

* Add back as a 'feature' the ability for the new checkpoint file to
  reference the old one.  That is, each new checkpoint file would represent
  a delta relative to the old one.  This might be useful when checkpointing
  programs with ever growing data setse so as not to have to copy the
  entire contents of the program to the checkpoint file each time you want
  to make a new checkpoint.  It would be hell on the VM system, but it
  would work.

* Add an option to checkpt(1) so you can checkpoint-restore-enter-gdb all
  in one go, to be able to debug a checkpointed file more easily.

Inspired by: Brook Davis's HPC presentation.  He expressed an interest in
     possibly porting the checkpoint code so I figure I ought to
     fix it up.

15 years agoMake pstat WARNS=6 clean.
Joerg Sonnenberger [Thu, 18 Nov 2004 12:54:13 +0000 (12:54 +0000)]
Make pstat WARNS=6 clean.

15 years agoChange the name entry in struct nlist to const char *.
Joerg Sonnenberger [Thu, 18 Nov 2004 12:38:43 +0000 (12:38 +0000)]
Change the name entry in struct nlist to const char *.

15 years agoMerge FreeBSD SA 04:16 security fix.
Jeroen Ruigrok/asmodai [Thu, 18 Nov 2004 12:08:01 +0000 (12:08 +0000)]
Merge FreeBSD SA 04:16 security fix.

Submitted by: the kind FreeBSD security officer folks

15 years agoClear the NOCORE flag on any text mappings that the RTLD modifies due to
Matthew Dillon [Thu, 18 Nov 2004 10:01:47 +0000 (10:01 +0000)]
Clear the NOCORE flag on any text mappings that the RTLD modifies due to
text relocations or compacted BSS areas.  Otherwise the checkpt code will
not write out the modified areas.

Also note that if you mmap() a file MAP_PRIVATE, then modify portions of it
so the mapping is changed from OBJT_VNODE to OBJT_DEFAULT->OBJT_VNODE,
the current ELF coredump code will *NOT* write out a file handle record for
the backing vnode.  This means that the entire vm_map_entry containing
the modified portions must be marked as COREable if it was previously mapped
NOCORE.

In the case of the RTLD code the text area is mapped read-only.  The text
area is temporarily remapped read-write for the relocation pass and so
the whole area is still represented by a single vm_map_entry and thus the
whole area must be marked COREable.  For the BSS fixup only the last page
is remapped read-write and so it gets its own private vm_map_entry and
thus only the last page must be marked COREable.

The DEFAULT->VNODE backing issue is actually a bug in the elf coredump code,
but even if it were fixed core dump sizes would not get much smaller because
relocations tend to be all over the map.

Checkpt-Nonworking-Bug-Reported-by: Michael Neumann <mneumann@ntecs.de>
15 years agoBring in various fixes from FreeBSD:
Matthew Dillon [Thu, 18 Nov 2004 02:01:44 +0000 (02:01 +0000)]
Bring in various fixes from FreeBSD:

* MAXPATHLEN includes the trailing NUL, Correct array sizes to reflect this.
* Correct NUL termination after strncpy.
* Make ${.OBJDIR} canonical.
* -Wall cleanup.
* unifdef -D__STDC__
* Sort #includes, remove <sys/types.h> (made redundant by <sys/param.h>),
  add <signal.h> (needed for sigaction())
* Unbreak compilation on RELENG_4.
* unifdef -UWANT_ENV_PWD. No one ever going to use this bugfeature.
* Reorder #include. Cast arg #2 of lseek to an off_t when constant. No need to
  test if failsafe memory allocation fails, it can't. perror -> warn. Use
  failsafe memory allocation provided.
* And some other doc cleanup.
* Reduce diffs between FreeBSD and DragonFly Makefile
* Added the MAKE_VERSION global that could be useful in determining
  if a given make(1) is feature-compatible with a set of makefiles.
  When merged, this will be used to replace the ugly upgrade_checks
  hacks in src/Makefile.
  Version has the RYYYYMMDDX format, where R is from RELENG_<R> and
  X allows for 10 distinguishable changes per day.
* make(I) appeared in PWB UNIX.
* Add MAKE_VERSION variables
* Don't do stupid things to avoid unused parameters, mark them __unused.
* Use %p to print a pointer, not %lx and a cast to (unsigned long).  Yuck.
* Avoid classy use of a variable one time with a constant value.
* Bit-width fields should be of type 'int'.

Submitted-by: Max Okumoto <okumoto@home>
15 years agoDo a cleanup pass on the mbuf allocator. Reorder the mmbfree cache tests
Matthew Dillon [Thu, 18 Nov 2004 01:42:26 +0000 (01:42 +0000)]
Do a cleanup pass on the mbuf allocator.  Reorder the mmbfree cache tests
to improve the critical path.  Use critical sections instead of spls for
protection.

15 years agoRemove unused junk from the slab allocator.
Matthew Dillon [Wed, 17 Nov 2004 23:36:21 +0000 (23:36 +0000)]
Remove unused junk from the slab allocator.

Remove M_FAILSAFE and M_INTALLOC.  M_FAILSAFE was a double check for
interrupt-time allocations but using it was problematic at best and as
a consequence it was never used.  M_INTALLOC was a macro that used
M_FAILSAFE and was also never used.  The standard M_ flags for interrupt
time allocations are M_INTNOWAIT and M_INTWAIT.

15 years agoProperly propagate the FIN flag from the following to-be-coalesced segment.
Jeffrey Hsu [Wed, 17 Nov 2004 21:50:46 +0000 (21:50 +0000)]
Properly propagate the FIN flag from the following to-be-coalesced segment.

Questionable use of logical AND caught by: Matt Dillon

15 years agoNormally we want to warn if the local IP address is used by a different
Joerg Sonnenberger [Wed, 17 Nov 2004 21:04:05 +0000 (21:04 +0000)]
Normally we want to warn if the local IP address is used by a different
host. This isn't useful for 0.0.0.0, because it is used by dhclient
when no address is known.

15 years agoFix bug with wrong length being used when coalescing out-of-order segments.
Jeffrey Hsu [Wed, 17 Nov 2004 20:51:16 +0000 (20:51 +0000)]
Fix bug with wrong length being used when coalescing out-of-order segments.

15 years agoFollow NOFSCHG if defined. (It's needed to be able to run make installworld
Matthew Dillon [Wed, 17 Nov 2004 19:16:12 +0000 (19:16 +0000)]
Follow NOFSCHG if defined.  (It's needed to be able to run make installworld
in a jail, in FreeBSD 5).

Submitted-by: Suleiman Souhlal <ssouhlal@FreeBSD.org>
15 years agoCave in and remove NULL checks for M_WAITOK mallocs. DragonFly's M_WAITOK
Matthew Dillon [Wed, 17 Nov 2004 18:59:21 +0000 (18:59 +0000)]
Cave in and remove NULL checks for M_WAITOK mallocs.  DragonFly's M_WAITOK
malloc will panic rather then return NULL, unless M_NULLOK is also specified,
so we don't actually have to check for NULL most of the time.

Submitted-by: Andrew Atrens <atrens@nortelnetworks.com>
15 years agoFix a bug in the checking of malloc()'s return value. It turns out to have
Matthew Dillon [Wed, 17 Nov 2004 18:27:17 +0000 (18:27 +0000)]
Fix a bug in the checking of malloc()'s return value.  It turns out to have
been masked by the fact that M_WAITOK does not return NULL anyway.

Submitted-by: Andrew Atrens <atrens@nortelnetworks.com>
15 years agoUse the YACC source for c-exp.y and f-exp.y, not the pre-built
Joerg Sonnenberger [Wed, 17 Nov 2004 12:27:59 +0000 (12:27 +0000)]
Use the YACC source for c-exp.y and f-exp.y, not the pre-built
BISON parse. This solves the *very* strange build problem with
-jX in buildworld, where make tries to build this files from
source using the default rules. Those rules are not save for
parallel builds.

15 years agoAlways use the width field from the varent, not the original width.
Joerg Sonnenberger [Wed, 17 Nov 2004 10:09:44 +0000 (10:09 +0000)]
Always use the width field from the varent, not the original width.
This fixes the output of oversized fields messing the overall table
layout.

Reported-by: Peter Avalos <pavalos@theshell.com>
15 years agoTemporarily change the net.inet.tcp.sack default from 1 to 0 after confirmed
Matthew Dillon [Wed, 17 Nov 2004 02:18:17 +0000 (02:18 +0000)]
Temporarily change the net.inet.tcp.sack default from 1 to 0 after confirmed
reports of file corruption in downloads.  This will be changed back to 1
after we figure out and fix the issue.

Corrupted-downloads-reported-by: walt <wa1ter@myrealbox.com>
15 years agoReplace spkrtest script with a shell version.
Joerg Sonnenberger [Tue, 16 Nov 2004 22:21:15 +0000 (22:21 +0000)]
Replace spkrtest script with a shell version.

Obtained-from: FreeBSD

15 years agoDon't install the undocumented scriptdump Perl script.
Joerg Sonnenberger [Tue, 16 Nov 2004 22:04:37 +0000 (22:04 +0000)]
Don't install the undocumented scriptdump Perl script.

15 years agoOverride USE_GCC=3.4, we want to use our system compiler in that case.
Joerg Sonnenberger [Tue, 16 Nov 2004 20:09:26 +0000 (20:09 +0000)]
Override USE_GCC=3.4, we want to use our system compiler in that case.

15 years ago- Use the correct error functions
Liam J. Foy [Tue, 16 Nov 2004 19:06:29 +0000 (19:06 +0000)]
- Use the correct error functions
- Use the correct function to close the client

15 years ago- Set the clnt error functions 's' argument to const char *
Liam J. Foy [Tue, 16 Nov 2004 18:55:45 +0000 (18:55 +0000)]
- Set the clnt error functions 's' argument to const char *
- Update rpc.3

15 years ago- Set the clnt error functions protos from char * -> const char *
Liam J. Foy [Tue, 16 Nov 2004 18:55:04 +0000 (18:55 +0000)]
- Set the clnt error functions protos from char * -> const char *

15 years agoDo not overwrite z*grep commands with shell wrappers in this directory.
YONETANI Tomokazu [Tue, 16 Nov 2004 16:54:57 +0000 (16:54 +0000)]
Do not overwrite z*grep commands with shell wrappers in this directory.
These z*grep shell wrappers rely on `--label' option when they deal with
multiple files, and our version of grep doesn't have that option.

15 years agoMove away from GNU traceroute and use the BSD licensed one.
Eirik Nygaard [Tue, 16 Nov 2004 14:49:54 +0000 (14:49 +0000)]
Move away from GNU traceroute and use the BSD licensed one.

15 years agoFix traceroute.
Eirik Nygaard [Tue, 16 Nov 2004 14:36:01 +0000 (14:36 +0000)]
Fix traceroute.
sendto() to a inet socket wants wants ip->ip_len to be in host order, not
network order.

Submitted by: Simon 'corecode' Schubert <corecode@fs.ei.tum.de>

15 years agoFix a bug in parsefmt where a string still referenced would be freed.
Joerg Sonnenberger [Tue, 16 Nov 2004 12:38:04 +0000 (12:38 +0000)]
Fix a bug in parsefmt where a string still referenced would be freed.

Submitted-by: YONETANI Tomokazu <qhwt+dfly@les.ath.cx>
Slightly modified from the original version.

15 years ago- use STAILQ, instead of hand grown implementation
Joerg Sonnenberger [Tue, 16 Nov 2004 12:16:36 +0000 (12:16 +0000)]
- use STAILQ, instead of hand grown implementation
- split VARENT/VAR into varent with a const point to var and header, width
  and dwidth as modifiable fields
- change users of most VARENT fields to use the modifiable fields
- make VAR[] var static const now
- remove dwidth field from VAR, not needed now
- while changing prototypes anyway, remove the unneeded space before the
  argument list

15 years agoWARNS= 6 cleanup.
Eirik Nygaard [Mon, 15 Nov 2004 19:57:35 +0000 (19:57 +0000)]
WARNS= 6 cleanup.

15 years agoAdd some more hacks for dfport handling, to allow make index to mostly
Joerg Sonnenberger [Mon, 15 Nov 2004 14:29:00 +0000 (14:29 +0000)]
Add some more hacks for dfport handling, to allow make index to mostly
work.

15 years agoBack out constification. This caused a SIGBUS becaus a functon wanted to write
Eirik Nygaard [Mon, 15 Nov 2004 14:04:33 +0000 (14:04 +0000)]
Back out constification. This caused a SIGBUS becaus a functon wanted to write
to the var struct.

Noticed by: YONETANI Tomokazu <qhwt+dfly@les.ath.cx>

15 years agoCleanup send-pr and ptx on next update.
Joerg Sonnenberger [Mon, 15 Nov 2004 10:19:07 +0000 (10:19 +0000)]
Cleanup send-pr and ptx on next update.

15 years agoRemove the old release infrastruture. Certain parts e.g. sysinstall or
Joerg Sonnenberger [Mon, 15 Nov 2004 10:18:15 +0000 (10:18 +0000)]
Remove the old release infrastruture. Certain parts e.g. sysinstall or
the picobsd stuff should be kept for future reference in the attic.

15 years agoSync with FreeBSD. This removes the need for perl.
Joerg Sonnenberger [Mon, 15 Nov 2004 10:01:41 +0000 (10:01 +0000)]
Sync with FreeBSD. This removes the need for perl.

15 years agoAdd preprocessor handling for newer processor, they should get the better
Joerg Sonnenberger [Mon, 15 Nov 2004 08:16:02 +0000 (08:16 +0000)]
Add preprocessor handling for newer processor, they should get the better
assembler too.

15 years agoThe code and sources here haven't been used since FreeBSD 2.x, nuke
Joerg Sonnenberger [Mon, 15 Nov 2004 08:15:15 +0000 (08:15 +0000)]
The code and sources here haven't been used since FreeBSD 2.x, nuke
them.

Inspired-by: FreeBSD
15 years agoRemove ptx, it isn't maintained and hasn't been used by base for years.
Joerg Sonnenberger [Mon, 15 Nov 2004 08:14:00 +0000 (08:14 +0000)]
Remove ptx, it isn't maintained and hasn't been used by base for years.

Inspired-by: FreeBSD
Remove send-pr, once we have an official bugtracker, we can replace it
with a matching script. But we don't want to use GNATS, so no need for
send-pr.

15 years agoSync with FreeBSD. Most importantly, this removes the need for perl.
Joerg Sonnenberger [Mon, 15 Nov 2004 08:11:59 +0000 (08:11 +0000)]
Sync with FreeBSD. Most importantly, this removes the need for perl.

15 years agoFix an inverted conditional which could lead to nameBuf being truncated in
Matthew Dillon [Sun, 14 Nov 2004 20:13:12 +0000 (20:13 +0000)]
Fix an inverted conditional which could lead to nameBuf being truncated in
the later snprintf().

Noticed-by: Max Okumoto <okumoto@home>
15 years ago- Remove sys/time.h
Liam J. Foy [Sun, 14 Nov 2004 20:07:25 +0000 (20:07 +0000)]
- Remove sys/time.h
- Use __unused in the sig handlers
- Static functions
- Other minor changes

Note: The sig handler nonfs is not save. Joerg is going to work on this
himself.

15 years agoContinuing synchronization from FreeBSD.
Matthew Dillon [Sun, 14 Nov 2004 20:05:26 +0000 (20:05 +0000)]
Continuing synchronization from FreeBSD.

Submitted-by: Max Okumoto <okumoto@ucsd.edu>
15 years agoFix a lhs-cast by casting first to unsigned char and then to the
Joerg Sonnenberger [Sun, 14 Nov 2004 19:38:34 +0000 (19:38 +0000)]
Fix a lhs-cast by casting first to unsigned char and then to the
type-correct char.

15 years agoRemove the dependency on either asprintf or va_copy. This will be included
Joerg Sonnenberger [Sun, 14 Nov 2004 18:45:55 +0000 (18:45 +0000)]
Remove the dependency on either asprintf or va_copy. This will be included
in later versions by default.

Obtained-from: Tim Kientzle <tim@kientzle.com>

15 years agoRemove CFLAGS?= 2
Joerg Sonnenberger [Sun, 14 Nov 2004 18:20:08 +0000 (18:20 +0000)]
Remove CFLAGS?= 2

15 years ago-Wall -Wstrict-prototypes already in CFLAGS.
Joerg Sonnenberger [Sun, 14 Nov 2004 18:18:30 +0000 (18:18 +0000)]
-Wall -Wstrict-prototypes already in CFLAGS.

15 years ago-W is included in CFLAGS already.
Joerg Sonnenberger [Sun, 14 Nov 2004 18:17:41 +0000 (18:17 +0000)]
-W is included in CFLAGS already.

15 years agoFix an endian bug in pflog. The DragonFly version of PF uses the normal
Joerg Sonnenberger [Sun, 14 Nov 2004 17:27:31 +0000 (17:27 +0000)]
Fix an endian bug in pflog. The DragonFly version of PF uses the normal
host byte order instead of network byte order as used by OpenBSD and
FreeBSD. Normally the ether_output code converts this back, but for
pflog, we shortcut these code. Therefore, before calling bpf_mtap, switch
the byte order back to network order and revert it afterwards.

Problem-reported-by: Erik P. Skaalerud
15 years agoRemove xpt_release_simq_timeout(), this function has not been in use since the
Eirik Nygaard [Sun, 14 Nov 2004 16:48:36 +0000 (16:48 +0000)]
Remove xpt_release_simq_timeout(), this function has not been in use since the
timeout/untimeout ==> callout_* transformation.

15 years agoIf the first slot is empty, don't continue scanning. This fixes hangs
Joerg Sonnenberger [Sun, 14 Nov 2004 15:20:05 +0000 (15:20 +0000)]
If the first slot is empty, don't continue scanning. This fixes hangs
on some machines.

Obtained-from: FreeBSD

15 years agoMerge from vendor branch GDB:
Joerg Sonnenberger [Sun, 14 Nov 2004 15:16:59 +0000 (15:16 +0000)]
Merge from vendor branch GDB:
Add solib-legacy.c, it is needed for proper attach support.

I don't really understand why gdb doesn't include this file for itself.

15 years agoAdd solib-legacy.c, it is needed for proper attach support.
Joerg Sonnenberger [Sun, 14 Nov 2004 15:16:59 +0000 (15:16 +0000)]
Add solib-legacy.c, it is needed for proper attach support.

I don't really understand why gdb doesn't include this file for itself.

15 years agoAdd solib-legacy.c, it is needed for proper attach support.
Joerg Sonnenberger [Sun, 14 Nov 2004 15:16:59 +0000 (15:16 +0000)]
Add solib-legacy.c, it is needed for proper attach support.

I don't really understand why gdb doesn't include this file for itself.

15 years agoConstify VAR.
Eirik Nygaard [Sun, 14 Nov 2004 13:58:42 +0000 (13:58 +0000)]
Constify VAR.

Submitted by: joerg

WARNS=6 cleanup.