dragonfly.git
13 years agokernel - Reenable acpi sleep states
Matthew Dillon [Tue, 2 Nov 2010 20:36:46 +0000 (13:36 -0700)]
kernel - Reenable acpi sleep states

* Reenable acpi sleep state handling by default, by setting
  machdep.cpu_idle_hlt to 2 by default.

13 years agokernel - Attempt to fix lost rpc issue with NFS timeout/retry
Matthew Dillon [Tue, 2 Nov 2010 19:55:17 +0000 (12:55 -0700)]
kernel - Attempt to fix lost rpc issue with NFS timeout/retry

* An edge case in the timeout/retry code failed to pick up on
  async RPCs which are replied to while the timeout code has the
  rpc locked for retry.

Reported-by: Thomas Nikolajsen <thomas.nikolajsen@mail.dk>
13 years agonetwork - Fix missing tailq initializer for if_creategroup() API
Matthew Dillon [Tue, 2 Nov 2010 17:12:14 +0000 (10:12 -0700)]
network - Fix missing tailq initializer for if_creategroup() API

* The ifg_head list was missing its initializer, causing calls to
  if_creategroup() (e.g. by pf/pfsync) to panic the box.

13 years agonetwork - Fix netstat output missing entries
Matthew Dillon [Tue, 2 Nov 2010 05:08:35 +0000 (22:08 -0700)]
network - Fix netstat output missing entries

* netstat was missing entries due to the kernel pcb listing sysctl
  code doing a bogus generation count test which did not take into
  account pcb's which move between cpus due to e.g. a bind() operation.

Reported-by: Thomas Nikolajsen <thomas.nikolajsen@mail.dk>
13 years agoMerge branch 'DragonFly_RELEASE_2_8' of ssh://crater.dragonflybsd.org/repository...
Matthew Dillon [Tue, 2 Nov 2010 05:11:59 +0000 (22:11 -0700)]
Merge branch 'DragonFly_RELEASE_2_8' of ssh://crater.dragonflybsd.org/repository/git/dragonfly into DragonFly_RELEASE_2_8

13 years agodevfs - fix some issues with rules
Alex Hornung [Mon, 1 Nov 2010 20:38:14 +0000 (20:38 +0000)]
devfs - fix some issues with rules

* devfs_rule_alloc was still assuming that the rule_type and rule_cmd are not
  bit fields, but they now are.

* return error in a number of places when a null pointer or nil-length string
  is passed in.

Dragonfly-bug: http://bugs.dragonflybsd.org/issue1885
Reported-by: 'fanch'
13 years agoSync zoneinfo database with tzdata2010o from elsie.nci.nih.gov
Sascha Wildner [Mon, 1 Nov 2010 16:32:13 +0000 (17:32 +0100)]
Sync zoneinfo database with tzdata2010o from elsie.nci.nih.gov

australasia:    8.19 -> 8.20

* Fiji ends DST in 2011 on March 6 and not on March 27.

13 years agokernel - Fix access chceck in tmpfs that prevented chroot's into it
Matthew Dillon [Mon, 1 Nov 2010 16:29:31 +0000 (09:29 -0700)]
kernel - Fix access chceck in tmpfs that prevented chroot's into it

* Fix broken code which caused access() calls into tmpfs to assume
  write permission was being requested when it was not.

Submitted-by: Rumko <rumcic@gmail.com>
13 years agokernel - Do not back out critical section for exchange_scr() call
Matthew Dillon [Mon, 1 Nov 2010 02:38:46 +0000 (19:38 -0700)]
kernel - Do not back out critical section for exchange_scr() call

* The critical section may be protecting a spinlock and cannot be safely
  backed out when calling exchange_scr().

* Fixes a panic.

Reported-by: rob
13 years agokernel - Fix serious issue w/ smp_invltlb(), plus other issues (3)
Matthew Dillon [Sun, 31 Oct 2010 15:52:00 +0000 (08:52 -0700)]
kernel - Fix serious issue w/ smp_invltlb(), plus other issues (3)

* splz() and doreti on both i386 and x86_64 were leaving interrupts
  disabled through calls to e.g. sched_ithd() and IPI function callbacks.

  As before this can lead to a deadlock if these functions call
  smp_invltlb() or some other cpu calls smp_invltlb() while these
  functions are spinning on a full IPIQ.

* sti in appropriate places to fix the problem.

13 years agoloader(8): adjustment & man update
Thomas Nikolajsen [Sat, 30 Oct 2010 07:09:52 +0000 (09:09 +0200)]
loader(8): adjustment & man update

 * add/enhance info on if*/else*/endif
 * add info on default_kernel variable
 * include more variables in kenv_vars, including autoboot_delay,
   to make setting them in loader.conf work
 * remove a few unused variables

13 years agokernel - Fix longstanding VM long-duration stall issues (2)
Matthew Dillon [Sat, 30 Oct 2010 05:46:29 +0000 (22:46 -0700)]
kernel - Fix longstanding VM long-duration stall issues (2)

* Refactor the pageout daemon's hysteresis, in particular the
  free page queue had no real hysteressis and could cause excessive
  pagedaemon wakeups.

  Use a calculation that maintains a free page queue about half the
  size of the minimum cache queue, giving us pretty good pipelining
  when a system is under constant memory pressure.

* Add a sysctl for monitoring ppwakeups (wakeups of processes waiting
  for memory).

13 years agokernel - Fix longstanding VM long-duration stall issues
Matthew Dillon [Sat, 30 Oct 2010 03:58:00 +0000 (20:58 -0700)]
kernel - Fix longstanding VM long-duration stall issues

* The pageout daemon was using the wrong wakeup metrics and essentially
  would not start cleaning out pages until after processes began to
  enter vmwait/vmrate or otherwise begin to stall due to low free memory.

* Fix the metric and also double-check every 5 seconds when the pagedaemon
  statistics wakeup occurs.

* vm.v_free_min + vm.v_cache_min may now be used to tune when the
  pagedaemon is woken up.

13 years agodummy commit so a 2.8 commitid is at the top for tagging. v2.8.2
Matthew Dillon [Fri, 29 Oct 2010 06:27:32 +0000 (23:27 -0700)]
dummy commit so a 2.8 commitid is at the top for tagging.

13 years agonata - properly teardown interrupts on ENXIO
Matthew Dillon [Fri, 29 Oct 2010 06:23:48 +0000 (23:23 -0700)]
nata - properly teardown interrupts on ENXIO

* When a ata controller cannot be attached (e.g. due to AHCI having
  already taken its resources) be sure to teardown and release any
  resources that had been obtained.

* This fixes a panic on certain motherboards (e.g. gigabyte / phenomX6)
  where the ata controller ENXIO'd but left interrupt handlers setup.
  An interrupt would then occur, access stale memory, and blow the machine
  up.

13 years agoboot - Multiple changes to try to make cdboot work with more bioses
Matthew Dillon [Fri, 29 Oct 2010 04:33:15 +0000 (21:33 -0700)]
boot - Multiple changes to try to make cdboot work with more bioses

* Go back to single sector read.  This seems to help gigabyte bioses
  (phenom x 6).  Multi-sector reads tend to cause reads to fail with
  a timeout for reasons unknown.

* Enable interrupts on start.

* (non operator) replace jcxz.  It's a bit unclear whether this is an
  issue or not but some assemblers do not generate the correct prefix
  for jcxz.

* Report read timeouts and delay 1 second before retrying.  At the
  very least this allows timeouts to be reported distinctly.

13 years agonullfs - Add 'noexec' flag support.
Antonio Huete Jimenez [Mon, 25 Oct 2010 15:04:37 +0000 (17:04 +0200)]
nullfs - Add 'noexec' flag support.

* Make possible to mount a null-mount with 'noexec' option.

* If the underlying filesystem is mounted as 'noexec' and no options
were given at mount-time, the null mount will automatically
have 'noexec'.

Pointed-out-by: @dillon
13 years agonrelease gui - add xterm resources
Matthew Dillon [Thu, 28 Oct 2010 21:31:29 +0000 (14:31 -0700)]
nrelease gui - add xterm resources

* Add some resources for xterms

13 years agokernel - Fix serious issue w/ smp_invltlb(), plus other issues (2)
Matthew Dillon [Thu, 28 Oct 2010 19:36:32 +0000 (12:36 -0700)]
kernel - Fix serious issue w/ smp_invltlb(), plus other issues (2)

It looks like there are a number of additional cases where kernel threads
can wind up running with interrupts physically disabled, which can create
serious problems for smp_invltlb().

It is not entirely clear how these deadlocks occur since the IPI code does
a forced "STI" if it would otherwise loop, but there are several other
hard loops that do not:  lwkt_switch looping on a vm_token, spin locks,
and probably a few other places.

We want interrupts to be enabled in all cases where these sorts of loops
occur in order to be able to service Xinvltlb via smp_invltlb() as well
as to prevent the LAPIC interrupt queue from filling up and livelocking
something that it shouldn't.

* lwkt_preempt() must save, zero, and restore gd->gd_intr_nesting_level
  when issuing a preemption.  Otherwise it will improperly panic on
  an assertion if the preempting interrupt thread code tries to switch out.
  It is perfectly acceptable for the preempting thread to block (it just
  switches back to the thread that got preempted).

  Why the assertion was not occuring before I do not know but it is
  probably related to threads getting stuck in 'cli' mode.  The additional
  changes below appear to significantly increase the number of interrupt
  thread preemptions which succeed (lwkt.preempt_{hit,miss} counters).

* STI prior to running ithread_fast_handler() from all IDTVECs related
  to device interrupts.

* STI in Xcpustop, Xipiq, and Xtimer.  These functions can call more
  complex C code and doing so with interrupts disabled may prevent
  Xinvltlb (via smp_invltlb()) from being executed, deadlocking the
  system.

* Reorder a mfence().  Probably not needed but do it anyway.

13 years agokernel - Fix serious issue w/ smp_invltlb(), plus other issues.
Matthew Dillon [Thu, 28 Oct 2010 06:55:58 +0000 (23:55 -0700)]
kernel - Fix serious issue w/ smp_invltlb(), plus other issues.

* smp_invltlb() was running asynchronously when it really needs to run
  synchronously.  Generally speaking the asynchronous ipi did in fact work
  pretty well but it still presents a 1uS window of opportunity which
  bypasses normal write ordering safeties.

  Run smp_invltlb() synchronously.

* Fixing the above lea to the discovery of an ACPI issue.  The ACPI
  cpu idle halt code, at least on the gigabyte phenom x 6 I've been
  testing with, can cause IPIs to be lost.  Not just delayed, straight
  out lost.  Gone.  Poof.  It doesn't matter whether the IPI is a
  broadcast IPI or a directed IPI, it can still get lost.

  This was particularly noticeable when I fixed smp_invltlb() and my
  test box started locking up due to a random cpu sometimes not receiving
  the Xinvltlb IPI, and it is quite possible that this issue was also
  responsible for the random seg-faults we would sometimes get on 64-bit
  boxes.

  For now the acpi halt code has been disabled.  It can be enabled with
  sysctl machdep.cpu_idle_hlt=2 if you want to risk it.

* Use doreti_syscall_ret and doreti_iret in several cases that were
  previously popping the interrupt frame and iret'ing manually.  This
  is operationally equivalent.

* Add a missing "sti" in the idle loop.  Usually the cpu_idle_hook()
  deals with this but there are some alternative paths which might not,
  potentially causing interrupts to be delayed unnecessarily.
  At worst the idle thread has an extra sti in it.

* Add v_smpinvltlb to struct vmmeter, plus some reserved slots for
  future expansion.

* Adjust vmstat -s to report smpinvltlb's.

13 years agoMerge branch 'DragonFly_RELEASE_2_8' of ssh://crater.dragonflybsd.org/repository...
Matthew Dillon [Thu, 28 Oct 2010 21:16:58 +0000 (14:16 -0700)]
Merge branch 'DragonFly_RELEASE_2_8' of ssh://crater.dragonflybsd.org/repository/git/dragonfly into DragonFly_RELEASE_2_8

13 years agonrelease: Add two options (dri and inet6) to the default mk.conf we supply.
Sascha Wildner [Thu, 28 Oct 2010 20:19:12 +0000 (22:19 +0200)]
nrelease: Add two options (dri and inet6) to the default mk.conf we supply.

We use them for building the packages that go to the LiveCD.

However, we don't add PKG_OPTIONS.scmgit=-scmgit-gui (used for the LiveCD's
scmgit to save space). So people who want to continue using git without X11
support will need to tweak mk.conf like before.

13 years agonrelease/installer: Rename the UP/SMP kernel directories on the LiveCD.
Sascha Wildner [Thu, 28 Oct 2010 19:43:27 +0000 (21:43 +0200)]
nrelease/installer: Rename the UP/SMP kernel directories on the LiveCD.

Changed from UP -> kernel.UP and from SMP -> kernel.SMP.

Requested-by: dillon
13 years agoinstaller: Install the kernel used to install the system to /boot/kernel.
Sascha Wildner [Wed, 27 Oct 2010 07:08:48 +0000 (09:08 +0200)]
installer: Install the kernel used to install the system to /boot/kernel.

We assume that the kernel the user booted the LiveCD/image with for
installing his system will be the kernel he wants to boot the system
from, too.

13 years agonrelease: Fix an annoying bug that was preventing the ISOs from booting UP.
Sascha Wildner [Wed, 27 Oct 2010 07:07:13 +0000 (09:07 +0200)]
nrelease: Fix an annoying bug that was preventing the ISOs from booting UP.

It seems our CD9660 support in libstand at least has some problems with
directory names containing dots. This prevented the LiveCD to properly
boot the UP kernel. Don't ask me about how it ended up using the SMP
kernel in this case, but that's what it did, making the UP boot
impossible. My guess is it has something to do with the order in which
stuff had been added to the ISO. But that's pure speculation. I'm not
even sure about the dot part. It might as well be directory name length.
In any case, UP boot from the LiveCD was broken.

To fix all this, install the UP kernel to /boot/UP and the SMP kernel to
/boot/SMP on the LiveCD and images. They will be picked up by the
installer from there by a separate commit.

While here, remove some non-functional code from dloader.menu. We can't
easily build i386/x86_64 dual boot ISOs at the moment (for this we would
need cross-building pkgsrc).

Thanks to sjg for bringing me on the right track.

13 years agoinstaller: Add __printflike()s and fix resulting format warnings.
Sascha Wildner [Wed, 27 Oct 2010 04:56:42 +0000 (06:56 +0200)]
installer: Add __printflike()s and fix resulting format warnings.

13 years agonrelease: Add a missing semicolon.
Sascha Wildner [Wed, 27 Oct 2010 01:45:43 +0000 (03:45 +0200)]
nrelease: Add a missing semicolon.

13 years agonrelease: Remove unused variable.
Sascha Wildner [Tue, 26 Oct 2010 18:29:18 +0000 (20:29 +0200)]
nrelease: Remove unused variable.

13 years agodloader: Fix error messages.
Sascha Wildner [Tue, 26 Oct 2010 17:20:39 +0000 (19:20 +0200)]
dloader: Fix error messages.

13 years agozic(8): Sync with tzcode2010n from elsie.nci.nih.gov
Sascha Wildner [Tue, 26 Oct 2010 13:24:31 +0000 (15:24 +0200)]
zic(8): Sync with tzcode2010n from elsie.nci.nih.gov

* Conditionally output extra types with most-recently-used offsets last
  (for use by systems with pre-2011 versions of localtime.c, helping to
  ensure that globals "altzone" and "timezone" get set correctly).

* Fix generation of POSIX strings for zones with rules using
  "weekday<=n" forms of dates (thanks to Lei Liu for finding the
  problem). Also, limit output for non-POSIX-specificable zones defined
  to follow the same rules every year. (Note that no zones of either of
  the above types appear in the distribution; these changes cater to
  add-on zones).

13 years agolibc/stdtime: Sync localtime.c with tzcode2010n from elsie.nci.nih.gov
Sascha Wildner [Tue, 26 Oct 2010 13:20:01 +0000 (15:20 +0200)]
libc/stdtime: Sync localtime.c with tzcode2010n from elsie.nci.nih.gov

* Change to set timezone and altzone based on time types with greatest
  transition times (for the benefit of Asia/Seoul).

* Initialize ttinfo structures filled by tzparse (thanks to Ravindra
  for reporting a valgrind warning).

13 years agoSync zoneinfo database with tzdata2010n from elsie.nci.nih.gov
Sascha Wildner [Tue, 26 Oct 2010 13:14:11 +0000 (15:14 +0200)]
Sync zoneinfo database with tzdata2010n from elsie.nci.nih.gov

Theory:         8.4  -> 8.5
asia:           8.61 -> 8.62
australasia:    8.18 -> 8.19
factory:        8.2  -> n/a
zone.tab:       8.37 -> 8.38

* Remove the 'factory' file and references to it. It is no longer needed.

* asia: No DST in Hong Kong in 1977 (thanks to Jesper Norgaard for
    finding the problem).

* australasia: Change end of DST in Samoa in 2011 from 2011-04-03 0:00 to
    2011-04-03 1:00 (thanks to Raymond Hughes for a reference).

* zone.tab: Remove obsolete association of Vostok Station with South
    Magnetic Pole; add association with Lake Vostok (thanks to
    Petr Machata for finding the problem).

13 years agonrelease - gui - Change window manager, cpdup additional directories
Matthew Dillon [Mon, 25 Oct 2010 23:33:01 +0000 (16:33 -0700)]
nrelease - gui - Change window manager, cpdup additional directories

* Change to fvwm2

* Autostart two xterms and clocks

* Add simple button bar with two buttons 'xterm' and 'firefox'.

* Installer now also installs /usr/src and /usr/pkgsrc from the stick.

13 years agonrelease - Provide default /etc/X11, better rc.conf
Matthew Dillon [Mon, 25 Oct 2010 22:12:06 +0000 (15:12 -0700)]
nrelease - Provide default /etc/X11, better rc.conf

* Don't make users agonize over /etc/X11, provide one even if we aren't
  the gui.  Also provide it in /etc.hdd so it gets installed onto the
  HD.

* This also fixes the problem where the gui install was failing to install
  /etc/X11 onto the HD.

* The normal and gui installs were not installing reasonable rc.conf
  defaults.  Do so.

13 years agonrelease - gui build adjustments
Matthew Dillon [Mon, 25 Oct 2010 20:46:13 +0000 (13:46 -0700)]
nrelease - gui build adjustments

* Remove packages that failed to build.  Unfortunately rxvt was one of them.
  Note that I did some manual build hacks to other packages to build
  which aren't committed to pkgsrc.

* Fix size calculation for usb disk img.

* Adjust fluxbox menu firefox3->firefox and urxvt->xterm.

13 years agobuild - define struct in6_addr in arpa/inet.h
Matthew Dillon [Mon, 25 Oct 2010 18:35:44 +0000 (11:35 -0700)]
build - define struct in6_addr in arpa/inet.h

* Use the same mechanic used for struct in_addr to define in6_addr in
  arpa/inet.h, conditionalizing the define in in6.h.

* This helps w/pkgsrc builds.

13 years agodummy commit so a 2.8 commitid is at the top for tagging. v2.8.1
Matthew Dillon [Mon, 25 Oct 2010 02:37:25 +0000 (19:37 -0700)]
dummy commit so a 2.8 commitid is at the top for tagging.

13 years agonrelease - installer - Use different emergency interrupt mechanic
Matthew Dillon [Mon, 25 Oct 2010 02:35:16 +0000 (19:35 -0700)]
nrelease - installer - Use different emergency interrupt mechanic

* Use a tuneable instead of a sysctl.

13 years agoehci - add missing dependency on usb driver
YONETANI Tomokazu [Mon, 25 Oct 2010 01:51:35 +0000 (10:51 +0900)]
ehci - add missing dependency on usb driver

13 years agodocs - update tuning(7)
Matthew Dillon [Mon, 25 Oct 2010 01:23:45 +0000 (18:23 -0700)]
docs - update tuning(7)

* Get rid of a ton of old cruft that no longer applies and replace with
  more applicable information.

13 years agoFix typo in argv handling.
Antonio Huete Jimenez [Sun, 24 Oct 2010 22:59:45 +0000 (00:59 +0200)]
Fix typo in argv handling.

13 years agokernel - Temporarily back-out smp_invltlb() changes
Matthew Dillon [Sun, 24 Oct 2010 22:29:00 +0000 (15:29 -0700)]
kernel - Temporarily back-out smp_invltlb() changes

* These changes are deadlocking i386 kernels, and it is too close to
  the release so back them out for the release.  The issue will be
  fixed another way post-release.

13 years agokernel - Fix bug in the emergency interrupt polling thread
Matthew Dillon [Sun, 24 Oct 2010 22:27:14 +0000 (15:27 -0700)]
kernel - Fix bug in the emergency interrupt polling thread

* This thread is only active when kern.emergency_intr_enable is non-zero

* Get the next intr handler before processing the current one, since the
  act of processing the current handler may remove it.

* In the emergency interrupt polling thread do not stall if we cannot get
  the serializer for the interrupt.  just skip the handler and we'll try
  again next time.

13 years agosysctl.conf - Enable emergency interrupt polling at a low rate by default
Matthew Dillon [Sun, 24 Oct 2010 18:29:22 +0000 (11:29 -0700)]
sysctl.conf - Enable emergency interrupt polling at a low rate by default

* Set kern.emergency_intr_enable=1 in the ISO/IMG sysctl.conf for
  newly installed kernels.  The idea is so people can get things working
  more quickly and worry about performance afterwords.

* This commit actually got into the previous commit accidently so I am
  posting a following commit so we get a proper comment associated with it.

13 years agohammer utility - Add force support to cleanup
Matthew Dillon [Sun, 24 Oct 2010 18:01:41 +0000 (11:01 -0700)]
hammer utility - Add force support to cleanup

* Allow hammer -f cleanup to override the normal timestamp checking and
  force the cleanup to run.

13 years agonrelease - Add *_GENERIC_SMP for this release
Matthew Dillon [Sun, 24 Oct 2010 16:27:35 +0000 (09:27 -0700)]
nrelease - Add *_GENERIC_SMP for this release

* We will be stuffing both UP and SMP kernels on our release img/iso
  for 2.8.

13 years agonrelease - Release build adjustments
Matthew Dillon [Sun, 24 Oct 2010 07:00:59 +0000 (00:00 -0700)]
nrelease - Release build adjustments

* Add GITHOST override to Makefile.usr

* For now checkout 2010Q3 by default in master, this will be changed
  to 'master' in a month or two but for now we want to match the release.

* Add GITHOST feature to the nrelease Makefile, defaulting to
  git.dragonflybsd.org.  This allows developers who do release builds
  to specify a more local clone/mirror/copy of the pkgsrcv2.git and
  dragonfly.git repos.

  nrelease pulls from these repos so this can save a bunch of time.

* nrelease now installs each kernel into its own kernel.XXX directory
  in /boot, with a complete set of modules for each kernel.  This is
  instead of installing all kernels into /boot/kernel/ and naming them
  differently inside /boot/kernel/.

  This is to conform to the recent dloader work and very recent new
  menu features.

* All kernels+modules are installed with INSTALLSTRIPPEDMODULES so the
  ISO comes in at a reasonable size.

* The release ISO now contains both a UP and a SMP kernel, selectable
  at boot time.

* Do not try to include pkgsrc in the release ISO/IMG (at 1G+ it is too
  big).  We continue to include system sources.  There isn't enough room
  for full sources in the ISO/IMG.  Note that GUI builds will include
  a full pkgsrc and full sources, including a .git base for them.

* nrelease now supports a IMGSIZE override on the make line (in sectors),
  for the usb image.

* nrelease now autosizes the IMG file (when not overriden by IMGSIZE) to
  the nearest base-10 gigabyte to ensure that it fits on the USB stick
  and provide a bit of extra space for messing around.

13 years agomtree - no longer create /boot/modules
Matthew Dillon [Sun, 24 Oct 2010 03:27:30 +0000 (20:27 -0700)]
mtree - no longer create /boot/modules

* /boot/modules is no longer used, do not create it in mtree.

13 years agoboot - Massage dloader.menu a bit more
Matthew Dillon [Sun, 24 Oct 2010 02:32:03 +0000 (19:32 -0700)]
boot - Massage dloader.menu a bit more

* Don't present the 64-bit / 64-bit-smp boot options if the current default
  is already 64-bit.  The generic SMP boot option will still be presented
  if the current default is the 64-bit UP kernel.

13 years agoboot - Add a ton of features to the boot loader & adjust default menu
Matthew Dillon [Sun, 24 Oct 2010 02:03:51 +0000 (19:03 -0700)]
boot - Add a ton of features to the boot loader & adjust default menu

* Add conditionals ifset ifexists else elseifexists and endif

* Conditionalize dloader.menu to only present menu options for which
  the related kernels are present in /boot.

* Set the default kernel to one of:

  kernel, kernel.GENERIC, kernel.GENERIC_SMP, kernel.X86_64_GENERIC,
  or kernel.X86_64_GENERIC_SMP.  The first one in the list found becomes
  the default.

* If ${default_kernel}_SMP is available supply a menu option to change
  the default to that kernel, aka UP->SMP

* If kernel.X86_64_GENERIC[_SMP] is available and the current default is
  not the same supply menu options to change the default to the 64-bit
  UP or SMP kernel.

  Note however that for this to work the related boot kernel directory
  had better have a loader.conf.local in it that points the root mount
  to a 64-bit root 'cause 64-bit kernels can't run 32 bit binaries yet.

* Adjust the menu item execution code to copy the items before executing
  them, allowing recursive menu execution.  The recursive menu feature
  is a bit of a hack right now however.

* NOTE: the optcd for people ESCaping into the boot prompt was moved
  to dloader.rc, when updating you may have to manually reinstall that
  file to get the functionality.

13 years agonetwork - Fix issue with recent unix domain socket gc fixes
Matthew Dillon [Sat, 23 Oct 2010 17:51:06 +0000 (10:51 -0700)]
network - Fix issue with recent unix domain socket gc fixes

* The gc's tracking of the deferral count could get out of sync and wind
  up looping forever due to the (now necessary) tsleep between loops.

* Fix by recalculating the count on each loop.

13 years agokernel - Fix pmap deactivate/reactivation race.
Matthew Dillon [Sat, 23 Oct 2010 16:43:18 +0000 (09:43 -0700)]
kernel - Fix pmap deactivate/reactivation race.

* The LWKT thread switch code clears the cpu mask bit in
  proc->p_vmspace->vm_pmap.pm_active, and the switch-in code sets the
  mask bit.

  This code has a bug because the switch code ALSO optimizes the loading
  of %cr3 to avoid reloading it if it hasn't changed, for example when
  switching between two user threads associated with the process,
  because the other cpu(s) running similar threads may lose track of
  the fact that our cpu also needs an IPI for page invalidations in the
  pmap for a short period of time.

  Because we don't reload %cr3 in this case, our tlb can become invalid.
  This can also occur with vfork() sequences.

* Fix by testing that we are switching to the same vmspace and do not
  clear the pm_active bit in that case.  Retain the %cr3 optimization.

13 years agokernel - synchronize smp_invltlb()
Matthew Dillon [Sat, 23 Oct 2010 16:41:44 +0000 (09:41 -0700)]
kernel - synchronize smp_invltlb()

* With much of the kernel running MPSAFE, smp_invltlb() cannot run
  asynchronously.

13 years agokernel - x86_64 - Add additional checks to lwp_wait() & friends
Matthew Dillon [Sat, 23 Oct 2010 16:35:14 +0000 (09:35 -0700)]
kernel - x86_64 - Add additional checks to lwp_wait() & friends

* lwp_wait() must defer reaping of a lwp that is still running on another
  cpu (i.e. in the midst of exiting).

* It shouldn't be possible for this to happen but just incase the thread
  gets switched out after TDF_EXITING has been set, also make sure
  the threat is no longer on the LWKT run queue.

* Remove old debugging in the LWKT scheduler path.

* Protect gd_freetd (per-cpu td cache) with a critical section.  Again
  this case should not occur as new threads are not allocated from
  interrupts, but protect it anyway.  Also assert that the cached free
  td is in no way still scheduled.

  Note that this cache is required to ensure that the td does not
  end up in the MP-accessible objcache before it has been fully
  descheduled.

13 years agokernel - x86_64 - Remove intrframe->if_gs
Matthew Dillon [Sat, 23 Oct 2010 16:33:49 +0000 (09:33 -0700)]
kernel - x86_64 - Remove intrframe->if_gs

* The if_gs field doesn't exist in the actual trap frame.

13 years agofix typo in previous commit
Alex Hornung [Sat, 23 Oct 2010 11:16:22 +0000 (12:16 +0100)]
fix typo in previous commit

13 years agoAdd comment regarding T_DNA passthrough with db
Alex Hornung [Sat, 23 Oct 2010 10:59:18 +0000 (11:59 +0100)]
Add comment regarding T_DNA passthrough with db

Requested-by: Aggelos Economopoulos (aggelos@)
13 years agolibdevmapper, liblvm - stop inter-lib linking
Alex Hornung [Sat, 23 Oct 2010 08:18:10 +0000 (09:18 +0100)]
libdevmapper, liblvm - stop inter-lib linking

* Don't link libraries to other libraries, this only causes trouble like
  having to do: -lprop -ldevmapper -lprop.

* Remove the double-linking to prop and crypto in cryptdisks.

Suggested-by: Sascha Wildner (swildner@)
13 years agocryptdisks rc.d - remove rcvar
Alex Hornung [Sat, 23 Oct 2010 07:34:01 +0000 (08:34 +0100)]
cryptdisks rc.d - remove rcvar

* Remove the rc variable to enable cryptdisks so that it always runs.
  It'll just check for the crypttab file, and if it isn't present, it
  doesn't do anything.

13 years agocrypttab.5 - Add LUKS-only note, remote empty line
Alex Hornung [Sat, 23 Oct 2010 07:27:56 +0000 (08:27 +0100)]
crypttab.5 - Add LUKS-only note, remote empty line

13 years agoFix UP kernel build.
Sascha Wildner [Sat, 23 Oct 2010 07:16:26 +0000 (09:16 +0200)]
Fix UP kernel build.

13 years agolibkvm - Add ability to access userspace from kgdb on cores
Matthew Dillon [Sat, 23 Oct 2010 02:32:01 +0000 (19:32 -0700)]
libkvm - Add ability to access userspace from kgdb on cores

* Use %cr3 from the dumppcb instead of KPML4phys on x86_64, and similarly
  for i386, to access the full page table as of when the panic occured
  instead of just the kernel page table.

* minidumps do not dump userspace so userspace will still not be available,
  but this gives us the option of sysctl'ing off minidumps when userspace
  access is desired, and kgdb will then be able to access the current
  userspace context as of the panic, as well.

13 years agodevice mapper - implement dumping
Alex Hornung [Thu, 21 Oct 2010 06:47:46 +0000 (07:47 +0100)]
device mapper - implement dumping

* Implement dmdump and dump routines for the three main targets (linear,
  stripe and crypt).

* The top-level dmpdump will call all the required dump() methods in the
  targets just as it does with strategy() calls. The lower level
  target-specific dump routines will then redirect (after processing,
  etc) these requests to the underlying device's dump routines.

* This should provide quite reliable dumping even through device mapper,
  although it is more error-prone than the equivalent dumping on normal
  disks as there's a lot more going on behind the scenes.

13 years agodm dumping - peripheral changes
Alex Hornung [Fri, 22 Oct 2010 20:12:07 +0000 (21:12 +0100)]
dm dumping - peripheral changes

* Add a variable to allow tsleep to work even during a panic
  (tsleep_crypto_dump). This is currently only used by the crypto dump
  code.

* Allow T_DNA faults to happen during a panic.

* In userret() check for 'dump_stop_usertds' and if it is set, force
  user process into tstop().

* Add a dump_reactivate_cpus() function that will force all user threads
  into tstop() and restarts all cpus. This is currently only used by the
  crypto dump code.

13 years agodev_ddump - fix double get_mplock
Alex Hornung [Thu, 21 Oct 2010 08:15:58 +0000 (09:15 +0100)]
dev_ddump - fix double get_mplock

13 years agodevice-mapper - fix dmsize
Alex Hornung [Wed, 20 Oct 2010 18:39:44 +0000 (19:39 +0100)]
device-mapper - fix dmsize

* dmsize was returning the size instead of setting ap->a_result and
  returning 0.

13 years agocryptdisks - A small tool to parse /etc/crypttab
Alex Hornung [Fri, 22 Oct 2010 21:03:30 +0000 (22:03 +0100)]
cryptdisks - A small tool to parse /etc/crypttab

13 years agokernel - (mainly x86_64) - Fix a number of rare races
Matthew Dillon [Thu, 21 Oct 2010 23:07:05 +0000 (16:07 -0700)]
kernel - (mainly x86_64) - Fix a number of rare races

* Move the MP lock from outside to inside exit1(), also fixing an issue
  where sigexit() was calling exit1() without it.

* Move calls to dsched_exit_thread() and biosched_done() out of the
  platform code and into the mainline code.  This also fixes an
  issue where the code was improperly blocking way too late in the
  thread termination code, after the point where it had been descheduled
  permanently and tsleep decomissioned for the thread.

* Cleanup and document related code areas.

* Fix a missing proc_token release in the SIGKILL exit path.

* Fix FAKE_MCOUNT()s in the x86-64 code.  These are NOPs anyway
  (since kernel profiling doesn't work), but fix them anyway.

* Use APIC_PUSH_FRAME() in the Xcpustop assembly code for x86-64
  in order to properly acquire a working %gs.  This may improve the
  handling of panic()s on x86_64.

* Also fix some cases if #if JG'd (ifdef'd out) code in case the
  code is ever used later on.

* Protect set_user_TLS() with a critical section to be safe.

* Add debug code to help track down further x86-64 seg-fault issues,
  and provide better kprintf()s for the debug path in question.

13 years agodhclient - Do not remove default route unless setting a default route
Matthew Dillon [Wed, 20 Oct 2010 19:09:51 +0000 (12:09 -0700)]
dhclient - Do not remove default route unless setting a default route

* Do not just unconditionally remove the default route.  The dhclient's
  interface might not have anything to do with the default route.

13 years agonetwork - Fix socket & mbuf leak
Matthew Dillon [Wed, 20 Oct 2010 17:41:38 +0000 (10:41 -0700)]
network - Fix socket & mbuf leak

* When I retooled soabort*() and removed the wrapper I accidently lost the
  sofree() mechanic in the wrapper.

* Replace the mechanic with a messaged version.

Reported-by: Peter Avalos <peter@theshell.com>
13 years agodebug - Add mbufinfo
Matthew Dillon [Wed, 20 Oct 2010 17:34:24 +0000 (10:34 -0700)]
debug - Add mbufinfo

* This is a little utility which uses libkvm to scan all referenced mbufs
  in the kernel, for kernels compiled with MBUF_DEBUG.

13 years agodevfs - Fix broken assertion
Matthew Dillon [Wed, 20 Oct 2010 16:45:19 +0000 (09:45 -0700)]
devfs - Fix broken assertion

* When checking fp->f_flag against ap->a_mode both sides must be
  masked with FMASK.

* Fixes a panic which can occur when a unix domain socket is being
  garbage collected (FMARK set).

13 years agokernel - Fix another hard critical section issue with syscons, revamp locking
Matthew Dillon [Wed, 20 Oct 2010 06:25:02 +0000 (23:25 -0700)]
kernel - Fix another hard critical section issue with syscons, revamp locking

* Use the new mtx_spinlock() facility instead of spinlock().  The new
  facility supports reetrant locks.

* Call all sc_*() functions with the syscons lock held.

* Fix an issue in blink_screen() where a hard critical section panic
  could potentially occur.

* Fix an issue in sc_puts() where adjusting the keyboard LED could still
  cause a hard critical section panic.  We just let the keyboard LED state
  be wrong for now.

13 years agokernel - revamp mtx_spinlock()
Matthew Dillon [Wed, 20 Oct 2010 06:19:29 +0000 (23:19 -0700)]
kernel - revamp mtx_spinlock()

* Revamp mtx_spinlock(), add mtx_spinlock_try(), and add mtx_spinunlock().

* Enter a proper hard critical section when using mtx_spinlock*(),
  just like the normal spinlock() code does.

  The difference is that mtx spinlocks have a ref count and thus are
  reentrant.

* mtx_spinlock*() is not used in the code yet.  A followup commit will
  begin using it for the syscons lock.

13 years agocryptosoft - Zero out ctx after SHA1 or MD5 op
Alex Hornung [Tue, 19 Oct 2010 18:05:17 +0000 (19:05 +0100)]
cryptosoft - Zero out ctx after SHA1 or MD5 op

Obtained-from: OpenBSD

13 years agokernel - Force NFSv3 for diskless nfs mount
Matthew Dillon [Tue, 19 Oct 2010 19:31:29 +0000 (12:31 -0700)]
kernel - Force NFSv3 for diskless nfs mount

* Ignore any file handles passed from bootp.  These are NFSv2 handles
  and NFSv2 just doesn't have the directory support needed if the
  server is running a filesystem with 64-bit directory cookies (as HAMMER
  does).

  This will force the kernel's diskless nfs mount to re-authorize and
  acquire a NFSv3 handle for the root mount.

* Undo a bit of a previous commit where I tried to enable readdirplus for
  NFSv2 to workaround NFSv2 directory cookie issues.  It just doesn't work.
  readdirplus is again force-disabled for NFSv2 mounts.

13 years agoboot - Bring in fix for qemu menu time bug
Matthew Dillon [Tue, 19 Oct 2010 17:42:49 +0000 (10:42 -0700)]
boot - Bring in fix for qemu menu time bug

* qemu does not debounce the RTC data.  The RTC chip uses a serial interface
  as well as a simple carry propagation incremenber which can catch
  transitions in the middle of an update, resulting in corrupted data.

* Simply requery the time until a stable value is found.

Suggested-by: Oliver Fromme <check+lajddm00rsub4p7p@fromme.com>
13 years agoHAMMER VFS - Minor bug (caught by assertion panic)
Matthew Dillon [Mon, 18 Oct 2010 07:49:59 +0000 (00:49 -0700)]
HAMMER VFS - Minor bug (caught by assertion panic)

* A snapshot can sometimes contain visible inodes whos nlinks count is 0,
  essentially the snapshot 'catches' the file in the middle of being deleted.

* HAMMER was attempting to truncate the data for such inodes if the file
  were opened and then closed, and failed to check whether the inode was a
  snapshot or a current inode.  This flowed through until it hit an assertion
  designed to detect precisely that case.

* Fixed by adding a check to determine if the inode is a snapshot and/or
  the filesystem is mounted read-only.

Repored-by: Max <herrgard@gmail.com>
13 years agokernel - Fix bug in unp_gc()
Matthew Dillon [Mon, 18 Oct 2010 07:10:35 +0000 (00:10 -0700)]
kernel - Fix bug in unp_gc()

* Fix a race against a file close where FDEFER can wind up being left
  set.

* Fix a panic during unix domain socket garbage collection where a token
  was being acquired with a spinlock held.  Use trytoken instead and if
  it fails simply defer checking of the (fp) in question.

13 years agokernel - Remove confusing warning
Matthew Dillon [Mon, 18 Oct 2010 07:02:55 +0000 (00:02 -0700)]
kernel - Remove confusing warning

* Remove the "bio_page_alloc: WARNING emergency page allocation" warning
  and replace it with a sysctl counter.

* Keep the allocation failure warning and add a sysctl counter for it too.

13 years agoinstaller: Move chflags to the right place.
Sascha Wildner [Mon, 18 Oct 2010 23:50:51 +0000 (01:50 +0200)]
installer: Move chflags to the right place.

13 years agoinstaller: The sources.conf path is relative.
Sascha Wildner [Sat, 23 Oct 2010 01:21:36 +0000 (03:21 +0200)]
installer: The sources.conf path is relative.

13 years agomake upgrade: Remove orphan symbolic links as well.
Sascha Wildner [Fri, 22 Oct 2010 10:21:48 +0000 (12:21 +0200)]
make upgrade: Remove orphan symbolic links as well.

test -e will try to follow symbolic links. If the target was removed
already it will return false.

Fix this by checking for symbolic links, too.

13 years agolibc - Fix security issue in globbing code
Matthias Schmidt [Wed, 20 Oct 2010 17:08:20 +0000 (19:08 +0200)]
libc - Fix security issue in globbing code

There is a report about memory exhaustion in CVE-2010-2632 which also
affected us.  This patch, adopted from NetBSD, fixes the issue.

Tested-by: thomas@ and me
OK: dillon@

13 years agodhclient-script.8: Comment out resolv.conf.tail(5) refs (no such manpage).
Sascha Wildner [Wed, 20 Oct 2010 13:38:23 +0000 (15:38 +0200)]
dhclient-script.8: Comment out resolv.conf.tail(5) refs (no such manpage).

13 years agomkinitrd.8: Adjust the manpage to the recent changes in the image path.
Sascha Wildner [Wed, 20 Oct 2010 12:28:37 +0000 (14:28 +0200)]
mkinitrd.8: Adjust the manpage to the recent changes in the image path.

13 years agodloader - remove header and footer bars
Alex Hornung [Tue, 19 Oct 2010 18:01:23 +0000 (19:01 +0100)]
dloader - remove header and footer bars

13 years agoFix a typo in the vkernel rc script.
Sascha Wildner [Mon, 18 Oct 2010 10:00:57 +0000 (12:00 +0200)]
Fix a typo in the vkernel rc script.

Submitted-by: Rumko
13 years agoRaise default .Os value for the manual pages to 2.8 on 2.8.
Sascha Wildner [Mon, 18 Oct 2010 07:01:43 +0000 (09:01 +0200)]
Raise default .Os value for the manual pages to 2.8 on 2.8.

13 years agorelease engineering - Branch release and set to 2.8 v2.8.0
Matthew Dillon [Mon, 18 Oct 2010 05:32:23 +0000 (22:32 -0700)]
release engineering - Branch release and set to 2.8

13 years agokernel - Fix race in bio_track_wait()
Matthew Dillon [Mon, 18 Oct 2010 05:23:52 +0000 (22:23 -0700)]
kernel - Fix race in bio_track_wait()

* Remove an improper optimization prior to an atomic cmpset function call.

13 years agokernel - Fix NFS client & server bugs
Matthew Dillon [Mon, 18 Oct 2010 04:48:47 +0000 (21:48 -0700)]
kernel - Fix NFS client & server bugs

* A very long standing bug in the server cache was finally whacked.  The
  write-gather code was improperly returning the wrong mbuf for the server
  to reply with, causing client stalls.  This behavior depends on the client
  doing burst asynchronous writes.  Newer releases of DragonFly do burst
  asynchronous writes but older ones tended not to.

* The server cache was not MPSAFE.  Add a MP token to fix that.

* Remove critical sectons from the server cache which are no longer needed.

* Fix a potential client-side rpc request race where a request's
  NEEDSXMIT flag is not set until after the request possibly blocks,
  which can lead to issues if another thread picks up the request
  and then believes that it has already been transmitted when it
  has not.

* Document a big problem with NFSv2 and HAMMER-served directories.  NFSv2
  only has 32-bit directory cookies.  It is possible to work around the
  problem by using rdirplus (which is the default now).  However, some
  servers may not be able to handle rdirplus with a NFSv2 mount.

  Users who need to serve out NFSv2 cannot serve HAMMER directories
  with NFSv2 unless the clients support rdirplus.

  Our defaults are NFSv3 and rdirplus and NFSv3 does NOT have this problem.

Reported-by: Thomas Nikolajsen <thomas.nikolajsen@mail.dk>
13 years agokernel - Fix padlock panic in hw crypto
Matthew Dillon [Sun, 17 Oct 2010 19:56:44 +0000 (12:56 -0700)]
kernel - Fix padlock panic in hw crypto

* padlock_freesession_one() was zeroing out the structure which caused
  ses_freeaddr to be lost.  Restore ses_freeaddr.

Reported-by: lentferj
13 years agoBring in uguru(4) for ABIT temperature, voltage and fan sensors.
Sascha Wildner [Sun, 17 Oct 2010 13:27:18 +0000 (15:27 +0200)]
Bring in uguru(4) for ABIT temperature, voltage and fan sensors.

Ported-from: OpenBSD
Tested-by: Max Herrgard <herrgard@gmail.com>
13 years agodevfs - Fix mountpoint specific rules
Alex Hornung [Fri, 15 Oct 2010 15:03:42 +0000 (16:03 +0100)]
devfs - Fix mountpoint specific rules

* Mount-point specific rules depend upon f_mntonname to be correct, so
  populate this field of mnt_stat on mount().

Reported-by: Hugo
13 years agoundo - stat(2) may not populate struct stat upon failure.
YONETANI Tomokazu [Fri, 15 Oct 2010 01:20:48 +0000 (10:20 +0900)]
undo - stat(2) may not populate struct stat upon failure.

13 years agotest/vkernel - Include ROOTSIZE environment variable in Makefile's help
Antonio Huete Jimenez [Thu, 14 Oct 2010 19:37:55 +0000 (21:37 +0200)]
test/vkernel - Include ROOTSIZE environment variable in Makefile's help

13 years agoloader.8: Improve wording. Fix typos and an error.
Sascha Wildner [Thu, 14 Oct 2010 09:12:24 +0000 (11:12 +0200)]
loader.8: Improve wording. Fix typos and an error.

13 years agopowernow(4): Make it build on x86_64 and hook it in the x86_64 build.
Sascha Wildner [Thu, 14 Oct 2010 07:22:47 +0000 (09:22 +0200)]
powernow(4): Make it build on x86_64 and hook it in the x86_64 build.

Tested-by: Max Herrgard <herrgard@gmail.com>
13 years agoUpdate the rc.conf's man page's vkernel section.
Rumko [Tue, 12 Oct 2010 22:20:37 +0000 (00:20 +0200)]
Update the rc.conf's man page's vkernel section.

A few new vars were introduced and one was made optional.