(no commit message)
[ikiwiki.git] / features / index.mdwn
1 # DragonFly's Major Features List
2
3 ## KERNEL
4
5 Please keep in mind that major modifications have been made to nearly the entire DragonFly kernel relative to the original FreeBSD-4.x fork.  There is very little similarity between the two today.  This is an attempt to iterate the largest, most user-visible changes unique to DragonFly.
6
7 * The scheduler abstraction has been split up into two layers.  The LWKT (Light Weight Kernel Thread) scheduler is used by the kernel to schedule all executable entities.  The User Thread Scheduler is a separate scheduler which selects one user thread at a time for each cpu and schedules it using the LWKT scheduler.  Both scheduler abstractions are per-cpu but the user thread scheduler selects from a common list of runnable processes.
8
9 * The User Thread Scheduler further abstracts out user threads.  A user process contains one or more LWP (Light Weight Process) entities.  Each entity represents a user thread under that process.  The old rfork() mechanic still exists but is no longer used.  The threading library uses LWP-specific calls.
10
11 * The kernel memory allocator has two abstracted pieces.  The basic kernel malloc is called kmalloc() and is based on an enhanced per-cpu slab allocator.  This allocator is essentially lockless.  There is also an object-oriented memory allocator in the kernel called objcache which is designed for high volume object allocations and deallocations and is also essentially lockless.
12
13 * DEVFS is the DragonFly device filesystem.  It works similarly to device filesystems found on other modern unix-like operating systems.  The biggest single feature is DEVFS's integration with block device serial numbers which allows a DragonFly system to reference disk drives by serial number instead of by their base device name.  Thus drives can be trivially migrated between physical ports and driver changes (base device name changes) become transparent to the system.
14
15 * VKERNEL - DragonFly implements a virtual kernel feature for running DragonFly kernels in userland inside DragonFly kernels.  This works similarly to Usermode Linux and allows DragonFly kernels to be debugged as a userland process.  The primary use is to make kernel development easier.
16
17 * NFS V3 RPC Asynchronization - DragonFly sports a revamped NFSv3 implementation which gets rid of the nfsiod threads and implements a fully asynchronous RPC mechanic using only two kernel threads. The new abstraction fixes numerous stalls in the I/O path related to misordered read-ahead requests.
18
19 * Disk I/O scheduler - DragonFly implements a disk scheduler framework controlled by the dschedctl utility and a fair-queue disk scheduler module.  The ioprio utility may then be used to control I/O priorities on a process-by-process basis.
20
21 ## HAMMER - DragonFly Filesystem
22
23 HAMMER is the DragonFly filesystem, replacing UFS.  HAMMER supports up to an Exabyte of storage, implements a fast UNDO/REDO FIFO for fsync(), recovers instantly on boot after a crash (no fsck), and implements a very sophisticated fine-grained historical access and snapshot mechanic.  HAMMER also sports an extremely robust streaming, queueless master->multiple-slave mirroring capability which is also able to mirror snapshots and other historical data.
24
25 All non-temporary HAMMER filesystems in DragonFly automatically maintain 60 days worth of 1-day snapshots and 1-day worth of fine-grained (30-second) snapshots.
26
27 HAMMER is designed to accommodate today's large drives. 
28
29 ## DNTPD - DragonFly Network Time Daemon
30
31 DragonFly has its own from-scratch time daemon.  After pulling our hair out over the many issues with open source time daemons we decided to write one ourselves and add new system calls to support it.  DNTPD uses a double staggered linear regression and correlation to make time corrections.  It will also properly deal with network failures (including lack of connectivity on boot), duplicate IPs resolved by DNS, and time source failures (typically 1 second off) when multiple time sources are available.  The linear regression and correlation allows DNTPD to make rough adjustments and frequency corrections within 5 minutes of boot and to make more fine-grained adjustments at any time following when the linear regression indicates accuracy beyond the noise floor.
32
33 ## DMA - DragonFly Mail Agent
34
35 The DragonFly Mail Agent is a bare-bones (though not so bare-bones any more) mail transfer and mail terminus SMTP server which provides all the functionality needed for local mail delivery and simply remote mail transfers.  A more sophisticated MTA can then be thrown onto an installed system via pkgsrc.
36
37 ## TMPFS - Temporary FileSystem VFS
38
39 Originally a NetBSD port the guts have been radically adjusted and carefully tuned to provide a low-contention read path and to directly tie the backing store to the VM/paging system in a way that treats it almost like normal memory.  Only memory pressure will force tmpfs data pages into swap.
40
41 TMPFS replaces MFS and MD (for post-boot use).