docs/developer/ProjectsPage.mdwn

   1 # DragonFly Projects
   2
   3 This page shall serve as a common place to look if you're in search of a DragonFly related project. It's also the place to check if someone else is already working on it (to prevent project collision) or should be contacted.
   4
   5 [[!toc levels=3 ]]
   6
   7 ## Website projects
   8
   9 ### One-liners
  10 * Add traffic report, especially to lists requests that cause 404s
  11 * Add the mail archive to the search index
  12 * Download link right on the main page.
  13 * Fix [[RecentChanges]] page to have correct links back to git repo
  14 * Fix RSS feed to have correct links
  15 * Create layout for http://bugs.dragonflybsd.org that matches the main site.
  16 * Create short list of tasks for a new DragonFly user
  17 * how to upgrade the operating system
  18 * how to get to a working desktop
  19 * and where and how to report issues.
  20
  21 ### Post papers in the proper locations on the website
  22 * Format conversion may be necessary
  23 * Aggelos's papers from [http://leaf.dragonflybsd.org/~aggelos/] (http://leaf.dragonflybsd.org/~aggelos/) (netmp-paper.pdf and netmp.pdf) to Presentations
  24 * ["A Peek at the vKernel" article](http://cvsweb.dragonflybsd.org/cvsweb/site/data/docs/articles/vkernel/vkernel.shtml?rev=1.3&content-type=text/x-cvsweb-markup) from old site
  25
  26 ## Documentation projects
  27
  28 ### One-liners
  29 * Reorder `/usr/src/UPDATING` to put more relevant information at top; remove data no longer relevant.
  30 * Help out in [http://bugs.dragonflybsd.org](http://bugs.dragonflybsd.org) (try to reproduce, diagnose, propose fixes ...)
  31 * Organize, contribute to, and finish the C book project.
  32
  33 ### Handbook maintenance
  34 * Check if the content applies to DragonFly.  If not, change it.
  35 * Add new content and enhance the previous chapters
  36 * Check for syntax error, typos and wiki errors.
  37 * Add prev/next buttons to all pages.
  38
  39 ## Userland projects
  40
  41 ### One-liners
  42 * Update the [[contributed software|docs/user/ContribSoftware]] which is out-of-date.
  43 * Remove `NOINET6` build option
  44 * `WARN` corrections to utilities
  45 * Bring in code from other *BSDs:
  46 * smbfs changes from FreeBSD
  47 * Add extended slice support to `fdisk`
  48 * Install Coverity and fix the FreeBSD bugs that were uncovered by Coverity, but do not just blindly pull over the FreeBSD patches. Make sure that you first understand what the patch does.
  49 * C99 Standards Conformance. The todo list is on [[/docs/developer/StandardsConformanceProject]]
  50 * Setup a regression testing machine/system to register and find problems and new improvements..
  51 * Networking performance / scalability
  52 * [[RegressionTest|/docs/developer/RegressionTest]]
  53 * also check [[HowToStressTest|/docs/developer/HowToStressTest]]
  54 * Add lwp support to ptrace/gdb/core dumps.
  55 * [[/docs/developer/CheckpointFeatures]]
  56 * Linuxulator update (FreeBSD did a lot of work in this area.  Look [here](http://wiki.freebsd.org/linux-kernel),
  57 * Bringing in version 2.0 of the BSD Installer
  58 * UTF8 support in the console
  59
  60 ### Scalability (algorithmic performance)
  61 * [http://bulk.fefe.de/scalability/](http://bulk.fefe.de/scalability/)
  62 * [http://bulk.fefe.de/lk2006/talk.pdf](http://bulk.fefe.de/lk2006/talk.pdf)
  63
  64 ### Clean our code to make it [style(9)](http://leaf.dragonflybsd.org/cgi/web-man?command#style&sectionANY) compatible.
  65 * Compile and test your changes.
  66 * Verify that the checksum (sha(1)) of the unmodified object matches the checksum of the cleaned object.  Check also with strip(1)+sha(1)
  67
  68 ### Port BSD-licensed tools (ex: `grep`, `diff` and `sort`)
  69 * The OpenBSD guys already did some work related to that.
  70 * If you manage to bring the tools to DragonFly, check if everything works as expected (e.g. rc.d scripts, make world runs, ...).
  71 * The new tools need to have at least all the features of the old GNU tools.
  72
  73 ### Randomize mmap() offsets
  74 * [http://www.openbsd.org/papers/ven05-deraadt/index.html](http://www.openbsd.org/papers/ven05-deraadt/index.html)
  75
  76 ### GDB
  77 * ptrace/gdb follow-fork-mode support and more (peek at linux)
  78 * Change the build to create one libbfd for gdb and binutils
  79 * Separate RPC code from NFS into separate library.
  80
  81 ### I/O diagnostic utilities
  82 * A utility similar to top which displays I/O usage on a per-process basis
  83 * Network, Disk
  84
  85 ### SMART capabilities
  86 * Add to natacontrol (see NetBSD's atactl?)
  87 * Add to camcontrol
  88
  89 ### Disk scheduling rc scripts
  90 * Create a rc script to manage the disk/io scheduling system
  91 * Perhaps 1 entry to "enable" it, and all disks will have mode set to "auto", in auto mode smart inquiries and other heuristics could attempt to determine the best i/o scheduler
  92 * Per-device and device class or similar defaults should be definable in rc.conf also
  93
  94 ## Kernel projects
  95
  96 ### One-liners
  97 * Port the BSDL OSS code to DragonFly
  98 * Complete Path MTU Discovery by adding a host route to remember the Path MTU and setting a timer to expire old host routes. See netinet/if_ether.c for an example of this mechanism as used by ARP. Periodically increase MTU of hosts that have had its MTU decreased.
  99 * Look for places in the kernel that can benefit from Solaris-style caching of preconstructed slab allocator objects. If we can find enough of these uses, we can add this functionality to the kernel memory allocator.
 100 * Implement [`sem_open()`](http://www.opengroup.org/onlinepubs/000095399/functions/sem_open.html), [`sem_close()`](http://www.opengroup.org/onlinepubs/000095399/functions/sem_close.html), and [`sem_unlink()`](http://www.opengroup.org/onlinepubs/000095399/functions/sem_unlink.html).
 101 * Clean our code to make it [style(9)](http://leaf.dragonflybsd.org/cgi/web-man?command#style&sectionANY) compatible.  Compile and test your changes.  Verify that the checksum (sha(1)) of the unmodified object matches the checksum of the cleaned object.  Check also with strip(1)+sha(1)
 102 * Setup a regression testing machine/system to register and find problems and new improvements..
 103 * Networking performance scalability
 104 * fix `APIC_IO` on SMP
 105 * Port or update drivers from other systems.
 106 * Port NFSv4.  [This mail](http://leaf.dragonflybsd.org/mailarchive/kernel/2008-01/msg00065.html) is a good starting point.
 107 * clean up buildworld/kernel compilation warnings
 108 * Port DragonFly over to Xen.
 109 * Port DTrace
 110 * Capriccio threads
 111
 112 ### Code to port/sync from FreeBSD
 113 * PCI code (to take advantage of power saving features)
 114 * Bring in support for UFS2, just the changes to extend the width of some fields from 32 bits to 64 bits.
 115 * hardware drivers.
 116
 117 ### Code to port/sync from OpenBSD
 118 * Add support for the NoExecute bit as described in [http://www.openbsd.org/papers/auug04/index.html](http://www.openbsd.org/papers/auug04/index.html).
 119 * After that, make user stacks and data heaps non-executable. (W^X)
 120 * hardware drivers, specially wireless.
 121
 122 ### CPU scheduler
 123 * A scheduler API supporting multiple scheduler implementations already exists
 124 * Add a Solaris-like dispatcher framework that can handle more than one installed scheduling policy
 125
 126 ### I/O scheduler
 127 * A pluggable kernel I/O scheduler already exists
 128 * Implement additional disk scheduling policies
 129
 130 ### Modify firmware framework
 131 * We currently use the firmware(9) FreeBSD also uses
 132 * It would be more appropriate to avoid future problems with redistribution problems, etc, to adapt the wifi firmware stuff to use the firmware(9) we used to have before, which was able to load firmware files from userland (/etc/firmware).
 133 * See "firmware discussion" thread on kernel@ mailing list, March-May 2010.
 134 * Since it's not desired to just add another way of doing it, this project should include getting rid of loading firmwares as modules
 135
 136 ### Work relating to LWKT (LightWeightKernelThreading)
 137 * Implement lazy IPI cross-processor lwkt message passing.
 138 * Add timeout functionality to lwkt_waitmsg().
 139 * Write man pages for the lwkt message passing API.
 140
 141 ### Filesystem extended attributes
 142 * Generic VFS attributes layer
 143 * Emulate attributes ala Darwin
 144 * Allow filesystems to define their own attribute vop ops
 145 * QUESTIONS: Attributes or subfiles? The consensus is that subfiles are better?
 146
 147 ### Code generation hooks in the build system
 148 * Well defined kernel build mechanisms for code generation
 149 * This will require discussion
 150
 151 ### On-disk / Over-the-wire structure codegen
 152 * Somewhat analogous to google protocol buffers / etc.
 153 * Take a normalized definition of data, metadata, an operation and generate a structure, serialization routines and accessor routines for it/them
 154 * Must be able to generate structs binary compatible with existing on-disk formats (including warts)
 155 * Should magically create formats that are 32/64bit agnostic OR fixup serializers/unserializers
 156 * Accessor routines and thread safety? Do we make you hang these objects somewhere that you store your synchronization objects or allow you to include them?
 157 * Versioning?
 158 * Potential uses: ... HAMMER, UFS, HAMMER mirror streams, message passing, ...
 159 * QUESTIONS: Would people actually use them?
 160
 161 ### Asynchronous system call framework
 162 * Probably best implemented as a message passing interface to kernel pass messages in, threads pick them up and execute, return through kevent notifications
 163 * Would require a well-considered proposal
 164
 165 ### Hardware virtualization extensions
 166 * Increase performance of virtual kernels
 167 * Make use of hardware virtualization extensions, if supported, to manage vmspaces
 168 * Make use of hardware IOMMU support if available
 169
 170 ### Kernel VIRTUAL MACHINE
 171 * opcode vm in kernel for various purposes? What could be accomplished with this?